3e79b45ba41d065aa19021efe549eb1b65c08be6
[cubemap] / serverpool.cpp
1 #include <assert.h>
2 #include <stdlib.h>
3 #include <sys/types.h>
4
5 #include "client.h"
6 #include "log.h"
7 #include "server.h"
8 #include "serverpool.h"
9 #include "state.pb.h"
10 #include "udpstream.h"
11 #include "util.h"
12
13 struct sockaddr_in6;
14
15 using namespace std;
16
17 ServerPool::ServerPool(int size)
18         : servers(new Server[size]),
19           num_servers(size),
20           clients_added(0),
21           num_http_streams(0)
22 {
23 }
24
25 ServerPool::~ServerPool()
26 {
27         delete[] servers;
28
29         for (size_t i = 0; i < udp_streams.size(); ++i) {
30                 delete udp_streams[i];
31         }
32 }
33         
34 CubemapStateProto ServerPool::serialize()
35 {
36         CubemapStateProto state;
37
38         for (int i = 0; i < num_servers; ++i) {
39                 CubemapStateProto local_state = servers[i].serialize();
40
41                 // The stream state should be identical between the servers, so we only store it once,
42                 // save for the fds, which we keep around to distribute to the servers after re-exec.
43                 if (i == 0) {
44                         state.mutable_streams()->MergeFrom(local_state.streams());
45                 } else {
46                         assert(state.streams_size() == local_state.streams_size());
47                         for (int j = 0; j < local_state.streams_size(); ++j) {
48                                 assert(local_state.streams(j).data_fds_size() == 1);
49                                 state.mutable_streams(j)->add_data_fds(local_state.streams(j).data_fds(0));
50                         }
51                 }
52                 for (int j = 0; j < local_state.clients_size(); ++j) {
53                         state.add_clients()->MergeFrom(local_state.clients(j));
54                 }
55         }
56
57         return state;
58 }
59
60 void ServerPool::add_client(int sock)
61 {
62         servers[clients_added++ % num_servers].add_client_deferred(sock);
63 }
64
65 void ServerPool::add_client_from_serialized(const ClientProto &client)
66 {
67         servers[clients_added++ % num_servers].add_client_from_serialized(client);
68 }
69
70 int ServerPool::lookup_stream_by_url(const string &url) const
71 {
72         assert(servers != NULL);
73         return servers[0].lookup_stream_by_url(url);
74 }
75
76 int ServerPool::add_stream(const string &url, size_t backlog_size, size_t prebuffering_bytes, Stream::Encoding encoding, Stream::Encoding src_encoding)
77 {
78         // Adding more HTTP streams after UDP streams would cause the UDP stream
79         // indices to move around, which is obviously not good.
80         assert(udp_streams.empty());
81
82         for (int i = 0; i < num_servers; ++i) {
83                 int stream_index = servers[i].add_stream(url, backlog_size, prebuffering_bytes, encoding, src_encoding);
84                 assert(stream_index == num_http_streams);
85         }
86         return num_http_streams++;
87 }
88
89 int ServerPool::add_stream_from_serialized(const StreamProto &stream, const vector<int> &data_fds)
90 {
91         // Adding more HTTP streams after UDP streams would cause the UDP stream
92         // indices to move around, which is obviously not good.
93         assert(udp_streams.empty());
94
95         assert(!data_fds.empty());
96         string contents;
97         for (int i = 0; i < num_servers; ++i) {
98                 int data_fd;
99                 if (i < int(data_fds.size())) {
100                         // Reuse one of the existing file descriptors.
101                         data_fd = data_fds[i];
102                 } else {
103                         // Clone the first one.
104                         if (contents.empty()) {
105                                 if (!read_tempfile(data_fds[0], &contents)) {
106                                         exit(1);
107                                 }
108                         }
109                         data_fd = make_tempfile(contents);
110                 }
111
112                 int stream_index = servers[i].add_stream_from_serialized(stream, data_fd);
113                 assert(stream_index == num_http_streams);
114         }
115
116         // Close and delete any leftovers, if the number of servers was reduced.
117         for (size_t i = num_servers; i < data_fds.size(); ++i) {
118                 safe_close(data_fds[i]);  // Implicitly deletes the file.
119         }
120
121         return num_http_streams++;
122 }
123         
124 int ServerPool::add_udpstream(const sockaddr_in6 &dst, int pacing_rate, int ttl, int multicast_iface_index)
125 {
126         udp_streams.push_back(new UDPStream(dst, pacing_rate, ttl, multicast_iface_index));
127         return num_http_streams + udp_streams.size() - 1;
128 }
129
130 void ServerPool::set_header(int stream_index, const string &http_header, const string &stream_header)
131 {
132         assert(stream_index >= 0 && stream_index < ssize_t(num_http_streams + udp_streams.size()));
133
134         if (stream_index >= num_http_streams) {
135                 // UDP stream. TODO: Log which stream this is.
136                 if (!stream_header.empty()) {
137                         log(WARNING, "Trying to send stream format with headers to a UDP destination. This is unlikely to work well.");
138                 }
139
140                 // Ignore the HTTP header.
141                 return;
142         }
143
144         // HTTP stream.
145         for (int i = 0; i < num_servers; ++i) {
146                 servers[i].set_header(stream_index, http_header, stream_header);
147         }
148 }
149
150 void ServerPool::add_data(int stream_index, const char *data, size_t bytes, uint16_t metacube_flags)
151 {
152         assert(stream_index >= 0 && stream_index < ssize_t(num_http_streams + udp_streams.size()));
153
154         if (stream_index >= num_http_streams) {
155                 // UDP stream.
156                 udp_streams[stream_index - num_http_streams]->send(data, bytes);
157                 return;
158         }
159
160         // HTTP stream.
161         for (int i = 0; i < num_servers; ++i) {
162                 servers[i].add_data_deferred(stream_index, data, bytes, metacube_flags);
163         }
164 }
165
166 void ServerPool::add_gen204(const std::string &url, const std::string &allow_origin)
167 {
168         for (int i = 0; i < num_servers; ++i) {
169                 servers[i].add_gen204(url, allow_origin);
170         }
171 }
172
173 void ServerPool::run()
174 {
175         for (int i = 0; i < num_servers; ++i) {
176                 servers[i].run();
177         }
178 }
179         
180 void ServerPool::stop()
181 {
182         for (int i = 0; i < num_servers; ++i) {
183                 servers[i].stop();
184         }
185 }
186         
187 vector<ClientStats> ServerPool::get_client_stats() const
188 {
189         vector<ClientStats> ret;
190         for (int i = 0; i < num_servers; ++i) {
191                 vector<ClientStats> stats = servers[i].get_client_stats();
192                 ret.insert(ret.end(), stats.begin(), stats.end());
193         }
194         return ret;
195 }
196         
197 void ServerPool::set_pacing_rate(int stream_index, uint32_t pacing_rate)
198 {
199         for (int i = 0; i < num_servers; ++i) {
200                 servers[i].set_pacing_rate(stream_index, pacing_rate);
201         }       
202 }
203
204 void ServerPool::set_backlog_size(int stream_index, size_t new_size)
205 {
206         for (int i = 0; i < num_servers; ++i) {
207                 servers[i].set_backlog_size(stream_index, new_size);
208         }       
209 }
210
211 void ServerPool::set_prebuffering_bytes(int stream_index, size_t new_amount)
212 {
213         for (int i = 0; i < num_servers; ++i) {
214                 servers[i].set_prebuffering_bytes(stream_index, new_amount);
215         }
216 }
217
218 void ServerPool::set_encoding(int stream_index, Stream::Encoding encoding)
219 {
220         for (int i = 0; i < num_servers; ++i) {
221                 servers[i].set_encoding(stream_index, encoding);
222         }       
223 }
224
225 void ServerPool::set_src_encoding(int stream_index, Stream::Encoding encoding)
226 {
227         for (int i = 0; i < num_servers; ++i) {
228                 servers[i].set_src_encoding(stream_index, encoding);
229         }
230 }