590e0f53b30a5c095e3b57a7a1a5a470093574fb
[cubemap] / serverpool.cpp
1 #include <assert.h>
2 #include <stdlib.h>
3
4 #include "client.h"
5 #include "server.h"
6 #include "serverpool.h"
7 #include "state.pb.h"
8 #include "util.h"
9
10 using namespace std;
11
12 ServerPool::ServerPool(int size)
13         : servers(new Server[size]),
14           num_servers(size),
15           clients_added(0),
16           num_http_streams(0)
17 {
18 }
19
20 ServerPool::~ServerPool()
21 {
22         delete[] servers;
23
24         for (size_t i = 0; i < udp_streams.size(); ++i) {
25                 delete udp_streams[i];
26         }
27 }
28         
29 CubemapStateProto ServerPool::serialize()
30 {
31         CubemapStateProto state;
32
33         for (int i = 0; i < num_servers; ++i) {
34                 CubemapStateProto local_state = servers[i].serialize();
35
36                 // The stream state should be identical between the servers, so we only store it once,
37                 // save for the fds, which we keep around to distribute to the servers after re-exec.
38                 if (i == 0) {
39                         state.mutable_streams()->MergeFrom(local_state.streams());
40                 } else {
41                         assert(state.streams_size() == local_state.streams_size());
42                         for (int j = 0; j < local_state.streams_size(); ++j) {
43                                 assert(local_state.streams(j).data_fds_size() == 1);
44                                 state.mutable_streams(j)->add_data_fds(local_state.streams(j).data_fds(0));
45                         }
46                 }
47                 for (int j = 0; j < local_state.clients_size(); ++j) {
48                         state.add_clients()->MergeFrom(local_state.clients(j));
49                 }
50         }
51
52         return state;
53 }
54
55 void ServerPool::add_client(int sock)
56 {
57         servers[clients_added++ % num_servers].add_client_deferred(sock);
58 }
59
60 void ServerPool::add_client_from_serialized(const ClientProto &client)
61 {
62         servers[clients_added++ % num_servers].add_client_from_serialized(client);
63 }
64
65 int ServerPool::lookup_stream_by_url(const std::string &url) const
66 {
67         assert(servers != NULL);
68         return servers[0].lookup_stream_by_url(url);
69 }
70
71 int ServerPool::add_stream(const string &url, size_t backlog_size, Stream::Encoding encoding)
72 {
73         // Adding more HTTP streams after UDP streams would cause the UDP stream
74         // indices to move around, which is obviously not good.
75         assert(udp_streams.empty());
76
77         for (int i = 0; i < num_servers; ++i) {
78                 int stream_index = servers[i].add_stream(url, backlog_size, encoding);
79                 assert(stream_index == num_http_streams);
80         }
81         return num_http_streams++;
82 }
83
84 int ServerPool::add_stream_from_serialized(const StreamProto &stream, const vector<int> &data_fds)
85 {
86         // Adding more HTTP streams after UDP streams would cause the UDP stream
87         // indices to move around, which is obviously not good.
88         assert(udp_streams.empty());
89
90         assert(!data_fds.empty());
91         string contents;
92         for (int i = 0; i < num_servers; ++i) {
93                 int data_fd;
94                 if (i < int(data_fds.size())) {
95                         // Reuse one of the existing file descriptors.
96                         data_fd = data_fds[i];
97                 } else {
98                         // Clone the first one.
99                         if (contents.empty()) {
100                                 if (!read_tempfile(data_fds[0], &contents)) {
101                                         exit(1);
102                                 }
103                         }
104                         data_fd = make_tempfile(contents);
105                 }
106
107                 int stream_index = servers[i].add_stream_from_serialized(stream, data_fd);
108                 assert(stream_index == num_http_streams);
109         }
110
111         // Close and delete any leftovers, if the number of servers was reduced.
112         for (size_t i = num_servers; i < data_fds.size(); ++i) {
113                 safe_close(data_fds[i]);  // Implicitly deletes the file.
114         }
115
116         return num_http_streams++;
117 }
118         
119 int ServerPool::add_udpstream(const sockaddr_in6 &dst, MarkPool *mark_pool)
120 {
121         udp_streams.push_back(new UDPStream(dst, mark_pool));
122         return num_http_streams + udp_streams.size() - 1;
123 }
124
125 void ServerPool::set_header(int stream_index, const string &http_header, const string &stream_header)
126 {
127         assert(stream_index >= 0 && stream_index < ssize_t(num_http_streams + udp_streams.size()));
128
129         if (stream_index >= num_http_streams) {
130                 // UDP stream. TODO: Log which stream this is.
131                 if (!stream_header.empty()) {
132                         log(WARNING, "Trying to send stream format with headers to a UDP destination. This is unlikely to work well.");
133                 }
134
135                 // Ignore the HTTP header.
136                 return;
137         }
138
139         // HTTP stream.
140         for (int i = 0; i < num_servers; ++i) {
141                 servers[i].set_header(stream_index, http_header, stream_header);
142         }
143 }
144
145 void ServerPool::add_data(int stream_index, const char *data, size_t bytes)
146 {
147         assert(stream_index >= 0 && stream_index < ssize_t(num_http_streams + udp_streams.size()));
148
149         if (stream_index >= num_http_streams) {
150                 // UDP stream.
151                 udp_streams[stream_index - num_http_streams]->send(data, bytes);
152                 return;
153         }
154
155         // HTTP stream.
156         for (int i = 0; i < num_servers; ++i) {
157                 servers[i].add_data_deferred(stream_index, data, bytes);
158         }
159 }
160
161 void ServerPool::run()
162 {
163         for (int i = 0; i < num_servers; ++i) {
164                 servers[i].run();
165         }
166 }
167         
168 void ServerPool::stop()
169 {
170         for (int i = 0; i < num_servers; ++i) {
171                 servers[i].stop();
172         }
173 }
174         
175 vector<ClientStats> ServerPool::get_client_stats() const
176 {
177         vector<ClientStats> ret;
178         for (int i = 0; i < num_servers; ++i) {
179                 vector<ClientStats> stats = servers[i].get_client_stats();
180                 ret.insert(ret.end(), stats.begin(), stats.end());
181         }
182         return ret;
183 }
184         
185 void ServerPool::set_mark_pool(int stream_index, MarkPool *mark_pool)
186 {
187         for (int i = 0; i < num_servers; ++i) {
188                 servers[i].set_mark_pool(stream_index, mark_pool);
189         }       
190 }
191
192 void ServerPool::set_backlog_size(int stream_index, size_t new_size)
193 {
194         for (int i = 0; i < num_servers; ++i) {
195                 servers[i].set_backlog_size(stream_index, new_size);
196         }       
197 }
198
199 void ServerPool::set_encoding(int stream_index, Stream::Encoding encoding)
200 {
201         for (int i = 0; i < num_servers; ++i) {
202                 servers[i].set_encoding(stream_index, encoding);
203         }       
204 }