git.sesse.net Git - cubemap/blob - serverpool.cpp

   1 #include <assert.h>
   2 #include <stdlib.h>
   3
   4 #include "client.h"
   5 #include "server.h"
   6 #include "serverpool.h"
   7 #include "state.pb.h"
   8 #include "util.h"
   9
  10 using namespace std;
  11
  12 ServerPool::ServerPool(int size)
  13         : servers(new Server[size]),
  14           num_servers(size),
  15           clients_added(0),
  16           num_http_streams(0)
  17 {
  18 }
  19
  20 ServerPool::~ServerPool()
  21 {
  22         delete[] servers;
  23
  24         for (size_t i = 0; i < udp_streams.size(); ++i) {
  25                 delete udp_streams[i];
  26         }
  27 }
  28
  29 CubemapStateProto ServerPool::serialize()
  30 {
  31         CubemapStateProto state;
  32
  33         for (int i = 0; i < num_servers; ++i) {
  34                 CubemapStateProto local_state = servers[i].serialize();
  35
  36                 // The stream state should be identical between the servers, so we only store it once,
  37                 // save for the fds, which we keep around to distribute to the servers after re-exec.
  38                 if (i == 0) {
  39                         state.mutable_streams()->MergeFrom(local_state.streams());
  40                 } else {
  41                         assert(state.streams_size() == local_state.streams_size());
  42                         for (int j = 0; j < local_state.streams_size(); ++j) {
  43                                 assert(local_state.streams(j).data_fds_size() == 1);
  44                                 state.mutable_streams(j)->add_data_fds(local_state.streams(j).data_fds(0));
  45                         }
  46                 }
  47                 for (int j = 0; j < local_state.clients_size(); ++j) {
  48                         state.add_clients()->MergeFrom(local_state.clients(j));
  49                 }
  50         }
  51
  52         return state;
  53 }
  54
  55 void ServerPool::add_client(int sock)
  56 {
  57         servers[clients_added++ % num_servers].add_client_deferred(sock);
  58 }
  59
  60 void ServerPool::add_client_from_serialized(const ClientProto &client)
  61 {
  62         servers[clients_added++ % num_servers].add_client_from_serialized(client);
  63 }
  64
  65 int ServerPool::lookup_stream_by_url(const std::string &url) const
  66 {
  67         assert(servers != NULL);
  68         return servers[0].lookup_stream_by_url(url);
  69 }
  70
  71 int ServerPool::add_stream(const string &url, size_t backlog_size, Stream::Encoding encoding)
  72 {
  73         // Adding more HTTP streams after UDP streams would cause the UDP stream
  74         // indices to move around, which is obviously not good.
  75         assert(udp_streams.empty());
  76
  77         for (int i = 0; i < num_servers; ++i) {
  78                 int stream_index = servers[i].add_stream(url, backlog_size, encoding);
  79                 assert(stream_index == num_http_streams);
  80         }
  81         return num_http_streams++;
  82 }
  83
  84 int ServerPool::add_stream_from_serialized(const StreamProto &stream, const vector<int> &data_fds)
  85 {
  86         // Adding more HTTP streams after UDP streams would cause the UDP stream
  87         // indices to move around, which is obviously not good.
  88         assert(udp_streams.empty());
  89
  90         assert(!data_fds.empty());
  91         string contents;
  92         for (int i = 0; i < num_servers; ++i) {
  93                 int data_fd;
  94                 if (i < int(data_fds.size())) {
  95                         // Reuse one of the existing file descriptors.
  96                         data_fd = data_fds[i];
  97                 } else {
  98                         // Clone the first one.
  99                         if (contents.empty()) {
 100                                 if (!read_tempfile(data_fds[0], &contents)) {
 101                                         exit(1);
 102                                 }
 103                         }
 104                         data_fd = make_tempfile(contents);
 105                 }
 106
 107                 int stream_index = servers[i].add_stream_from_serialized(stream, data_fd);
 108                 assert(stream_index == num_http_streams);
 109         }
 110
 111         // Close and delete any leftovers, if the number of servers was reduced.
 112         for (size_t i = num_servers; i < data_fds.size(); ++i) {
 113                 safe_close(data_fds[i]);  // Implicitly deletes the file.
 114         }
 115
 116         return num_http_streams++;
 117 }
 118
 119 int ServerPool::add_udpstream(const sockaddr_in6 &dst, MarkPool *mark_pool)
 120 {
 121         udp_streams.push_back(new UDPStream(dst, mark_pool));
 122         return num_http_streams + udp_streams.size() - 1;
 123 }
 124
 125 void ServerPool::set_header(int stream_index, const string &http_header, const string &stream_header)
 126 {
 127         assert(stream_index >= 0 && stream_index < ssize_t(num_http_streams + udp_streams.size()));
 128
 129         if (stream_index >= num_http_streams) {
 130                 // UDP stream. TODO: Log which stream this is.
 131                 if (!stream_header.empty()) {
 132                         log(WARNING, "Trying to send stream format with headers to a UDP destination. This is unlikely to work well.");
 133                 }
 134
 135                 // Ignore the HTTP header.
 136                 return;
 137         }
 138
 139         // HTTP stream.
 140         for (int i = 0; i < num_servers; ++i) {
 141                 servers[i].set_header(stream_index, http_header, stream_header);
 142         }
 143 }
 144
 145 void ServerPool::add_data(int stream_index, const char *data, size_t bytes)
 146 {
 147         assert(stream_index >= 0 && stream_index < ssize_t(num_http_streams + udp_streams.size()));
 148
 149         if (stream_index >= num_http_streams) {
 150                 // UDP stream.
 151                 udp_streams[stream_index - num_http_streams]->send(data, bytes);
 152                 return;
 153         }
 154
 155         // HTTP stream.
 156         for (int i = 0; i < num_servers; ++i) {
 157                 servers[i].add_data_deferred(stream_index, data, bytes);
 158         }
 159 }
 160
 161 void ServerPool::run()
 162 {
 163         for (int i = 0; i < num_servers; ++i) {
 164                 servers[i].run();
 165         }
 166 }
 167
 168 void ServerPool::stop()
 169 {
 170         for (int i = 0; i < num_servers; ++i) {
 171                 servers[i].stop();
 172         }
 173 }
 174
 175 vector<ClientStats> ServerPool::get_client_stats() const
 176 {
 177         vector<ClientStats> ret;
 178         for (int i = 0; i < num_servers; ++i) {
 179                 vector<ClientStats> stats = servers[i].get_client_stats();
 180                 ret.insert(ret.end(), stats.begin(), stats.end());
 181         }
 182         return ret;
 183 }
 184
 185 void ServerPool::set_mark_pool(int stream_index, MarkPool *mark_pool)
 186 {
 187         for (int i = 0; i < num_servers; ++i) {
 188                 servers[i].set_mark_pool(stream_index, mark_pool);
 189         }
 190 }
 191
 192 void ServerPool::set_backlog_size(int stream_index, size_t new_size)
 193 {
 194         for (int i = 0; i < num_servers; ++i) {
 195                 servers[i].set_backlog_size(stream_index, new_size);
 196         }
 197 }
 198
 199 void ServerPool::set_encoding(int stream_index, Stream::Encoding encoding)
 200 {
 201         for (int i = 0; i < num_servers; ++i) {
 202                 servers[i].set_encoding(stream_index, encoding);
 203         }
 204 }