git.sesse.net Git - cubemap/blob - serverpool.cpp

   1 #include <assert.h>
   2 #include <stdlib.h>
   3 #include <sys/types.h>
   4
   5 #include "client.h"
   6 #include "log.h"
   7 #include "server.h"
   8 #include "serverpool.h"
   9 #include "state.pb.h"
  10 #include "udpstream.h"
  11 #include "util.h"
  12
  13 struct sockaddr_in6;
  14
  15 using namespace std;
  16
  17 ServerPool::ServerPool(int size)
  18         : servers(new Server[size]),
  19           num_servers(size),
  20           clients_added(0),
  21           num_http_streams(0)
  22 {
  23 }
  24
  25 ServerPool::~ServerPool()
  26 {
  27         delete[] servers;
  28
  29         for (size_t i = 0; i < udp_streams.size(); ++i) {
  30                 delete udp_streams[i];
  31         }
  32 }
  33
  34 CubemapStateProto ServerPool::serialize()
  35 {
  36         CubemapStateProto state;
  37
  38         for (int i = 0; i < num_servers; ++i) {
  39                 CubemapStateProto local_state = servers[i].serialize();
  40
  41                 // The stream state should be identical between the servers, so we only store it once,
  42                 // save for the fds, which we keep around to distribute to the servers after re-exec.
  43                 if (i == 0) {
  44                         state.mutable_streams()->MergeFrom(local_state.streams());
  45                 } else {
  46                         assert(state.streams_size() == local_state.streams_size());
  47                         for (int j = 0; j < local_state.streams_size(); ++j) {
  48                                 assert(local_state.streams(j).data_fds_size() == 1);
  49                                 state.mutable_streams(j)->add_data_fds(local_state.streams(j).data_fds(0));
  50                         }
  51                 }
  52                 for (int j = 0; j < local_state.clients_size(); ++j) {
  53                         state.add_clients()->MergeFrom(local_state.clients(j));
  54                 }
  55         }
  56
  57         return state;
  58 }
  59
  60 void ServerPool::add_client(int sock)
  61 {
  62         servers[clients_added++ % num_servers].add_client_deferred(sock);
  63 }
  64
  65 void ServerPool::add_client_from_serialized(const ClientProto &client)
  66 {
  67         servers[clients_added++ % num_servers].add_client_from_serialized(client);
  68 }
  69
  70 int ServerPool::lookup_stream_by_url(const string &url) const
  71 {
  72         assert(servers != NULL);
  73         return servers[0].lookup_stream_by_url(url);
  74 }
  75
  76 int ServerPool::add_stream(const string &url, size_t backlog_size, size_t prebuffering_bytes, Stream::Encoding encoding, Stream::Encoding src_encoding)
  77 {
  78         // Adding more HTTP streams after UDP streams would cause the UDP stream
  79         // indices to move around, which is obviously not good.
  80         assert(udp_streams.empty());
  81
  82         for (int i = 0; i < num_servers; ++i) {
  83                 int stream_index = servers[i].add_stream(url, backlog_size, prebuffering_bytes, encoding, src_encoding);
  84                 assert(stream_index == num_http_streams);
  85         }
  86         return num_http_streams++;
  87 }
  88
  89 int ServerPool::add_stream_from_serialized(const StreamProto &stream, const vector<int> &data_fds)
  90 {
  91         // Adding more HTTP streams after UDP streams would cause the UDP stream
  92         // indices to move around, which is obviously not good.
  93         assert(udp_streams.empty());
  94
  95         assert(!data_fds.empty());
  96         string contents;
  97         for (int i = 0; i < num_servers; ++i) {
  98                 int data_fd;
  99                 if (i < int(data_fds.size())) {
 100                         // Reuse one of the existing file descriptors.
 101                         data_fd = data_fds[i];
 102                 } else {
 103                         // Clone the first one.
 104                         if (contents.empty()) {
 105                                 if (!read_tempfile(data_fds[0], &contents)) {
 106                                         exit(1);
 107                                 }
 108                         }
 109                         data_fd = make_tempfile(contents);
 110                 }
 111
 112                 int stream_index = servers[i].add_stream_from_serialized(stream, data_fd);
 113                 assert(stream_index == num_http_streams);
 114         }
 115
 116         // Close and delete any leftovers, if the number of servers was reduced.
 117         for (size_t i = num_servers; i < data_fds.size(); ++i) {
 118                 safe_close(data_fds[i]);  // Implicitly deletes the file.
 119         }
 120
 121         return num_http_streams++;
 122 }
 123
 124 int ServerPool::add_udpstream(const sockaddr_in6 &dst, int pacing_rate, int ttl, int multicast_iface_index)
 125 {
 126         udp_streams.push_back(new UDPStream(dst, pacing_rate, ttl, multicast_iface_index));
 127         return num_http_streams + udp_streams.size() - 1;
 128 }
 129
 130 void ServerPool::set_header(int stream_index, const string &http_header, const string &stream_header)
 131 {
 132         assert(stream_index >= 0 && stream_index < ssize_t(num_http_streams + udp_streams.size()));
 133
 134         if (stream_index >= num_http_streams) {
 135                 // UDP stream. TODO: Log which stream this is.
 136                 if (!stream_header.empty()) {
 137                         log(WARNING, "Trying to send stream format with headers to a UDP destination. This is unlikely to work well.");
 138                 }
 139
 140                 // Ignore the HTTP header.
 141                 return;
 142         }
 143
 144         // HTTP stream.
 145         for (int i = 0; i < num_servers; ++i) {
 146                 servers[i].set_header(stream_index, http_header, stream_header);
 147         }
 148 }
 149
 150 void ServerPool::add_data(int stream_index, const char *data, size_t bytes, uint16_t metacube_flags)
 151 {
 152         assert(stream_index >= 0 && stream_index < ssize_t(num_http_streams + udp_streams.size()));
 153
 154         if (stream_index >= num_http_streams) {
 155                 // UDP stream.
 156                 udp_streams[stream_index - num_http_streams]->send(data, bytes);
 157                 return;
 158         }
 159
 160         // HTTP stream.
 161         for (int i = 0; i < num_servers; ++i) {
 162                 servers[i].add_data_deferred(stream_index, data, bytes, metacube_flags);
 163         }
 164 }
 165
 166 void ServerPool::add_gen204(const std::string &url, const std::string &allow_origin)
 167 {
 168         for (int i = 0; i < num_servers; ++i) {
 169                 servers[i].add_gen204(url, allow_origin);
 170         }
 171 }
 172
 173 void ServerPool::run()
 174 {
 175         for (int i = 0; i < num_servers; ++i) {
 176                 servers[i].run();
 177         }
 178 }
 179
 180 void ServerPool::stop()
 181 {
 182         for (int i = 0; i < num_servers; ++i) {
 183                 servers[i].stop();
 184         }
 185 }
 186
 187 vector<ClientStats> ServerPool::get_client_stats() const
 188 {
 189         vector<ClientStats> ret;
 190         for (int i = 0; i < num_servers; ++i) {
 191                 vector<ClientStats> stats = servers[i].get_client_stats();
 192                 ret.insert(ret.end(), stats.begin(), stats.end());
 193         }
 194         return ret;
 195 }
 196
 197 void ServerPool::set_pacing_rate(int stream_index, uint32_t pacing_rate)
 198 {
 199         for (int i = 0; i < num_servers; ++i) {
 200                 servers[i].set_pacing_rate(stream_index, pacing_rate);
 201         }
 202 }
 203
 204 void ServerPool::set_backlog_size(int stream_index, size_t new_size)
 205 {
 206         for (int i = 0; i < num_servers; ++i) {
 207                 servers[i].set_backlog_size(stream_index, new_size);
 208         }
 209 }
 210
 211 void ServerPool::set_prebuffering_bytes(int stream_index, size_t new_amount)
 212 {
 213         for (int i = 0; i < num_servers; ++i) {
 214                 servers[i].set_prebuffering_bytes(stream_index, new_amount);
 215         }
 216 }
 217
 218 void ServerPool::set_encoding(int stream_index, Stream::Encoding encoding)
 219 {
 220         for (int i = 0; i < num_servers; ++i) {
 221                 servers[i].set_encoding(stream_index, encoding);
 222         }
 223 }
 224
 225 void ServerPool::set_src_encoding(int stream_index, Stream::Encoding encoding)
 226 {
 227         for (int i = 0; i < num_servers; ++i) {
 228                 servers[i].set_src_encoding(stream_index, encoding);
 229         }
 230 }