git.sesse.net Git - cubemap/blob - serverpool.cpp

   1 #include <assert.h>
   2 #include <stdlib.h>
   3 #include <sys/types.h>
   4
   5 #include "client.h"
   6 #include "log.h"
   7 #include "server.h"
   8 #include "serverpool.h"
   9 #include "state.pb.h"
  10 #include "udpstream.h"
  11 #include "util.h"
  12
  13 struct sockaddr_in6;
  14
  15 using namespace std;
  16
  17 ServerPool::ServerPool(int size)
  18         : servers(new Server[size]),
  19           num_servers(size),
  20           clients_added(0),
  21           num_http_streams(0)
  22 {
  23 }
  24
  25 CubemapStateProto ServerPool::serialize()
  26 {
  27         CubemapStateProto state;
  28
  29         for (int i = 0; i < num_servers; ++i) {
  30                 CubemapStateProto local_state = servers[i].serialize();
  31
  32                 // The stream state should be identical between the servers, so we only store it once,
  33                 // save for the fds, which we keep around to distribute to the servers after re-exec.
  34                 if (i == 0) {
  35                         state.mutable_streams()->MergeFrom(local_state.streams());
  36                 } else {
  37                         assert(state.streams_size() == local_state.streams_size());
  38                         for (int j = 0; j < local_state.streams_size(); ++j) {
  39                                 assert(local_state.streams(j).data_fds_size() == 1);
  40                                 state.mutable_streams(j)->add_data_fds(local_state.streams(j).data_fds(0));
  41                         }
  42                 }
  43                 for (const ClientProto &client : local_state.clients()) {
  44                         state.add_clients()->MergeFrom(client);
  45                 }
  46         }
  47
  48         return state;
  49 }
  50
  51 void ServerPool::add_client(int sock, Acceptor *acceptor)
  52 {
  53         servers[clients_added++ % num_servers].add_client_deferred(sock, acceptor);
  54 }
  55
  56 void ServerPool::add_client_from_serialized(const ClientProto &client)
  57 {
  58         servers[clients_added++ % num_servers].add_client_from_serialized(client);
  59 }
  60
  61 int ServerPool::lookup_stream_by_url(const string &url) const
  62 {
  63         assert(servers != NULL);
  64         return servers[0].lookup_stream_by_url(url);
  65 }
  66
  67 int ServerPool::add_stream(const string &url, size_t backlog_size, size_t prebuffering_bytes, Stream::Encoding encoding, Stream::Encoding src_encoding)
  68 {
  69         // Adding more HTTP streams after UDP streams would cause the UDP stream
  70         // indices to move around, which is obviously not good.
  71         assert(udp_streams.empty());
  72
  73         for (int i = 0; i < num_servers; ++i) {
  74                 int stream_index = servers[i].add_stream(url, backlog_size, prebuffering_bytes, encoding, src_encoding);
  75                 assert(stream_index == num_http_streams);
  76         }
  77         return num_http_streams++;
  78 }
  79
  80 int ServerPool::add_stream_from_serialized(const StreamProto &stream, const vector<int> &data_fds)
  81 {
  82         // Adding more HTTP streams after UDP streams would cause the UDP stream
  83         // indices to move around, which is obviously not good.
  84         assert(udp_streams.empty());
  85
  86         assert(!data_fds.empty());
  87         string contents;
  88         for (int i = 0; i < num_servers; ++i) {
  89                 int data_fd;
  90                 if (i < int(data_fds.size())) {
  91                         // Reuse one of the existing file descriptors.
  92                         data_fd = data_fds[i];
  93                 } else {
  94                         // Clone the first one.
  95                         if (contents.empty()) {
  96                                 if (!read_tempfile(data_fds[0], &contents)) {
  97                                         exit(1);
  98                                 }
  99                         }
 100                         data_fd = make_tempfile(contents);
 101                 }
 102
 103                 int stream_index = servers[i].add_stream_from_serialized(stream, data_fd);
 104                 assert(stream_index == num_http_streams);
 105         }
 106
 107         // Close and delete any leftovers, if the number of servers was reduced.
 108         for (size_t i = num_servers; i < data_fds.size(); ++i) {
 109                 safe_close(data_fds[i]);  // Implicitly deletes the file.
 110         }
 111
 112         return num_http_streams++;
 113 }
 114
 115 int ServerPool::add_udpstream(const sockaddr_in6 &dst, int pacing_rate, int ttl, int multicast_iface_index)
 116 {
 117         udp_streams.emplace_back(new UDPStream(dst, pacing_rate, ttl, multicast_iface_index));
 118         return num_http_streams + udp_streams.size() - 1;
 119 }
 120
 121 void ServerPool::set_header(int stream_index, const string &http_header, const string &stream_header)
 122 {
 123         assert(stream_index >= 0 && stream_index < ssize_t(num_http_streams + udp_streams.size()));
 124
 125         if (stream_index >= num_http_streams) {
 126                 // UDP stream. TODO: Log which stream this is.
 127                 if (!stream_header.empty()) {
 128                         log(WARNING, "Trying to send stream format with headers to a UDP destination. This is unlikely to work well.");
 129                 }
 130
 131                 // Ignore the HTTP header.
 132                 return;
 133         }
 134
 135         // HTTP stream.
 136         for (int i = 0; i < num_servers; ++i) {
 137                 servers[i].set_header(stream_index, http_header, stream_header);
 138         }
 139 }
 140
 141 void ServerPool::add_data(int stream_index, const char *data, size_t bytes, uint16_t metacube_flags)
 142 {
 143         assert(stream_index >= 0 && stream_index < ssize_t(num_http_streams + udp_streams.size()));
 144
 145         if (stream_index >= num_http_streams) {
 146                 // UDP stream.
 147                 udp_streams[stream_index - num_http_streams]->send(data, bytes);
 148                 return;
 149         }
 150
 151         // HTTP stream.
 152         for (int i = 0; i < num_servers; ++i) {
 153                 servers[i].add_data_deferred(stream_index, data, bytes, metacube_flags);
 154         }
 155 }
 156
 157 void ServerPool::add_gen204(const std::string &url, const std::string &allow_origin)
 158 {
 159         for (int i = 0; i < num_servers; ++i) {
 160                 servers[i].add_gen204(url, allow_origin);
 161         }
 162 }
 163
 164 void ServerPool::create_tls_context_for_acceptor(const Acceptor *acceptor)
 165 {
 166         for (int i = 0; i < num_servers; ++i) {
 167                 servers[i].create_tls_context_for_acceptor(acceptor);
 168         }
 169 }
 170
 171 void ServerPool::run()
 172 {
 173         for (int i = 0; i < num_servers; ++i) {
 174                 servers[i].run();
 175         }
 176 }
 177
 178 void ServerPool::stop()
 179 {
 180         for (int i = 0; i < num_servers; ++i) {
 181                 servers[i].stop();
 182         }
 183 }
 184
 185 vector<ClientStats> ServerPool::get_client_stats() const
 186 {
 187         vector<ClientStats> ret;
 188         for (int i = 0; i < num_servers; ++i) {
 189                 vector<ClientStats> stats = servers[i].get_client_stats();
 190                 ret.insert(ret.end(), stats.begin(), stats.end());
 191         }
 192         return ret;
 193 }
 194
 195 void ServerPool::set_pacing_rate(int stream_index, uint32_t pacing_rate)
 196 {
 197         for (int i = 0; i < num_servers; ++i) {
 198                 servers[i].set_pacing_rate(stream_index, pacing_rate);
 199         }
 200 }
 201
 202 void ServerPool::set_backlog_size(int stream_index, size_t new_size)
 203 {
 204         for (int i = 0; i < num_servers; ++i) {
 205                 servers[i].set_backlog_size(stream_index, new_size);
 206         }
 207 }
 208
 209 void ServerPool::set_prebuffering_bytes(int stream_index, size_t new_amount)
 210 {
 211         for (int i = 0; i < num_servers; ++i) {
 212                 servers[i].set_prebuffering_bytes(stream_index, new_amount);
 213         }
 214 }
 215
 216 void ServerPool::set_encoding(int stream_index, Stream::Encoding encoding)
 217 {
 218         for (int i = 0; i < num_servers; ++i) {
 219                 servers[i].set_encoding(stream_index, encoding);
 220         }
 221 }
 222
 223 void ServerPool::set_src_encoding(int stream_index, Stream::Encoding encoding)
 224 {
 225         for (int i = 0; i < num_servers; ++i) {
 226                 servers[i].set_src_encoding(stream_index, encoding);
 227         }
 228 }