git.sesse.net Git - cubemap/blob - acceptor.cpp

   1 #include <assert.h>
   2 #include <errno.h>
   3 #include <netinet/in.h>
   4 #include <netinet/tcp.h>
   5 #include <poll.h>
   6 #include <stdlib.h>
   7 #include <string.h>
   8 #include <sys/ioctl.h>
   9 #include <sys/socket.h>
  10 #include <unistd.h>
  11
  12 #include "acceptor.h"
  13 #include "log.h"
  14 #include "serverpool.h"
  15 #include "state.pb.h"
  16 #include "util.h"
  17
  18 using namespace std;
  19
  20 extern ServerPool *servers;
  21
  22 int create_server_socket(const sockaddr_in6 &addr, SocketType socket_type)
  23 {
  24         int server_sock;
  25         if (socket_type == TCP_SOCKET) {
  26                 server_sock = socket(PF_INET6, SOCK_STREAM, IPPROTO_TCP);
  27         } else {
  28                 assert(socket_type == UDP_SOCKET);
  29                 server_sock = socket(PF_INET6, SOCK_DGRAM, IPPROTO_UDP);
  30         }
  31         if (server_sock == -1) {
  32                 log_perror("socket");
  33                 exit(1);
  34         }
  35
  36         int one = 1;
  37         if (setsockopt(server_sock, SOL_SOCKET, SO_REUSEADDR, &one, sizeof(one)) == -1) {
  38                 log_perror("setsockopt(SO_REUSEADDR)");
  39                 exit(1);
  40         }
  41
  42         // We want dual-stack sockets. (Sorry, OpenBSD and Windows XP...)
  43         int zero = 0;
  44         if (setsockopt(server_sock, IPPROTO_IPV6, IPV6_V6ONLY, &zero, sizeof(zero)) == -1) {
  45                 log_perror("setsockopt(IPV6_V6ONLY)");
  46                 exit(1);
  47         }
  48
  49         // Set as non-blocking, so the acceptor thread can notice that we want to shut it down.
  50         if (ioctl(server_sock, FIONBIO, &one) == -1) {
  51                 log_perror("ioctl(FIONBIO)");
  52                 exit(1);
  53         }
  54
  55         if (bind(server_sock, reinterpret_cast<const sockaddr *>(&addr), sizeof(addr)) == -1) {
  56                 log_perror("bind");
  57                 exit(1);
  58         }
  59
  60         if (socket_type == TCP_SOCKET) {
  61                 if (listen(server_sock, 128) == -1) {
  62                         log_perror("listen");
  63                         exit(1);
  64                 }
  65         }
  66
  67         return server_sock;
  68 }
  69
  70 sockaddr_in6 CreateAnyAddress(int port)
  71 {
  72         sockaddr_in6 sin6;
  73         memset(&sin6, 0, sizeof(sin6));
  74         sin6.sin6_family = AF_INET6;
  75         sin6.sin6_port = htons(port);
  76         return sin6;
  77 }
  78
  79 sockaddr_in6 ExtractAddressFromAcceptorProto(const AcceptorProto &proto)
  80 {
  81         sockaddr_in6 sin6;
  82         memset(&sin6, 0, sizeof(sin6));
  83         sin6.sin6_family = AF_INET6;
  84
  85         if (!proto.addr().empty()) {
  86                 int ret = inet_pton(AF_INET6, proto.addr().c_str(), &sin6.sin6_addr);
  87                 assert(ret == 1);
  88         }
  89
  90         sin6.sin6_port = htons(proto.port());
  91         return sin6;
  92 }
  93
  94 Acceptor::Acceptor(int server_sock, const sockaddr_in6 &addr)
  95         : server_sock(server_sock),
  96           addr(addr)
  97 {
  98 }
  99
 100 Acceptor::Acceptor(const AcceptorProto &serialized)
 101         : server_sock(serialized.server_sock()),
 102           addr(ExtractAddressFromAcceptorProto(serialized))
 103 {
 104 }
 105
 106 AcceptorProto Acceptor::serialize() const
 107 {
 108         char buf[INET6_ADDRSTRLEN];
 109         inet_ntop(addr.sin6_family, &addr.sin6_addr, buf, sizeof(buf));
 110
 111         AcceptorProto serialized;
 112         serialized.set_server_sock(server_sock);
 113         serialized.set_addr(buf);
 114         serialized.set_port(ntohs(addr.sin6_port));
 115         return serialized;
 116 }
 117
 118 void Acceptor::close_socket()
 119 {
 120         safe_close(server_sock);
 121 }
 122
 123 void Acceptor::do_work()
 124 {
 125         while (!should_stop()) {
 126                 if (!wait_for_activity(server_sock, POLLIN, NULL)) {
 127                         continue;
 128                 }
 129
 130                 sockaddr_in6 addr;
 131                 socklen_t addrlen = sizeof(addr);
 132
 133                 // Get a new socket.
 134                 int sock = accept(server_sock, reinterpret_cast<sockaddr *>(&addr), &addrlen);
 135                 if (sock == -1 && errno == EINTR) {
 136                         continue;
 137                 }
 138                 if (sock == -1) {
 139                         log_perror("accept");
 140                         usleep(100000);
 141                         continue;
 142                 }
 143
 144                 // Set the socket as nonblocking.
 145                 int one = 1;
 146                 if (ioctl(sock, FIONBIO, &one) == -1) {
 147                         log_perror("ioctl(FIONBIO)");
 148                         exit(1);
 149                 }
 150
 151                 // Enable TCP_CORK for maximum throughput. In the rare case that the
 152                 // stream stops entirely, this will cause a small delay (~200 ms)
 153                 // before the last part is sent out, but that should be fine.
 154                 if (setsockopt(sock, SOL_TCP, TCP_CORK, &one, sizeof(one)) == -1) {
 155                         log_perror("setsockopt(TCP_CORK)");
 156                         // Can still continue.
 157                 }
 158
 159                 // Pick a server, round-robin, and hand over the socket to it.
 160                 servers->add_client(sock);
 161         }
 162 }