]> git.sesse.net Git - nageru/blob - x264_encoder.h
Fix an issue where the mixer lagging too much behind CEF would cause us to display...
[nageru] / x264_encoder.h
1 // A wrapper around x264, to encode video in higher quality than Quick Sync
2 // can give us. We maintain a queue of uncompressed Y'CbCr frames (of 50 frames,
3 // so a little under 100 MB at 720p), then have a separate thread pull out
4 // those threads as fast as we can to give it to x264 for encoding.
5 //
6 // The encoding threads are niced down because mixing is more important than
7 // encoding; if we lose frames in mixing, we'll lose frames to disk _and_
8 // to the stream, as where if we lose frames in encoding, we'll lose frames
9 // to the stream only, so the latter is strictly better. More importantly,
10 // this allows speedcontrol to do its thing without disturbing the mixer.
11
12 #ifndef _X264ENCODE_H
13 #define _X264ENCODE_H 1
14
15 #include <sched.h>
16 #include <stdint.h>
17 #include <x264.h>
18 #include <atomic>
19 #include <chrono>
20 #include <condition_variable>
21 #include <memory>
22 #include <mutex>
23 #include <queue>
24 #include <string>
25 #include <thread>
26 #include <unordered_map>
27 #include <vector>
28
29 extern "C" {
30 #include <libavformat/avformat.h>
31 }
32
33 #include <movit/image_format.h>
34
35 #include "defs.h"
36 #include "metrics.h"
37 #include "print_latency.h"
38 #include "x264_dynamic.h"
39
40 class Mux;
41 class X264SpeedControl;
42
43 class X264Encoder {
44 public:
45         X264Encoder(AVOutputFormat *oformat);  // Does not take ownership.
46
47         // Called after the last frame. Will block; once this returns,
48         // the last data is flushed.
49         ~X264Encoder();
50
51         // Must be called before first frame. Does not take ownership.
52         void add_mux(Mux *mux) { muxes.push_back(mux); }
53
54         // <data> is taken to be raw NV12 data of WIDTHxHEIGHT resolution.
55         // Does not block.
56         void add_frame(int64_t pts, int64_t duration, movit::YCbCrLumaCoefficients ycbcr_coefficients, const uint8_t *data, const ReceivedTimestamps &received_ts);
57
58         std::string get_global_headers() const {
59                 while (!x264_init_done) {
60                         sched_yield();
61                 }
62                 return global_headers;
63         }
64
65         void change_bitrate(unsigned rate_kbit) {
66                 new_bitrate_kbit = rate_kbit;
67         }
68
69 private:
70         struct QueuedFrame {
71                 int64_t pts, duration;
72                 movit::YCbCrLumaCoefficients ycbcr_coefficients;
73                 uint8_t *data;
74                 ReceivedTimestamps received_ts;
75         };
76         void encoder_thread_func();
77         void init_x264();
78         void encode_frame(QueuedFrame qf);
79
80         // bitrate_kbit can be 0 for no change.
81         static void speed_control_override_func(unsigned bitrate_kbit, movit::YCbCrLumaCoefficients coefficients, x264_param_t *param);
82
83         // One big memory chunk of all 50 (or whatever) frames, allocated in
84         // the constructor. All data functions just use pointers into this
85         // pool.
86         std::unique_ptr<uint8_t[]> frame_pool;
87
88         std::vector<Mux *> muxes;
89         bool wants_global_headers;
90
91         std::string global_headers;
92         std::string buffered_sei;  // Will be output before first frame, if any.
93
94         std::thread encoder_thread;
95         std::atomic<bool> x264_init_done{false};
96         std::atomic<bool> should_quit{false};
97         X264Dynamic dyn;
98         x264_t *x264;
99         std::unique_ptr<X264SpeedControl> speed_control;
100
101         std::atomic<unsigned> new_bitrate_kbit{0};  // 0 for no change.
102
103         // Protects everything below it.
104         std::mutex mu;
105
106         // Frames that are not being encoded or waiting to be encoded,
107         // so that add_frame() can use new ones.
108         std::queue<uint8_t *> free_frames;
109
110         // Frames that are waiting to be encoded (ie., add_frame() has been
111         // called, but they are not picked up for encoding yet).
112         std::queue<QueuedFrame> queued_frames;
113
114         // Whenever the state of <queued_frames> changes.
115         std::condition_variable queued_frames_nonempty;
116
117         // Key is the pts of the frame.
118         std::unordered_map<int64_t, ReceivedTimestamps> frames_being_encoded;
119 };
120
121 #endif  // !defined(_X264ENCODE_H)