]> git.sesse.net Git - nageru/blob - x264_encoder.h
In FFmpegCapture, frame decoding into its own function.
[nageru] / x264_encoder.h
1 // A wrapper around x264, to encode video in higher quality than Quick Sync
2 // can give us. We maintain a queue of uncompressed Y'CbCr frames (of 50 frames,
3 // so a little under 100 MB at 720p), then have a separate thread pull out
4 // those threads as fast as we can to give it to x264 for encoding.
5 //
6 // The encoding threads are niced down because mixing is more important than
7 // encoding; if we lose frames in mixing, we'll lose frames to disk _and_
8 // to the stream, as where if we lose frames in encoding, we'll lose frames
9 // to the stream only, so the latter is strictly better. More importantly,
10 // this allows speedcontrol to do its thing without disturbing the mixer.
11
12 #ifndef _X264ENCODE_H
13 #define _X264ENCODE_H 1
14
15 #include <sched.h>
16 #include <stdint.h>
17 #include <x264.h>
18 #include <atomic>
19 #include <chrono>
20 #include <condition_variable>
21 #include <memory>
22 #include <mutex>
23 #include <queue>
24 #include <string>
25 #include <thread>
26 #include <unordered_map>
27 #include <vector>
28
29 extern "C" {
30 #include <libavformat/avformat.h>
31 }
32
33 #include <movit/image_format.h>
34
35 #include "print_latency.h"
36 #include "x264_dynamic.h"
37
38 class Mux;
39 class X264SpeedControl;
40
41 class X264Encoder {
42 public:
43         X264Encoder(AVOutputFormat *oformat);  // Does not take ownership.
44
45         // Called after the last frame. Will block; once this returns,
46         // the last data is flushed.
47         ~X264Encoder();
48
49         // Must be called before first frame. Does not take ownership.
50         void add_mux(Mux *mux) { muxes.push_back(mux); }
51
52         // <data> is taken to be raw NV12 data of WIDTHxHEIGHT resolution.
53         // Does not block.
54         void add_frame(int64_t pts, int64_t duration, movit::YCbCrLumaCoefficients ycbcr_coefficients, const uint8_t *data, const ReceivedTimestamps &received_ts);
55
56         std::string get_global_headers() const {
57                 while (!x264_init_done) {
58                         sched_yield();
59                 }
60                 return global_headers;
61         }
62
63         void change_bitrate(unsigned rate_kbit) {
64                 new_bitrate_kbit = rate_kbit;
65         }
66
67 private:
68         struct QueuedFrame {
69                 int64_t pts, duration;
70                 movit::YCbCrLumaCoefficients ycbcr_coefficients;
71                 uint8_t *data;
72                 ReceivedTimestamps received_ts;
73         };
74         void encoder_thread_func();
75         void init_x264();
76         void encode_frame(QueuedFrame qf);
77
78         // One big memory chunk of all 50 (or whatever) frames, allocated in
79         // the constructor. All data functions just use pointers into this
80         // pool.
81         std::unique_ptr<uint8_t[]> frame_pool;
82
83         std::vector<Mux *> muxes;
84         bool wants_global_headers;
85
86         std::string global_headers;
87         std::string buffered_sei;  // Will be output before first frame, if any.
88
89         std::thread encoder_thread;
90         std::atomic<bool> x264_init_done{false};
91         std::atomic<bool> should_quit{false};
92         X264Dynamic dyn;
93         x264_t *x264;
94         std::unique_ptr<X264SpeedControl> speed_control;
95
96         std::function<void(x264_param_t *)> bitrate_override_func;
97
98         std::atomic<unsigned> new_bitrate_kbit{0};  // 0 for no change.
99
100         // Protects everything below it.
101         std::mutex mu;
102
103         // Frames that are not being encoded or waiting to be encoded,
104         // so that add_frame() can use new ones.
105         std::queue<uint8_t *> free_frames;
106
107         // Frames that are waiting to be encoded (ie., add_frame() has been
108         // called, but they are not picked up for encoding yet).
109         std::queue<QueuedFrame> queued_frames;
110
111         // Whenever the state of <queued_frames> changes.
112         std::condition_variable queued_frames_nonempty;
113
114         // Key is the pts of the frame.
115         std::unordered_map<int64_t, ReceivedTimestamps> frames_being_encoded;
116 };
117
118 #endif  // !defined(_X264ENCODE_H)