]> git.sesse.net Git - vlc/blob - modules/audio_output/packet.c
opensles: reset number of samples correctly
[vlc] / modules / audio_output / packet.c
1 /*****************************************************************************
2  * packet.c : helper for legacy audio output plugins
3  *****************************************************************************
4  * Copyright (C) 2002-2012 VLC authors and VideoLAN
5  *
6  * This program is free software; you can redistribute it and/or modify it
7  * under the terms of the GNU Lesser General Public License as published by
8  * the Free Software Foundation; either version 2.1 of the License, or
9  * (at your option) any later version.
10  *
11  * This program is distributed in the hope that it will be useful,
12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the
14  * GNU Lesser General Public License for more details.
15  *
16  * You should have received a copy of the GNU Lesser General Public License
17  * along with this program; if not, write to the Free Software Foundation,
18  * Inc., 51 Franklin Street, Fifth Floor, Boston MA 02110-1301, USA.
19  *****************************************************************************/
20
21 #ifdef HAVE_CONFIG_H
22 # include <config.h>
23 #endif
24 #include <limits.h>
25 #include <assert.h>
26 #include <vlc_common.h>
27 #include <vlc_aout.h>
28
29 /**
30  * Initializes the members of a FIFO.
31  */
32 static void aout_FifoInit( aout_fifo_t *p_fifo, uint32_t i_rate )
33 {
34     assert( i_rate != 0);
35     p_fifo->p_first = NULL;
36     p_fifo->pp_last = &p_fifo->p_first;
37     date_Init( &p_fifo->end_date, i_rate, 1 );
38     date_Set( &p_fifo->end_date, VLC_TS_INVALID );
39 }
40
41 /**
42  * Pushes a packet into the FIFO.
43  */
44 static void aout_FifoPush( aout_fifo_t * p_fifo, block_t * p_buffer )
45 {
46     *p_fifo->pp_last = p_buffer;
47     p_fifo->pp_last = &p_buffer->p_next;
48     *p_fifo->pp_last = NULL;
49     /* Enforce the continuity of the stream. */
50     if( date_Get( &p_fifo->end_date ) != VLC_TS_INVALID )
51     {
52         p_buffer->i_pts = date_Get( &p_fifo->end_date );
53         p_buffer->i_length = date_Increment( &p_fifo->end_date,
54                                              p_buffer->i_nb_samples );
55         p_buffer->i_length -= p_buffer->i_pts;
56     }
57     else
58     {
59         date_Set( &p_fifo->end_date, p_buffer->i_pts + p_buffer->i_length );
60     }
61 }
62
63 /**
64  * Trashes all buffers.
65  */
66 static void aout_FifoReset( aout_fifo_t * p_fifo )
67 {
68     block_t * p_buffer;
69
70     date_Set( &p_fifo->end_date, VLC_TS_INVALID );
71     p_buffer = p_fifo->p_first;
72     while ( p_buffer != NULL )
73     {
74         block_t * p_next = p_buffer->p_next;
75         block_Release( p_buffer );
76         p_buffer = p_next;
77     }
78     p_fifo->p_first = NULL;
79     p_fifo->pp_last = &p_fifo->p_first;
80 }
81
82 /**
83  * Move forwards or backwards all dates in the FIFO.
84  */
85 static void aout_FifoMoveDates( aout_fifo_t *fifo, mtime_t difference )
86 {
87     if( date_Get( &fifo->end_date ) == VLC_TS_INVALID )
88     {
89         assert( fifo->p_first == NULL );
90         return;
91     }
92
93     date_Move( &fifo->end_date, difference );
94     for( block_t *block = fifo->p_first; block != NULL; block = block->p_next )
95         block->i_pts += difference;
96 }
97
98 /**
99  * Gets the next buffer out of the FIFO
100  */
101 static block_t *aout_FifoPop( aout_fifo_t * p_fifo )
102 {
103     block_t *p_buffer = p_fifo->p_first;
104     if( p_buffer != NULL )
105     {
106         p_fifo->p_first = p_buffer->p_next;
107         if( p_fifo->p_first == NULL )
108             p_fifo->pp_last = &p_fifo->p_first;
109     }
110     return p_buffer;
111 }
112
113 /**
114  * Destroys a FIFO and its buffers
115  */
116 static void aout_FifoDestroy( aout_fifo_t * p_fifo )
117 {
118     block_t * p_buffer;
119
120     p_buffer = p_fifo->p_first;
121     while ( p_buffer != NULL )
122     {
123         block_t * p_next = p_buffer->p_next;
124         block_Release( p_buffer );
125         p_buffer = p_next;
126     }
127
128     p_fifo->p_first = NULL;
129     p_fifo->pp_last = &p_fifo->p_first;
130 }
131
132 static inline aout_packet_t *aout_packet (audio_output_t *aout)
133 {
134     return (aout_packet_t *)(aout->sys);
135 }
136
137 void aout_PacketInit (audio_output_t *aout, aout_packet_t *p, unsigned samples,
138                       const audio_sample_format_t *fmt)
139 {
140     assert (p == aout_packet (aout));
141
142     vlc_mutex_init (&p->lock);
143     p->format = *fmt;
144     aout_FormatPrepare (&p->format);
145     aout_FifoInit (&p->partial, p->format.i_rate);
146     aout_FifoInit (&p->fifo, p->format.i_rate);
147     p->pause_date = VLC_TS_INVALID;
148     p->samples = samples;
149     p->starving = true;
150 }
151
152 void aout_PacketDestroy (audio_output_t *aout)
153 {
154     aout_packet_t *p = aout_packet (aout);
155
156     aout_FifoDestroy (&p->partial);
157     aout_FifoDestroy (&p->fifo);
158     vlc_mutex_destroy (&p->lock);
159 }
160
161 int aout_PacketTimeGet (audio_output_t *aout, mtime_t *restrict delay)
162 {
163     aout_packet_t *p = aout_packet (aout);
164     mtime_t time_report;
165
166     /* Problem: This measurement is imprecise and prone to jitter.
167      * Solution: Do not use aout_Packet...(). */
168     vlc_mutex_lock (&p->lock);
169     time_report = date_Get (&p->fifo.end_date);
170     vlc_mutex_unlock (&p->lock);
171
172     if (time_report == VLC_TS_INVALID)
173         return -1;
174     *delay = time_report - mdate ();
175     return 0;
176 }
177
178 static block_t *aout_OutputSlice (audio_output_t *);
179
180 void aout_PacketPlay (audio_output_t *aout, block_t *block)
181 {
182     aout_packet_t *p = aout_packet (aout);
183
184     vlc_mutex_lock (&p->lock);
185     aout_FifoPush (&p->partial, block);
186     while ((block = aout_OutputSlice (aout)) != NULL)
187         aout_FifoPush (&p->fifo, block);
188     vlc_mutex_unlock (&p->lock);
189 }
190
191 void aout_PacketFlush (audio_output_t *aout, bool drain)
192 {
193     aout_packet_t *p = aout_packet (aout);
194
195     vlc_mutex_lock (&p->lock);
196     if (drain)
197     {
198         mtime_t pts = date_Get (&p->fifo.end_date);
199         vlc_mutex_unlock (&p->lock);
200         if (pts != VLC_TS_INVALID)
201             mwait (pts);
202     }
203     else
204     {
205         aout_FifoReset (&p->partial);
206         aout_FifoReset (&p->fifo);
207         vlc_mutex_unlock (&p->lock);
208     }
209 }
210
211
212 /**
213  * Rearranges audio blocks in correct number of samples.
214  * @note (FIXME) This is left here for historical reasons. It belongs in the
215  * output code. Besides, this operation should be avoided if possible.
216  */
217 static block_t *aout_OutputSlice (audio_output_t *p_aout)
218 {
219     aout_packet_t *p = aout_packet (p_aout);
220     aout_fifo_t *p_fifo = &p->partial;
221     const unsigned samples = p->samples;
222     assert( samples > 0 );
223
224     /* Retrieve the date of the next buffer. */
225     date_t exact_start_date = p->fifo.end_date;
226     mtime_t start_date = date_Get( &exact_start_date );
227
228     /* Check if there is enough data to slice a new buffer. */
229     block_t *p_buffer = p_fifo->p_first;
230     if( p_buffer == NULL )
231         return NULL;
232
233     /* Find the earliest start date available. */
234     if ( start_date == VLC_TS_INVALID )
235     {
236         start_date = p_buffer->i_pts;
237         date_Set( &exact_start_date, start_date );
238     }
239     /* Compute the end date for the new buffer. */
240     mtime_t end_date = date_Increment( &exact_start_date, samples );
241
242     /* Check that we have enough samples (TODO merge with next loop). */
243     for( unsigned available = 0; available < samples; )
244     {
245         p_buffer = p_buffer->p_next;
246         if( p_buffer == NULL )
247             return NULL;
248
249         available += p_buffer->i_nb_samples;
250     }
251
252     if( AOUT_FMT_LINEAR( &p->format ) )
253     {
254         const unsigned framesize = p->format.i_bytes_per_frame;
255         /* Build packet with adequate number of samples */
256         unsigned needed = samples * framesize;
257
258         p_buffer = block_Alloc( needed );
259         if( unlikely(p_buffer == NULL) )
260             /* XXX: should free input buffers */
261             return NULL;
262         p_buffer->i_nb_samples = samples;
263
264         for( uint8_t *p_out = p_buffer->p_buffer; needed > 0; )
265         {
266             block_t *p_inbuf = p_fifo->p_first;
267             if( unlikely(p_inbuf == NULL) )
268             {
269                 msg_Err( p_aout, "packetization error" );
270                 memset( p_out, 0, needed );
271                 break;
272             }
273
274             const uint8_t *p_in = p_inbuf->p_buffer;
275             size_t avail = p_inbuf->i_nb_samples * framesize;
276             if( avail > needed )
277             {
278                 memcpy( p_out, p_in, needed );
279                 p_fifo->p_first->p_buffer += needed;
280                 p_fifo->p_first->i_buffer -= needed;
281                 needed /= framesize;
282                 p_fifo->p_first->i_nb_samples -= needed;
283
284                 mtime_t t = needed * CLOCK_FREQ / p->format.i_rate;
285                 p_fifo->p_first->i_pts += t;
286                 p_fifo->p_first->i_length -= t;
287                 break;
288             }
289
290             memcpy( p_out, p_in, avail );
291             needed -= avail;
292             p_out += avail;
293             /* Next buffer */
294             block_Release( aout_FifoPop( p_fifo ) );
295         }
296     }
297     else
298         p_buffer = aout_FifoPop( p_fifo );
299
300     p_buffer->i_pts = start_date;
301     p_buffer->i_length = end_date - start_date;
302
303     return p_buffer;
304 }
305
306 /**
307  * Dequeues the next audio packet (a.k.a. audio fragment).
308  * The audio output plugin must first call aout_PacketPlay() to queue the
309  * decoded audio samples. Typically, audio_output_t.play is set to, or calls
310  * aout_PacketPlay().
311  * @note This function is considered legacy. Please do not use this function in
312  * new audio output plugins.
313  * @param p_aout audio output instance
314  * @param start_date expected PTS of the audio packet
315  */
316 block_t *aout_PacketNext (audio_output_t *p_aout, mtime_t start_date)
317 {
318     aout_packet_t *p = aout_packet (p_aout);
319     aout_fifo_t *p_fifo = &p->fifo;
320     block_t *p_buffer;
321     const bool b_can_sleek = !AOUT_FMT_LINEAR(&p->format);
322     const mtime_t now = mdate ();
323     const mtime_t threshold =
324         (b_can_sleek ? start_date : now) - AOUT_MAX_PTS_DELAY;
325
326     vlc_mutex_lock( &p->lock );
327     if( p->pause_date != VLC_TS_INVALID )
328         goto out; /* paused: do not dequeue buffers */
329
330     for (;;)
331     {
332         p_buffer = p_fifo->p_first;
333         if (p_buffer == NULL)
334             goto out; /* nothing to play */
335
336         if (p_buffer->i_pts >= threshold)
337             break;
338
339         /* Drop the audio sample if the audio output is really late.
340          * In the case of b_can_sleek, we don't use a resampler so we need to
341          * be a lot more severe. */
342         msg_Dbg (p_aout, "audio output is too slow (%"PRId64" us): "
343                  " trashing %"PRId64" us", threshold - p_buffer->i_pts,
344                  p_buffer->i_length);
345         block_Release (aout_FifoPop (p_fifo));
346     }
347
348     mtime_t delta = start_date - p_buffer->i_pts;
349     /* This assumes that all buffers have the same duration. This is true
350      * since aout_PacketPlay() (aout_OutputSlice()) is used. */
351     if (0 >= delta + p_buffer->i_length)
352     {
353         if (!p->starving)
354         {
355             msg_Dbg (p_aout, "audio output is starving (%"PRId64"), "
356                      "playing silence", delta);
357             p->starving = true;
358         }
359         goto out; /* nothing to play _yet_ */
360     }
361
362     p->starving = false;
363     p_buffer = aout_FifoPop( p_fifo );
364
365     if (!b_can_sleek
366      && (delta < -AOUT_MAX_PTS_ADVANCE || AOUT_MAX_PTS_DELAY < delta))
367     {
368         msg_Warn (p_aout, "audio output out of sync, "
369                           "adjusting dates (%"PRId64" us)", delta);
370         aout_FifoMoveDates (&p->partial, delta);
371         aout_FifoMoveDates (p_fifo, delta);
372     }
373     vlc_mutex_unlock( &p->lock );
374     return p_buffer;
375 out:
376     vlc_mutex_unlock( &p->lock );
377     return NULL;
378 }