git.sesse.net Git - vlc/blob - modules/packetizer/mpeg4video.c

   1 /*****************************************************************************
   2  * mpeg4video.c: mpeg 4 video packetizer
   3  *****************************************************************************
   4  * Copyright (C) 2001, 2002 VideoLAN
   5  * $Id: mpeg4video.c,v 1.16 2003/11/18 20:15:38 fenrir Exp $
   6  *
   7  * Authors: Laurent Aimar <fenrir@via.ecp.fr>
   8  *          Eric Petit <titer@videolan.org>
   9  *          Gildas Bazin <gbazin@netcourrier.com>
  10  *
  11  * This program is free software; you can redistribute it and/or modify
  12  * it under the terms of the GNU General Public License as published by
  13  * the Free Software Foundation; either version 2 of the License, or
  14  * (at your option) any later version.
  15  *
  16  * This program is distributed in the hope that it will be useful,
  17  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  18  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  19  * GNU General Public License for more details.
  20  *
  21  * You should have received a copy of the GNU General Public License
  22  * along with this program; if not, write to the Free Software
  23  * Foundation, Inc., 59 Temple Place - Suite 330, Boston, MA  02111, USA.
  24  *****************************************************************************/
  25
  26 /*****************************************************************************
  27  * Preamble
  28  *****************************************************************************/
  29 #include <stdlib.h>                                      /* malloc(), free() */
  30
  31 #include <vlc/vlc.h>
  32 #include <vlc/decoder.h>
  33 #include <vlc/sout.h>
  34
  35 #include "vlc_bits.h"
  36
  37 /*****************************************************************************
  38  * Module descriptor
  39  *****************************************************************************/
  40 static int  Open ( vlc_object_t * );
  41 static void Close( vlc_object_t * );
  42
  43 vlc_module_begin();
  44     set_description( _("MPEG4 Video packetizer") );
  45     set_capability( "packetizer", 50 );
  46     set_callbacks( Open, Close );
  47 vlc_module_end();
  48
  49
  50 /****************************************************************************
  51  * Local prototypes
  52  ****************************************************************************/
  53 static block_t *Packetize( decoder_t *, block_t ** );
  54
  55 struct decoder_sys_t
  56 {
  57     /*
  58      * Common properties
  59      */
  60     mtime_t i_pts;
  61     mtime_t i_dts;
  62
  63
  64     vlc_bool_t  b_vop;
  65     int         i_buffer;
  66     int         i_buffer_size;
  67     uint8_t     *p_buffer;
  68 };
  69
  70 static int m4v_FindStartCode( uint8_t **pp_start, uint8_t *p_end );
  71 static int m4v_VOLParse( es_format_t *fmt, uint8_t *p_vol, int i_vol );
  72
  73 #define VIDEO_OBJECT_MASK                       0x01f
  74 #define VIDEO_OBJECT_LAYER_MASK                 0x00f
  75
  76 #define VIDEO_OBJECT_START_CODE                 0x100
  77 #define VIDEO_OBJECT_LAYER_START_CODE           0x120
  78 #define VISUAL_OBJECT_SEQUENCE_START_CODE       0x1b0
  79 #define VISUAL_OBJECT_SEQUENCE_END_CODE         0x1b1
  80 #define USER_DATA_START_CODE                    0x1b2
  81 #define GROUP_OF_VOP_START_CODE                 0x1b3
  82 #define VIDEO_SESSION_ERROR_CODE                0x1b4
  83 #define VISUAL_OBJECT_START_CODE                0x1b5
  84 #define VOP_START_CODE                          0x1b6
  85 #define FACE_OBJECT_START_CODE                  0x1ba
  86 #define FACE_OBJECT_PLANE_START_CODE            0x1bb
  87 #define MESH_OBJECT_START_CODE                  0x1bc
  88 #define MESH_OBJECT_PLANE_START_CODE            0x1bd
  89 #define STILL_TEXTURE_OBJECT_START_CODE         0x1be
  90 #define TEXTURE_SPATIAL_LAYER_START_CODE        0x1bf
  91 #define TEXTURE_SNR_LAYER_START_CODE            0x1c0
  92
  93 /*****************************************************************************
  94  * Open: probe the packetizer and return score
  95  *****************************************************************************/
  96 static int Open( vlc_object_t *p_this )
  97 {
  98     decoder_t     *p_dec = (decoder_t*)p_this;
  99     decoder_sys_t *p_sys;
 100
 101     switch( p_dec->fmt_in.i_codec )
 102     {
 103         case VLC_FOURCC( 'm', '4', 's', '2'):
 104         case VLC_FOURCC( 'M', '4', 'S', '2'):
 105         case VLC_FOURCC( 'm', 'p', '4', 's'):
 106         case VLC_FOURCC( 'M', 'P', '4', 'S'):
 107         case VLC_FOURCC( 'm', 'p', '4', 'v'):
 108         case VLC_FOURCC( 'D', 'I', 'V', 'X'):
 109         case VLC_FOURCC( 'd', 'i', 'v', 'x'):
 110         case VLC_FOURCC( 'X', 'V', 'I', 'D'):
 111         case VLC_FOURCC( 'X', 'v', 'i', 'D'):
 112         case VLC_FOURCC( 'x', 'v', 'i', 'd'):
 113         case VLC_FOURCC( 'D', 'X', '5', '0'):
 114         case VLC_FOURCC( 0x04, 0,   0,   0):
 115         case VLC_FOURCC( '3', 'I', 'V', '2'):
 116             break;
 117
 118         default:
 119             return VLC_EGENERIC;
 120     }
 121
 122     /* Allocate the memory needed to store the decoder's structure */
 123     if( ( p_dec->p_sys = p_sys = malloc( sizeof(decoder_sys_t) ) ) == NULL )
 124     {
 125         msg_Err( p_dec, "out of memory" );
 126         return VLC_EGENERIC;
 127     }
 128     p_sys->i_pts = 0;
 129     p_sys->b_vop = VLC_FALSE;
 130     p_sys->i_buffer = 0;
 131     p_sys->i_buffer_size = 10000;
 132     p_sys->p_buffer = malloc( p_sys->i_buffer_size );
 133
 134     /* Setup properties */
 135     p_dec->fmt_out = p_dec->fmt_in;
 136     p_dec->fmt_out.i_codec = VLC_FOURCC( 'm', 'p', '4', 'v' );
 137
 138     if( p_dec->fmt_in.i_extra )
 139     {
 140         /* We have a vol */
 141         p_dec->fmt_out.i_extra = p_dec->fmt_in.i_extra;
 142         p_dec->fmt_out.p_extra = malloc( p_dec->fmt_in.i_extra );
 143         memcpy( p_dec->fmt_out.p_extra, p_dec->fmt_in.p_extra,
 144                 p_dec->fmt_in.i_extra );
 145
 146         msg_Dbg( p_dec, "opening with vol size:%d", p_dec->fmt_in.i_extra );
 147         m4v_VOLParse( &p_dec->fmt_out,
 148                       p_dec->fmt_out.p_extra, p_dec->fmt_out.i_extra );
 149     }
 150     else
 151     {
 152         /* No vol, we'll have to look for one later on */
 153         p_dec->fmt_out.i_extra = 0;
 154         p_dec->fmt_out.p_extra = 0;
 155     }
 156
 157     /* Set callback */
 158     p_dec->pf_packetize = Packetize;
 159
 160     return VLC_SUCCESS;
 161 }
 162
 163 /*****************************************************************************
 164  * Close: clean up the packetizer
 165  *****************************************************************************/
 166 static void Close( vlc_object_t *p_this )
 167 {
 168     decoder_t *p_dec = (decoder_t*)p_this;
 169
 170     free( p_dec->p_sys );
 171 }
 172
 173 /****************************************************************************
 174  * Packetize: the whole thing
 175  ****************************************************************************/
 176 static block_t *Packetize( decoder_t *p_dec, block_t **pp_block )
 177 {
 178     decoder_sys_t *p_sys = p_dec->p_sys;
 179
 180     block_t *p_chain_out = NULL;
 181     block_t *p_block;
 182     uint8_t *p_vol = NULL;
 183     uint8_t *p_start;
 184
 185     if( !pp_block || !*pp_block ) return NULL;
 186
 187     p_block = *pp_block;
 188
 189     /* Append data */
 190     if( p_sys->i_buffer + p_block->i_buffer > p_sys->i_buffer_size )
 191     {
 192         p_sys->i_buffer_size += p_block->i_buffer + 1024;
 193         p_sys->p_buffer = realloc( p_sys->p_buffer, p_sys->i_buffer_size );
 194     }
 195     memcpy( &p_sys->p_buffer[p_sys->i_buffer], p_block->p_buffer,
 196             p_block->i_buffer );
 197     p_sys->i_buffer += p_block->i_buffer;
 198
 199     if( p_sys->i_buffer > 10*1000000 )
 200     {
 201         msg_Err( p_dec, "mmh reseting context" );
 202         p_sys->i_buffer = 0;
 203     }
 204
 205     /* Search vop */
 206     p_start = &p_sys->p_buffer[p_sys->i_buffer - p_block->i_buffer - 4];
 207     if( p_start < p_sys->p_buffer )
 208     {
 209         p_start = p_sys->p_buffer;
 210     }
 211     for( ;; )
 212     {
 213         if( m4v_FindStartCode( &p_start, &p_sys->p_buffer[p_sys->i_buffer] ) )
 214         {
 215             block_Release( p_block );
 216             *pp_block = NULL;
 217             return p_chain_out;
 218         }
 219         /* fprintf( stderr, "start code=0x1%2.2x\n", p_start[3] ); */
 220
 221         if( p_vol )
 222         {
 223             /* Copy the complete VOL */
 224             p_dec->fmt_out.i_extra = p_start - p_vol;
 225             p_dec->fmt_out.p_extra = malloc( p_dec->fmt_out.i_extra );
 226             memcpy( p_dec->fmt_out.p_extra, p_vol, p_dec->fmt_out.i_extra );
 227             m4v_VOLParse( &p_dec->fmt_out,
 228                           p_dec->fmt_out.p_extra, p_dec->fmt_out.i_extra );
 229
 230             p_vol = NULL;
 231         }
 232         if( p_sys->b_vop )
 233         {
 234             /* Output the complete VOP we have */
 235             int     i_out = p_start - p_sys->p_buffer;
 236             block_t *p_out = block_New( p_dec, i_out );
 237
 238             /* extract data */
 239             memcpy( p_out->p_buffer, p_sys->p_buffer, i_out );
 240             if( i_out < p_sys->i_buffer )
 241             {
 242                 memmove( p_sys->p_buffer, &p_sys->p_buffer[i_out],
 243                          p_sys->i_buffer - i_out );
 244             }
 245             p_sys->i_buffer -= i_out;
 246             p_start -= i_out;
 247
 248             /* FIXME do proper dts/pts */
 249             p_out->i_pts = p_sys->i_pts;
 250             p_out->i_dts = p_sys->i_dts;
 251             /* FIXME doesn't work when there is multiple VOP in one block */
 252             if( p_block->i_dts > p_sys->i_dts )
 253             {
 254                 p_out->i_length = p_block->i_dts - p_sys->i_dts;
 255             }
 256
 257             if( p_dec->fmt_out.i_extra > 0 )
 258             {
 259                 block_ChainAppend( &p_chain_out, p_out );
 260             }
 261             else
 262             {
 263                 msg_Warn( p_dec, "waiting for VOL" );
 264                 block_Release( p_out );
 265             }
 266
 267 #if 0
 268             fprintf( stderr, "pts=%lld dts=%lld length=%lldms\n",
 269                      p_out->i_pts, p_out->i_dts,
 270                      p_out->i_length / 1000 );
 271 #endif
 272             p_sys->b_vop = VLC_FALSE;
 273         }
 274
 275         if( p_start[3] >= 0x20 && p_start[3] <= 0x2f )
 276         {
 277             /* Start of the VOL */
 278             p_vol = p_start;
 279         }
 280         else if( p_start[3] == 0xb6 )
 281         {
 282             p_sys->b_vop = VLC_TRUE;
 283             p_sys->i_pts = p_block->i_pts;
 284             p_sys->i_dts = p_block->i_dts;
 285         }
 286         p_start += 4; /* Next */
 287     }
 288 }
 289
 290 /****************************************************************************
 291  * m4v_FindStartCode
 292  ****************************************************************************/
 293 static int m4v_FindStartCode( uint8_t **pp_start, uint8_t *p_end )
 294 {
 295     uint8_t *p = *pp_start;
 296
 297     for( p = *pp_start; p < p_end - 4; p++ )
 298     {
 299         if( p[0] == 0 && p[1] == 0 && p[2] == 1 )
 300         {
 301             *pp_start = p;
 302             return VLC_SUCCESS;
 303         }
 304     }
 305
 306     *pp_start = p_end;
 307     return VLC_EGENERIC;
 308 }
 309
 310
 311 /* look at ffmpeg av_log2 ;) */
 312 static int vlc_log2( unsigned int v )
 313 {
 314     int n = 0;
 315     static const int vlc_log2_table[16] =
 316     {
 317         0,0,1,1,2,2,2,2, 3,3,3,3,3,3,3,3
 318     };
 319
 320     if( v&0xffff0000 )
 321     {
 322         v >>= 16;
 323         n += 16;
 324     }
 325     if( v&0xff00 )
 326     {
 327         v >>= 8;
 328         n += 8;
 329     }
 330     if( v&0xf0 )
 331     {
 332         v >>= 4;
 333         n += 4;
 334     }
 335     n += vlc_log2_table[v];
 336
 337     return n;
 338 }
 339
 340 /* m4v_VOLParse:
 341  *  TODO:
 342  *      - support aspect ratio
 343  */
 344 static int m4v_VOLParse( es_format_t *fmt, uint8_t *p_vol, int i_vol )
 345 {
 346     bs_t s;
 347     int i_vo_type;
 348     int i_vo_ver_id;
 349     int i_ar;
 350     int i_shape;
 351     int i_time_increment_resolution;
 352
 353     for( ;; )
 354     {
 355         if( p_vol[0] == 0x00 && p_vol[1] == 0x00 &&
 356             p_vol[2] == 0x01 &&
 357             p_vol[3] >= 0x20 && p_vol[3] <= 0x2f )
 358         {
 359             break;
 360         }
 361         p_vol++;
 362         i_vol--;
 363         if( i_vol <= 4 )
 364         {
 365             return VLC_EGENERIC;
 366         }
 367     }
 368
 369     /* parse the vol */
 370     bs_init( &s, &p_vol[4], i_vol - 4 );
 371
 372     bs_skip( &s, 1 );   /* random access */
 373     i_vo_type = bs_read( &s, 8 );
 374     if( bs_read1( &s ) )
 375     {
 376         i_vo_ver_id = bs_read( &s, 4 );
 377         bs_skip( &s, 3 );
 378     }
 379     else
 380     {
 381         i_vo_ver_id = 1;
 382     }
 383     i_ar = bs_read( &s, 4 );
 384     if( i_ar == 0xf )
 385     {
 386         int i_ar_width = bs_read( &s, 8 );
 387         int i_ar_height= bs_read( &s, 8 );
 388     }
 389     if( bs_read1( &s ) )
 390     {
 391         /* vol control parameter */
 392         int i_chroma_format = bs_read( &s, 2 );
 393         int i_low_delay = bs_read1( &s );
 394
 395         if( bs_read1( &s ) )
 396         {
 397             bs_skip( &s, 16 );
 398             bs_skip( &s, 16 );
 399             bs_skip( &s, 16 );
 400             bs_skip( &s, 3 );
 401             bs_skip( &s, 11 );
 402             bs_skip( &s, 1 );
 403             bs_skip( &s, 16 );
 404         }
 405     }
 406     /* shape 0->RECT, 1->BIN, 2->BIN_ONLY, 3->GRAY */
 407     i_shape = bs_read( &s, 2 );
 408     if( i_shape == 3 && i_vo_ver_id != 1 )
 409     {
 410         bs_skip( &s, 4 );
 411     }
 412
 413     if( !bs_read1( &s ) )
 414     {
 415         /* marker */
 416         return VLC_EGENERIC;
 417     }
 418     i_time_increment_resolution = bs_read( &s, 16 );
 419     if( !bs_read1( &s ) )
 420     {
 421         /* marker */
 422         return VLC_EGENERIC;
 423     }
 424
 425     if( bs_read1( &s ) )
 426     {
 427         int i_time_increment_bits = vlc_log2( i_time_increment_resolution - 1 ) + 1;
 428         if( i_time_increment_bits < 1 )
 429         {
 430             i_time_increment_bits = 1;
 431         }
 432         bs_skip( &s, i_time_increment_bits );
 433     }
 434     if( i_shape == 0 )
 435     {
 436         bs_skip( &s, 1 );
 437         fmt->video.i_width = bs_read( &s, 13 );
 438         bs_skip( &s, 1 );
 439         fmt->video.i_height= bs_read( &s, 13 );
 440         bs_skip( &s, 1 );
 441     }
 442     return VLC_SUCCESS;
 443 }
 444
 445
 446