libhb/work.c

   1 /* $Id: work.c,v 1.43 2005/03/17 16:38:49 titer Exp $
   2
   3    This file is part of the HandBrake source code.
   4    Homepage: <http://handbrake.fr/>.
   5    It may be used under the terms of the GNU General Public License. */
   6
   7 #include "hb.h"
   8 #include "a52dec/a52.h"
   9 #include "dca.h"
  10 #include "libavformat/avformat.h"
  11
  12 typedef struct
  13 {
  14     hb_list_t * jobs;
  15     hb_job_t  ** current_job;
  16     int         cpu_count;
  17     int       * error;
  18     volatile int * die;
  19
  20 } hb_work_t;
  21
  22 static void work_func();
  23 static void do_job( hb_job_t *, int cpu_count );
  24 static void work_loop( void * );
  25
  26 #define FIFO_LARGE 32
  27 #define FIFO_LARGE_WAKE 16
  28 #define FIFO_SMALL 16
  29 #define FIFO_SMALL_WAKE 15
  30
  31 /**
  32  * Allocates work object and launches work thread with work_func.
  33  * @param jobs Handle to hb_list_t.
  34  * @param cpu_count Humber of CPUs found in system.
  35  * @param die Handle to user inititated exit indicator.
  36  * @param error Handle to error indicator.
  37  */
  38 hb_thread_t * hb_work_init( hb_list_t * jobs, int cpu_count,
  39                             volatile int * die, int * error, hb_job_t ** job )
  40 {
  41     hb_work_t * work = calloc( sizeof( hb_work_t ), 1 );
  42
  43     work->jobs      = jobs;
  44     work->current_job = job;
  45     work->cpu_count = cpu_count;
  46     work->die       = die;
  47     work->error     = error;
  48
  49     return hb_thread_init( "work", work_func, work, HB_LOW_PRIORITY );
  50 }
  51
  52 static void InitWorkState( hb_handle_t * h )
  53 {
  54     hb_state_t state;
  55
  56     state.state = HB_STATE_WORKING;
  57 #define p state.param.working
  58     p.progress  = 0.0;
  59     p.rate_cur  = 0.0;
  60     p.rate_avg  = 0.0;
  61     p.hours     = -1;
  62     p.minutes   = -1;
  63     p.seconds   = -1;
  64 #undef p
  65
  66     hb_set_state( h, &state );
  67
  68 }
  69
  70 /**
  71  * Iterates through job list and calls do_job for each job.
  72  * @param _work Handle work object.
  73  */
  74 static void work_func( void * _work )
  75 {
  76     hb_work_t  * work = _work;
  77     hb_job_t   * job;
  78
  79     hb_log( "%d job(s) to process", hb_list_count( work->jobs ) );
  80
  81     while( !*work->die && ( job = hb_list_item( work->jobs, 0 ) ) )
  82     {
  83         hb_list_rem( work->jobs, job );
  84         job->die = work->die;
  85         *(work->current_job) = job;
  86         InitWorkState( job->h );
  87         do_job( job, work->cpu_count );
  88         *(work->current_job) = NULL;
  89     }
  90
  91     *(work->error) = HB_ERROR_NONE;
  92
  93     free( work );
  94 }
  95
  96 hb_work_object_t * hb_get_work( int id )
  97 {
  98     hb_work_object_t * w;
  99     for( w = hb_objects; w; w = w->next )
 100     {
 101         if( w->id == id )
 102         {
 103             hb_work_object_t *wc = malloc( sizeof(*w) );
 104             *wc = *w;
 105             return wc;
 106         }
 107     }
 108     return NULL;
 109 }
 110
 111 hb_work_object_t * hb_codec_decoder( int codec )
 112 {
 113     switch( codec )
 114     {
 115         case HB_ACODEC_AC3:  return hb_get_work( WORK_DECA52 );
 116         case HB_ACODEC_DCA:  return hb_get_work( WORK_DECDCA );
 117         case HB_ACODEC_MPGA: return hb_get_work( WORK_DECAVCODEC );
 118         case HB_ACODEC_LPCM: return hb_get_work( WORK_DECLPCM );
 119         case HB_ACODEC_FFMPEG: return hb_get_work( WORK_DECAVCODECAI );
 120     }
 121     return NULL;
 122 }
 123
 124 hb_work_object_t * hb_codec_encoder( int codec )
 125 {
 126     switch( codec )
 127     {
 128         case HB_ACODEC_FAAC:   return hb_get_work( WORK_ENCFAAC );
 129         case HB_ACODEC_LAME:   return hb_get_work( WORK_ENCLAME );
 130         case HB_ACODEC_VORBIS: return hb_get_work( WORK_ENCVORBIS );
 131         case HB_ACODEC_CA_AAC:  return hb_get_work( WORK_ENC_CA_AAC );
 132     }
 133     return NULL;
 134 }
 135
 136 /**
 137  * Displays job parameters in the debug log.
 138  * @param job Handle work hb_job_t.
 139  */
 140 void hb_display_job_info( hb_job_t * job )
 141 {
 142     hb_title_t * title = job->title;
 143     hb_audio_t   * audio;
 144     hb_subtitle_t * subtitle;
 145     int             i, j;
 146
 147     hb_log("job configuration:");
 148     hb_log( " * source");
 149
 150     hb_log( "   + %s", title->path );
 151
 152     hb_log( "   + title %d, chapter(s) %d to %d", title->index,
 153             job->chapter_start, job->chapter_end );
 154
 155     if( title->container_name != NULL )
 156         hb_log( "   + container: %s", title->container_name);
 157
 158     if( title->data_rate )
 159     {
 160         hb_log( "   + data rate: %d kbps", title->data_rate / 1000 );
 161     }
 162
 163     hb_log( " * destination");
 164
 165     hb_log( "   + %s", job->file );
 166
 167     switch( job->mux )
 168     {
 169         case HB_MUX_MP4:
 170             hb_log("   + container: MPEG-4 (.mp4 and .m4v)");
 171
 172             if( job->ipod_atom )
 173                 hb_log( "     + compatibility atom for iPod 5G");
 174
 175             if( job->largeFileSize )
 176                 hb_log( "     + 64-bit formatting");
 177
 178             if( job->mp4_optimize )
 179                 hb_log( "     + optimized for progressive web downloads");
 180
 181             if( job->color_matrix )
 182                 hb_log( "     + custom color matrix: %s", job->color_matrix == 1 ? "ITU Bt.601 (SD)" : "ITU Bt.709 (HD)");
 183             break;
 184
 185         case HB_MUX_AVI:
 186             hb_log("   + container: AVI");
 187             break;
 188
 189         case HB_MUX_MKV:
 190             hb_log("   + container: Matroska (.mkv)");
 191             break;
 192
 193         case HB_MUX_OGM:
 194             hb_log("   + conttainer: Ogg Media (.ogm)");
 195             break;
 196     }
 197
 198     if( job->chapter_markers )
 199     {
 200         hb_log( "     + chapter markers" );
 201     }
 202
 203     hb_log(" * video track");
 204
 205     hb_log("   + decoder: %s", title->video_codec_name );
 206
 207     if( title->video_bitrate )
 208     {
 209         hb_log( "     + bitrate %d kbps", title->video_bitrate / 1000 );
 210     }
 211
 212     if( !job->cfr )
 213     {
 214         hb_log( "   + frame rate: same as source (around %.3f fps)",
 215             (float) title->rate / (float) title->rate_base );
 216     }
 217     else
 218     {
 219         static const char *frtypes[] = {
 220             "", "constant", "peak rate limited to"
 221         };
 222         hb_log( "   + frame rate: %.3f fps -> %s %.3f fps",
 223             (float) title->rate / (float) title->rate_base, frtypes[job->cfr],
 224             (float) job->vrate / (float) job->vrate_base );
 225     }
 226
 227     if( job->anamorphic.mode )
 228     {
 229         hb_log( "   + %s anamorphic", job->anamorphic.mode == 1 ? "strict" : job->anamorphic.mode == 2? "loose" : "custom" );
 230         if( job->anamorphic.mode == 3 && job->anamorphic.keep_display_aspect )
 231         {
 232             hb_log( "     + keeping source display aspect ratio");
 233         }
 234         hb_log( "     + storage dimensions: %d * %d -> %d * %d, crop %d/%d/%d/%d, mod %i",
 235                     title->width, title->height, job->width, job->height,
 236                     job->crop[0], job->crop[1], job->crop[2], job->crop[3], job->modulus );
 237         if( job->anamorphic.itu_par )
 238         {
 239             hb_log( "     + using ITU pixel aspect ratio values");
 240         }
 241         hb_log( "     + pixel aspect ratio: %i / %i", job->anamorphic.par_width, job->anamorphic.par_height );
 242         hb_log( "     + display dimensions: %.0f * %i",
 243             (float)( job->width * job->anamorphic.par_width / job->anamorphic.par_height ), job->height );
 244     }
 245     else
 246     {
 247         hb_log( "   + dimensions: %d * %d -> %d * %d, crop %d/%d/%d/%d",
 248                 title->width, title->height, job->width, job->height,
 249                 job->crop[0], job->crop[1], job->crop[2], job->crop[3] );
 250     }
 251
 252     if ( job->grayscale )
 253         hb_log( "   + grayscale mode" );
 254
 255     if( hb_list_count( job->filters ) )
 256     {
 257         hb_log("   + %s", hb_list_count( job->filters) > 1 ? "filters" : "filter" );
 258         for( i = 0; i < hb_list_count( job->filters ); i++ )
 259         {
 260             hb_filter_object_t * filter = hb_list_item( job->filters, i );
 261             if (filter->settings)
 262                 hb_log("     + %s (%s)", filter->name, filter->settings);
 263             else
 264                 hb_log("     + %s (default settings)", filter->name);
 265         }
 266     }
 267
 268     if( !job->indepth_scan )
 269     {
 270         /* Video encoder */
 271         switch( job->vcodec )
 272         {
 273             case HB_VCODEC_FFMPEG:
 274                 hb_log( "   + encoder: FFmpeg" );
 275                 break;
 276
 277             case HB_VCODEC_X264:
 278                 hb_log( "   + encoder: x264" );
 279                 if( job->x264opts != NULL && *job->x264opts != '\0' )
 280                     hb_log( "     + options: %s", job->x264opts);
 281                 break;
 282
 283             case HB_VCODEC_THEORA:
 284                 hb_log( "   + encoder: Theora" );
 285                 break;
 286         }
 287
 288         if( job->vquality >= 0.0 && job->vquality <= 1.0 )
 289         {
 290             hb_log( "     + quality: %.2f", job->vquality );
 291         }
 292         else if( job->vquality > 1 )
 293         {
 294             hb_log( "     + quality: %.2f %s", job->vquality, job->vcodec == HB_VCODEC_X264 ? "(RF)" : "(QP)" );
 295         }
 296         else
 297         {
 298             hb_log( "     + bitrate: %d kbps, pass: %d", job->vbitrate, job->pass );
 299         }
 300     }
 301
 302     for( i=0; i < hb_list_count( title->list_subtitle ); i++ )
 303     {
 304         subtitle =  hb_list_item( title->list_subtitle, i );
 305
 306         if( subtitle )
 307         {
 308             hb_log( " * subtitle track %i, %s (id %x) %s [%s] -> %s ", subtitle->track, subtitle->lang, subtitle->id,
 309                     subtitle->format == PICTURESUB ? "Picture" : "Text",
 310                     subtitle->source == VOBSUB ? "VOBSUB" :
 311                     subtitle->source == UTF8SUB ? "UTF-8" :
 312                     subtitle->source == TX3GSUB ? "TX3G" :
 313                     ((subtitle->source == CC608SUB ||
 314                       subtitle->source == CC708SUB) ? "CC" : "SRT"),
 315                     subtitle->config.dest == RENDERSUB ? "Render/Burn in" : "Pass-Through");
 316         }
 317     }
 318
 319     if( !job->indepth_scan )
 320     {
 321         for( i = 0; i < hb_list_count( title->list_audio ); i++ )
 322         {
 323             audio = hb_list_item( title->list_audio, i );
 324
 325             hb_log( " * audio track %d", audio->config.out.track );
 326
 327             if( audio->config.out.name )
 328                 hb_log( "   + name: %s", audio->config.out.name );
 329
 330             hb_log( "   + decoder: %s (track %d, id %x)", audio->config.lang.description, audio->config.in.track + 1, audio->id );
 331
 332             if( ( audio->config.in.codec == HB_ACODEC_AC3 ) || ( audio->config.in.codec == HB_ACODEC_DCA) )
 333             {
 334                 hb_log( "     + bitrate: %d kbps, samplerate: %d Hz", audio->config.in.bitrate / 1000, audio->config.in.samplerate );
 335             }
 336
 337             if( (audio->config.out.codec != HB_ACODEC_AC3) && (audio->config.out.codec != HB_ACODEC_DCA) )
 338             {
 339                 for (j = 0; j < hb_audio_mixdowns_count; j++)
 340                 {
 341                     if (hb_audio_mixdowns[j].amixdown == audio->config.out.mixdown) {
 342                         hb_log( "   + mixdown: %s", hb_audio_mixdowns[j].human_readable_name );
 343                         break;
 344                     }
 345                 }
 346             }
 347
 348             if ( audio->config.out.dynamic_range_compression && (audio->config.out.codec != HB_ACODEC_AC3) && (audio->config.out.codec != HB_ACODEC_DCA))
 349             {
 350                 hb_log("   + dynamic range compression: %f", audio->config.out.dynamic_range_compression);
 351             }
 352
 353             if( (audio->config.out.codec == HB_ACODEC_AC3) || (audio->config.out.codec == HB_ACODEC_DCA) )
 354             {
 355                 hb_log( "   + %s passthrough", (audio->config.out.codec == HB_ACODEC_AC3) ?
 356                     "AC3" : "DCA" );
 357             }
 358             else
 359             {
 360                 hb_log( "   + encoder: %s", ( audio->config.out.codec == HB_ACODEC_FAAC ) ?
 361                     "faac" : ( ( audio->config.out.codec == HB_ACODEC_LAME ) ?
 362                     "lame" : ( ( audio->config.out.codec == HB_ACODEC_CA_AAC ) ?
 363                               "ca_aac" : "vorbis"  ) ) );
 364                 hb_log( "     + bitrate: %d kbps, samplerate: %d Hz", audio->config.out.bitrate, audio->config.out.samplerate );
 365             }
 366         }
 367     }
 368 }
 369
 370 /* Corrects framerates when actual duration and frame count numbers are known. */
 371 void correct_framerate( hb_job_t * job )
 372 {
 373     int real_frames;
 374
 375     hb_interjob_t * interjob = hb_interjob_get( job->h );
 376
 377     if( ( job->sequence_id & 0xFFFFFF ) != ( interjob->last_job & 0xFFFFFF) )
 378         return; // Interjob information is for a different encode.
 379
 380     /* Cache the original framerate before altering it. */
 381     interjob->vrate = job->vrate;
 382     interjob->vrate_base = job->vrate_base;
 383
 384     real_frames = interjob->frame_count - interjob->render_dropped;
 385
 386     job->vrate = job->vrate_base * ( (double)real_frames * 90000 / interjob->total_time );
 387 }
 388
 389 /**
 390  * Job initialization rountine.
 391  * Initializes fifos.
 392  * Creates work objects for synchronizer, video decoder, video renderer, video decoder, audio decoder, audio encoder, reader, muxer.
 393  * Launches thread for each work object with work_loop.
 394  * Loops while monitoring status of work threads and fifos.
 395  * Exits loop when conversion is done and fifos are empty.
 396  * Closes threads and frees fifos.
 397  * @param job Handle work hb_job_t.
 398  * @param cpu_count number of CPUs found in system.
 399  */
 400 static void do_job( hb_job_t * job, int cpu_count )
 401 {
 402     hb_title_t    * title;
 403     int             i, j;
 404     hb_work_object_t * w;
 405     hb_work_object_t * sync;
 406     hb_work_object_t * muxer;
 407     hb_interjob_t * interjob;
 408
 409     hb_audio_t   * audio;
 410     hb_subtitle_t * subtitle;
 411     unsigned int subtitle_highest = 0;
 412     unsigned int subtitle_highest_id = 0;
 413     unsigned int subtitle_lowest = -1;
 414     unsigned int subtitle_lowest_id = 0;
 415     unsigned int subtitle_forced_id = 0;
 416     unsigned int subtitle_hit = 0;
 417
 418     title = job->title;
 419     interjob = hb_interjob_get( job->h );
 420
 421     if( job->pass == 2 && !job->cfr )
 422     {
 423         correct_framerate( job );
 424     }
 425
 426     job->list_work = hb_list_init();
 427
 428     hb_log( "starting job" );
 429
 430     if( job->anamorphic.mode )
 431     {
 432         hb_set_anamorphic_size(job, &job->width, &job->height, &job->anamorphic.par_width, &job->anamorphic.par_height);
 433
 434         if( job->vcodec == HB_VCODEC_FFMPEG )
 435         {
 436             /* Just to make working with ffmpeg even more fun,
 437                lavc's MPEG-4 encoder can't handle PAR values >= 255,
 438                even though AVRational does. Adjusting downwards
 439                distorts the display aspect slightly, but such is life. */
 440             while ((job->anamorphic.par_width & ~0xFF) ||
 441                    (job->anamorphic.par_height & ~0xFF))
 442             {
 443                 job->anamorphic.par_width >>= 1;
 444                 job->anamorphic.par_height >>= 1;
 445             }
 446         }
 447     }
 448
 449     /* Keep width and height within these boundaries,
 450        but ignore for anamorphic. For "loose" anamorphic encodes,
 451        this stuff is covered in the pixel_ratio section above.    */
 452     if ( job->maxHeight && ( job->height > job->maxHeight ) && ( !job->anamorphic.mode ) )
 453     {
 454         job->height = job->maxHeight;
 455         hb_fix_aspect( job, HB_KEEP_HEIGHT );
 456         hb_log( "Height out of bounds, scaling down to %i", job->maxHeight );
 457         hb_log( "New dimensions %i * %i", job->width, job->height );
 458     }
 459     if ( job->maxWidth && ( job->width > job->maxWidth ) && ( !job->anamorphic.mode ) )
 460     {
 461         job->width = job->maxWidth;
 462         hb_fix_aspect( job, HB_KEEP_WIDTH );
 463         hb_log( "Width out of bounds, scaling down to %i", job->maxWidth );
 464         hb_log( "New dimensions %i * %i", job->width, job->height );
 465     }
 466
 467     if( job->mux & HB_MUX_AVI )
 468     {
 469         // The concept of variable frame rate video was a bit too advanced
 470         // for Microsoft so AVI doesn't support it. Since almost all dvd
 471         // video is VFR we have to convert it to constant frame rate to
 472         // put it in an AVI container. So duplicate, drop and
 473         // otherwise trash video frames to appease the gods of Redmond.
 474         job->cfr = 1;
 475     }
 476
 477     if ( job->cfr == 0 )
 478     {
 479         /* Ensure we're using "Same as source" FPS */
 480         job->vrate_base = title->rate_base;
 481     }
 482
 483     job->fifo_mpeg2  = hb_fifo_init( FIFO_LARGE, FIFO_LARGE_WAKE );
 484     job->fifo_raw    = hb_fifo_init( FIFO_SMALL, FIFO_SMALL_WAKE );
 485     job->fifo_sync   = hb_fifo_init( FIFO_SMALL, FIFO_SMALL_WAKE );
 486     job->fifo_render = hb_fifo_init( FIFO_SMALL, FIFO_SMALL_WAKE );
 487     job->fifo_mpeg4  = hb_fifo_init( FIFO_LARGE, FIFO_LARGE_WAKE );
 488
 489     /*
 490      * Audio fifos must be initialized before sync
 491      */
 492     if( !job->indepth_scan )
 493     {
 494     // if we are doing passthru, and the input codec is not the same as the output
 495     // codec, then remove this audio from the job. If we're not doing passthru and
 496     // the input codec is the 'internal' ffmpeg codec, make sure that only one
 497     // audio references that audio stream since the codec context is specific to
 498     // the audio id & multiple copies of the same stream will garble the audio
 499     // or cause aborts.
 500     uint8_t aud_id_uses[MAX_STREAMS];
 501     memset( aud_id_uses, 0, sizeof(aud_id_uses) );
 502     for( i = 0; i < hb_list_count( title->list_audio ); )
 503     {
 504         audio = hb_list_item( title->list_audio, i );
 505         if( ( ( audio->config.out.codec == HB_ACODEC_AC3 ) && ( audio->config.in.codec != HB_ACODEC_AC3 ) ) ||
 506             ( ( audio->config.out.codec == HB_ACODEC_DCA ) && ( audio->config.in.codec != HB_ACODEC_DCA ) ) )
 507         {
 508             hb_log( "Passthru requested and input codec is not the same as output codec for track %d",
 509                     audio->config.out.track );
 510             hb_list_rem( title->list_audio, audio );
 511             free( audio );
 512             continue;
 513         }
 514         if ( audio->config.in.codec == HB_ACODEC_FFMPEG )
 515         {
 516             if ( aud_id_uses[audio->id] )
 517             {
 518                 hb_log( "Multiple decodes of audio id %d, removing track %d",
 519                         audio->id, audio->config.out.track );
 520                 hb_list_rem( title->list_audio, audio );
 521                 free( audio );
 522                 continue;
 523             }
 524             ++aud_id_uses[audio->id];
 525         }
 526         /* Adjust output track number, in case we removed one.
 527          * Output tracks sadly still need to be in sequential order.
 528          */
 529         audio->config.out.track = i++;
 530     }
 531
 532     int requested_mixdown = 0;
 533     int requested_mixdown_index = 0;
 534
 535     for( i = 0; i < hb_list_count( title->list_audio ); i++ )
 536     {
 537         audio = hb_list_item( title->list_audio, i );
 538
 539         if( audio->config.out.codec != audio->config.in.codec )
 540         {
 541             /* sense-check the current mixdown options */
 542
 543             /* log the requested mixdown */
 544             for (j = 0; j < hb_audio_mixdowns_count; j++) {
 545                 if (hb_audio_mixdowns[j].amixdown == audio->config.out.mixdown) {
 546                     requested_mixdown = audio->config.out.mixdown;
 547                     requested_mixdown_index = j;
 548                 }
 549             }
 550
 551             /* sense-check the requested mixdown */
 552
 553             if( audio->config.out.mixdown == 0 &&
 554                 audio->config.out.codec != HB_ACODEC_AC3 &&
 555                 audio->config.out.codec != HB_ACODEC_DCA )
 556             {
 557                 /*
 558                  * Mixdown wasn't specified and this is not pass-through,
 559                  * set a default mixdown of stereo.
 560                  */
 561                 audio->config.out.mixdown = HB_AMIXDOWN_STEREO;
 562             }
 563
 564             // Here we try to sanitize the audio input to output mapping.
 565             // Constraints are:
 566             //   1. only the AC3 & DCA decoder libraries currently support mixdown
 567             //   2. the lame encoder library only supports stereo.
 568             // So if the encoder is lame we need the output to be stereo (or multichannel
 569             // matrixed into stereo like dpl). If the decoder is not AC3 or DCA the
 570             // encoder has to handle the input format since we can't do a mixdown.
 571             switch (audio->config.in.channel_layout & HB_INPUT_CH_LAYOUT_DISCRETE_NO_LFE_MASK)
 572             {
 573                 // stereo input or something not handled below
 574                 default:
 575                 case HB_INPUT_CH_LAYOUT_STEREO:
 576                     // mono gets mixed up to stereo & more than stereo gets mixed down
 577                     if ( audio->config.out.mixdown > HB_AMIXDOWN_STEREO )
 578                     {
 579                         audio->config.out.mixdown = HB_AMIXDOWN_STEREO;
 580                     }
 581                     break;
 582
 583                 // mono input
 584                 case HB_INPUT_CH_LAYOUT_MONO:
 585                     // everything else passes through
 586                     audio->config.out.mixdown = HB_AMIXDOWN_MONO;
 587                     break;
 588
 589                 // dolby (DPL1 aka Dolby Surround = 4.0 matrix-encoded) input
 590                 // the A52 flags don't allow for a way to distinguish between DPL1 and
 591                 // DPL2 on a DVD so we always assume a DPL1 source for A52_DOLBY.
 592                 case HB_INPUT_CH_LAYOUT_DOLBY:
 593                     if ( audio->config.out.mixdown > HB_AMIXDOWN_DOLBY )
 594                     {
 595                         audio->config.out.mixdown = HB_AMIXDOWN_DOLBY;
 596                     }
 597                     break;
 598
 599                 // 4 channel discrete
 600                 case HB_INPUT_CH_LAYOUT_2F2R:
 601                 case HB_INPUT_CH_LAYOUT_3F1R:
 602                     if ( audio->config.out.mixdown > HB_AMIXDOWN_DOLBY )
 603                     {
 604                         audio->config.out.mixdown = HB_AMIXDOWN_DOLBY;
 605                     }
 606                     break;
 607
 608                 // 5 or 6 channel discrete
 609                 case HB_INPUT_CH_LAYOUT_3F2R:
 610                     if ( ! ( audio->config.in.channel_layout &
 611                                     HB_INPUT_CH_LAYOUT_HAS_LFE ) )
 612                     {
 613                         // we don't do 5 channel discrete so mixdown to DPLII
 614                         audio->config.out.mixdown = HB_AMIXDOWN_DOLBYPLII;
 615                     }
 616                     break;
 617             }
 618
 619             /* log the output mixdown */
 620             for (j = 0; j < hb_audio_mixdowns_count; j++) {
 621                 if (hb_audio_mixdowns[j].amixdown == audio->config.out.mixdown) {
 622                     if ( audio->config.out.mixdown != requested_mixdown )
 623                     {
 624                         hb_log("work: sanitizing track %i mixdown %s to %s", i, hb_audio_mixdowns[requested_mixdown_index].human_readable_name, hb_audio_mixdowns[j].human_readable_name);
 625                     }
 626                     break;
 627                 }
 628             }
 629         }
 630
 631         if (audio->config.out.codec == HB_ACODEC_VORBIS)
 632             audio->priv.config.vorbis.language = audio->config.lang.simple;
 633
 634         /* set up the audio work structures */
 635         audio->priv.fifo_in   = hb_fifo_init( FIFO_LARGE, FIFO_LARGE_WAKE );
 636         audio->priv.fifo_raw  = hb_fifo_init( FIFO_SMALL, FIFO_SMALL_WAKE );
 637         audio->priv.fifo_sync = hb_fifo_init( FIFO_SMALL, FIFO_SMALL_WAKE );
 638         audio->priv.fifo_out  = hb_fifo_init( FIFO_LARGE, FIFO_LARGE_WAKE );
 639     }
 640
 641     }
 642     /* Synchronization */
 643     sync = hb_sync_init( job );
 644
 645     /* Video decoder */
 646     int vcodec = title->video_codec? title->video_codec : WORK_DECMPEG2;
 647     hb_list_add( job->list_work, ( w = hb_get_work( vcodec ) ) );
 648     w->codec_param = title->video_codec_param;
 649     w->fifo_in  = job->fifo_mpeg2;
 650     w->fifo_out = job->fifo_raw;
 651
 652     /* Video renderer */
 653     hb_list_add( job->list_work, ( w = hb_get_work( WORK_RENDER ) ) );
 654     w->fifo_in  = job->fifo_sync;
 655     if( !job->indepth_scan )
 656         w->fifo_out = job->fifo_render;
 657     else
 658         w->fifo_out = NULL;
 659
 660     if( !job->indepth_scan )
 661     {
 662
 663         /* Video encoder */
 664         switch( job->vcodec )
 665         {
 666         case HB_VCODEC_FFMPEG:
 667             w = hb_get_work( WORK_ENCAVCODEC );
 668             break;
 669         case HB_VCODEC_X264:
 670             w = hb_get_work( WORK_ENCX264 );
 671             break;
 672         case HB_VCODEC_THEORA:
 673             w = hb_get_work( WORK_ENCTHEORA );
 674             break;
 675         }
 676         w->fifo_in  = job->fifo_render;
 677         w->fifo_out = job->fifo_mpeg4;
 678         w->config   = &job->config;
 679
 680         hb_list_add( job->list_work, w );
 681     }
 682
 683     /*
 684      * Look for the scanned subtitle in the existing subtitle list
 685      */
 686     if ( !job->indepth_scan && interjob->select_subtitle &&
 687          ( job->pass == 0 || job->pass == 2 ) )
 688     {
 689         /*
 690          * Disable forced subtitles if we didn't find any in the scan
 691          * so that we display normal subtitles instead.
 692          *
 693          * select_subtitle implies that we did a scan.
 694          */
 695         if( interjob->select_subtitle->config.force &&
 696             interjob->select_subtitle->forced_hits == 0 )
 697         {
 698             interjob->select_subtitle->config.force = 0;
 699         }
 700         for( i=0; i < hb_list_count(title->list_subtitle); i++ )
 701         {
 702             subtitle =  hb_list_item( title->list_subtitle, i );
 703
 704             if( subtitle )
 705             {
 706                 /*
 707                 * Disable forced subtitles if we didn't find any in the scan
 708                 * so that we display normal subtitles instead.
 709                 *
 710                 * select_subtitle implies that we did a scan.
 711                 */
 712                 if( interjob->select_subtitle->id == subtitle->id )
 713                 {
 714                     *subtitle = *(interjob->select_subtitle);
 715                     free( interjob->select_subtitle );
 716                     interjob->select_subtitle = NULL;
 717                     break;
 718                 }
 719             }
 720         }
 721
 722         if( interjob->select_subtitle )
 723         {
 724             /*
 725              * Its not in the existing list
 726              *
 727              * Must be second pass of a two pass with subtitle scan enabled, so
 728              * add the subtitle that we found on the first pass for use in this
 729              * pass.
 730              */
 731             hb_list_add( title->list_subtitle, interjob->select_subtitle );
 732             interjob->select_subtitle = NULL;
 733         }
 734     }
 735
 736
 737     for( i=0; i < hb_list_count(title->list_subtitle); i++ )
 738     {
 739         subtitle =  hb_list_item( title->list_subtitle, i );
 740
 741         if( subtitle )
 742         {
 743             subtitle->fifo_in   = hb_fifo_init( FIFO_SMALL, FIFO_SMALL_WAKE );
 744             subtitle->fifo_raw  = hb_fifo_init( FIFO_SMALL, FIFO_SMALL_WAKE );
 745             subtitle->fifo_sync = hb_fifo_init( FIFO_SMALL, FIFO_SMALL_WAKE );
 746             subtitle->fifo_out  = hb_fifo_init( FIFO_SMALL, FIFO_SMALL_WAKE );
 747
 748             if( (!job->indepth_scan || job->select_subtitle_config.force) &&
 749                 subtitle->source == VOBSUB ) {
 750                 /*
 751                  * Don't add threads for subtitles when we are scanning, unless
 752                  * looking for forced subtitles.
 753                  */
 754                 w = hb_get_work( WORK_DECVOBSUB );
 755                 w->fifo_in  = subtitle->fifo_in;
 756                 w->fifo_out = subtitle->fifo_raw;
 757                 w->subtitle = subtitle;
 758                 hb_list_add( job->list_work, w );
 759             }
 760
 761             if( !job->indepth_scan && subtitle->source == CC608SUB )
 762             {
 763                 w = hb_get_work( WORK_DECCC608 );
 764                 w->fifo_in  = subtitle->fifo_in;
 765                 w->fifo_out = subtitle->fifo_raw;
 766                 hb_list_add( job->list_work, w );
 767             }
 768
 769             if( !job->indepth_scan && subtitle->source == SRTSUB )
 770             {
 771                 w = hb_get_work( WORK_DECSRTSUB );
 772                 w->fifo_in  = subtitle->fifo_in;
 773                 w->fifo_out = subtitle->fifo_raw;
 774                 w->subtitle = subtitle;
 775                 hb_list_add( job->list_work, w );
 776             }
 777
 778             if( !job->indepth_scan && subtitle->source == UTF8SUB )
 779             {
 780                 w = hb_get_work( WORK_DECUTF8SUB );
 781                 w->fifo_in  = subtitle->fifo_in;
 782                 w->fifo_out = subtitle->fifo_raw;
 783                 hb_list_add( job->list_work, w );
 784             }
 785
 786             if( !job->indepth_scan && subtitle->source == TX3GSUB )
 787             {
 788                 // TODO(davidfstr): For MP4 containers, an alternate work-object
 789                 //                  should be used that just passes the packets through,
 790                 //                  instead of downconverting to UTF-8 subtitles.
 791                 w = hb_get_work( WORK_DECTX3GSUB );
 792                 w->fifo_in  = subtitle->fifo_in;
 793                 w->fifo_out = subtitle->fifo_raw;
 794                 hb_list_add( job->list_work, w );
 795             }
 796
 797             if( !job->indepth_scan &&
 798                 subtitle->format == PICTURESUB
 799                 && subtitle->config.dest == PASSTHRUSUB )
 800             {
 801                 /*
 802                  * Passing through a subtitle picture, this will have to
 803                  * be rle encoded before muxing.
 804                  */
 805                 w = hb_get_work( WORK_ENCVOBSUB );
 806                 w->fifo_in  = subtitle->fifo_sync;
 807                 w->fifo_out = subtitle->fifo_out;
 808                 w->subtitle = subtitle;
 809                 hb_list_add( job->list_work, w );
 810             }
 811         }
 812     }
 813
 814     if( !job->indepth_scan )
 815     {
 816         for( i = 0; i < hb_list_count( title->list_audio ); i++ )
 817         {
 818             audio = hb_list_item( title->list_audio, i );
 819
 820             /*
 821             * Audio Decoder Thread
 822             */
 823             if ( ( w = hb_codec_decoder( audio->config.in.codec ) ) == NULL )
 824             {
 825                 hb_error("Invalid input codec: %d", audio->config.in.codec);
 826                 *job->die = 1;
 827                 goto cleanup;
 828             }
 829             w->fifo_in  = audio->priv.fifo_in;
 830             w->fifo_out = audio->priv.fifo_raw;
 831             w->config   = &audio->priv.config;
 832             w->audio    = audio;
 833             w->codec_param = audio->config.in.codec_param;
 834
 835             hb_list_add( job->list_work, w );
 836
 837             /*
 838             * Audio Encoder Thread
 839             */
 840             if( audio->config.out.codec != HB_ACODEC_AC3 &&
 841                 audio->config.out.codec != HB_ACODEC_DCA )
 842             {
 843                 /*
 844                 * Add the encoder thread if not doing AC-3 pass through
 845                 */
 846                 if ( ( w = hb_codec_encoder( audio->config.out.codec ) ) == NULL )
 847                 {
 848                     hb_error("Invalid audio codec: %#x", audio->config.out.codec);
 849                     w = NULL;
 850                     *job->die = 1;
 851                     goto cleanup;
 852                 }
 853                 w->fifo_in  = audio->priv.fifo_sync;
 854                 w->fifo_out = audio->priv.fifo_out;
 855                 w->config   = &audio->priv.config;
 856                 w->audio    = audio;
 857
 858                 hb_list_add( job->list_work, w );
 859             }
 860         }
 861     }
 862
 863     if( job->chapter_markers && job->chapter_start == job->chapter_end )
 864     {
 865         job->chapter_markers = 0;
 866         hb_log("work: only 1 chapter, disabling chapter markers");
 867     }
 868
 869     /* Display settings */
 870     hb_display_job_info( job );
 871
 872     /* Init read & write threads */
 873     job->reader = hb_reader_init( job );
 874
 875
 876     job->done = 0;
 877
 878     /* Launch processing threads */
 879     for( i = 0; i < hb_list_count( job->list_work ); i++ )
 880     {
 881         w = hb_list_item( job->list_work, i );
 882         w->done = &job->done;
 883         w->thread_sleep_interval = 10;
 884         if( w->init( w, job ) )
 885         {
 886             hb_error( "Failure to initialise thread '%s'", w->name );
 887             *job->die = 1;
 888             goto cleanup;
 889         }
 890         w->thread = hb_thread_init( w->name, work_loop, w,
 891                                     HB_LOW_PRIORITY );
 892     }
 893
 894     if ( job->indepth_scan )
 895     {
 896         muxer = NULL;
 897         w = sync;
 898         sync->done = &job->done;
 899     }
 900     else
 901     {
 902         sync->done = &job->done;
 903         sync->thread_sleep_interval = 10;
 904         if( sync->init( w, job ) )
 905         {
 906             hb_error( "Failure to initialise thread '%s'", w->name );
 907             *job->die = 1;
 908             goto cleanup;
 909         }
 910         sync->thread = hb_thread_init( sync->name, work_loop, sync,
 911                                     HB_LOW_PRIORITY );
 912
 913         // The muxer requires track information that's set up by the encoder
 914         // init routines so we have to init the muxer last.
 915         muxer = hb_muxer_init( job );
 916         w = muxer;
 917     }
 918
 919     while ( !*job->die && !*w->done && w->status != HB_WORK_DONE )
 920     {
 921         hb_buffer_t      * buf_in, * buf_out;
 922
 923         buf_in = hb_fifo_get_wait( w->fifo_in );
 924         if ( buf_in == NULL )
 925             continue;
 926         if ( *job->die )
 927         {
 928             if( buf_in )
 929             {
 930                 hb_buffer_close( &buf_in );
 931             }
 932             break;
 933         }
 934
 935         buf_out = NULL;
 936         w->status = w->work( w, &buf_in, &buf_out );
 937
 938         if( buf_in )
 939         {
 940             hb_buffer_close( &buf_in );
 941         }
 942         if ( buf_out && w->fifo_out == NULL )
 943         {
 944             hb_buffer_close( &buf_out );
 945         }
 946         if( buf_out )
 947         {
 948             while ( !*job->die )
 949             {
 950                 if ( hb_fifo_full_wait( w->fifo_out ) )
 951                 {
 952                     hb_fifo_push( w->fifo_out, buf_out );
 953                     break;
 954                 }
 955             }
 956         }
 957     }
 958
 959     hb_handle_t * h = job->h;
 960     hb_state_t state;
 961     hb_get_state( h, &state );
 962
 963     hb_log("work: average encoding speed for job is %f fps", state.param.working.rate_avg);
 964
 965     job->done = 1;
 966     if( muxer != NULL )
 967     {
 968         muxer->close( muxer );
 969         free( muxer );
 970
 971         if( sync->thread != NULL )
 972         {
 973             hb_thread_close( &sync->thread );
 974             sync->close( sync );
 975         }
 976         free( sync );
 977     }
 978
 979 cleanup:
 980     /* Stop the write thread (thread_close will block until the muxer finishes) */
 981     job->done = 1;
 982
 983     /* Close work objects */
 984     while( ( w = hb_list_item( job->list_work, 0 ) ) )
 985     {
 986         hb_list_rem( job->list_work, w );
 987         if( w->thread != NULL )
 988         {
 989             hb_thread_close( &w->thread );
 990             w->close( w );
 991         }
 992         free( w );
 993     }
 994
 995     hb_list_close( &job->list_work );
 996
 997     /* Stop the read thread */
 998     if( job->reader != NULL )
 999         hb_thread_close( &job->reader );
1000
1001     /* Close fifos */
1002     hb_fifo_close( &job->fifo_mpeg2 );
1003     hb_fifo_close( &job->fifo_raw );
1004     hb_fifo_close( &job->fifo_sync );
1005     hb_fifo_close( &job->fifo_render );
1006     hb_fifo_close( &job->fifo_mpeg4 );
1007
1008     for (i=0; i < hb_list_count(title->list_subtitle); i++) {
1009         subtitle =  hb_list_item( title->list_subtitle, i);
1010         if( subtitle )
1011         {
1012             hb_fifo_close( &subtitle->fifo_in );
1013             hb_fifo_close( &subtitle->fifo_raw );
1014             hb_fifo_close( &subtitle->fifo_sync );
1015             hb_fifo_close( &subtitle->fifo_out );
1016         }
1017     }
1018     for( i = 0; i < hb_list_count( title->list_audio ); i++ )
1019     {
1020         audio = hb_list_item( title->list_audio, i );
1021         if( audio->priv.fifo_in != NULL )
1022             hb_fifo_close( &audio->priv.fifo_in );
1023         if( audio->priv.fifo_raw != NULL )
1024             hb_fifo_close( &audio->priv.fifo_raw );
1025         if( audio->priv.fifo_sync != NULL )
1026             hb_fifo_close( &audio->priv.fifo_sync );
1027         if( audio->priv.fifo_out != NULL )
1028             hb_fifo_close( &audio->priv.fifo_out );
1029     }
1030
1031     if( job->indepth_scan )
1032     {
1033         /*
1034          * Before closing the title print out our subtitle stats if we need to
1035          * Find the highest and lowest.
1036          */
1037         for( i=0; i < hb_list_count( title->list_subtitle ); i++ )
1038         {
1039             subtitle =  hb_list_item( title->list_subtitle, i );
1040
1041             hb_log( "Subtitle stream 0x%x '%s': %d hits (%d forced)",
1042                     subtitle->id, subtitle->lang, subtitle->hits,
1043                     subtitle->forced_hits );
1044
1045             if( subtitle->hits == 0 )
1046                 continue;
1047
1048             if( subtitle->hits > subtitle_highest )
1049             {
1050                 subtitle_highest = subtitle->hits;
1051                 subtitle_highest_id = subtitle->id;
1052             }
1053
1054             if( subtitle->hits < subtitle_lowest )
1055             {
1056                 subtitle_lowest = subtitle->hits;
1057                 subtitle_lowest_id = subtitle->id;
1058             }
1059
1060             if( subtitle->forced_hits > 0 )
1061             {
1062                 if( subtitle_forced_id == 0 )
1063                 {
1064                     subtitle_forced_id = subtitle->id;
1065                 }
1066             }
1067         }
1068
1069
1070         if( subtitle_forced_id )
1071         {
1072             /*
1073              * If there are any subtitle streams with forced subtitles
1074              * then select it in preference to the lowest.
1075              */
1076             subtitle_hit = subtitle_forced_id;
1077             hb_log("Found a subtitle candidate id 0x%x (contains forced subs)",
1078                    subtitle_hit);
1079         } else if( subtitle_lowest < subtitle_highest )
1080         {
1081             /*
1082              * OK we have more than one, and the lowest is lower,
1083              * but how much lower to qualify for turning it on by
1084              * default?
1085              *
1086              * Let's say 10% as a default.
1087              */
1088             if( subtitle_lowest < ( subtitle_highest * 0.1 ) )
1089             {
1090                 subtitle_hit = subtitle_lowest_id;
1091                 hb_log( "Found a subtitle candidate id 0x%x",
1092                         subtitle_hit );
1093             } else {
1094                 hb_log( "No candidate subtitle detected during subtitle-scan");
1095             }
1096         }
1097     }
1098
1099     if( job->indepth_scan )
1100     {
1101         for( i=0; i < hb_list_count( title->list_subtitle ); i++ )
1102         {
1103             subtitle =  hb_list_item( title->list_subtitle, i );
1104             if( subtitle->id == subtitle_hit )
1105             {
1106                 subtitle->config = job->select_subtitle_config;
1107                 hb_list_rem( title->list_subtitle, subtitle );
1108                 interjob->select_subtitle = subtitle;
1109                 break;
1110             }
1111         }
1112     }
1113
1114     if( job->filters )
1115     {
1116         for( i = 0; i < hb_list_count( job->filters ); i++ )
1117         {
1118             hb_filter_object_t * filter = hb_list_item( job->filters, i );
1119             hb_filter_close( &filter );
1120         }
1121         hb_list_close( &job->filters );
1122     }
1123
1124     hb_buffer_pool_free();
1125
1126     hb_title_close( &job->title );
1127     free( job );
1128 }
1129
1130 /**
1131  * Performs the work object's specific work function.
1132  * Loops calling work function for associated work object. Sleeps when fifo is full.
1133  * Monitors work done indicator.
1134  * Exits loop when work indiactor is set.
1135  * @param _w Handle to work object.
1136  */
1137 static void work_loop( void * _w )
1138 {
1139     hb_work_object_t * w = _w;
1140     hb_buffer_t      * buf_in, * buf_out;
1141
1142     while( !*w->done && w->status != HB_WORK_DONE )
1143     {
1144         buf_in = hb_fifo_get_wait( w->fifo_in );
1145         if ( buf_in == NULL )
1146             continue;
1147         if ( *w->done )
1148         {
1149             if( buf_in )
1150             {
1151                 hb_buffer_close( &buf_in );
1152             }
1153             break;
1154         }
1155
1156         w->status = w->work( w, &buf_in, &buf_out );
1157
1158         // Propagate any chapter breaks for the worker if and only if the
1159         // output frame has the same time stamp as the input frame (any
1160         // worker that delays frames has to propagate the chapter marks itself
1161         // and workers that move chapter marks to a different time should set
1162         // 'buf_in' to NULL so that this code won't generate spurious duplicates.)
1163         if( buf_in && buf_out && buf_in->new_chap && buf_in->start == buf_out->start)
1164         {
1165             // restore log below to debug chapter mark propagation problems
1166             //hb_log("work %s: Copying Chapter Break @ %"PRId64, w->name, buf_in->start);
1167             buf_out->new_chap = buf_in->new_chap;
1168         }
1169
1170         if( buf_in )
1171         {
1172             hb_buffer_close( &buf_in );
1173         }
1174         if ( buf_out && w->fifo_out == NULL )
1175         {
1176             hb_buffer_close( &buf_out );
1177         }
1178         if( buf_out )
1179         {
1180             while ( !*w->done )
1181             {
1182                 if ( hb_fifo_full_wait( w->fifo_out ) )
1183                 {
1184                     hb_fifo_push( w->fifo_out, buf_out );
1185                     break;
1186                 }
1187             }
1188         }
1189     }
1190     // Consume data in incoming fifo till job complete so that
1191     // residual data does not stall the pipeline
1192     while( !*w->done )
1193     {
1194         buf_in = hb_fifo_get_wait( w->fifo_in );
1195         if ( buf_in != NULL )
1196             hb_buffer_close( &buf_in );
1197     }
1198 }