src/lib/film.cc

   1 /*
   2     Copyright (C) 2012 Carl Hetherington <cth@carlh.net>
   3
   4     This program is free software; you can redistribute it and/or modify
   5     it under the terms of the GNU General Public License as published by
   6     the Free Software Foundation; either version 2 of the License, or
   7     (at your option) any later version.
   8
   9     This program is distributed in the hope that it will be useful,
  10     but WITHOUT ANY WARRANTY; without even the implied warranty of
  11     MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  12     GNU General Public License for more details.
  13
  14     You should have received a copy of the GNU General Public License
  15     along with this program; if not, write to the Free Software
  16     Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
  17
  18 */
  19
  20 #include <stdexcept>
  21 #include <iostream>
  22 #include <algorithm>
  23 #include <fstream>
  24 #include <cstdlib>
  25 #include <sstream>
  26 #include <iomanip>
  27 #include <unistd.h>
  28 #include <boost/filesystem.hpp>
  29 #include <boost/algorithm/string.hpp>
  30 #include <boost/lexical_cast.hpp>
  31 #include <boost/date_time.hpp>
  32 #include "film.h"
  33 #include "format.h"
  34 #include "job.h"
  35 #include "filter.h"
  36 #include "transcoder.h"
  37 #include "util.h"
  38 #include "job_manager.h"
  39 #include "ab_transcode_job.h"
  40 #include "transcode_job.h"
  41 #include "scp_dcp_job.h"
  42 #include "log.h"
  43 #include "options.h"
  44 #include "exceptions.h"
  45 #include "examine_content_job.h"
  46 #include "scaler.h"
  47 #include "decoder_factory.h"
  48 #include "config.h"
  49 #include "version.h"
  50 #include "ui_signaller.h"
  51 #include "video_decoder.h"
  52 #include "audio_decoder.h"
  53 #include "sndfile_decoder.h"
  54 #include "analyse_audio_job.h"
  55 #include "cross.h"
  56
  57 #include "i18n.h"
  58
  59 using std::string;
  60 using std::stringstream;
  61 using std::multimap;
  62 using std::pair;
  63 using std::map;
  64 using std::vector;
  65 using std::ifstream;
  66 using std::ofstream;
  67 using std::setfill;
  68 using std::min;
  69 using std::make_pair;
  70 using std::endl;
  71 using boost::shared_ptr;
  72 using boost::lexical_cast;
  73 using boost::to_upper_copy;
  74 using boost::ends_with;
  75 using boost::starts_with;
  76 using boost::optional;
  77 using libdcp::Size;
  78
  79 int const Film::state_version = 4;
  80
  81 /** Construct a Film object in a given directory, reading any metadata
  82  *  file that exists in that directory.  An exception will be thrown if
  83  *  must_exist is true and the specified directory does not exist.
  84  *
  85  *  @param d Film directory.
  86  *  @param must_exist true to throw an exception if does not exist.
  87  */
  88
  89 Film::Film (string d, bool must_exist)
  90         : _use_dci_name (true)
  91         , _trust_content_header (true)
  92         , _dcp_content_type (Config::instance()->default_dcp_content_type ())
  93         , _format (Config::instance()->default_format ())
  94         , _scaler (Scaler::from_id ("bicubic"))
  95         , _trim_start (0)
  96         , _trim_end (0)
  97         , _trim_type (CPL)
  98         , _dcp_ab (false)
  99         , _use_content_audio (true)
 100         , _audio_gain (0)
 101         , _audio_delay (0)
 102         , _still_duration (10)
 103         , _with_subtitles (false)
 104         , _subtitle_offset (0)
 105         , _subtitle_scale (1)
 106         , _colour_lut (0)
 107         , _j2k_bandwidth (200000000)
 108         , _dci_metadata (Config::instance()->default_dci_metadata ())
 109         , _dcp_frame_rate (0)
 110         , _source_frame_rate (0)
 111         , _dirty (false)
 112 {
 113         set_dci_date_today ();
 114
 115         /* Make state.directory a complete path without ..s (where possible)
 116            (Code swiped from Adam Bowen on stackoverflow)
 117         */
 118
 119         boost::filesystem::path p (boost::filesystem::system_complete (d));
 120         boost::filesystem::path result;
 121         for (boost::filesystem::path::iterator i = p.begin(); i != p.end(); ++i) {
 122                 if (*i == "..") {
 123                         if (boost::filesystem::is_symlink (result) || result.filename() == "..") {
 124                                 result /= *i;
 125                         } else {
 126                                 result = result.parent_path ();
 127                         }
 128                 } else if (*i != ".") {
 129                         result /= *i;
 130                 }
 131         }
 132
 133         set_directory (result.string ());
 134
 135         if (!boost::filesystem::exists (directory())) {
 136                 if (must_exist) {
 137                         throw OpenFileError (directory());
 138                 } else {
 139                         boost::filesystem::create_directory (directory());
 140                 }
 141         }
 142
 143         _sndfile_stream = SndfileStream::create ();
 144
 145         if (must_exist) {
 146                 read_metadata ();
 147         } else {
 148                 write_metadata ();
 149         }
 150
 151         _log.reset (new FileLog (file ("log")));
 152 }
 153
 154 Film::Film (Film const & o)
 155         : boost::enable_shared_from_this<Film> (o)
 156         /* note: the copied film shares the original's log */
 157         , _log               (o._log)
 158         , _directory         (o._directory)
 159         , _name              (o._name)
 160         , _use_dci_name      (o._use_dci_name)
 161         , _content           (o._content)
 162         , _trust_content_header (o._trust_content_header)
 163         , _dcp_content_type  (o._dcp_content_type)
 164         , _format            (o._format)
 165         , _crop              (o._crop)
 166         , _filters           (o._filters)
 167         , _scaler            (o._scaler)
 168         , _trim_start        (o._trim_start)
 169         , _trim_end          (o._trim_end)
 170         , _trim_type         (o._trim_type)
 171         , _dcp_ab            (o._dcp_ab)
 172         , _content_audio_stream (o._content_audio_stream)
 173         , _external_audio    (o._external_audio)
 174         , _use_content_audio (o._use_content_audio)
 175         , _audio_gain        (o._audio_gain)
 176         , _audio_delay       (o._audio_delay)
 177         , _still_duration    (o._still_duration)
 178         , _subtitle_stream   (o._subtitle_stream)
 179         , _with_subtitles    (o._with_subtitles)
 180         , _subtitle_offset   (o._subtitle_offset)
 181         , _subtitle_scale    (o._subtitle_scale)
 182         , _colour_lut        (o._colour_lut)
 183         , _j2k_bandwidth     (o._j2k_bandwidth)
 184         , _dci_metadata      (o._dci_metadata)
 185         , _dci_date          (o._dci_date)
 186         , _dcp_frame_rate    (o._dcp_frame_rate)
 187         , _size              (o._size)
 188         , _length            (o._length)
 189         , _content_digest    (o._content_digest)
 190         , _content_audio_streams (o._content_audio_streams)
 191         , _sndfile_stream    (o._sndfile_stream)
 192         , _subtitle_streams  (o._subtitle_streams)
 193         , _source_frame_rate (o._source_frame_rate)
 194         , _dirty             (o._dirty)
 195 {
 196
 197 }
 198
 199 Film::~Film ()
 200 {
 201
 202 }
 203
 204 string
 205 Film::video_state_identifier () const
 206 {
 207         assert (format ());
 208         LocaleGuard lg;
 209
 210         pair<string, string> f = Filter::ffmpeg_strings (filters());
 211
 212         stringstream s;
 213         s << format()->id()
 214           << "_" << content_digest()
 215           << "_" << crop().left << "_" << crop().right << "_" << crop().top << "_" << crop().bottom
 216           << "_" << _dcp_frame_rate
 217           << "_" << f.first << "_" << f.second
 218           << "_" << scaler()->id()
 219           << "_" << j2k_bandwidth()
 220           << "_" << boost::lexical_cast<int> (colour_lut());
 221
 222         if (trim_type() == ENCODE) {
 223                 s << "_" << trim_start() << "_" << trim_end();
 224         }
 225
 226         if (dcp_ab()) {
 227                 pair<string, string> fa = Filter::ffmpeg_strings (Config::instance()->reference_filters());
 228                 s << "ab_" << Config::instance()->reference_scaler()->id() << "_" << fa.first << "_" << fa.second;
 229         }
 230
 231         return s.str ();
 232 }
 233
 234 /** @return The path to the directory to write video frame info files to */
 235 string
 236 Film::info_dir () const
 237 {
 238         boost::filesystem::path p;
 239         p /= "info";
 240         p /= video_state_identifier ();
 241         return dir (p.string());
 242 }
 243
 244 string
 245 Film::internal_video_mxf_dir () const
 246 {
 247         boost::filesystem::path p;
 248         return dir ("video");
 249 }
 250
 251 string
 252 Film::internal_video_mxf_filename () const
 253 {
 254         return video_state_identifier() + ".mxf";
 255 }
 256
 257 string
 258 Film::dcp_video_mxf_filename () const
 259 {
 260         return filename_safe_name() + "_video.mxf";
 261 }
 262
 263 string
 264 Film::dcp_audio_mxf_filename () const
 265 {
 266         return filename_safe_name() + "_audio.mxf";
 267 }
 268
 269 string
 270 Film::filename_safe_name () const
 271 {
 272         string const n = name ();
 273         string o;
 274         for (size_t i = 0; i < n.length(); ++i) {
 275                 if (isalnum (n[i])) {
 276                         o += n[i];
 277                 } else {
 278                         o += "_";
 279                 }
 280         }
 281
 282         return o;
 283 }
 284
 285 string
 286 Film::audio_analysis_path () const
 287 {
 288         boost::filesystem::path p;
 289         p /= "analysis";
 290         p /= content_digest();
 291         return file (p.string ());
 292 }
 293
 294 /** Add suitable Jobs to the JobManager to create a DCP for this Film */
 295 void
 296 Film::make_dcp ()
 297 {
 298         set_dci_date_today ();
 299
 300         if (dcp_name().find ("/") != string::npos) {
 301                 throw BadSettingError (_("name"), _("cannot contain slashes"));
 302         }
 303
 304         log()->log (String::compose ("DVD-o-matic %1 git %2 using %3", dvdomatic_version, dvdomatic_git_commit, dependency_version_summary()));
 305
 306         {
 307                 char buffer[128];
 308                 gethostname (buffer, sizeof (buffer));
 309                 log()->log (String::compose ("Starting to make DCP on %1", buffer));
 310         }
 311
 312         log()->log (String::compose ("Content is %1; type %2", content_path(), (content_type() == STILL ? _("still") : _("video"))));
 313         if (length()) {
 314                 log()->log (String::compose ("Content length %1", length().get()));
 315         }
 316         log()->log (String::compose ("Content digest %1", content_digest()));
 317         log()->log (String::compose ("Content at %1 fps, DCP at %2 fps", source_frame_rate(), dcp_frame_rate()));
 318         log()->log (String::compose ("%1 threads", Config::instance()->num_local_encoding_threads()));
 319         log()->log (String::compose ("J2K bandwidth %1", j2k_bandwidth()));
 320 #ifdef DVDOMATIC_DEBUG
 321         log()->log ("DVD-o-matic built in debug mode.");
 322 #else
 323         log()->log ("DVD-o-matic built in optimised mode.");
 324 #endif
 325 #ifdef LIBDCP_DEBUG
 326         log()->log ("libdcp built in debug mode.");
 327 #else
 328         log()->log ("libdcp built in optimised mode.");
 329 #endif
 330         pair<string, int> const c = cpu_info ();
 331         log()->log (String::compose ("CPU: %1, %2 processors", c.first, c.second));
 332
 333         if (format() == 0) {
 334                 throw MissingSettingError (_("format"));
 335         }
 336
 337         if (content().empty ()) {
 338                 throw MissingSettingError (_("content"));
 339         }
 340
 341         if (dcp_content_type() == 0) {
 342                 throw MissingSettingError (_("content type"));
 343         }
 344
 345         if (name().empty()) {
 346                 throw MissingSettingError (_("name"));
 347         }
 348
 349         DecodeOptions od;
 350         od.decode_subtitles = with_subtitles ();
 351
 352         shared_ptr<Job> r;
 353
 354         if (dcp_ab()) {
 355                 r = JobManager::instance()->add (shared_ptr<Job> (new ABTranscodeJob (shared_from_this(), od)));
 356         } else {
 357                 r = JobManager::instance()->add (shared_ptr<Job> (new TranscodeJob (shared_from_this(), od)));
 358         }
 359 }
 360
 361 /** Start a job to analyse the audio of our content file */
 362 void
 363 Film::analyse_audio ()
 364 {
 365         if (_analyse_audio_job) {
 366                 return;
 367         }
 368
 369         _analyse_audio_job.reset (new AnalyseAudioJob (shared_from_this()));
 370         _analyse_audio_job->Finished.connect (bind (&Film::analyse_audio_finished, this));
 371         JobManager::instance()->add (_analyse_audio_job);
 372 }
 373
 374 /** Start a job to examine our content file */
 375 void
 376 Film::examine_content ()
 377 {
 378         if (_examine_content_job) {
 379                 return;
 380         }
 381
 382         _examine_content_job.reset (new ExamineContentJob (shared_from_this()));
 383         _examine_content_job->Finished.connect (bind (&Film::examine_content_finished, this));
 384         JobManager::instance()->add (_examine_content_job);
 385 }
 386
 387 void
 388 Film::analyse_audio_finished ()
 389 {
 390         ensure_ui_thread ();
 391
 392         if (_analyse_audio_job->finished_ok ()) {
 393                 AudioAnalysisSucceeded ();
 394         }
 395
 396         _analyse_audio_job.reset ();
 397 }
 398
 399 void
 400 Film::examine_content_finished ()
 401 {
 402         _examine_content_job.reset ();
 403 }
 404
 405 /** Start a job to send our DCP to the configured TMS */
 406 void
 407 Film::send_dcp_to_tms ()
 408 {
 409         shared_ptr<Job> j (new SCPDCPJob (shared_from_this()));
 410         JobManager::instance()->add (j);
 411 }
 412
 413 /** Count the number of frames that have been encoded for this film.
 414  *  @return frame count.
 415  */
 416 int
 417 Film::encoded_frames () const
 418 {
 419         if (format() == 0) {
 420                 return 0;
 421         }
 422
 423         int N = 0;
 424         for (boost::filesystem::directory_iterator i = boost::filesystem::directory_iterator (info_dir ()); i != boost::filesystem::directory_iterator(); ++i) {
 425                 ++N;
 426                 boost::this_thread::interruption_point ();
 427         }
 428
 429         return N;
 430 }
 431
 432 /** Write state to our `metadata' file */
 433 void
 434 Film::write_metadata () const
 435 {
 436         boost::mutex::scoped_lock lm (_state_mutex);
 437         LocaleGuard lg;
 438
 439         boost::filesystem::create_directories (directory());
 440
 441         string const m = file ("metadata");
 442         ofstream f (m.c_str ());
 443         if (!f.good ()) {
 444                 throw CreateFileError (m);
 445         }
 446
 447         f << "version " << state_version << endl;
 448
 449         /* User stuff */
 450         f << "name " << _name << endl;
 451         f << "use_dci_name " << _use_dci_name << endl;
 452         f << "content " << _content << endl;
 453         f << "trust_content_header " << (_trust_content_header ? "1" : "0") << endl;
 454         if (_dcp_content_type) {
 455                 f << "dcp_content_type " << _dcp_content_type->dci_name () << endl;
 456         }
 457         if (_format) {
 458                 f << "format " << _format->as_metadata () << endl;
 459         }
 460         f << "left_crop " << _crop.left << endl;
 461         f << "right_crop " << _crop.right << endl;
 462         f << "top_crop " << _crop.top << endl;
 463         f << "bottom_crop " << _crop.bottom << endl;
 464         for (vector<Filter const *>::const_iterator i = _filters.begin(); i != _filters.end(); ++i) {
 465                 f << "filter " << (*i)->id () << endl;
 466         }
 467         f << "scaler " << _scaler->id () << endl;
 468         f << "trim_start " << _trim_start << endl;
 469         f << "trim_end " << _trim_end << endl;
 470         switch (_trim_type) {
 471         case CPL:
 472                 f << "trim_type cpl\n";
 473                 break;
 474         case ENCODE:
 475                 f << "trim_type encode\n";
 476                 break;
 477         }
 478         f << "dcp_ab " << (_dcp_ab ? "1" : "0") << endl;
 479         if (_content_audio_stream) {
 480                 f << "selected_content_audio_stream " << _content_audio_stream->to_string() << endl;
 481         }
 482         for (vector<string>::const_iterator i = _external_audio.begin(); i != _external_audio.end(); ++i) {
 483                 f << "external_audio " << *i << endl;
 484         }
 485         f << "use_content_audio " << (_use_content_audio ? "1" : "0") << endl;
 486         f << "audio_gain " << _audio_gain << endl;
 487         f << "audio_delay " << _audio_delay << endl;
 488         f << "still_duration " << _still_duration << endl;
 489         if (_subtitle_stream) {
 490                 f << "selected_subtitle_stream " << _subtitle_stream->to_string() << endl;
 491         }
 492         f << "with_subtitles " << _with_subtitles << endl;
 493         f << "subtitle_offset " << _subtitle_offset << endl;
 494         f << "subtitle_scale " << _subtitle_scale << endl;
 495         f << "colour_lut " << _colour_lut << endl;
 496         f << "j2k_bandwidth " << _j2k_bandwidth << endl;
 497         _dci_metadata.write (f);
 498         f << "dci_date " << boost::gregorian::to_iso_string (_dci_date) << endl;
 499         f << "dcp_frame_rate " << _dcp_frame_rate << endl;
 500         f << "width " << _size.width << endl;
 501         f << "height " << _size.height << endl;
 502         f << "length " << _length.get_value_or(0) << endl;
 503         f << "content_digest " << _content_digest << endl;
 504
 505         for (vector<shared_ptr<AudioStream> >::const_iterator i = _content_audio_streams.begin(); i != _content_audio_streams.end(); ++i) {
 506                 f << "content_audio_stream " << (*i)->to_string () << endl;
 507         }
 508
 509         f << "external_audio_stream " << _sndfile_stream->to_string() << endl;
 510
 511         for (vector<shared_ptr<SubtitleStream> >::const_iterator i = _subtitle_streams.begin(); i != _subtitle_streams.end(); ++i) {
 512                 f << "subtitle_stream " << (*i)->to_string () << endl;
 513         }
 514
 515         f << "source_frame_rate " << _source_frame_rate << endl;
 516
 517         _dirty = false;
 518 }
 519
 520 /** Read state from our metadata file */
 521 void
 522 Film::read_metadata ()
 523 {
 524         boost::mutex::scoped_lock lm (_state_mutex);
 525         LocaleGuard lg;
 526
 527         _external_audio.clear ();
 528         _content_audio_streams.clear ();
 529         _subtitle_streams.clear ();
 530
 531         boost::optional<int> version;
 532
 533         /* Backward compatibility things */
 534         boost::optional<int> audio_sample_rate;
 535         boost::optional<int> audio_stream_index;
 536         boost::optional<int> subtitle_stream_index;
 537
 538         ifstream f (file ("metadata").c_str());
 539         if (!f.good()) {
 540                 throw OpenFileError (file ("metadata"));
 541         }
 542
 543         multimap<string, string> kv = read_key_value (f);
 544
 545         /* We need version before anything else */
 546         multimap<string, string>::iterator v = kv.find ("version");
 547         if (v != kv.end ()) {
 548                 version = atoi (v->second.c_str());
 549         }
 550
 551         for (multimap<string, string>::const_iterator i = kv.begin(); i != kv.end(); ++i) {
 552                 string const k = i->first;
 553                 string const v = i->second;
 554
 555                 if (k == "audio_sample_rate") {
 556                         audio_sample_rate = atoi (v.c_str());
 557                 }
 558
 559                 /* User-specified stuff */
 560                 if (k == "name") {
 561                         _name = v;
 562                 } else if (k == "use_dci_name") {
 563                         _use_dci_name = (v == "1");
 564                 } else if (k == "content") {
 565                         _content = v;
 566                 } else if (k == "trust_content_header") {
 567                         _trust_content_header = (v == "1");
 568                 } else if (k == "dcp_content_type") {
 569                         if (version < 3) {
 570                                 _dcp_content_type = DCPContentType::from_pretty_name (v);
 571                         } else {
 572                                 _dcp_content_type = DCPContentType::from_dci_name (v);
 573                         }
 574                 } else if (k == "format") {
 575                         _format = Format::from_metadata (v);
 576                 } else if (k == "left_crop") {
 577                         _crop.left = atoi (v.c_str ());
 578                 } else if (k == "right_crop") {
 579                         _crop.right = atoi (v.c_str ());
 580                 } else if (k == "top_crop") {
 581                         _crop.top = atoi (v.c_str ());
 582                 } else if (k == "bottom_crop") {
 583                         _crop.bottom = atoi (v.c_str ());
 584                 } else if (k == "filter") {
 585                         _filters.push_back (Filter::from_id (v));
 586                 } else if (k == "scaler") {
 587                         _scaler = Scaler::from_id (v);
 588                 } else if ( ((!version || version < 2) && k == "dcp_trim_start") || k == "trim_start") {
 589                         _trim_start = atoi (v.c_str ());
 590                 } else if ( ((!version || version < 2) && k == "dcp_trim_end") || k == "trim_end") {
 591                         _trim_end = atoi (v.c_str ());
 592                 } else if (k == "trim_type") {
 593                         if (v == "cpl") {
 594                                 _trim_type = CPL;
 595                         } else if (v == "encode") {
 596                                 _trim_type = ENCODE;
 597                         }
 598                 } else if (k == "dcp_ab") {
 599                         _dcp_ab = (v == "1");
 600                 } else if (k == "selected_content_audio_stream" || (!version && k == "selected_audio_stream")) {
 601                         if (!version) {
 602                                 audio_stream_index = atoi (v.c_str ());
 603                         } else {
 604                                 _content_audio_stream = audio_stream_factory (v, version);
 605                         }
 606                 } else if (k == "external_audio") {
 607                         _external_audio.push_back (v);
 608                 } else if (k == "use_content_audio") {
 609                         _use_content_audio = (v == "1");
 610                 } else if (k == "audio_gain") {
 611                         _audio_gain = atof (v.c_str ());
 612                 } else if (k == "audio_delay") {
 613                         _audio_delay = atoi (v.c_str ());
 614                 } else if (k == "still_duration") {
 615                         _still_duration = atoi (v.c_str ());
 616                 } else if (k == "selected_subtitle_stream") {
 617                         if (!version) {
 618                                 subtitle_stream_index = atoi (v.c_str ());
 619                         } else {
 620                                 _subtitle_stream = subtitle_stream_factory (v, version);
 621                         }
 622                 } else if (k == "with_subtitles") {
 623                         _with_subtitles = (v == "1");
 624                 } else if (k == "subtitle_offset") {
 625                         _subtitle_offset = atoi (v.c_str ());
 626                 } else if (k == "subtitle_scale") {
 627                         _subtitle_scale = atof (v.c_str ());
 628                 } else if (k == "colour_lut") {
 629                         _colour_lut = atoi (v.c_str ());
 630                 } else if (k == "j2k_bandwidth") {
 631                         _j2k_bandwidth = atoi (v.c_str ());
 632                 } else if (k == "dci_date") {
 633                         _dci_date = boost::gregorian::from_undelimited_string (v);
 634                 } else if (k == "dcp_frame_rate") {
 635                         _dcp_frame_rate = atoi (v.c_str ());
 636                 }
 637
 638                 _dci_metadata.read (k, v);
 639
 640                 /* Cached stuff */
 641                 if (k == "width") {
 642                         _size.width = atoi (v.c_str ());
 643                 } else if (k == "height") {
 644                         _size.height = atoi (v.c_str ());
 645                 } else if (k == "length") {
 646                         int const vv = atoi (v.c_str ());
 647                         if (vv) {
 648                                 _length = vv;
 649                         }
 650                 } else if (k == "content_digest") {
 651                         _content_digest = v;
 652                 } else if (k == "content_audio_stream" || (!version && k == "audio_stream")) {
 653                         _content_audio_streams.push_back (audio_stream_factory (v, version));
 654                 } else if (k == "external_audio_stream") {
 655                         _sndfile_stream = audio_stream_factory (v, version);
 656                 } else if (k == "subtitle_stream") {
 657                         _subtitle_streams.push_back (subtitle_stream_factory (v, version));
 658                 } else if (k == "source_frame_rate") {
 659                         _source_frame_rate = atof (v.c_str ());
 660                 } else if (version < 4 && k == "frames_per_second") {
 661                         _source_frame_rate = atof (v.c_str ());
 662                         /* Fill in what would have been used for DCP frame rate by the older version */
 663                         _dcp_frame_rate = best_dcp_frame_rate (_source_frame_rate);
 664                 }
 665         }
 666
 667         if (!version) {
 668                 if (audio_sample_rate) {
 669                         /* version < 1 didn't specify sample rate in the audio streams, so fill it in here */
 670                         for (vector<shared_ptr<AudioStream> >::iterator i = _content_audio_streams.begin(); i != _content_audio_streams.end(); ++i) {
 671                                 (*i)->set_sample_rate (audio_sample_rate.get());
 672                         }
 673                 }
 674
 675                 /* also the selected stream was specified as an index */
 676                 if (audio_stream_index && audio_stream_index.get() >= 0 && audio_stream_index.get() < (int) _content_audio_streams.size()) {
 677                         _content_audio_stream = _content_audio_streams[audio_stream_index.get()];
 678                 }
 679
 680                 /* similarly the subtitle */
 681                 if (subtitle_stream_index && subtitle_stream_index.get() >= 0 && subtitle_stream_index.get() < (int) _subtitle_streams.size()) {
 682                         _subtitle_stream = _subtitle_streams[subtitle_stream_index.get()];
 683                 }
 684         }
 685
 686         _dirty = false;
 687 }
 688
 689 libdcp::Size
 690 Film::cropped_size (libdcp::Size s) const
 691 {
 692         boost::mutex::scoped_lock lm (_state_mutex);
 693         s.width -= _crop.left + _crop.right;
 694         s.height -= _crop.top + _crop.bottom;
 695         return s;
 696 }
 697
 698 /** Given a directory name, return its full path within the Film's directory.
 699  *  The directory (and its parents) will be created if they do not exist.
 700  */
 701 string
 702 Film::dir (string d) const
 703 {
 704         boost::mutex::scoped_lock lm (_directory_mutex);
 705
 706         boost::filesystem::path p;
 707         p /= _directory;
 708         p /= d;
 709
 710         boost::filesystem::create_directories (p);
 711
 712         return p.string ();
 713 }
 714
 715 /** Given a file or directory name, return its full path within the Film's directory.
 716  *  _directory_mutex must not be locked on entry.
 717  *  Any required parent directories will be created.
 718  */
 719 string
 720 Film::file (string f) const
 721 {
 722         boost::mutex::scoped_lock lm (_directory_mutex);
 723
 724         boost::filesystem::path p;
 725         p /= _directory;
 726         p /= f;
 727
 728         boost::filesystem::create_directories (p.parent_path ());
 729
 730         return p.string ();
 731 }
 732
 733 /** @return full path of the content (actual video) file
 734  *  of the Film.
 735  */
 736 string
 737 Film::content_path () const
 738 {
 739         boost::mutex::scoped_lock lm (_state_mutex);
 740         if (boost::filesystem::path(_content).has_root_directory ()) {
 741                 return _content;
 742         }
 743
 744         return file (_content);
 745 }
 746
 747 ContentType
 748 Film::content_type () const
 749 {
 750         if (boost::filesystem::is_directory (_content)) {
 751                 /* Directory of images, we assume */
 752                 return VIDEO;
 753         }
 754
 755         if (still_image_file (_content)) {
 756                 return STILL;
 757         }
 758
 759         return VIDEO;
 760 }
 761
 762 /** @return The sampling rate that we will resample the audio to */
 763 int
 764 Film::target_audio_sample_rate () const
 765 {
 766         if (!audio_stream()) {
 767                 return 0;
 768         }
 769
 770         /* Resample to a DCI-approved sample rate */
 771         double t = dcp_audio_sample_rate (audio_stream()->sample_rate());
 772
 773         FrameRateConversion frc (source_frame_rate(), dcp_frame_rate());
 774
 775         /* Compensate if the DCP is being run at a different frame rate
 776            to the source; that is, if the video is run such that it will
 777            look different in the DCP compared to the source (slower or faster).
 778            skip/repeat doesn't come into effect here.
 779         */
 780
 781         if (frc.change_speed) {
 782                 t *= source_frame_rate() * frc.factor() / dcp_frame_rate();
 783         }
 784
 785         return rint (t);
 786 }
 787
 788 int
 789 Film::still_duration_in_frames () const
 790 {
 791         return still_duration() * source_frame_rate();
 792 }
 793
 794 /** @return a DCI-compliant name for a DCP of this film */
 795 string
 796 Film::dci_name (bool if_created_now) const
 797 {
 798         stringstream d;
 799
 800         string fixed_name = to_upper_copy (name());
 801         for (size_t i = 0; i < fixed_name.length(); ++i) {
 802                 if (fixed_name[i] == ' ') {
 803                         fixed_name[i] = '-';
 804                 }
 805         }
 806
 807         /* Spec is that the name part should be maximum 14 characters, as I understand it */
 808         if (fixed_name.length() > 14) {
 809                 fixed_name = fixed_name.substr (0, 14);
 810         }
 811
 812         d << fixed_name;
 813
 814         if (dcp_content_type()) {
 815                 d << "_" << dcp_content_type()->dci_name();
 816         }
 817
 818         if (format()) {
 819                 d << "_" << format()->dci_name();
 820         }
 821
 822         DCIMetadata const dm = dci_metadata ();
 823
 824         if (!dm.audio_language.empty ()) {
 825                 d << "_" << dm.audio_language;
 826                 if (!dm.subtitle_language.empty()) {
 827                         d << "-" << dm.subtitle_language;
 828                 } else {
 829                         d << "-XX";
 830                 }
 831         }
 832
 833         if (!dm.territory.empty ()) {
 834                 d << "_" << dm.territory;
 835                 if (!dm.rating.empty ()) {
 836                         d << "-" << dm.rating;
 837                 }
 838         }
 839
 840         switch (audio_channels()) {
 841         case 1:
 842                 d << "_10";
 843                 break;
 844         case 2:
 845                 d << "_20";
 846                 break;
 847         case 6:
 848                 d << "_51";
 849                 break;
 850         case 8:
 851                 d << "_71";
 852                 break;
 853         }
 854
 855         d << "_2K";
 856
 857         if (!dm.studio.empty ()) {
 858                 d << "_" << dm.studio;
 859         }
 860
 861         if (if_created_now) {
 862                 d << "_" << boost::gregorian::to_iso_string (boost::gregorian::day_clock::local_day ());
 863         } else {
 864                 d << "_" << boost::gregorian::to_iso_string (_dci_date);
 865         }
 866
 867         if (!dm.facility.empty ()) {
 868                 d << "_" << dm.facility;
 869         }
 870
 871         if (!dm.package_type.empty ()) {
 872                 d << "_" << dm.package_type;
 873         }
 874
 875         return d.str ();
 876 }
 877
 878 /** @return name to give the DCP */
 879 string
 880 Film::dcp_name (bool if_created_now) const
 881 {
 882         if (use_dci_name()) {
 883                 return dci_name (if_created_now);
 884         }
 885
 886         return name();
 887 }
 888
 889
 890 void
 891 Film::set_directory (string d)
 892 {
 893         boost::mutex::scoped_lock lm (_state_mutex);
 894         _directory = d;
 895         _dirty = true;
 896 }
 897
 898 void
 899 Film::set_name (string n)
 900 {
 901         {
 902                 boost::mutex::scoped_lock lm (_state_mutex);
 903                 _name = n;
 904         }
 905         signal_changed (NAME);
 906 }
 907
 908 void
 909 Film::set_use_dci_name (bool u)
 910 {
 911         {
 912                 boost::mutex::scoped_lock lm (_state_mutex);
 913                 _use_dci_name = u;
 914         }
 915         signal_changed (USE_DCI_NAME);
 916 }
 917
 918 void
 919 Film::set_content (string c)
 920 {
 921         string check = directory ();
 922
 923         boost::filesystem::path slash ("/");
 924         string platform_slash = slash.make_preferred().string ();
 925
 926         if (!ends_with (check, platform_slash)) {
 927                 check += platform_slash;
 928         }
 929
 930         if (boost::filesystem::path(c).has_root_directory () && starts_with (c, check)) {
 931                 c = c.substr (_directory.length() + 1);
 932         }
 933
 934         string old_content;
 935
 936         {
 937                 boost::mutex::scoped_lock lm (_state_mutex);
 938                 if (c == _content) {
 939                         return;
 940                 }
 941
 942                 old_content = _content;
 943                 _content = c;
 944         }
 945
 946         /* Reset streams here in case the new content doesn't have one or the other */
 947         _content_audio_stream = shared_ptr<AudioStream> ();
 948         _subtitle_stream = shared_ptr<SubtitleStream> ();
 949
 950         /* Start off using content audio */
 951         set_use_content_audio (true);
 952
 953         /* Create a temporary decoder so that we can get information
 954            about the content.
 955         */
 956
 957         try {
 958                 Decoders d = decoder_factory (shared_from_this(), DecodeOptions());
 959
 960                 set_size (d.video->native_size ());
 961                 set_source_frame_rate (d.video->frames_per_second ());
 962                 set_dcp_frame_rate (best_dcp_frame_rate (source_frame_rate ()));
 963                 set_subtitle_streams (d.video->subtitle_streams ());
 964                 if (d.audio) {
 965                         set_content_audio_streams (d.audio->audio_streams ());
 966                 }
 967
 968                 {
 969                         boost::mutex::scoped_lock lm (_state_mutex);
 970                         _content = c;
 971                 }
 972
 973                 signal_changed (CONTENT);
 974
 975                 /* Start off with the first audio and subtitle streams */
 976                 if (d.audio && !d.audio->audio_streams().empty()) {
 977                         set_content_audio_stream (d.audio->audio_streams().front());
 978                 }
 979
 980                 if (!d.video->subtitle_streams().empty()) {
 981                         set_subtitle_stream (d.video->subtitle_streams().front());
 982                 }
 983
 984                 examine_content ();
 985
 986         } catch (...) {
 987
 988                 boost::mutex::scoped_lock lm (_state_mutex);
 989                 _content = old_content;
 990                 throw;
 991
 992         }
 993
 994         /* Default format */
 995         set_format (Config::instance()->default_format ());
 996
 997         /* Still image DCPs must use external audio */
 998         if (content_type() == STILL) {
 999                 set_use_content_audio (false);
1000         }
1001
1002 #ifdef DVDOMATIC_WINDOWS
1003         wchar_t dir[512];
1004         GetModuleFileName (GetModuleHandle (0), dir, sizeof (dir));
1005         boost::filesystem::path path_dir (dir);
1006         path_dir = path_dir.parent_path ();
1007         path_dir /= "ffprobe.exe";
1008         string ffprobe = "\"" + path_dir.string () + "\" ";
1009 #else
1010         string ffprobe = "ffprobe ";
1011 #endif
1012         ffprobe += "\"" + c + "\"";
1013         ffprobe += " 2> \"" + file ("ffprobe.log") + "\"";
1014         log()->log (String::compose ("Probing with %1", ffprobe));
1015         system (ffprobe.c_str ());
1016 }
1017
1018 void
1019 Film::set_trust_content_header (bool t)
1020 {
1021         {
1022                 boost::mutex::scoped_lock lm (_state_mutex);
1023                 _trust_content_header = t;
1024         }
1025
1026         signal_changed (TRUST_CONTENT_HEADER);
1027
1028         if (!_trust_content_header && !content().empty()) {
1029                 /* We just said that we don't trust the content's header */
1030                 examine_content ();
1031         }
1032 }
1033
1034 void
1035 Film::set_dcp_content_type (DCPContentType const * t)
1036 {
1037         {
1038                 boost::mutex::scoped_lock lm (_state_mutex);
1039                 _dcp_content_type = t;
1040         }
1041         signal_changed (DCP_CONTENT_TYPE);
1042 }
1043
1044 void
1045 Film::set_format (Format const * f)
1046 {
1047         {
1048                 boost::mutex::scoped_lock lm (_state_mutex);
1049                 _format = f;
1050         }
1051         signal_changed (FORMAT);
1052 }
1053
1054 void
1055 Film::set_crop (Crop c)
1056 {
1057         {
1058                 boost::mutex::scoped_lock lm (_state_mutex);
1059                 _crop = c;
1060         }
1061         signal_changed (CROP);
1062 }
1063
1064 void
1065 Film::set_left_crop (int c)
1066 {
1067         {
1068                 boost::mutex::scoped_lock lm (_state_mutex);
1069
1070                 if (_crop.left == c) {
1071                         return;
1072                 }
1073
1074                 _crop.left = c;
1075         }
1076         signal_changed (CROP);
1077 }
1078
1079 void
1080 Film::set_right_crop (int c)
1081 {
1082         {
1083                 boost::mutex::scoped_lock lm (_state_mutex);
1084                 if (_crop.right == c) {
1085                         return;
1086                 }
1087
1088                 _crop.right = c;
1089         }
1090         signal_changed (CROP);
1091 }
1092
1093 void
1094 Film::set_top_crop (int c)
1095 {
1096         {
1097                 boost::mutex::scoped_lock lm (_state_mutex);
1098                 if (_crop.top == c) {
1099                         return;
1100                 }
1101
1102                 _crop.top = c;
1103         }
1104         signal_changed (CROP);
1105 }
1106
1107 void
1108 Film::set_bottom_crop (int c)
1109 {
1110         {
1111                 boost::mutex::scoped_lock lm (_state_mutex);
1112                 if (_crop.bottom == c) {
1113                         return;
1114                 }
1115
1116                 _crop.bottom = c;
1117         }
1118         signal_changed (CROP);
1119 }
1120
1121 void
1122 Film::set_filters (vector<Filter const *> f)
1123 {
1124         {
1125                 boost::mutex::scoped_lock lm (_state_mutex);
1126                 _filters = f;
1127         }
1128         signal_changed (FILTERS);
1129 }
1130
1131 void
1132 Film::set_scaler (Scaler const * s)
1133 {
1134         {
1135                 boost::mutex::scoped_lock lm (_state_mutex);
1136                 _scaler = s;
1137         }
1138         signal_changed (SCALER);
1139 }
1140
1141 void
1142 Film::set_trim_start (int t)
1143 {
1144         {
1145                 boost::mutex::scoped_lock lm (_state_mutex);
1146                 _trim_start = t;
1147         }
1148         signal_changed (TRIM_START);
1149 }
1150
1151 void
1152 Film::set_trim_end (int t)
1153 {
1154         {
1155                 boost::mutex::scoped_lock lm (_state_mutex);
1156                 _trim_end = t;
1157         }
1158         signal_changed (TRIM_END);
1159 }
1160
1161 void
1162 Film::set_trim_type (TrimType t)
1163 {
1164         {
1165                 boost::mutex::scoped_lock lm (_state_mutex);
1166                 _trim_type = t;
1167         }
1168         signal_changed (TRIM_TYPE);
1169 }
1170
1171 void
1172 Film::set_dcp_ab (bool a)
1173 {
1174         {
1175                 boost::mutex::scoped_lock lm (_state_mutex);
1176                 _dcp_ab = a;
1177         }
1178         signal_changed (DCP_AB);
1179 }
1180
1181 void
1182 Film::set_content_audio_stream (shared_ptr<AudioStream> s)
1183 {
1184         {
1185                 boost::mutex::scoped_lock lm (_state_mutex);
1186                 _content_audio_stream = s;
1187         }
1188         signal_changed (CONTENT_AUDIO_STREAM);
1189 }
1190
1191 void
1192 Film::set_external_audio (vector<string> a)
1193 {
1194         {
1195                 boost::mutex::scoped_lock lm (_state_mutex);
1196                 _external_audio = a;
1197         }
1198
1199         shared_ptr<SndfileDecoder> decoder (new SndfileDecoder (shared_from_this(), DecodeOptions()));
1200         if (decoder->audio_stream()) {
1201                 _sndfile_stream = decoder->audio_stream ();
1202         }
1203
1204         signal_changed (EXTERNAL_AUDIO);
1205 }
1206
1207 void
1208 Film::set_use_content_audio (bool e)
1209 {
1210         {
1211                 boost::mutex::scoped_lock lm (_state_mutex);
1212                 _use_content_audio = e;
1213         }
1214
1215         signal_changed (USE_CONTENT_AUDIO);
1216 }
1217
1218 void
1219 Film::set_audio_gain (float g)
1220 {
1221         {
1222                 boost::mutex::scoped_lock lm (_state_mutex);
1223                 _audio_gain = g;
1224         }
1225         signal_changed (AUDIO_GAIN);
1226 }
1227
1228 void
1229 Film::set_audio_delay (int d)
1230 {
1231         {
1232                 boost::mutex::scoped_lock lm (_state_mutex);
1233                 _audio_delay = d;
1234         }
1235         signal_changed (AUDIO_DELAY);
1236 }
1237
1238 void
1239 Film::set_still_duration (int d)
1240 {
1241         {
1242                 boost::mutex::scoped_lock lm (_state_mutex);
1243                 _still_duration = d;
1244         }
1245         signal_changed (STILL_DURATION);
1246 }
1247
1248 void
1249 Film::set_subtitle_stream (shared_ptr<SubtitleStream> s)
1250 {
1251         {
1252                 boost::mutex::scoped_lock lm (_state_mutex);
1253                 _subtitle_stream = s;
1254         }
1255         signal_changed (SUBTITLE_STREAM);
1256 }
1257
1258 void
1259 Film::set_with_subtitles (bool w)
1260 {
1261         {
1262                 boost::mutex::scoped_lock lm (_state_mutex);
1263                 _with_subtitles = w;
1264         }
1265         signal_changed (WITH_SUBTITLES);
1266 }
1267
1268 void
1269 Film::set_subtitle_offset (int o)
1270 {
1271         {
1272                 boost::mutex::scoped_lock lm (_state_mutex);
1273                 _subtitle_offset = o;
1274         }
1275         signal_changed (SUBTITLE_OFFSET);
1276 }
1277
1278 void
1279 Film::set_subtitle_scale (float s)
1280 {
1281         {
1282                 boost::mutex::scoped_lock lm (_state_mutex);
1283                 _subtitle_scale = s;
1284         }
1285         signal_changed (SUBTITLE_SCALE);
1286 }
1287
1288 void
1289 Film::set_colour_lut (int i)
1290 {
1291         {
1292                 boost::mutex::scoped_lock lm (_state_mutex);
1293                 _colour_lut = i;
1294         }
1295         signal_changed (COLOUR_LUT);
1296 }
1297
1298 void
1299 Film::set_j2k_bandwidth (int b)
1300 {
1301         {
1302                 boost::mutex::scoped_lock lm (_state_mutex);
1303                 _j2k_bandwidth = b;
1304         }
1305         signal_changed (J2K_BANDWIDTH);
1306 }
1307
1308 void
1309 Film::set_dci_metadata (DCIMetadata m)
1310 {
1311         {
1312                 boost::mutex::scoped_lock lm (_state_mutex);
1313                 _dci_metadata = m;
1314         }
1315         signal_changed (DCI_METADATA);
1316 }
1317
1318
1319 void
1320 Film::set_dcp_frame_rate (int f)
1321 {
1322         {
1323                 boost::mutex::scoped_lock lm (_state_mutex);
1324                 _dcp_frame_rate = f;
1325         }
1326         signal_changed (DCP_FRAME_RATE);
1327 }
1328
1329 void
1330 Film::set_size (libdcp::Size s)
1331 {
1332         {
1333                 boost::mutex::scoped_lock lm (_state_mutex);
1334                 _size = s;
1335         }
1336         signal_changed (SIZE);
1337 }
1338
1339 void
1340 Film::set_length (SourceFrame l)
1341 {
1342         {
1343                 boost::mutex::scoped_lock lm (_state_mutex);
1344                 _length = l;
1345         }
1346         signal_changed (LENGTH);
1347 }
1348
1349 void
1350 Film::unset_length ()
1351 {
1352         {
1353                 boost::mutex::scoped_lock lm (_state_mutex);
1354                 _length = boost::none;
1355         }
1356         signal_changed (LENGTH);
1357 }
1358
1359 void
1360 Film::set_content_digest (string d)
1361 {
1362         {
1363                 boost::mutex::scoped_lock lm (_state_mutex);
1364                 _content_digest = d;
1365         }
1366         _dirty = true;
1367 }
1368
1369 void
1370 Film::set_content_audio_streams (vector<shared_ptr<AudioStream> > s)
1371 {
1372         {
1373                 boost::mutex::scoped_lock lm (_state_mutex);
1374                 _content_audio_streams = s;
1375         }
1376         signal_changed (CONTENT_AUDIO_STREAMS);
1377 }
1378
1379 void
1380 Film::set_subtitle_streams (vector<shared_ptr<SubtitleStream> > s)
1381 {
1382         {
1383                 boost::mutex::scoped_lock lm (_state_mutex);
1384                 _subtitle_streams = s;
1385         }
1386         signal_changed (SUBTITLE_STREAMS);
1387 }
1388
1389 void
1390 Film::set_source_frame_rate (float f)
1391 {
1392         {
1393                 boost::mutex::scoped_lock lm (_state_mutex);
1394                 _source_frame_rate = f;
1395         }
1396         signal_changed (SOURCE_FRAME_RATE);
1397 }
1398
1399 void
1400 Film::signal_changed (Property p)
1401 {
1402         {
1403                 boost::mutex::scoped_lock lm (_state_mutex);
1404                 _dirty = true;
1405         }
1406
1407         if (ui_signaller) {
1408                 ui_signaller->emit (boost::bind (boost::ref (Changed), p));
1409         }
1410 }
1411
1412 int
1413 Film::audio_channels () const
1414 {
1415         shared_ptr<AudioStream> s = audio_stream ();
1416         if (!s) {
1417                 return 0;
1418         }
1419
1420         return s->channels ();
1421 }
1422
1423 void
1424 Film::set_dci_date_today ()
1425 {
1426         _dci_date = boost::gregorian::day_clock::local_day ();
1427 }
1428
1429 boost::shared_ptr<AudioStream>
1430 Film::audio_stream () const
1431 {
1432         if (use_content_audio()) {
1433                 return _content_audio_stream;
1434         }
1435
1436         return _sndfile_stream;
1437 }
1438
1439 string
1440 Film::info_path (int f) const
1441 {
1442         boost::filesystem::path p;
1443         p /= info_dir ();
1444
1445         stringstream s;
1446         s.width (8);
1447         s << setfill('0') << f << ".md5";
1448
1449         p /= s.str();
1450
1451         /* info_dir() will already have added any initial bit of the path,
1452            so don't call file() on this.
1453         */
1454         return p.string ();
1455 }
1456
1457 string
1458 Film::j2c_path (int f, bool t) const
1459 {
1460         boost::filesystem::path p;
1461         p /= "j2c";
1462         p /= video_state_identifier ();
1463
1464         stringstream s;
1465         s.width (8);
1466         s << setfill('0') << f << ".j2c";
1467
1468         if (t) {
1469                 s << ".tmp";
1470         }
1471
1472         p /= s.str();
1473         return file (p.string ());
1474 }
1475
1476 /** Make an educated guess as to whether we have a complete DCP
1477  *  or not.
1478  *  @return true if we do.
1479  */
1480
1481 bool
1482 Film::have_dcp () const
1483 {
1484         try {
1485                 libdcp::DCP dcp (dir (dcp_name()));
1486                 dcp.read ();
1487         } catch (...) {
1488                 return false;
1489         }
1490
1491         return true;
1492 }
1493
1494 bool
1495 Film::has_audio () const
1496 {
1497         if (use_content_audio()) {
1498                 return audio_stream();
1499         }
1500
1501         vector<string> const e = external_audio ();
1502         for (vector<string>::const_iterator i = e.begin(); i != e.end(); ++i) {
1503                 if (!i->empty ()) {
1504                         return true;
1505                 }
1506         }
1507
1508         return false;
1509 }
1510