Fix incorrect colourspace conversion of XYZ content
[dcpomatic.git] / src / lib / player_video.cc
1 /*
2     Copyright (C) 2013-2015 Carl Hetherington <cth@carlh.net>
3
4     This program is free software; you can redistribute it and/or modify
5     it under the terms of the GNU General Public License as published by
6     the Free Software Foundation; either version 2 of the License, or
7     (at your option) any later version.
8
9     This program is distributed in the hope that it will be useful,
10     but WITHOUT ANY WARRANTY; without even the implied warranty of
11     MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
12     GNU General Public License for more details.
13
14     You should have received a copy of the GNU General Public License
15     along with this program; if not, write to the Free Software
16     Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
17
18 */
19
20 #include "player_video.h"
21 #include "image.h"
22 #include "image_proxy.h"
23 #include "j2k_image_proxy.h"
24 #include "film.h"
25 #include "raw_convert.h"
26 extern "C" {
27 #include <libavutil/pixfmt.h>
28 }
29 #include <libxml++/libxml++.h>
30 #include <iostream>
31
32 using std::string;
33 using std::cout;
34 using boost::shared_ptr;
35 using boost::dynamic_pointer_cast;
36 using boost::optional;
37
38 PlayerVideo::PlayerVideo (
39         shared_ptr<const ImageProxy> in,
40         DCPTime time,
41         Crop crop,
42         boost::optional<double> fade,
43         dcp::Size inter_size,
44         dcp::Size out_size,
45         Eyes eyes,
46         Part part,
47         optional<ColourConversion> colour_conversion
48         )
49         : _in (in)
50         , _time (time)
51         , _crop (crop)
52         , _fade (fade)
53         , _inter_size (inter_size)
54         , _out_size (out_size)
55         , _eyes (eyes)
56         , _part (part)
57         , _colour_conversion (colour_conversion)
58 {
59
60 }
61
62 PlayerVideo::PlayerVideo (shared_ptr<cxml::Node> node, shared_ptr<Socket> socket)
63 {
64         _time = DCPTime (node->number_child<DCPTime::Type> ("Time"));
65         _crop = Crop (node);
66         _fade = node->optional_number_child<double> ("Fade");
67
68         _inter_size = dcp::Size (node->number_child<int> ("InterWidth"), node->number_child<int> ("InterHeight"));
69         _out_size = dcp::Size (node->number_child<int> ("OutWidth"), node->number_child<int> ("OutHeight"));
70         _eyes = (Eyes) node->number_child<int> ("Eyes");
71         _part = (Part) node->number_child<int> ("Part");
72
73         /* Assume that the ColourConversion uses the current state version */
74         _colour_conversion = ColourConversion::from_xml (node, Film::current_state_version);
75
76         _in = image_proxy_factory (node->node_child ("In"), socket);
77
78         if (node->optional_number_child<int> ("SubtitleX")) {
79
80                 shared_ptr<Image> image (
81                         new Image (AV_PIX_FMT_RGBA, dcp::Size (node->number_child<int> ("SubtitleWidth"), node->number_child<int> ("SubtitleHeight")), true)
82                         );
83
84                 image->read_from_socket (socket);
85
86                 _subtitle = PositionImage (image, Position<int> (node->number_child<int> ("SubtitleX"), node->number_child<int> ("SubtitleY")));
87         }
88 }
89
90 void
91 PlayerVideo::set_subtitle (PositionImage image)
92 {
93         _subtitle = image;
94 }
95
96 shared_ptr<Image>
97 PlayerVideo::image (dcp::NoteHandler note) const
98 {
99         shared_ptr<Image> im = _in->image (optional<dcp::NoteHandler> (note));
100
101         Crop total_crop = _crop;
102         switch (_part) {
103         case PART_LEFT_HALF:
104                 total_crop.right += im->size().width / 2;
105                 break;
106         case PART_RIGHT_HALF:
107                 total_crop.left += im->size().width / 2;
108                 break;
109         case PART_TOP_HALF:
110                 total_crop.bottom += im->size().height / 2;
111                 break;
112         case PART_BOTTOM_HALF:
113                 total_crop.top += im->size().height / 2;
114                 break;
115         default:
116                 break;
117         }
118
119         dcp::YUVToRGB yuv_to_rgb = dcp::YUV_TO_RGB_REC601;
120         if (_colour_conversion) {
121                 yuv_to_rgb = _colour_conversion.get().yuv_to_rgb();
122         }
123
124         /* If the input is XYZ, keep it otherwise convert to RGB */
125         AVPixelFormat const p = _in->pixel_format() == AV_PIX_FMT_XYZ12LE ? AV_PIX_FMT_XYZ12LE : AV_PIX_FMT_RGB48LE;
126
127         shared_ptr<Image> out = im->crop_scale_window (total_crop, _inter_size, _out_size, yuv_to_rgb, p, true);
128
129         if (_subtitle) {
130                 out->alpha_blend (_subtitle->image, _subtitle->position);
131         }
132
133         if (_fade) {
134                 out->fade (_fade.get ());
135         }
136
137         return out;
138 }
139
140 void
141 PlayerVideo::add_metadata (xmlpp::Node* node) const
142 {
143         node->add_child("Time")->add_child_text (raw_convert<string> (_time.get ()));
144         _crop.as_xml (node);
145         if (_fade) {
146                 node->add_child("Fade")->add_child_text (raw_convert<string> (_fade.get ()));
147         }
148         _in->add_metadata (node->add_child ("In"));
149         node->add_child("InterWidth")->add_child_text (raw_convert<string> (_inter_size.width));
150         node->add_child("InterHeight")->add_child_text (raw_convert<string> (_inter_size.height));
151         node->add_child("OutWidth")->add_child_text (raw_convert<string> (_out_size.width));
152         node->add_child("OutHeight")->add_child_text (raw_convert<string> (_out_size.height));
153         node->add_child("Eyes")->add_child_text (raw_convert<string> (_eyes));
154         node->add_child("Part")->add_child_text (raw_convert<string> (_part));
155         if (_colour_conversion) {
156                 _colour_conversion.get().as_xml (node);
157         }
158         if (_subtitle) {
159                 node->add_child ("SubtitleWidth")->add_child_text (raw_convert<string> (_subtitle->image->size().width));
160                 node->add_child ("SubtitleHeight")->add_child_text (raw_convert<string> (_subtitle->image->size().height));
161                 node->add_child ("SubtitleX")->add_child_text (raw_convert<string> (_subtitle->position.x));
162                 node->add_child ("SubtitleY")->add_child_text (raw_convert<string> (_subtitle->position.y));
163         }
164 }
165
166 void
167 PlayerVideo::send_binary (shared_ptr<Socket> socket) const
168 {
169         _in->send_binary (socket);
170         if (_subtitle) {
171                 _subtitle->image->write_to_socket (socket);
172         }
173 }
174
175 bool
176 PlayerVideo::has_j2k () const
177 {
178         /* XXX: maybe other things */
179
180         shared_ptr<const J2KImageProxy> j2k = dynamic_pointer_cast<const J2KImageProxy> (_in);
181         if (!j2k) {
182                 return false;
183         }
184
185         return _crop == Crop () && _inter_size == j2k->size() && !_subtitle && !_fade && !_colour_conversion;
186 }
187
188 Data
189 PlayerVideo::j2k () const
190 {
191         shared_ptr<const J2KImageProxy> j2k = dynamic_pointer_cast<const J2KImageProxy> (_in);
192         DCPOMATIC_ASSERT (j2k);
193         return j2k->j2k ();
194 }
195
196 Position<int>
197 PlayerVideo::inter_position () const
198 {
199         return Position<int> ((_out_size.width - _inter_size.width) / 2, (_out_size.height - _inter_size.height) / 2);
200 }
201
202 /** @return true if this PlayerVideo is definitely the same as another
203  * (apart from _time), false if it is probably not
204  */
205 bool
206 PlayerVideo::same (shared_ptr<const PlayerVideo> other) const
207 {
208         if (_crop != other->_crop ||
209             _fade.get_value_or(0) != other->_fade.get_value_or(0) ||
210             _inter_size != other->_inter_size ||
211             _out_size != other->_out_size ||
212             _eyes != other->_eyes ||
213             _part != other->_part ||
214             _colour_conversion != other->_colour_conversion) {
215                 return false;
216         }
217
218         if ((!_subtitle && other->_subtitle) || (_subtitle && !other->_subtitle)) {
219                 /* One has a subtitle and the other doesn't */
220                 return false;
221         }
222
223         if (_subtitle && other->_subtitle && !_subtitle->same (other->_subtitle.get ())) {
224                 /* They both have subtitles but they are different */
225                 return false;
226         }
227
228         /* Now neither has subtitles */
229
230         return _in->same (other->_in);
231 }