added video.ogv symlink
[HTML5TV.git] / bin / mplayer.pl
1 #!/usr/bin/perl
2
3 use warnings;
4 use strict;
5
6 use IPC::Open3 qw(open3);
7 use IO::Select;
8 use Data::Dump qw(dump);
9 use File::Slurp;
10 use YAML;
11 use JSON;
12 use Graphics::Magick;
13 use Time::HiRes qw(time);
14 use File::Path qw(rmtree);
15
16 use lib 'lib';
17 use HTML5TV::Slides;
18 use HTML5TV::hCalendar;
19
20 my $debug = $ENV{DEBUG} || 0;
21 my $generate = $ENV{GENERATE} || 0;
22
23 my $movie = shift @ARGV;
24
25 sub base_dir  { $1 if $_[0] =~ m{^(.+)/[^/]+$} }
26 sub base_name { $1 if $_[0] =~ m{^.+/([^/]+)$} }
27
28 if ( ! $movie && -e 'media/_editing' ) {
29         $movie = 'media/' . readlink('media/_editing') . '/video.ogv';
30         warn "using media/_editing -> $movie\n";
31 } elsif ( -d $movie && $movie =~ m{media/} ) {
32         $movie .= '/video.ogv';
33 } elsif ( -f $movie && $movie =~ m{\.og[vg]\b}i ) {
34         my $movie_master = $movie;
35         $movie = base_dir($movie) . '/video.ogv';
36         unlink $movie;
37         symlink base_name($movie_master), $movie;
38         warn "symlink video.ogv -> $movie_master";
39 } else {
40         die "Usage: $0 media/conference-Title_of_talk[/video.ogv'\n";
41 }
42
43 my $media_part = my $media_dir = base_dir($movie);
44 $media_part =~ s{media/}{};
45 $media_part =~ s{/$}{};
46
47 unlink 'media/_editing';
48 symlink $media_part, 'media/_editing';
49
50 warn "# media_part $media_part\n";
51
52 my $edl = "/dev/shm/edl";
53 my $subtitles = $movie;
54 $subtitles =~ s{\.\w+$}{.srt};
55
56 my $preroll = 3;
57
58 my $slide_factor = 4; # 1/4 size of video
59
60 my $min_slide_height = 480;
61
62 our $to_mplayer;
63 our $from_mplayer;
64 our $err_mplayer;
65 our $prop = {};
66
67 my @mplayer_command = (
68          'mplayer',
69                 '-slave', '-idle',
70 #               '-quiet',
71 #               '-msglevel', 'demux=9', '-msgmodule',
72                 '-edlout', $edl,
73                 '-osdlevel', 3,
74                 '-vf' => 'screenshot',
75 );
76
77 push @mplayer_command, qw/ -vo null -ao null / if $generate;
78
79 my $pid = open3( $to_mplayer, $from_mplayer, $err_mplayer, @mplayer_command );
80
81 my $select = IO::Select->new();
82 #$select->add( \*STDIN );
83 $select->add( $from_mplayer );
84 #$select->add( $err_mplayer );
85
86 sub load_subtitles;
87
88 sub load_movie {
89         warn "$movie ", -s $movie, " bytes $edl\n";
90         print $to_mplayer qq|loadfile "$movie"\n|;
91         load_subtitles;
92 }
93
94
95 my $term_id = `xdotool getwindowfocus`;
96 our $mplayer_id;
97
98
99 sub focus_mplayer {
100         $mplayer_id ||= `xdotool search mplayer`;
101         warn "focus_mplayer $mplayer_id\n";
102         system "xdotool windowactivate $mplayer_id"
103 }
104
105 sub focus_term {
106         warn "focus_term $term_id\n";
107         system "xdotool windowactivate $term_id";
108 }
109
110 our $pos;
111
112 sub preroll {
113         my ( $to, $osd ) = @_;
114         $osd =~ s{\W+}{ }gs;
115         my $preroll_to = $to - $preroll;
116         $preroll_to = 0 if $preroll_to < 0;
117         print $to_mplayer "set_property time_pos $preroll_to\n";
118         my $osd_ms = ( $to - time_pos() ) * 1000;
119         print $to_mplayer "get_property time_pos\n";
120         print $to_mplayer "osd_show_text \"PREROLL $osd\"\n"; # $osd_ms\n";
121         warn "PREROLL $to -> $pos [$osd_ms] $osd\n";
122         print $to_mplayer "play\n";
123 }
124
125
126 $|=1;
127
128 my $line;
129 my $repl;
130
131 sub repl {
132         print "> ";
133         my $cmd = <STDIN>;
134         warn ">>> $cmd\n";
135         print $to_mplayer $cmd;
136 }
137
138
139 our @subtitles;
140
141 sub slide_jpg {
142         sprintf "%s/s/%d/%03d.jpg", $media_dir, @_;
143 }
144
145 sub oggThumb {
146         my $video = shift;
147         my $file  = shift;
148         my $t = join(',', @_);
149         system "oggThumb -t $t -o jpg -n $file $video";
150 }
151
152 sub fmt_mmss {
153         my $t = shift;
154         return sprintf('%02d:%02d', int($t/60), int($t%60));
155 }
156
157 my %escape = ('<'=>'&lt;', '>'=>'&gt;', '&'=>'&amp;', '"'=>'&quot;');
158 my $escape_re  = join '|' => keys %escape;
159 sub html_escape {
160         my $what = join('',@_);
161         $what =~ s/($escape_re)/$escape{$1}/gs;
162         warn "XXX html_escape $what\n";
163         return $what;
164 }
165
166 sub html5tv {
167
168         if ( ! $prop->{width} || ! $prop->{height} ) {
169                 warn "SKIP no size yet\n" if $debug;
170                 return;
171         }
172
173         if ( ! @subtitles ) {
174                 warn "SKIP no subtitles yet\n";
175                 return;
176         }
177
178         warn "html5tv";
179
180         my $sync;
181
182         my @slide_t;
183
184         my @videos;
185         my @frames;
186
187         foreach my $s ( @subtitles ) {
188                 push @{ $sync->{htmlEvents}->{'#subtitle'} }, {
189                         startTime => $s->[0],
190                         endTime   => $s->[1],
191                         html      => $s->[2],
192                 };
193
194                 if ( $s->[2] =~ m{video:(.+)} ) {
195                         my $video = $1;
196                         my $path = "$media_dir/$video";
197                         if ( ! -e $path ) {
198                                 warn "MISSING $path: $!\n";
199                         } else {
200                                 my $frame_dir = "$media_dir/s/$video";
201                                 system "mplayer -vo jpeg:outdir=$frame_dir,quality=95 -frames 1 -ss 0 -ao null -really-quiet $media_dir/$video"
202                                         if ! -e $frame_dir;
203                                 push @videos, [ @$s, $video ];
204                         }
205                 } elsif ( $s->[2] =~ m{slide:(\d+)\s+shot:(\d+\.\d+)} ) {
206                         push @frames, [ $2, $1 ] unless -e "$media_dir/s/hires/f$1.jpg";
207                         next;
208                 }
209
210                 next unless $s->[2] =~ m{\[(\d+)\]};
211
212
213                 push @{ $sync->{customEvents} }, {
214                         startTime => $s->[0],
215                         endTime   => $s->[1],
216                         action    => 'chapterChange',
217                         args => {
218                                 carousel => 'theCarousel',
219                                 id => "chapter$1",
220                                 title => $s->[2],
221                                 description => $s->[2],
222                                 src => slide_jpg( 4 => $1 ),
223                                 href => '',
224                         },
225                 };
226
227                 push @slide_t, $s->[0];
228         }
229
230         if ( @frames ) {
231                 rmdir $_ foreach glob "$media_dir/s/[124]";
232                 my $hires = "$media_dir/s/hires";
233                 mkdir $hires unless -e $hires;
234
235                 oggThumb $movie, "$hires/.f%.jpg", map { $_->[0] } @frames;
236
237                 foreach my $i ( 0 .. $#frames ) {
238                         my $from = "$hires/.f$i.jpg";
239                         my $to   = "$hires/f" . $frames[$i]->[1] . '.jpg';
240                         rename $from, $to || warn "can't rename $from -> $to: $!";
241                 }
242
243         }
244
245         foreach ( 0 .. $#slide_t ) {
246                 my $slide_nr = $_ + 1;
247                 push @{ $sync->{htmlEvents}->{'#slide'} }, {
248                         startTime => $slide_t[$_],
249                         endTime   => $slide_t[$_ + 1] || $prop->{length},
250                         html      => '<img src=' . slide_jpg( 1 => $slide_nr ) . '>',
251                 };
252         }
253
254         my @slides_hires = glob "$media_dir/s/hires/*";
255
256         my $path = "$media_dir/s";
257
258         if ( ! -d $path ) {
259                 warn "create slides images in $path";
260                 mkdir $path;
261         }
262
263         my $max_slide_height = 480; # XXX
264
265         foreach my $hires ( @slides_hires ) {
266
267                 my ($slide_width, $slide_height) = Graphics::Magick->new->Ping( $hires );
268                 my $slide_aspect = $slide_width / $slide_height;
269
270                 my $nr = $1 if $hires =~ m{(\d+)\.\w+$} || warn "can't find number in $hires";
271                 next unless $nr;
272
273                 my $im;
274
275                 foreach my $factor ( 1, 2, 4 ) {
276
277                         mkdir "$path/$factor" unless -e "$path/$factor";
278
279                         my $file = slide_jpg( $factor => $nr );
280                         next if -e $file;
281
282                         my $w = int( $max_slide_height / $factor * $slide_aspect );
283                         my $h = int( $max_slide_height / $factor );
284
285                         warn "slide [$nr] $hires -> ${w}x${h} $file\n";
286
287                         if ( ! $im ) {
288                                 warn "loading $hires ", -s $hires, " bytes\n";
289                                 $im = Graphics::Magick->new;
290                                 $im->ReadImage( $hires );
291                         }
292                         $im->Resize( width => $w, height => $h, filter => 13, blur => 0.9 );
293
294                         my $c = 1; # $h / 10;
295                         my %info = (
296                                 font => 'Sans', pointsize => $h / 10,
297                                 #text => "$factor = $w*$h",
298                                 text => " $nr ",
299                                 y => $c,
300                                 x => $c,
301                         );
302
303                         if (0) {
304
305                         #warn "# info ", dump %info;
306                         #warn dump $im->QueryFontMetrics( %info );
307                         my ($x_ppem, $y_ppem, $ascender, $descender, $width, $height, $max_advance) = $im->QueryFontMetrics( %info );
308                         my $background = Graphics::Magick->new( size => $width . 'x' . $height );
309                         $background->ReadImage( 'xc:black' );
310                         $im->Composite( image => $background, compose => 'Over', x => $c, y => $c, opacity => 75 );
311                         $info{y} += $ascender;
312                         $im->Annotate( fill => 'yellow', %info );
313
314                         } # Annotate
315
316                         $im->Write( filename => $file );
317                 }
318
319         }
320
321
322         my $bars = "$path/bars.png";
323         if ( 1 || ! -e $bars ) { # FIXME
324                 my $im = Graphics::Magick->new;
325                 $im->ReadImage( "$media_dir/../SMPTE_Color_Bars.svg" );
326                 my ($slide_width, $slide_height) = Graphics::Magick->new->Ping( slide_jpg( 1 => 1 ) );
327                 $im->Resize( width => $slide_width, height => $slide_height );
328                 $im->Write( filename => $bars );
329                 warn "created $bars ", -s $bars, " bytes\n";
330         }
331
332
333         my ($slide_width, $slide_height, $size, $format) = Graphics::Magick->new->Ping( slide_jpg( 1 => 1 ) );
334         my ($c_slide_width, $c_slide_height) = Graphics::Magick->new->Ping( slide_jpg( $slide_factor => 1 ) );
335
336         my $html5tv = {
337                 sync => $sync,
338                 video => $prop,
339                 slide => {
340                         width => $slide_width,
341                         height => $slide_height,
342                 },
343                 carousel => {
344                         width => $c_slide_width,
345                         height => $c_slide_height,
346                 },
347         };
348
349         $html5tv->{html}->{video_tags} =
350                 join("\n",
351                         map {
352                                 my $s = $_;
353                                 my $id = $s->[3];
354                                 $id =~ s{\W+}{_}g;
355
356                                 push @{ $html5tv->{sync}->{customEvents} }, {
357                                         startTime => $s->[0],
358                                         endTime   => $s->[1],
359                                         action    => 'additional_video',
360                                         args => {
361                                                 id => $id,
362                                                 title => $s->[2],
363                                                 description => $s->[2],
364                                                 src => "$media_dir/s/$s->[3]/00000001.jpg",
365                                                 href => '',
366                                         },
367                                 };
368
369                                 qq|
370                                         <video id="$id" style="display: none" controls="controls" width="$html5tv->{video}->{width}px" height="$html5tv->{video}->{height}px">
371                                         <source src="$media_dir/$_->[3]" />
372                                         </video>
373                                 |
374                         } @videos
375                 )
376         ;
377
378         my @customEvents_sorted;
379
380         if ( ref $html5tv->{sync}->{customEvents} ne 'ARRAY' ) {
381                 my $max = 
382                 warn "ERROR: no slide markers [1] .. [", scalar @slides_hires, "] in subtitles\n";
383                 return;
384         } else {
385                 @customEvents_sorted =
386                 sort { $a->{startTime} <=> $b->{startTime} }
387                 @{ $html5tv->{sync}->{customEvents} }
388                 ;
389         }
390
391         my $index = 1;
392
393         $_->{args}->{index} = $index++ foreach @customEvents_sorted;
394
395         warn "last customEvent $index\n";
396
397         $html5tv->{html}->{subtitles_table}
398                 = qq|
399                         <table id="subtitles">
400                         <tr><th>&#8676;</th><th>&#8677;</th><th>#</th><th>slide</th></tr>
401                 |
402                 . join("\n",
403                         map {
404                                 my $s = $_->{startTime};
405                                 my $e = $_->{endTime};
406                                 my $i = $_->{index};
407                                 my $t = html_escape( $_->{args}->{title} );
408                                 my $slide = '';
409                                 $slide = $1 if $t =~ s{\s*\[(\d+)\]\s*}{};
410
411                                 my ( $s_f, $e_f ) = map { fmt_mmss $_ } ( $s, $e );
412
413                                 qq|
414                                 <tr id="sub_$i">
415                                         <td class="seek_video"><a href="#$s">$s_f</a></td>
416                                         <td class="seek_video"><a href="#$e">$e_f</a></td>
417                                         <td class="slide">$slide</td>
418                                         <td>$t</td>
419                                 </tr>
420                                 |
421                         }
422                         @customEvents_sorted
423                 )
424                 . qq|</table>|
425                 ;
426
427         my $hCalendar = '<div style="color: red">Create <tt>hCalendar.html</tt> to fill this space</div>';
428         my $hcal_path = "$media_dir/hCalendar.html";
429         if ( -e $hcal_path ) {
430                 $html5tv->{hCalendar} = read_file $hcal_path;
431                 my $hcal = HTML5TV::hCalendar->new( $hcal_path );
432                 $html5tv->{title} = $hcal->summary;
433         }
434
435         foreach my $file ( qw/video.ogv presentation.pdf video.srt video.srt.yaml/ ) {
436                 my $path = "$media_dir/$file";
437                 my $type = 'binary';
438                 $type = $1 if $file =~ m{\.([^\.]+)$};
439                 my $size = -s $path;
440                 $html5tv->{html}->{download} .= qq|<a href="$path" title="$file $size bytes">$type</a> |;
441         }
442
443         warn "# html5tv ", dump $html5tv if $debug;
444
445         my $html = read_file 'www/tv.html';
446         $html =~ s|{([^}]+)}|my $n = $1; $n =~ s(\.)(}->{)g; eval "\$html5tv->{$n}"|egs ||
447                 warn "no interpolation in template!";
448
449         write_file "www/_editing.html", $html;
450         $html =~ s{media/_editing}{media/$media_part}gs;
451         write_file "www/$media_part.html", $html;
452
453         my $sync_path = "$media_dir/video.js";
454         delete $html5tv->{html};
455         write_file $sync_path, "var html5tv = " . to_json($html5tv) . " ;\n";
456         warn "sync $sync_path ", -s $sync_path, " bytes\n";
457
458         # video + full-sized slide on right
459         my $carousel_width = $prop->{width} + $slide_width;
460         $carousel_width -= $carousel_width % ( $c_slide_width + 6 ); # round to full slide
461         my $carousel_height = $c_slide_height + 2;
462
463
464         write_file "$media_dir/video.css", qq|
465
466 .jcarousel-skin-ie7 .jcarousel-container-horizontal,
467 .jcarousel-skin-ie7 .jcarousel-clip-horizontal {
468         width: ${carousel_width}px;
469         height: ${carousel_height}px;
470 }
471
472 .jcarousel-skin-ie7 .jcarousel-item {
473         width: ${c_slide_width}px;
474         height: ${c_slide_height}px;
475         margin: 0 2px 0 2px;
476 }
477
478 div#videoContainer {
479 //      width: $prop->{width}px;
480 //      height: $prop->{height}px;
481         margin: 0 10px 0px 0;
482 }
483
484
485 div#slide_border, div#slide {
486         width: ${slide_width}px;
487         height: ${slide_height}px;
488 }
489
490
491 div#subtitle {
492         width: $html5tv->{video}->{width}px;
493 }
494
495
496
497 .jcarousel-skin-ie7 .jcarousel-item div.thumbnailOverlay {
498         width: ${c_slide_width}px;
499 }
500
501         |;
502
503         return 1;
504 }
505
506
507 sub t_srt {
508         my $t = shift;
509         my $hh = int( $t / 3600 );
510         $t -= $hh * 3600;
511         my $mm = int( $t / 60 );
512         $t -= $mm * 60;
513         my $srt = sprintf "%02d:%02d:%04.1f", $hh, $mm, $t;
514         $srt =~ s{\.}{,};
515         return $srt;
516 }
517
518 my @to_mplayer;
519
520 sub save_subtitles {
521
522         html5tv || return;
523
524         my $nr = 0;
525         my $srt = "\n";
526         foreach my $s ( @subtitles ) {
527                 $srt .= $nr++ . "\n"
528                         . t_srt( $s->[0] ) . " --> " . t_srt( $s->[1] ) . "\n"
529                         . $s->[2] . "\n\n"
530                         ;
531         }
532         warn $srt;
533
534         write_file $subtitles, $srt;
535         YAML::DumpFile "$subtitles.yaml", sort { $a->[0] <=> $b->[0] } @subtitles;
536
537         push @to_mplayer
538                 , "sub_remove\n"
539                 , qq|sub_load "$subtitles"\n|
540                 , "sub_select 1\n"
541                 ;
542 }
543
544 sub annotate_subtitles;
545
546 sub load_subtitles {
547         if ( ! -e "$subtitles.yaml" ) {
548                 warn "no subtitles $subtitles to load\n";
549                 return;
550         }
551         @subtitles = YAML::LoadFile "$subtitles.yaml";
552         warn "subtitles ", dump @subtitles;
553         annotate_subtitles;
554         save_subtitles;
555 }
556
557 sub edit_subtitles {
558         print $to_mplayer qq|pause\n|;
559         focus_term;
560         system( qq|vi "$subtitles.yaml"| ) == 0 and load_subtitles;
561         focus_mplayer;
562 }
563
564
565 my @slide_titles;
566 if ( -e "$media_dir/presentation.txt" ) {
567         my $slides = read_file "$media_dir/presentation.txt";
568         my @s = ( map { [ split(/[\n\r]+/, $_) ] } split(/\f/, $slides) );
569
570         my $slide_line = 0;
571         $slide_line++ if $s[1]->[$slide_line] eq $s[2]->[$slide_line]; # skip header
572
573         foreach my $s ( @s ) {
574                 push @slide_titles, $s->[$slide_line];
575         }
576
577         warn "# slides titles ", dump(@slide_titles);
578 }
579
580 sub annotate_subtitles {
581         return unless @slide_titles;
582         foreach my $s ( @subtitles ) {
583                 if ( $s->[2] =~ m{^\[(\d+)\]$} ) {
584                         if ( my $title = $slide_titles[ $1 - 1 ] ) {
585                                 $s->[2] = "[$1] " . substr($title,0,40);
586                                 warn "annotated [$1] $title\n";
587                         }
588                 }
589         }
590 }
591
592
593 sub add_subtitle {
594
595         my $last_slide;
596         foreach ( 0 .. $#subtitles ) {
597                 my $i = $#subtitles - $_;
598                 $last_slide = $1 if $subtitles[$i]->[2] =~ m/\[(\d+)\]/;
599                 last if $last_slide;
600         }
601
602         if ( $last_slide && $subtitles[ $#subtitles ]->[2] ne '-' || ! @subtitles ) {
603
604                 # quick add next slide for Takahashi method presentations
605                 # with a lot of transitions
606                 my $nr = $last_slide + 1;
607                 my $text = "[$nr]";
608                 $text .= ' ' . $slide_titles[ $nr - 1 ] if defined $slide_titles[ $nr - 1 ];
609                 warn "add slide $text";
610                 push @subtitles, [ $pos, $pos + 1, $text ];
611                 save_subtitles;
612                 return;
613
614         }
615
616         print $to_mplayer qq|pause\n|;
617
618         warn "subtitles ", dump( @subtitles ), "\nnext: [", $last_slide + 1, "]\n";
619
620         focus_term;
621
622         print "## ";
623         my $line = <STDIN>;
624         $subtitles[ $#subtitles ]->[2] = $line if defined $line;
625
626         focus_mplayer;
627
628         preroll $subtitles[ $#subtitles ]->[0], $line;
629 }
630
631 sub time_pos {
632         print $to_mplayer qq|get_property time_pos\n|;
633         my $line = <$from_mplayer>;
634         if ( $line =~ m{^ANS_time_pos=(\d+\.\d+)} ) {
635                 warn "# time_pos $1\n";
636                 $pos = $1;
637                 return $1;
638         }
639 }
640
641 sub sub_fmt {
642         my $s = shift;
643         sprintf "%1.5f - %1.5f %s %s\n", @$s, join(' | ',@_);
644 }
645
646 sub prev_subtitle {
647         my $s = ( grep { $_->[0] < $pos } @subtitles )[-1] || return;
648         warn "<<<< subtitle ", sub_fmt $s;
649         preroll $s->[0], $s->[2];
650 #       print $to_mplayer "set_property time_pos $s->[0]\n";
651 }
652
653 sub next_subtitle {
654         my $s = ( grep { $_->[0] > $pos } @subtitles )[0] || return;
655         warn ">>>> subtitle ", sub_fmt $s;
656         preroll $s->[0], $s->[2];
657 #       print $to_mplayer "set_property time_pos $s->[0]\n";
658 }
659
660 sub current_subtitle {
661         my $callback = shift;
662         my $visible;
663         foreach my $nr ( 0 .. $#subtitles ) {
664                 my $s = $subtitles[$nr];
665                 if ( $s->[0] <= $pos && $s->[1] >= $pos ) {
666                         warn sub_fmt $s, $pos;
667                         $visible = $nr;
668                         $callback->( $visible, $pos ) if $callback;
669                         return ( $visible, $pos );
670                 }
671         }
672         warn "# $pos no visible subtitle\n";
673 }
674
675 sub move_subtitle {
676         my $offset = shift;
677         current_subtitle( sub {
678                 my ( $nr, $pos ) = @_;
679                 my $new_start = $subtitles[$nr]->[0] += $offset;
680                 warn "subtitle $nr $pos $offset $new_start\n";
681                 save_subtitles;
682                 preroll $new_start, "$pos $offset $new_start";
683         } );
684 }
685
686
687
688 # XXX main epool loop
689
690 load_movie;
691
692 my $slides = HTML5TV::Slides->new(
693         sub {
694                 my $t = shift || return;
695                 my $nr = 0;
696                 foreach my $s ( @subtitles ) {
697                         $nr = $1 if $s->[2] =~ m{\[(\d+)\]} && $s->[0] < $t;
698                 }
699                 return $nr;
700         }
701 );
702
703
704 sub from_mplayer {
705         my $line = shift;
706
707         if ( $line =~ m{V:\s*(\d+\.\d+)\s+} ) {
708                 $pos = $1;
709                 print "$pos\r";
710 #               $pos = $1 if $1 > 0.2; # mplayer demuxer report fake position while seeking
711         } elsif ( $line =~ m{Exiting} ) {
712                 exit;
713         } elsif ( $line =~ m{ANS_(\w+)=(\S+)} ) {
714                 $prop->{$1} = $2;
715                 warn "prop $1 = $2\n";
716         } elsif ( $line =~ m{No bind found for key '(.+)'} ) {
717
718                 # XXX keyboard shortcuts
719
720                   $1 eq 'c'  ? repl
721                 : $1 eq ','  ? add_subtitle
722                 : $1 eq 'F1' ? prev_subtitle
723                 : $1 eq 'F2' ? move_subtitle( -0.3 )
724                 : $1 eq 'F3' ? move_subtitle( +0.3 )
725                 : $1 eq 'F4' ? next_subtitle
726                 : $1 eq 'F5' ? save_subtitles
727                 : $1 eq 'F9' ? add_subtitle
728                 : $1 eq 'F12' ? edit_subtitles
729                 : warn "CUSTOM $1\n"
730                 ;
731
732         } elsif ( $line =~ m{EDL}i ) {
733
734                 print $to_mplayer qq|osd_show_text "$line"\n|;
735
736                 if ( $line =~ m{start}i ) {
737                         push @subtitles, [ $pos, $pos, '-' ];
738                 } else {
739                         $subtitles[ $#subtitles ]->[1] = $pos;
740                 }
741         } elsif ( $line =~ m{(shot\d+.png)} ) {
742                 my $shot = $1;
743                 warn "shot $pos $shot\n";
744
745                 my @existing_slides = glob("$media_dir/s/hires/*");
746                 my $nr = $#existing_slides + 2;
747
748                 push @subtitles, [ $pos, $pos, "slide:$nr shot:$pos" ];
749
750                 warn "slide $nr from video $pos file $shot\n";
751                 save_subtitles;
752         } elsif ( $line =~ m{File not found} ) {
753                 die $line;
754         } else {
755                 warn "IGNORE $line\n"; # if $debug;
756         }
757
758 }
759
760 push @to_mplayer, "get_property $_\n" foreach grep { ! $prop->{$_} } ( qw/metadata video_codec video_bitrate width height fps length/ );
761
762 my $t = time;
763 my $line;
764
765 push @to_mplayer, 'pause' if $generate;
766
767 while ( 1 ) {
768
769         my $dt = time - $t;
770         if ( abs($dt) > 0.2 ) {
771 #warn "dt $dt\n";
772                 $slides->show( $pos, $prop->{length}, @subtitles ) if $prop->{length};
773                 $t = time;
774         }
775
776         foreach my $fd ( $select->can_read(0.1) ) {
777                 if ( $fd == $from_mplayer ) {
778                         my $ch;
779                         sysread $from_mplayer, $ch, 1;
780                         if ( $ch =~ m{[\n\r]} ) {
781                                 from_mplayer $line;
782                                 $line = '';
783                         } else {
784                                 $line .= $ch;
785                         }
786                 } else {
787                         warn "unknown fd $fd";
788                 }
789         }
790
791         if ( my $cmd = shift @to_mplayer ) {
792                 warn ">>>> $cmd\n";
793                 print $to_mplayer $cmd;
794         }
795
796         if ( $generate && html5tv() ) {
797                 warn "generated\n";
798                 exit;
799         }
800 }
801