bin/mplayer.pl

   1 #!/usr/bin/perl
   2
   3 use warnings;
   4 use strict;
   5
   6 use IPC::Open3 qw(open3);
   7 use IO::Select;
   8 use Data::Dump qw(dump);
   9 use File::Slurp;
  10 use YAML;
  11 use JSON;
  12 use Graphics::Magick;
  13 use Time::HiRes qw(time);
  14 use File::Path qw(rmtree);
  15
  16 use lib 'lib';
  17 use HTML5TV::Slides;
  18 use HTML5TV::hCalendar;
  19
  20 my $debug = $ENV{DEBUG} || 0;
  21 my $generate = $ENV{GENERATE} || 0;
  22
  23 my $movie = shift @ARGV;
  24
  25 sub base_dir  { $1 if $_[0] =~ m{^(.+)/[^/]+$} }
  26 sub base_name { $1 if $_[0] =~ m{^.+/([^/]+)$} }
  27
  28 if ( ! $movie && -e 'media/_editing' ) {
  29         $movie = 'media/' . readlink('media/_editing') . '/video.ogv';
  30         warn "using media/_editing -> $movie\n";
  31 } elsif ( -d $movie && $movie =~ m{media/} ) {
  32         $movie .= '/video.ogv';
  33 } elsif ( -f $movie && $movie =~ m{\.og[vg]$}i ) {
  34         my $movie_master = $movie;
  35         $movie = base_dir($movie) . '/video.ogv';
  36         unlink $movie;
  37         symlink base_name($movie_master), $movie;
  38         warn "symlink video.ogv -> $movie_master";
  39 } else {
  40         die "Usage: $0 media/conference-Title_of_talk[/video.ogv'\n";
  41 }
  42
  43 my $media_part = my $media_dir = base_dir($movie);
  44 $media_part =~ s{media/}{};
  45 $media_part =~ s{/$}{};
  46
  47 unlink 'media/_editing';
  48 symlink $media_part, 'media/_editing';
  49
  50 warn "# media_part $media_part\n";
  51
  52 my $edl = "/dev/shm/edl";
  53 my $subtitles = $movie;
  54 $subtitles =~ s{\.\w+$}{.srt};
  55
  56 my $preroll = 3;
  57
  58 my $slide_factor = 4; # 1/4 size of video
  59
  60 my $min_slide_height = 480;
  61
  62 our $to_mplayer;
  63 our $from_mplayer;
  64 our $err_mplayer;
  65 our $prop = {};
  66
  67 my @mplayer_command = (
  68          'mplayer',
  69                 '-slave', '-idle',
  70 #               '-quiet',
  71 #               '-msglevel', 'demux=9', '-msgmodule',
  72                 '-edlout', $edl,
  73                 '-osdlevel', 3,
  74                 '-vf' => 'screenshot',
  75 );
  76
  77 push @mplayer_command, qw/ -vo null -ao null / if $generate;
  78
  79 my $pid = open3( $to_mplayer, $from_mplayer, $err_mplayer, @mplayer_command );
  80
  81 my $select = IO::Select->new();
  82 #$select->add( \*STDIN );
  83 $select->add( $from_mplayer );
  84 #$select->add( $err_mplayer );
  85
  86 sub load_subtitles;
  87
  88 sub load_movie {
  89         warn "$movie ", -s $movie, " bytes $edl\n";
  90         print $to_mplayer qq|loadfile "$movie"\n|;
  91         load_subtitles;
  92 }
  93
  94
  95 my $term_id = `xdotool getwindowfocus`;
  96 our $mplayer_id;
  97
  98
  99 sub focus_mplayer {
 100         $mplayer_id ||= `xdotool search mplayer`;
 101         warn "focus_mplayer $mplayer_id\n";
 102         system "xdotool windowactivate $mplayer_id"
 103 }
 104
 105 sub focus_term {
 106         warn "focus_term $term_id\n";
 107         system "xdotool windowactivate $term_id";
 108 }
 109
 110 our $pos;
 111
 112 sub preroll {
 113         my ( $to, $osd ) = @_;
 114         $osd =~ s{\W+}{ }gs;
 115         my $preroll_to = $to - $preroll;
 116         $preroll_to = 0 if $preroll_to < 0;
 117         print $to_mplayer "set_property time_pos $preroll_to\n";
 118         my $osd_ms = ( $to - time_pos() ) * 1000;
 119         print $to_mplayer "get_property time_pos\n";
 120         print $to_mplayer "osd_show_text \"PREROLL $osd\"\n"; # $osd_ms\n";
 121         warn "PREROLL $to -> $pos [$osd_ms] $osd\n";
 122         print $to_mplayer "play\n";
 123 }
 124
 125
 126 $|=1;
 127
 128 my $line;
 129 my $repl;
 130
 131 sub repl {
 132         print "> ";
 133         my $cmd = <STDIN>;
 134         warn ">>> $cmd\n";
 135         print $to_mplayer $cmd;
 136 }
 137
 138
 139 our @subtitles;
 140
 141 sub slide_jpg {
 142         sprintf "%s/s/%d/%03d.jpg", $media_dir, @_;
 143 }
 144
 145 sub oggThumb {
 146         my $video = shift;
 147         my $file  = shift;
 148         my $t = join(',', @_);
 149         system "oggThumb -t $t -o jpg -n $file $video";
 150 }
 151
 152 sub fmt_mmss {
 153         my $t = shift;
 154         return sprintf('%02d:%02d', int($t/60), int($t%60));
 155 }
 156
 157 sub html5tv {
 158
 159         if ( ! $prop->{width} || ! $prop->{height} ) {
 160                 warn "SKIP no size yet\n" if $debug;
 161                 return;
 162         }
 163
 164         if ( ! @subtitles ) {
 165                 warn "SKIP no subtitles yet\n";
 166                 return;
 167         }
 168
 169         warn "html5tv";
 170
 171         my $sync;
 172
 173         my @slide_t;
 174
 175         my @videos;
 176         my @frames;
 177
 178         foreach my $s ( @subtitles ) {
 179                 push @{ $sync->{htmlEvents}->{'#subtitle'} }, {
 180                         startTime => $s->[0],
 181                         endTime   => $s->[1],
 182                         html      => $s->[2],
 183                 };
 184
 185                 if ( $s->[2] =~ m{video:(.+)} ) {
 186                         my $video = $1;
 187                         my $path = "$media_dir/$video";
 188                         if ( ! -e $path ) {
 189                                 warn "MISSING $path: $!\n";
 190                         } else {
 191                                 my $frame_dir = "$media_dir/s/$video";
 192                                 system "mplayer -vo jpeg:outdir=$frame_dir,quality=95 -frames 1 -ss 0 -ao null -really-quiet $media_dir/$video"
 193                                         if ! -e $frame_dir;
 194                                 push @videos, [ @$s, $video ];
 195                         }
 196                 } elsif ( $s->[2] =~ m{slide:(\d+)\s+shot:(\d+\.\d+)} ) {
 197                         push @frames, [ $2, $1 ] unless -e "$media_dir/s/hires/f$1.jpg";
 198                         next;
 199                 }
 200
 201                 next unless $s->[2] =~ m{\[(\d+)\]};
 202
 203
 204                 push @{ $sync->{customEvents} }, {
 205                         startTime => $s->[0],
 206                         endTime   => $s->[1],
 207                         action    => 'chapterChange',
 208                         args => {
 209                                 carousel => 'theCarousel',
 210                                 id => "chapter$1",
 211                                 title => $s->[2],
 212                                 description => $s->[2],
 213                                 src => slide_jpg( 4 => $1 ),
 214                                 href => '',
 215                         },
 216                 };
 217
 218                 push @slide_t, $s->[0];
 219         }
 220
 221         if ( @frames ) {
 222                 rmdir $_ foreach glob "$media_dir/s/[124]";
 223                 my $hires = "$media_dir/s/hires";
 224                 mkdir $hires unless -e $hires;
 225
 226                 oggThumb $movie, "$hires/.f%.jpg", map { $_->[0] } @frames;
 227
 228                 foreach my $i ( 0 .. $#frames ) {
 229                         my $from = "$hires/.f$i.jpg";
 230                         my $to   = "$hires/f" . $frames[$i]->[1] . '.jpg';
 231                         rename $from, $to || warn "can't rename $from -> $to: $!";
 232                 }
 233
 234         }
 235
 236         foreach ( 0 .. $#slide_t ) {
 237                 my $slide_nr = $_ + 1;
 238                 push @{ $sync->{htmlEvents}->{'#slide'} }, {
 239                         startTime => $slide_t[$_],
 240                         endTime   => $slide_t[$_ + 1] || $prop->{length},
 241                         html      => '<img src=' . slide_jpg( 1 => $slide_nr ) . '>',
 242                 };
 243         }
 244
 245         my @slides_hires = glob "$media_dir/s/hires/*";
 246
 247         my $path = "$media_dir/s";
 248
 249         if ( ! -d $path ) {
 250                 warn "create slides images in $path";
 251                 mkdir $path;
 252         }
 253
 254         my $max_slide_height = 480; # XXX
 255
 256         foreach my $hires ( @slides_hires ) {
 257
 258                 my ($slide_width, $slide_height) = Graphics::Magick->new->Ping( $hires );
 259                 my $slide_aspect = $slide_width / $slide_height;
 260
 261                 my $nr = $1 if $hires =~ m{(\d+)\.\w+$} || warn "can't find number in $hires";
 262                 next unless $nr;
 263
 264                 my $im;
 265
 266                 foreach my $factor ( 1, 2, 4 ) {
 267
 268                         mkdir "$path/$factor" unless -e "$path/$factor";
 269
 270                         my $file = slide_jpg( $factor => $nr );
 271                         next if -e $file;
 272
 273                         my $w = int( $max_slide_height / $factor * $slide_aspect );
 274                         my $h = int( $max_slide_height / $factor );
 275
 276                         warn "slide [$nr] $hires -> ${w}x${h} $file\n";
 277
 278                         if ( ! $im ) {
 279                                 warn "loading $hires ", -s $hires, " bytes\n";
 280                                 $im = Graphics::Magick->new;
 281                                 $im->ReadImage( $hires );
 282                         }
 283                         $im->Resize( width => $w, height => $h, filter => 13, blur => 0.9 );
 284
 285                         my $c = 1; # $h / 10;
 286                         my %info = (
 287                                 font => 'Sans', pointsize => $h / 10,
 288                                 #text => "$factor = $w*$h",
 289                                 text => " $nr ",
 290                                 y => $c,
 291                                 x => $c,
 292                         );
 293
 294                         if (0) {
 295
 296                         #warn "# info ", dump %info;
 297                         #warn dump $im->QueryFontMetrics( %info );
 298                         my ($x_ppem, $y_ppem, $ascender, $descender, $width, $height, $max_advance) = $im->QueryFontMetrics( %info );
 299                         my $background = Graphics::Magick->new( size => $width . 'x' . $height );
 300                         $background->ReadImage( 'xc:black' );
 301                         $im->Composite( image => $background, compose => 'Over', x => $c, y => $c, opacity => 75 );
 302                         $info{y} += $ascender;
 303                         $im->Annotate( fill => 'yellow', %info );
 304
 305                         } # Annotate
 306
 307                         $im->Write( filename => $file );
 308                 }
 309
 310         }
 311
 312
 313         my $bars = "$path/bars.png";
 314         if ( 1 || ! -e $bars ) { # FIXME
 315                 my $im = Graphics::Magick->new;
 316                 $im->ReadImage( "$media_dir/../SMPTE_Color_Bars.svg" );
 317                 my ($slide_width, $slide_height) = Graphics::Magick->new->Ping( slide_jpg( 1 => 1 ) );
 318                 $im->Resize( width => $slide_width, height => $slide_height );
 319                 $im->Write( filename => $bars );
 320                 warn "created $bars ", -s $bars, " bytes\n";
 321         }
 322
 323
 324         my ($slide_width, $slide_height, $size, $format) = Graphics::Magick->new->Ping( slide_jpg( 1 => 1 ) );
 325         my ($c_slide_width, $c_slide_height) = Graphics::Magick->new->Ping( slide_jpg( $slide_factor => 1 ) );
 326
 327         my $html5tv = {
 328                 sync => $sync,
 329                 video => $prop,
 330                 slide => {
 331                         width => $slide_width,
 332                         height => $slide_height,
 333                 },
 334                 carousel => {
 335                         width => $c_slide_width,
 336                         height => $c_slide_height,
 337                 },
 338         };
 339
 340         $html5tv->{html}->{video_tags} =
 341                 join("\n",
 342                         map {
 343                                 my $s = $_;
 344                                 my $id = $s->[3];
 345                                 $id =~ s{\W+}{_}g;
 346
 347                                 push @{ $html5tv->{sync}->{customEvents} }, {
 348                                         startTime => $s->[0],
 349                                         endTime   => $s->[1],
 350                                         action    => 'additional_video',
 351                                         args => {
 352                                                 id => $id,
 353                                                 title => $s->[2],
 354                                                 description => $s->[2],
 355                                                 src => "$media_dir/s/1/00000001.jpg",
 356                                                 href => '',
 357                                         },
 358                                 };
 359
 360                                 qq|
 361                                         <video id="$id" style="display: none" controls="controls" width="$html5tv->{video}->{width}px" height="$html5tv->{video}->{height}px">
 362                                         <source src="$media_dir/$_->[3]" />
 363                                         </video>
 364                                 |
 365                         } @videos
 366                 )
 367         ;
 368
 369         my @customEvents_sorted;
 370
 371         if ( ref $html5tv->{sync}->{customEvents} ne 'ARRAY' ) {
 372                 my $max =
 373                 warn "ERROR: no slide markers [1] .. [", scalar @slides_hires, "] in subtitles\n";
 374                 return;
 375         } else {
 376                 @customEvents_sorted =
 377                 sort { $a->{startTime} <=> $b->{startTime} }
 378                 @{ $html5tv->{sync}->{customEvents} }
 379                 ;
 380         }
 381
 382         my $index = 1;
 383
 384         $_->{args}->{index} = $index++ foreach @customEvents_sorted;
 385
 386         warn "last customEvent $index\n";
 387
 388         $html5tv->{html}->{subtitles_table}
 389                 = qq|
 390                         <table id="subtitles">
 391                         <tr><th>&#8676;</th><th>&#8677;</th><th>#</th><th>slide</th></tr>
 392                 |
 393                 . join("\n",
 394                         map {
 395                                 my $s = $_->{startTime};
 396                                 my $e = $_->{endTime};
 397                                 my $i = $_->{index};
 398                                 my $t = $_->{args}->{title};
 399                                 my $slide = '';
 400                                 $slide = $1 if $t =~ s{\s*\[(\d+)\]\s*}{};
 401
 402                                 my ( $s_f, $e_f ) = map { fmt_mmss $_ } ( $s, $e );
 403
 404                                 qq|
 405                                 <tr id="sub_$i">
 406                                         <td class="seek_video"><a href="#$s">$s_f</a></td>
 407                                         <td class="seek_video"><a href="#$e">$e_f</a></td>
 408                                         <td class="slide">$slide</td>
 409                                         <td>$t</td>
 410                                 </tr>
 411                                 |
 412                         }
 413                         @customEvents_sorted
 414                 )
 415                 . qq|</table>|
 416                 ;
 417
 418         my $hCalendar = '<div style="color: red">Create <tt>hCalendar.html</tt> to fill this space</div>';
 419         my $hcal_path = "$media_dir/hCalendar.html";
 420         if ( -e $hcal_path ) {
 421                 $html5tv->{hCalendar} = read_file $hcal_path;
 422                 my $hcal = HTML5TV::hCalendar->new( $hcal_path );
 423                 $html5tv->{title} = $hcal->summary;
 424         }
 425
 426         foreach my $file ( qw/video.ogv presentation.pdf video.srt video.srt.yaml/ ) {
 427                 my $path = "$media_dir/$file";
 428                 my $type = 'binary';
 429                 $type = $1 if $file =~ m{\.([^\.]+)$};
 430                 my $size = -s $path;
 431                 $html5tv->{html}->{download} .= qq|<a href="$path" title="$file $size bytes">$type</a> |;
 432         }
 433
 434         warn "# html5tv ", dump $html5tv if $debug;
 435
 436         my $html = read_file 'www/tv.html';
 437         $html =~ s|{([^}]+)}|my $n = $1; $n =~ s(\.)(}->{)g; eval "\$html5tv->{$n}"|egs ||
 438                 warn "no interpolation in template!";
 439
 440         write_file "www/_editing.html", $html;
 441         $html =~ s{media/_editing}{media/$media_part}gs;
 442         write_file "www/$media_part.html", $html;
 443
 444         my $sync_path = "$media_dir/video.js";
 445         delete $html5tv->{html};
 446         write_file $sync_path, "var html5tv = " . to_json($html5tv) . " ;\n";
 447         warn "sync $sync_path ", -s $sync_path, " bytes\n";
 448
 449         # video + full-sized slide on right
 450         my $carousel_width = $prop->{width} + $slide_width;
 451         $carousel_width -= $carousel_width % ( $c_slide_width + 6 ); # round to full slide
 452         my $carousel_height = $c_slide_height + 2;
 453
 454
 455         write_file "$media_dir/video.css", qq|
 456
 457 .jcarousel-skin-ie7 .jcarousel-container-horizontal,
 458 .jcarousel-skin-ie7 .jcarousel-clip-horizontal {
 459         width: ${carousel_width}px;
 460         height: ${carousel_height}px;
 461 }
 462
 463 .jcarousel-skin-ie7 .jcarousel-item {
 464         width: ${c_slide_width}px;
 465         height: ${c_slide_height}px;
 466         margin: 0 2px 0 2px;
 467 }
 468
 469 div#videoContainer {
 470 //      width: $prop->{width}px;
 471 //      height: $prop->{height}px;
 472         margin: 0 10px 0px 0;
 473 }
 474
 475
 476 div#slide_border, div#slide {
 477         width: ${slide_width}px;
 478         height: ${slide_height}px;
 479 }
 480
 481
 482 div#subtitle {
 483         width: $html5tv->{video}->{width}px;
 484 }
 485
 486
 487
 488 .jcarousel-skin-ie7 .jcarousel-item div.thumbnailOverlay {
 489         width: ${c_slide_width}px;
 490 }
 491
 492         |;
 493
 494         return 1;
 495 }
 496
 497
 498 sub t_srt {
 499         my $t = shift;
 500         my $hh = int( $t / 3600 );
 501         $t -= $hh * 3600;
 502         my $mm = int( $t / 60 );
 503         $t -= $mm * 60;
 504         my $srt = sprintf "%02d:%02d:%04.1f", $hh, $mm, $t;
 505         $srt =~ s{\.}{,};
 506         return $srt;
 507 }
 508
 509 my @to_mplayer;
 510
 511 sub save_subtitles {
 512
 513         html5tv || return;
 514
 515         my $nr = 0;
 516         my $srt = "\n";
 517         foreach my $s ( @subtitles ) {
 518                 $srt .= $nr++ . "\n"
 519                         . t_srt( $s->[0] ) . " --> " . t_srt( $s->[1] ) . "\n"
 520                         . $s->[2] . "\n\n"
 521                         ;
 522         }
 523         warn $srt;
 524
 525         write_file $subtitles, $srt;
 526         YAML::DumpFile "$subtitles.yaml", sort { $a->[0] <=> $b->[0] } @subtitles;
 527
 528         push @to_mplayer
 529                 , "sub_remove\n"
 530                 , qq|sub_load "$subtitles"\n|
 531                 , "sub_select 1\n"
 532                 ;
 533 }
 534
 535 sub annotate_subtitles;
 536
 537 sub load_subtitles {
 538         if ( ! -e "$subtitles.yaml" ) {
 539                 warn "no subtitles $subtitles to load\n";
 540                 return;
 541         }
 542         @subtitles = YAML::LoadFile "$subtitles.yaml";
 543         warn "subtitles ", dump @subtitles;
 544         annotate_subtitles;
 545         save_subtitles;
 546 }
 547
 548 sub edit_subtitles {
 549         print $to_mplayer qq|pause\n|;
 550         focus_term;
 551         system( qq|vi "$subtitles.yaml"| ) == 0 and load_subtitles;
 552         focus_mplayer;
 553 }
 554
 555
 556 my @slide_titles;
 557 if ( -e "$media_dir/presentation.txt" ) {
 558         my $slides = read_file "$media_dir/presentation.txt";
 559         my @s = ( map { [ split(/[\n\r]+/, $_) ] } split(/\f/, $slides) );
 560
 561         my $slide_line = 0;
 562         $slide_line++ if $s[1]->[$slide_line] eq $s[2]->[$slide_line]; # skip header
 563
 564         foreach my $s ( @s ) {
 565                 push @slide_titles, $s->[$slide_line];
 566         }
 567
 568         warn "# slides titles ", dump(@slide_titles);
 569 }
 570
 571 sub annotate_subtitles {
 572         return unless @slide_titles;
 573         foreach my $s ( @subtitles ) {
 574                 if ( $s->[2] =~ m{^\[(\d+)\]$} ) {
 575                         if ( my $title = $slide_titles[ $1 - 1 ] ) {
 576                                 $s->[2] = "[$1] " . substr($title,0,40);
 577                                 warn "annotated [$1] $title\n";
 578                         }
 579                 }
 580         }
 581 }
 582
 583
 584 sub add_subtitle {
 585
 586         my $last_slide;
 587         foreach ( 0 .. $#subtitles ) {
 588                 my $i = $#subtitles - $_;
 589                 $last_slide = $1 if $subtitles[$i]->[2] =~ m/\[(\d+)\]/;
 590                 last if $last_slide;
 591         }
 592
 593         if ( $last_slide && $subtitles[ $#subtitles ]->[2] ne '-' || ! @subtitles ) {
 594
 595                 # quick add next slide for Takahashi method presentations
 596                 # with a lot of transitions
 597                 my $nr = $last_slide + 1;
 598                 my $text = "[$nr]";
 599                 $text .= ' ' . $slide_titles[ $nr - 1 ] if defined $slide_titles[ $nr - 1 ];
 600                 warn "add slide $text";
 601                 push @subtitles, [ $pos, $pos + 1, $text ];
 602                 save_subtitles;
 603                 return;
 604
 605         }
 606
 607         print $to_mplayer qq|pause\n|;
 608
 609         warn "subtitles ", dump( @subtitles ), "\nnext: [", $last_slide + 1, "]\n";
 610
 611         focus_term;
 612
 613         print "## ";
 614         my $line = <STDIN>;
 615         $subtitles[ $#subtitles ]->[2] = $line if defined $line;
 616
 617         focus_mplayer;
 618
 619         preroll $subtitles[ $#subtitles ]->[0], $line;
 620 }
 621
 622 sub time_pos {
 623         print $to_mplayer qq|get_property time_pos\n|;
 624         my $line = <$from_mplayer>;
 625         if ( $line =~ m{^ANS_time_pos=(\d+\.\d+)} ) {
 626                 warn "# time_pos $1\n";
 627                 $pos = $1;
 628                 return $1;
 629         }
 630 }
 631
 632 sub sub_fmt {
 633         my $s = shift;
 634         sprintf "%1.5f - %1.5f %s %s\n", @$s, join(' | ',@_);
 635 }
 636
 637 sub prev_subtitle {
 638         my $s = ( grep { $_->[0] < $pos } @subtitles )[-1] || return;
 639         warn "<<<< subtitle ", sub_fmt $s;
 640         preroll $s->[0], $s->[2];
 641 #       print $to_mplayer "set_property time_pos $s->[0]\n";
 642 }
 643
 644 sub next_subtitle {
 645         my $s = ( grep { $_->[0] > $pos } @subtitles )[0] || return;
 646         warn ">>>> subtitle ", sub_fmt $s;
 647         preroll $s->[0], $s->[2];
 648 #       print $to_mplayer "set_property time_pos $s->[0]\n";
 649 }
 650
 651 sub current_subtitle {
 652         my $callback = shift;
 653         my $visible;
 654         foreach my $nr ( 0 .. $#subtitles ) {
 655                 my $s = $subtitles[$nr];
 656                 if ( $s->[0] <= $pos && $s->[1] >= $pos ) {
 657                         warn sub_fmt $s, $pos;
 658                         $visible = $nr;
 659                         $callback->( $visible, $pos ) if $callback;
 660                         return ( $visible, $pos );
 661                 }
 662         }
 663         warn "# $pos no visible subtitle\n";
 664 }
 665
 666 sub move_subtitle {
 667         my $offset = shift;
 668         current_subtitle( sub {
 669                 my ( $nr, $pos ) = @_;
 670                 my $new_start = $subtitles[$nr]->[0] += $offset;
 671                 warn "subtitle $nr $pos $offset $new_start\n";
 672                 save_subtitles;
 673                 preroll $new_start, "$pos $offset $new_start";
 674         } );
 675 }
 676
 677
 678
 679 # XXX main epool loop
 680
 681 load_movie;
 682
 683 my $slides = HTML5TV::Slides->new(
 684         sub {
 685                 my $t = shift || return;
 686                 my $nr = 0;
 687                 foreach my $s ( @subtitles ) {
 688                         $nr = $1 if $s->[2] =~ m{\[(\d+)\]} && $s->[0] < $t;
 689                 }
 690                 return $nr;
 691         }
 692 );
 693
 694
 695 sub from_mplayer {
 696         my $line = shift;
 697
 698         if ( $line =~ m{V:\s*(\d+\.\d+)\s+} ) {
 699                 $pos = $1;
 700                 print "$pos\r";
 701 #               $pos = $1 if $1 > 0.2; # mplayer demuxer report fake position while seeking
 702         } elsif ( $line =~ m{Exiting} ) {
 703                 exit;
 704         } elsif ( $line =~ m{ANS_(\w+)=(\S+)} ) {
 705                 $prop->{$1} = $2;
 706                 warn "prop $1 = $2\n";
 707         } elsif ( $line =~ m{No bind found for key '(.+)'} ) {
 708
 709                 # XXX keyboard shortcuts
 710
 711                   $1 eq 'c'  ? repl
 712                 : $1 eq ','  ? add_subtitle
 713                 : $1 eq 'F1' ? prev_subtitle
 714                 : $1 eq 'F2' ? move_subtitle( -0.3 )
 715                 : $1 eq 'F3' ? move_subtitle( +0.3 )
 716                 : $1 eq 'F4' ? next_subtitle
 717                 : $1 eq 'F5' ? save_subtitles
 718                 : $1 eq 'F9' ? add_subtitle
 719                 : $1 eq 'F12' ? edit_subtitles
 720                 : warn "CUSTOM $1\n"
 721                 ;
 722
 723         } elsif ( $line =~ m{EDL}i ) {
 724
 725                 print $to_mplayer qq|osd_show_text "$line"\n|;
 726
 727                 if ( $line =~ m{start}i ) {
 728                         push @subtitles, [ $pos, $pos, '-' ];
 729                 } else {
 730                         $subtitles[ $#subtitles ]->[1] = $pos;
 731                 }
 732         } elsif ( $line =~ m{(shot\d+.png)} ) {
 733                 my $shot = $1;
 734                 warn "shot $pos $shot\n";
 735
 736                 my @existing_slides = glob("$media_dir/s/hires/*");
 737                 my $nr = $#existing_slides + 2;
 738
 739                 push @subtitles, [ $pos, $pos, "slide:$nr shot:$pos" ];
 740
 741                 warn "slide $nr from video $pos file $shot\n";
 742                 save_subtitles;
 743         } elsif ( $line =~ m{File not found} ) {
 744                 die $line;
 745         } else {
 746                 warn "IGNORE $line\n"; # if $debug;
 747         }
 748
 749 }
 750
 751 push @to_mplayer, "get_property $_\n" foreach grep { ! $prop->{$_} } ( qw/metadata video_codec video_bitrate width height fps length/ );
 752
 753 my $t = time;
 754 my $line;
 755
 756 push @to_mplayer, 'pause' if $generate;
 757
 758 while ( 1 ) {
 759
 760         my $dt = time - $t;
 761         if ( abs($dt) > 0.2 ) {
 762 #warn "dt $dt\n";
 763                 $slides->show( $pos, $prop->{length}, @subtitles ) if $prop->{length};
 764                 $t = time;
 765         }
 766
 767         foreach my $fd ( $select->can_read(0.1) ) {
 768                 if ( $fd == $from_mplayer ) {
 769                         my $ch;
 770                         sysread $from_mplayer, $ch, 1;
 771                         if ( $ch =~ m{[\n\r]} ) {
 772                                 from_mplayer $line;
 773                                 $line = '';
 774                         } else {
 775                                 $line .= $ch;
 776                         }
 777                 } else {
 778                         warn "unknown fd $fd";
 779                 }
 780         }
 781
 782         if ( my $cmd = shift @to_mplayer ) {
 783                 warn ">>>> $cmd\n";
 784                 print $to_mplayer $cmd;
 785         }
 786
 787         if ( $generate && html5tv() ) {
 788                 warn "generated\n";
 789                 exit;
 790         }
 791 }
 792