bin/mplayer.pl

   1 #!/usr/bin/perl
   2
   3 use warnings;
   4 use strict;
   5
   6 use IPC::Open3 qw(open3);
   7 use IO::Epoll;
   8 use Data::Dump qw(dump);
   9 use File::Slurp;
  10 use YAML;
  11 use JSON;
  12 use HTML::TreeBuilder;
  13 use Imager;
  14
  15
  16 my $movie = shift @ARGV;
  17
  18 sub base_dir { $1 if $_[0] =~ m{^(.+)/[^/]+$} }
  19
  20 if ( ! $movie && -e 'media/_editing' ) {
  21         $movie = 'media/' . readlink('media/_editing') . '/video.ogv';
  22         warn "using media/_editing -> $movie\n";
  23 } elsif ( -d $movie && $movie =~ m{media/} ) {
  24         $movie .= '/video.ogv';
  25 } elsif ( -f $movie && $movie !~ m{video\.ogv} ) {
  26         my $movie_master = $movie;
  27         my $to = $movie = base_dir($movie) . '/video.ogv';
  28         $to =~ s{media/}{};
  29         symlink $movie_master, $to;
  30         warn "symlink $to -> $movie\n";
  31 } elsif ( -f $movie ) {
  32         warn "using video $movie";
  33 } else {
  34         die "Usage: $0 media/conference-Title_of_talk[/video.ogv'\n";
  35 }
  36
  37 my $media_part = my $media_dir = base_dir($movie);
  38 $media_part =~ s{media/}{};
  39
  40 unlink 'media/_editing';
  41 symlink $media_part, 'media/_editing';
  42
  43 warn "# media_part $media_part\n";
  44
  45 my $edl = "/dev/shm/edl";
  46 my $subtitles = $movie;
  47 $subtitles =~ s{\.\w+$}{.srt};
  48
  49 my $preroll = 3;
  50
  51 my $slide_factor = 4; # 1/4 size of video
  52
  53 our $to_mplayer;
  54 our $from_mplayer;
  55 our $err_mplayer;
  56 our $prop = {};
  57
  58 my $pid = open3( $to_mplayer, $from_mplayer, $err_mplayer,
  59          'mplayer',
  60                 '-slave', '-idle',
  61                 '-quiet',
  62                 '-edlout', $edl,
  63                 '-osdlevel', 3,
  64                 '-vf' => 'screenshot',
  65 );
  66
  67 my $epfd = epoll_create(10);
  68
  69 epoll_ctl($epfd, EPOLL_CTL_ADD, fileno STDIN         , EPOLLIN  ) >= 0 || die $!;
  70 epoll_ctl($epfd, EPOLL_CTL_ADD, fileno $from_mplayer , EPOLLIN  ) >= 0 || die $!;
  71 #epoll_ctl($epfd, EPOLL_CTL_ADD, fileno $to_mplayer   , EPOLLOUT ) >= 0 || die $!;
  72
  73 sub load_subtitles;
  74
  75 sub load_movie {
  76         warn "$movie ", -s $movie, " bytes $edl\n";
  77         print $to_mplayer qq|loadfile "$movie"\n|;
  78         print $to_mplayer "get_property $_\n" foreach ( qw/metadata video_codec video_bitrate width height fps length/ );
  79         load_subtitles;
  80 }
  81
  82
  83 my $term_id = `xdotool getwindowfocus`;
  84 our $mplayer_id;
  85
  86
  87 sub focus_mplayer {
  88         $mplayer_id ||= `xdotool search mplayer`;
  89         warn "focus_mplayer $mplayer_id\n";
  90         system "xdotool windowactivate $mplayer_id"
  91 }
  92
  93 sub focus_term {
  94         warn "focus_term $term_id\n";
  95         system "xdotool windowactivate $term_id";
  96 }
  97
  98 sub preroll {
  99         my ( $pos, $osd ) = @_;
 100         $osd =~ s{\W+}{ }gs;
 101         warn "PREROLL $pos $osd\n";
 102         print $to_mplayer "osd_show_text \"PREROLL $osd\" ", $preroll * 1000, "\n";
 103         my $to = $pos - $preroll;
 104         $to = 0 if $to < 0;
 105         print $to_mplayer "set_property time_pos $to\n";
 106         print $to_mplayer "get_property time_pos\n";
 107         print $to_mplayer "play\n";
 108 }
 109
 110
 111 $|=1;
 112
 113 my $line;
 114 my $repl;
 115
 116 sub repl {
 117         print "> ";
 118         my $cmd = <STDIN>;
 119         warn ">>> $cmd\n";
 120         print $to_mplayer $cmd;
 121 }
 122
 123
 124 our @subtitles;
 125
 126 sub html5tv {
 127
 128         if ( ! $prop->{width} || ! $prop->{height} ) {
 129                 warn "SKIP no size yet\n";
 130                 return;
 131         }
 132
 133         if ( ! @subtitles ) {
 134                 warn "SKIP no subtitles yet\n";
 135                 return;
 136         }
 137
 138
 139         my $sync;
 140
 141         my @slide_t;
 142
 143         my @videos;
 144
 145         foreach my $s ( @subtitles ) {
 146                 push @{ $sync->{htmlEvents}->{'#subtitle'} }, {
 147                         startTime => $s->[0],
 148                         endTime   => $s->[1],
 149                         html      => $s->[2],
 150                 };
 151
 152                 if ( $s->[2] =~ m{video:(.+)} ) {
 153                         my $video = $1;
 154                         my $path = "$media_dir/$video";
 155                         if ( ! -e $path ) {
 156                                 warn "MISSING $path: $!\n";
 157                         } else {
 158                                 my $frame_dir = "$media_dir/s/$video";
 159                                 system "mplayer -vo jpeg:outdir=$frame_dir -frames 1 -ss 0 $media_dir/$video"
 160                                         if ! -e $frame_dir;
 161                                 push @videos, [ @$s, $video ];
 162                         }
 163                 }
 164
 165                 next unless $s->[2] =~ m{\[(\d+)\]};
 166
 167
 168                 push @{ $sync->{customEvents} }, {
 169                         startTime => $s->[0],
 170                         endTime   => $s->[1],
 171                         action    => 'chapterChange',
 172                         args => {
 173                                 carousel => 'theCarousel',
 174                                 id => "chapter$1",
 175                                 title => $s->[2],
 176                                 description => $s->[2],
 177                                 src => sprintf('%s/s/%dx%d/p%03d.jpg', $media_dir, $prop->{width} / $slide_factor, $prop->{height} / $slide_factor, $1),
 178                                 href => '',
 179                         },
 180                 };
 181
 182                 push @slide_t, $s->[0];
 183         }
 184
 185         foreach ( 0 .. $#slide_t ) {
 186                 push @{ $sync->{htmlEvents}->{'#slide'} }, {
 187                         startTime => $slide_t[$_],
 188                         endTime   => $slide_t[$_ + 1] || $prop->{length},
 189                         html      => sprintf( '<img src=%s/s/1/p%03d.jpg>', $media_dir, $_ + 1 ),
 190                 };
 191         }
 192
 193         my @slides_hires = glob '$media_dir/s/hires/p*.jpg';
 194         @slides_hires    = glob 'shot*.png' unless @slides_hires;
 195
 196         foreach my $factor ( 4, 2, 1 ) {
 197                 my $w = $prop->{width}  / $factor;
 198                 my $h = $prop->{height} / $factor;
 199
 200                 my $path = "$media_dir/s";
 201                 if ( ! -d $path ) {
 202                         warn "create slides imaes in $path";
 203                         mkdir $path;
 204                 }
 205
 206                 $path .= '/' . $factor;
 207
 208                 if ( ! -d $path ) {
 209                         mkdir $path;
 210                         warn "created $path\n";
 211
 212                 }
 213
 214                 foreach my $hires ( @slides_hires ) {
 215
 216                         my $file = $hires;
 217                         $file =~ s{^.+(\d+)\.\w+$}{$path/$1.jpg} || warn "can't rewrite $file";
 218                         warn "slide $hires -> $file\n";
 219                         next if -e $file;
 220
 221                         my $im = Imager->new( file => $hires );
 222                         $im->scale( xpixels => $w, ypixels => $h, type => 'min' )->write( file => $file );
 223                         warn "resized $file ", -s $file, " bytes\n";
 224                 }
 225
 226         }
 227
 228         my ( $slide_width, $slide_height );
 229
 230         my $im = Imager->new( file => "$media_dir/s/1/p001.jpg" )
 231                         || Imager->new( file => "shot0001.png" ) # from mplayer [s]
 232                         ;
 233
 234         if ( $im ) {
 235                 $slide_width  = $im->getwidth  / $slide_factor;
 236                 $slide_height = $im->getheight / $slide_factor;
 237         } else {
 238                 warn "can't find first slide default to 1/$slide_factor of video size\n";
 239                 $slide_width  = $prop->{width}  / $slide_factor;
 240                 $slide_height = $prop->{height} / $slide_factor;
 241         }
 242
 243         my $html5tv = {
 244                 sync => $sync,
 245                 video => $prop,
 246                 slide => {
 247                         width => $slide_width,
 248                         height => $slide_height,
 249                 },
 250         };
 251
 252         $html5tv->{video_tags} =
 253                 join("\n",
 254                         map {
 255                                 my $s = $_;
 256                                 my $id = $s->[3];
 257                                 $id =~ s{\W+}{_}g;
 258
 259                                 push @{ $html5tv->{sync}->{customEvents} }, {
 260                                         startTime => $s->[0],
 261                                         endTime   => $s->[1],
 262                                         action    => 'additional_video',
 263                                         args => {
 264                                                 id => $id,
 265                                                 title => $s->[2],
 266                                                 description => $s->[2],
 267                                                 src => "$media_dir/s/1/00000001.jpg",
 268                                                 href => '',
 269                                         },
 270                                 };
 271
 272                                 qq|
 273                                         <video id="$id" style="display: none" controls="controls" width="$html5tv->{video}->{width}px" height="$html5tv->{video}->{height}px">
 274                                         <source src="$media_dir/$_->[3]" />
 275                                         </video>
 276                                 |
 277                         } @videos
 278                 )
 279         ;
 280
 281         sub customEvents_sorted {
 282
 283                 if ( ref $html5tv->{sync}->{customEvents} ne 'ARRAY' ) {
 284                         my $max =
 285                         warn "ERROR: no slide markers [1] .. [", scalar @slides_hires, "] in subtitles\n";
 286                         return;
 287                 }
 288
 289                 sort { $a->{startTime} <=> $b->{startTime} }
 290                 @{ $html5tv->{sync}->{customEvents} }
 291         }
 292
 293         my $index = 1;
 294
 295         $_->{args}->{index} = $index++ foreach customEvents_sorted;
 296
 297         warn "last customEvent $index\n";
 298
 299         $html5tv->{subtitles_table}
 300                 = qq|<table id="subtitles">|
 301                 . join("\n",
 302                         map { qq|
 303                                 <tr id="sub_$_->{index}">
 304                                         <td class="seek_video">$_->{startTime}</td>
 305                                         <td class="seek_video">$_->{endTime}</td>
 306                                         <td>$_->{args}->{title}</td>
 307                                 </tr>
 308                         | }
 309                         customEvents_sorted
 310                 )
 311                 . qq|</table><a href="$media_dir/video.srt">download subtitles</a>|
 312                 ;
 313
 314         my $hcalendar = '<div style="color: red">Create <tt>hcalendar.html</tt> to fill this space</div>';
 315         my $hcal_path = '$media_dir/hcalendar.html';
 316         if ( -e $hcal_path ) {
 317                 $html5tv->{hcalendar} = read_file $hcal_path;
 318                 my $tree = HTML::TreeBuilder->new;
 319                 $tree->parse_file($hcal_path);
 320                 if ( my $vevent = $tree->look_down( class => 'vevent' ) ) {
 321                         $html5tv->{title} = $vevent->look_down( class=> 'summary' )->as_trimmed_text;
 322                 }
 323         }
 324
 325         warn "# html5tv ", dump $html5tv;
 326
 327         my $sync_path = "$media_dir/video.js";
 328         write_file $sync_path, "var html5tv = " . to_json($html5tv) . " ;\n";
 329         warn "sync $sync_path ", -s $sync_path, " bytes\n";
 330
 331         my $html = read_file 'www/tv.html';
 332         $html =~ s|{([^}]+)}|my $n = $1; $n =~ s(\.)(}->{)g; eval "\$html5tv->{$n}"|egs ||
 333                 warn "no interpolation in template!";
 334
 335         write_file "www/_editing.html", $html;
 336         $html =~ s{media/_editing}{media/$media_part}gs;
 337         write_file "www/$media_part.html", $html;
 338
 339         my $carousel_width = $prop->{width} + $slide_width - 80;
 340         $carousel_width -= $carousel_width % ( $slide_width + 6 ); # round to full slide
 341         my $carousel_height =   $slide_height + 2;
 342
 343         write_file "$media_dir/video.css", qq|
 344
 345 .jcarousel-skin-ie7 .jcarousel-container-horizontal,
 346 .jcarousel-skin-ie7 .jcarousel-clip-horizontal {
 347         width: ${carousel_width}px;
 348         height: ${carousel_height}px;
 349 }
 350
 351 .jcarousel-skin-ie7 .jcarousel-item {
 352         width: ${slide_width}px;
 353         height: ${slide_height}px;
 354         margin: 0 2px 0 2px;
 355 }
 356
 357 .active {
 358         background-color: #ffc;
 359 }
 360
 361 div#videoContainer {
 362         width: $prop->{width}px;
 363         height: $prop->{height}px;
 364         font-family: Arial, Helvetica, sans-serif;
 365         margin: 0 10px 0px 0;
 366         position: relative;
 367         display: inline;
 368 }
 369
 370
 371 div#subtitle {
 372         bottom: 24px;
 373         color: white;
 374         font-size: 100%;
 375         font-weight: bold;
 376         height: 22px;
 377         line-height: 1em;
 378         margin: 0  0 0 0;
 379         padding: 1px 10px 5px 10px ;
 380         position: absolute;
 381         text-align: center;
 382         width: $html5tv->{video}->{width}px;
 383 }
 384
 385
 386
 387 .jcarousel-skin-ie7 .jcarousel-item img:hover {
 388 //      border-color: #555 !important;
 389 }
 390
 391 .jcarousel-skin-ie7 .jcarousel-item:hover div.thumbnailOverlay {
 392         visibility: visible !important;
 393 }
 394
 395 .jcarousel-skin-ie7 .jcarousel-item div.thumbnailOverlay {
 396         background: black;
 397         bottom: 1px;
 398         color: #00EEFF;
 399         visibility: hidden;
 400         font-size: 10px;
 401         font-family: Arial, Verdana;
 402         font-weight: bold;
 403         line-height: 0.9em;
 404         opacity: 0.5;
 405         position: absolute;
 406         text-align: center;
 407         z-index: 10;
 408         padding: 2px 0 2px 0;
 409         width: ${slide_width}px;
 410 }
 411
 412 .seek_video {
 413         text-align: right;
 414         font-family: monospace;
 415 }
 416
 417         |;
 418
 419         return 1;
 420 }
 421
 422
 423 sub t_srt {
 424         my $t = shift;
 425         my $hh = int( $t / 3600 );
 426         $t -= $hh * 3600;
 427         my $mm = int( $t / 60 );
 428         $t -= $mm * 60;
 429         my $srt = sprintf "%02d:%02d:%04.1f", $hh, $mm, $t;
 430         $srt =~ s{\.}{,};
 431         return $srt;
 432 }
 433
 434 sub save_subtitles {
 435
 436         html5tv || return;
 437
 438         my $nr = 0;
 439         my $srt = "\n";
 440         foreach my $s ( @subtitles ) {
 441                 $srt .= $nr++ . "\n"
 442                         . t_srt( $s->[0] ) . " --> " . t_srt( $s->[1] ) . "\n"
 443                         . $s->[2] . "\n\n"
 444                         ;
 445         }
 446         warn $srt;
 447
 448         write_file $subtitles, $srt;
 449         YAML::DumpFile "$subtitles.yaml", sort { $a->[0] <=> $b->[0] } @subtitles;
 450
 451         print $to_mplayer "sub_remove\n";
 452         print $to_mplayer qq|sub_load "$subtitles"\n|;
 453         print $to_mplayer "sub_select 1\n";
 454 }
 455
 456 sub load_subtitles {
 457         if ( ! -e "$subtitles.yaml" ) {
 458                 warn "no subtitles $subtitles to load\n";
 459                 return;
 460         }
 461         @subtitles = YAML::LoadFile "$subtitles.yaml";
 462         warn "subtitles ", dump @subtitles;
 463         save_subtitles;
 464 }
 465
 466 sub edit_subtitles {
 467         print $to_mplayer qq|pause\n|;
 468         focus_term;
 469         system( qq|vi "$subtitles.yaml"| ) == 0 and load_subtitles;
 470         focus_mplayer;
 471 }
 472
 473 sub add_subtitle {
 474         print $to_mplayer qq|pause\n|;
 475
 476         focus_term;
 477
 478         warn "subtitles ", dump( @subtitles );
 479         print "## ";
 480         my $line = <STDIN>;
 481         $subtitles[ $#subtitles ]->[2] = $line if defined $line;
 482
 483         save_subtitles;
 484
 485         focus_mplayer;
 486
 487         preroll $subtitles[ $#subtitles ]->[0], $line;
 488 }
 489
 490 sub time_pos {
 491         print $to_mplayer qq|get_property time_pos\n|;
 492         my $pos = <$from_mplayer>;
 493         if ( $pos =~ m{^ANS_time_pos=(\d+\.\d+)} ) {
 494                 warn "# time_pos $1\n";
 495                 return $1;
 496         }
 497 }
 498
 499 sub sub_fmt {
 500         my $s = shift;
 501         sprintf "%1.5f - %1.5f %s %s\n", @$s, join(' | ',@_);
 502 }
 503
 504 sub prev_subtitle {
 505         my $pos = time_pos;
 506         my $s = ( grep { $_->[0] < $pos } @subtitles )[0] || return;
 507         warn "<<<< subtitle ", sub_fmt $s;
 508         preroll $s->[0], $s->[2];
 509 #       print $to_mplayer "set_property time_pos $s->[0]\n";
 510 }
 511
 512 sub next_subtitle {
 513         my $pos = time_pos + $preroll;
 514         my $s = ( grep { $_->[0] > $pos } @subtitles )[0] || return;
 515         warn ">>>> subtitle ", sub_fmt $s;
 516         preroll $s->[0], $s->[2];
 517 #       print $to_mplayer "set_property time_pos $s->[0]\n";
 518 }
 519
 520 sub current_subtitle {
 521         my $callback = shift;
 522         my $pos = time_pos;
 523         my $visible;
 524         foreach my $nr ( 0 .. $#subtitles ) {
 525                 my $s = $subtitles[$nr];
 526                 if ( $s->[0] <= $pos && $s->[1] >= $pos ) {
 527                         warn sub_fmt $s, $pos;
 528                         $visible = $nr;
 529                         $callback->( $visible, $pos ) if $callback;
 530                         return ( $visible, $pos );
 531                 }
 532         }
 533         warn "# $pos no visible subtitle\n";
 534 }
 535
 536 sub move_subtitle {
 537         my $offset = shift;
 538         current_subtitle( sub {
 539                 my ( $nr, $pos ) = @_;
 540                 my $new_start = $subtitles[$nr]->[0] += $offset;
 541                 warn "subtitle $nr $pos $offset $new_start\n";
 542                 save_subtitles;
 543                 preroll $new_start, "$pos $offset $new_start";
 544         } );
 545 }
 546
 547
 548
 549 # XXX main epool loop
 550
 551 load_movie;
 552
 553 while ( my $events = epoll_wait($epfd, 10, 1000) ) { # Max 10 events returned, 1s timeout
 554
 555         warn "no events" unless $events;
 556
 557         foreach my $e ( @$events ) {
 558 #               warn "# event: ", dump($e), $/;
 559
 560                 my $fileno = $e->[0];
 561
 562                 if ( $fileno == fileno STDIN ) {
 563                         my $chr;
 564                         sysread STDIN, $chr, 1;
 565                         print $chr;
 566                 } elsif ( $fileno == fileno $from_mplayer ) {
 567                         my $chr;
 568                         sysread $from_mplayer, $chr, 1;
 569                         print $chr;
 570
 571                         if ( $chr =~ m{[\n\r]} ) {
 572
 573                                 exit if $line =~ m{Exiting};
 574
 575                                 if ( $line =~ m{ANS_(\w+)=(\S+)} ) {
 576                                         $prop->{$1} = $2;
 577                                         warn "prop $1 = $2\n";
 578                                 } elsif ( $line =~ m{No bind found for key '(.+)'} ) {
 579
 580                                         # XXX keyboard shortcuts
 581
 582                                           $1 eq 'c'  ? repl
 583                                         : $1 eq ','  ? add_subtitle
 584                                         : $1 eq 'F1' ? prev_subtitle
 585                                         : $1 eq 'F2' ? move_subtitle( -0.3 )
 586                                         : $1 eq 'F3' ? move_subtitle( +0.3 )
 587                                         : $1 eq 'F4' ? next_subtitle
 588                                         : $1 eq 'F5' ? save_subtitles
 589                                         : $1 eq 'F9' ? add_subtitle
 590                                         : $1 eq 'F12' ? edit_subtitles
 591                                         : warn "CUSTOM $1\n"
 592                                         ;
 593
 594                                 } elsif ( $line =~ m{EDL}i ) {
 595
 596                                         print $to_mplayer qq|osd_show_text "$line"\n|;
 597
 598                                         if ( my $pos = time_pos ) {
 599                                                 if ( $line =~ m{start}i ) {
 600                                                         push @subtitles, [ $pos, $pos, '-' ];
 601                                                 } else {
 602                                                         $subtitles[ $#subtitles ]->[1] = $pos;
 603                                                 }
 604                                         }
 605                                 }
 606
 607                                 $line = '';
 608                         } else {
 609                                 $line .= $chr;
 610                         }
 611
 612
 613                 } elsif ( $fileno == fileno $to_mplayer ) {
 614 #                       warn "command";
 615                 } else {
 616                         die "invalid fileno $fileno";
 617                 }
 618         }
 619
 620 }
 621