bin/mplayer.pl

   1 #!/usr/bin/perl
   2
   3 use warnings;
   4 use strict;
   5
   6 use IPC::Open3 qw(open3);
   7 use IO::Epoll;
   8 use Data::Dump qw(dump);
   9 use File::Slurp;
  10 use YAML;
  11 use JSON;
  12 use HTML::TreeBuilder;
  13 use Imager;
  14
  15
  16 my $movie = shift @ARGV;
  17
  18 sub base_dir  { $1 if $_[0] =~ m{^(.+)/[^/]+$} }
  19 sub base_name { $1 if $_[0] =~ m{^.+/([^/]+)$} }
  20
  21 if ( ! $movie && -e 'media/_editing' ) {
  22         $movie = 'media/' . readlink('media/_editing') . '/video.ogv';
  23         warn "using media/_editing -> $movie\n";
  24 } elsif ( -d $movie && $movie =~ m{media/} ) {
  25         $movie .= '/video.ogv';
  26 } elsif ( -f $movie && $movie !~ m{video\.ogv} ) {
  27         my $movie_master = $movie;
  28         $movie = base_dir($movie) . '/video.ogv';
  29         if ( ! -e $movie ) {
  30                 symlink base_name($movie_master), $movie;
  31                 warn "symlink video.ogv -> $movie_master";
  32         } else {
  33                 warn "using symlink video.ogv -> ", readlink $movie;
  34         }
  35 } elsif ( -f $movie ) {
  36         warn "using video $movie";
  37 } else {
  38         die "Usage: $0 media/conference-Title_of_talk[/video.ogv'\n";
  39 }
  40
  41 my $media_part = my $media_dir = base_dir($movie);
  42 $media_part =~ s{media/}{};
  43 $media_part =~ s{/$}{};
  44
  45 unlink 'media/_editing';
  46 symlink $media_part, 'media/_editing';
  47
  48 warn "# media_part $media_part\n";
  49
  50 my $edl = "/dev/shm/edl";
  51 my $subtitles = $movie;
  52 $subtitles =~ s{\.\w+$}{.srt};
  53
  54 my $preroll = 3;
  55
  56 my $slide_factor = 4; # 1/4 size of video
  57
  58 our $to_mplayer;
  59 our $from_mplayer;
  60 our $err_mplayer;
  61 our $prop = {};
  62
  63 my $pid = open3( $to_mplayer, $from_mplayer, $err_mplayer,
  64          'mplayer',
  65                 '-slave', '-idle',
  66                 '-quiet',
  67                 '-edlout', $edl,
  68                 '-osdlevel', 3,
  69                 '-vf' => 'screenshot',
  70 );
  71
  72 my $epfd = epoll_create(10);
  73
  74 epoll_ctl($epfd, EPOLL_CTL_ADD, fileno STDIN         , EPOLLIN  ) >= 0 || die $!;
  75 epoll_ctl($epfd, EPOLL_CTL_ADD, fileno $from_mplayer , EPOLLIN  ) >= 0 || die $!;
  76 #epoll_ctl($epfd, EPOLL_CTL_ADD, fileno $to_mplayer   , EPOLLOUT ) >= 0 || die $!;
  77
  78 sub load_subtitles;
  79
  80 sub load_movie {
  81         warn "$movie ", -s $movie, " bytes $edl\n";
  82         print $to_mplayer qq|loadfile "$movie"\n|;
  83         print $to_mplayer "get_property $_\n" foreach ( qw/metadata video_codec video_bitrate width height fps length/ );
  84         load_subtitles;
  85 }
  86
  87
  88 my $term_id = `xdotool getwindowfocus`;
  89 our $mplayer_id;
  90
  91
  92 sub focus_mplayer {
  93         $mplayer_id ||= `xdotool search mplayer`;
  94         warn "focus_mplayer $mplayer_id\n";
  95         system "xdotool windowactivate $mplayer_id"
  96 }
  97
  98 sub focus_term {
  99         warn "focus_term $term_id\n";
 100         system "xdotool windowactivate $term_id";
 101 }
 102
 103 sub preroll {
 104         my ( $pos, $osd ) = @_;
 105         $osd =~ s{\W+}{ }gs;
 106         warn "PREROLL $pos $osd\n";
 107         print $to_mplayer "osd_show_text \"PREROLL $osd\" ", $preroll * 1000, "\n";
 108         my $to = $pos - $preroll;
 109         $to = 0 if $to < 0;
 110         print $to_mplayer "set_property time_pos $to\n";
 111         print $to_mplayer "get_property time_pos\n";
 112         print $to_mplayer "play\n";
 113 }
 114
 115
 116 $|=1;
 117
 118 my $line;
 119 my $repl;
 120
 121 sub repl {
 122         print "> ";
 123         my $cmd = <STDIN>;
 124         warn ">>> $cmd\n";
 125         print $to_mplayer $cmd;
 126 }
 127
 128
 129 our @subtitles;
 130
 131 sub slide_jpg {
 132         sprintf "%s/s/%d/%03d.jpg", $media_dir, @_;
 133 }
 134
 135 sub html5tv {
 136
 137         if ( ! $prop->{width} || ! $prop->{height} ) {
 138                 warn "SKIP no size yet\n";
 139                 return;
 140         }
 141
 142         if ( ! @subtitles ) {
 143                 warn "SKIP no subtitles yet\n";
 144                 return;
 145         }
 146
 147
 148         my $sync;
 149
 150         my @slide_t;
 151
 152         my @videos;
 153
 154         foreach my $s ( @subtitles ) {
 155                 push @{ $sync->{htmlEvents}->{'#subtitle'} }, {
 156                         startTime => $s->[0],
 157                         endTime   => $s->[1],
 158                         html      => $s->[2],
 159                 };
 160
 161                 if ( $s->[2] =~ m{video:(.+)} ) {
 162                         my $video = $1;
 163                         my $path = "$media_dir/$video";
 164                         if ( ! -e $path ) {
 165                                 warn "MISSING $path: $!\n";
 166                         } else {
 167                                 my $frame_dir = "$media_dir/s/$video";
 168                                 system "mplayer -vo jpeg:outdir=$frame_dir -frames 1 -ss 0 $media_dir/$video"
 169                                         if ! -e $frame_dir;
 170                                 push @videos, [ @$s, $video ];
 171                         }
 172                 }
 173
 174                 next unless $s->[2] =~ m{\[(\d+)\]};
 175
 176
 177                 push @{ $sync->{customEvents} }, {
 178                         startTime => $s->[0],
 179                         endTime   => $s->[1],
 180                         action    => 'chapterChange',
 181                         args => {
 182                                 carousel => 'theCarousel',
 183                                 id => "chapter$1",
 184                                 title => $s->[2],
 185                                 description => $s->[2],
 186                                 src => slide_jpg( 4 => $1 ),
 187                                 href => '',
 188                         },
 189                 };
 190
 191                 push @slide_t, $s->[0];
 192         }
 193
 194         foreach ( 0 .. $#slide_t ) {
 195                 my $nr = $_ + 1;
 196                 push @{ $sync->{htmlEvents}->{'#slide'} }, {
 197                         startTime => $slide_t[$_],
 198                         endTime   => $slide_t[$_ + 1] || $prop->{length},
 199                         html      => '<img src=' . slide_jpg( 1 => $_ + 1 ) . '>',
 200                 };
 201         }
 202
 203         my @slides_hires = glob '$media_dir/s/hires/p*.jpg';
 204         @slides_hires    = glob 'shot*.png' unless @slides_hires;
 205
 206         foreach my $factor ( 4, 2, 1 ) {
 207                 my $w = $prop->{width}  / $factor;
 208                 my $h = $prop->{height} / $factor;
 209
 210                 my $path = "$media_dir/s";
 211                 if ( ! -d $path ) {
 212                         warn "create slides imaes in $path";
 213                         mkdir $path;
 214                 }
 215
 216                 $path .= '/' . $factor;
 217
 218                 if ( ! -d $path ) {
 219                         mkdir $path;
 220                         warn "created $path\n";
 221
 222                 }
 223
 224                 foreach my $hires ( @slides_hires ) {
 225
 226                         my $nr = $1 if $hires =~ m{^.+(\d+)\.\w+$} || warn "can't find number in $hires";
 227                         next unless $nr;
 228                         my $file = slide_jpg( $factor => $nr );
 229                         warn "slide $hires -> $file\n";
 230                         next if -e $file;
 231
 232                         my $im = Imager->new( file => $hires );
 233                         $im->scale( xpixels => $w, ypixels => $h, type => 'min' )->write( file => $file );
 234                         warn "resized $file ", -s $file, " bytes\n";
 235                 }
 236
 237         }
 238
 239         my ( $slide_width, $slide_height );
 240
 241         my $im = Imager->new( file => slide_jpg( 1 => 1 ) )
 242                         || Imager->new( file => "shot0001.png" ) # from mplayer [s]
 243                         ;
 244
 245         if ( $im ) {
 246                 $slide_width  = $im->getwidth  / $slide_factor;
 247                 $slide_height = $im->getheight / $slide_factor;
 248         } else {
 249                 warn "can't find first slide default to 1/$slide_factor of video size\n";
 250                 $slide_width  = $prop->{width}  / $slide_factor;
 251                 $slide_height = $prop->{height} / $slide_factor;
 252         }
 253
 254         my $html5tv = {
 255                 sync => $sync,
 256                 video => $prop,
 257                 slide => {
 258                         width => $slide_width,
 259                         height => $slide_height,
 260                 },
 261         };
 262
 263         $html5tv->{html}->{video_tags} =
 264                 join("\n",
 265                         map {
 266                                 my $s = $_;
 267                                 my $id = $s->[3];
 268                                 $id =~ s{\W+}{_}g;
 269
 270                                 push @{ $html5tv->{sync}->{customEvents} }, {
 271                                         startTime => $s->[0],
 272                                         endTime   => $s->[1],
 273                                         action    => 'additional_video',
 274                                         args => {
 275                                                 id => $id,
 276                                                 title => $s->[2],
 277                                                 description => $s->[2],
 278                                                 src => "$media_dir/s/1/00000001.jpg",
 279                                                 href => '',
 280                                         },
 281                                 };
 282
 283                                 qq|
 284                                         <video id="$id" style="display: none" controls="controls" width="$html5tv->{video}->{width}px" height="$html5tv->{video}->{height}px">
 285                                         <source src="$media_dir/$_->[3]" />
 286                                         </video>
 287                                 |
 288                         } @videos
 289                 )
 290         ;
 291
 292         sub customEvents_sorted {
 293
 294                 if ( ref $html5tv->{sync}->{customEvents} ne 'ARRAY' ) {
 295                         my $max =
 296                         warn "ERROR: no slide markers [1] .. [", scalar @slides_hires, "] in subtitles\n";
 297                         return;
 298                 }
 299
 300                 sort { $a->{startTime} <=> $b->{startTime} }
 301                 @{ $html5tv->{sync}->{customEvents} }
 302         }
 303
 304         my $index = 1;
 305
 306         $_->{args}->{index} = $index++ foreach customEvents_sorted;
 307
 308         warn "last customEvent $index\n";
 309
 310         $html5tv->{html}->{subtitles_table}
 311                 = qq|<table id="subtitles">|
 312                 . join("\n",
 313                         map { qq|
 314                                 <tr id="sub_$_->{index}">
 315                                         <td class="seek_video">$_->{startTime}</td>
 316                                         <td class="seek_video">$_->{endTime}</td>
 317                                         <td>$_->{args}->{title}</td>
 318                                 </tr>
 319                         | }
 320                         customEvents_sorted
 321                 )
 322                 . qq|</table><a href="$media_dir/video.srt">download subtitles</a>|
 323                 ;
 324
 325         my $hCalendar = '<div style="color: red">Create <tt>hCalendar.html</tt> to fill this space</div>';
 326         my $hcal_path = '$media_dir/hCalendar.html';
 327         if ( -e $hcal_path ) {
 328                 $html5tv->{hCalendar} = read_file $hcal_path;
 329                 my $tree = HTML::TreeBuilder->new;
 330                 $tree->parse_file($hcal_path);
 331                 if ( my $vevent = $tree->look_down( class => 'vevent' ) ) {
 332                         $html5tv->{title} = $vevent->look_down( class=> 'summary' )->as_trimmed_text;
 333                 }
 334         }
 335
 336         warn "# html5tv ", dump $html5tv;
 337
 338         my $sync_path = "$media_dir/video.js";
 339         write_file $sync_path, "var html5tv = " . to_json($html5tv) . " ;\n";
 340         warn "sync $sync_path ", -s $sync_path, " bytes\n";
 341
 342         my $html = read_file 'www/tv.html';
 343         $html =~ s|{([^}]+)}|my $n = $1; $n =~ s(\.)(}->{)g; eval "\$html5tv->{$n}"|egs ||
 344                 warn "no interpolation in template!";
 345
 346         write_file "www/_editing.html", $html;
 347         $html =~ s{media/_editing}{media/$media_part}gs;
 348         write_file "www/$media_part.html", $html;
 349
 350         my $carousel_width = $prop->{width} + $slide_width - 80;
 351         $carousel_width -= $carousel_width % ( $slide_width + 6 ); # round to full slide
 352         my $carousel_height =   $slide_height + 2;
 353
 354         write_file "$media_dir/video.css", qq|
 355
 356 .jcarousel-skin-ie7 .jcarousel-container-horizontal,
 357 .jcarousel-skin-ie7 .jcarousel-clip-horizontal {
 358         width: ${carousel_width}px;
 359         height: ${carousel_height}px;
 360 }
 361
 362 .jcarousel-skin-ie7 .jcarousel-item {
 363         width: ${slide_width}px;
 364         height: ${slide_height}px;
 365         margin: 0 2px 0 2px;
 366 }
 367
 368 .active {
 369         background-color: #ffc;
 370 }
 371
 372 div#videoContainer {
 373         width: $prop->{width}px;
 374         height: $prop->{height}px;
 375         font-family: Arial, Helvetica, sans-serif;
 376         margin: 0 10px 0px 0;
 377         position: relative;
 378         display: inline;
 379 }
 380
 381
 382 div#subtitle {
 383         bottom: 24px;
 384         color: white;
 385         font-size: 100%;
 386         font-weight: bold;
 387         height: 22px;
 388         line-height: 1em;
 389         margin: 0  0 0 0;
 390         padding: 1px 10px 5px 10px ;
 391         position: absolute;
 392         text-align: center;
 393         width: $html5tv->{video}->{width}px;
 394 }
 395
 396
 397
 398 .jcarousel-skin-ie7 .jcarousel-item img:hover {
 399 //      border-color: #555 !important;
 400 }
 401
 402 .jcarousel-skin-ie7 .jcarousel-item:hover div.thumbnailOverlay {
 403         visibility: visible !important;
 404 }
 405
 406 .jcarousel-skin-ie7 .jcarousel-item div.thumbnailOverlay {
 407         background: black;
 408         bottom: 1px;
 409         color: #00EEFF;
 410         visibility: hidden;
 411         font-size: 10px;
 412         font-family: Arial, Verdana;
 413         font-weight: bold;
 414         line-height: 0.9em;
 415         opacity: 0.5;
 416         position: absolute;
 417         text-align: center;
 418         z-index: 10;
 419         padding: 2px 0 2px 0;
 420         width: ${slide_width}px;
 421 }
 422
 423 .seek_video {
 424         text-align: right;
 425         font-family: monospace;
 426 }
 427
 428         |;
 429
 430         return 1;
 431 }
 432
 433
 434 sub t_srt {
 435         my $t = shift;
 436         my $hh = int( $t / 3600 );
 437         $t -= $hh * 3600;
 438         my $mm = int( $t / 60 );
 439         $t -= $mm * 60;
 440         my $srt = sprintf "%02d:%02d:%04.1f", $hh, $mm, $t;
 441         $srt =~ s{\.}{,};
 442         return $srt;
 443 }
 444
 445 sub save_subtitles {
 446
 447         html5tv || return;
 448
 449         my $nr = 0;
 450         my $srt = "\n";
 451         foreach my $s ( @subtitles ) {
 452                 $srt .= $nr++ . "\n"
 453                         . t_srt( $s->[0] ) . " --> " . t_srt( $s->[1] ) . "\n"
 454                         . $s->[2] . "\n\n"
 455                         ;
 456         }
 457         warn $srt;
 458
 459         write_file $subtitles, $srt;
 460         YAML::DumpFile "$subtitles.yaml", sort { $a->[0] <=> $b->[0] } @subtitles;
 461
 462         print $to_mplayer "sub_remove\n";
 463         print $to_mplayer qq|sub_load "$subtitles"\n|;
 464         print $to_mplayer "sub_select 1\n";
 465 }
 466
 467 sub load_subtitles {
 468         if ( ! -e "$subtitles.yaml" ) {
 469                 warn "no subtitles $subtitles to load\n";
 470                 return;
 471         }
 472         @subtitles = YAML::LoadFile "$subtitles.yaml";
 473         warn "subtitles ", dump @subtitles;
 474         save_subtitles;
 475 }
 476
 477 sub edit_subtitles {
 478         print $to_mplayer qq|pause\n|;
 479         focus_term;
 480         system( qq|vi "$subtitles.yaml"| ) == 0 and load_subtitles;
 481         focus_mplayer;
 482 }
 483
 484 sub add_subtitle {
 485         print $to_mplayer qq|pause\n|;
 486
 487         focus_term;
 488
 489         warn "subtitles ", dump( @subtitles );
 490         print "## ";
 491         my $line = <STDIN>;
 492         $subtitles[ $#subtitles ]->[2] = $line if defined $line;
 493
 494         save_subtitles;
 495
 496         focus_mplayer;
 497
 498         preroll $subtitles[ $#subtitles ]->[0], $line;
 499 }
 500
 501 sub time_pos {
 502         print $to_mplayer qq|get_property time_pos\n|;
 503         my $pos = <$from_mplayer>;
 504         if ( $pos =~ m{^ANS_time_pos=(\d+\.\d+)} ) {
 505                 warn "# time_pos $1\n";
 506                 return $1;
 507         }
 508 }
 509
 510 sub sub_fmt {
 511         my $s = shift;
 512         sprintf "%1.5f - %1.5f %s %s\n", @$s, join(' | ',@_);
 513 }
 514
 515 sub prev_subtitle {
 516         my $pos = time_pos;
 517         my $s = ( grep { $_->[0] < $pos } @subtitles )[0] || return;
 518         warn "<<<< subtitle ", sub_fmt $s;
 519         preroll $s->[0], $s->[2];
 520 #       print $to_mplayer "set_property time_pos $s->[0]\n";
 521 }
 522
 523 sub next_subtitle {
 524         my $pos = time_pos + $preroll;
 525         my $s = ( grep { $_->[0] > $pos } @subtitles )[0] || return;
 526         warn ">>>> subtitle ", sub_fmt $s;
 527         preroll $s->[0], $s->[2];
 528 #       print $to_mplayer "set_property time_pos $s->[0]\n";
 529 }
 530
 531 sub current_subtitle {
 532         my $callback = shift;
 533         my $pos = time_pos;
 534         my $visible;
 535         foreach my $nr ( 0 .. $#subtitles ) {
 536                 my $s = $subtitles[$nr];
 537                 if ( $s->[0] <= $pos && $s->[1] >= $pos ) {
 538                         warn sub_fmt $s, $pos;
 539                         $visible = $nr;
 540                         $callback->( $visible, $pos ) if $callback;
 541                         return ( $visible, $pos );
 542                 }
 543         }
 544         warn "# $pos no visible subtitle\n";
 545 }
 546
 547 sub move_subtitle {
 548         my $offset = shift;
 549         current_subtitle( sub {
 550                 my ( $nr, $pos ) = @_;
 551                 my $new_start = $subtitles[$nr]->[0] += $offset;
 552                 warn "subtitle $nr $pos $offset $new_start\n";
 553                 save_subtitles;
 554                 preroll $new_start, "$pos $offset $new_start";
 555         } );
 556 }
 557
 558
 559
 560 # XXX main epool loop
 561
 562 load_movie;
 563
 564 while ( my $events = epoll_wait($epfd, 10, 1000) ) { # Max 10 events returned, 1s timeout
 565
 566         warn "no events" unless $events;
 567
 568         foreach my $e ( @$events ) {
 569 #               warn "# event: ", dump($e), $/;
 570
 571                 my $fileno = $e->[0];
 572
 573                 if ( $fileno == fileno STDIN ) {
 574                         my $chr;
 575                         sysread STDIN, $chr, 1;
 576                         print $chr;
 577                 } elsif ( $fileno == fileno $from_mplayer ) {
 578                         my $chr;
 579                         sysread $from_mplayer, $chr, 1;
 580                         print $chr;
 581
 582                         if ( $chr =~ m{[\n\r]} ) {
 583
 584                                 exit if $line =~ m{Exiting};
 585
 586                                 if ( $line =~ m{ANS_(\w+)=(\S+)} ) {
 587                                         $prop->{$1} = $2;
 588                                         warn "prop $1 = $2\n";
 589                                 } elsif ( $line =~ m{No bind found for key '(.+)'} ) {
 590
 591                                         # XXX keyboard shortcuts
 592
 593                                           $1 eq 'c'  ? repl
 594                                         : $1 eq ','  ? add_subtitle
 595                                         : $1 eq 'F1' ? prev_subtitle
 596                                         : $1 eq 'F2' ? move_subtitle( -0.3 )
 597                                         : $1 eq 'F3' ? move_subtitle( +0.3 )
 598                                         : $1 eq 'F4' ? next_subtitle
 599                                         : $1 eq 'F5' ? save_subtitles
 600                                         : $1 eq 'F9' ? add_subtitle
 601                                         : $1 eq 'F12' ? edit_subtitles
 602                                         : warn "CUSTOM $1\n"
 603                                         ;
 604
 605                                 } elsif ( $line =~ m{EDL}i ) {
 606
 607                                         print $to_mplayer qq|osd_show_text "$line"\n|;
 608
 609                                         if ( my $pos = time_pos ) {
 610                                                 if ( $line =~ m{start}i ) {
 611                                                         push @subtitles, [ $pos, $pos, '-' ];
 612                                                 } else {
 613                                                         $subtitles[ $#subtitles ]->[1] = $pos;
 614                                                 }
 615                                         }
 616                                 } elsif ( $line =~ m{(shot\d+.png)} ) {
 617                                         my $shot = $1;
 618                                         my $t = time_pos;
 619                                         warn "shot $t $shot\n";
 620                                         my $dir = "$media_dir/s/shot";
 621                                         if ( ! -e $dir ) {
 622                                                 mkdir $dir;
 623                                                 warn "created $dir\n";
 624                                         }
 625                                         rename $1, "$dir/$t.png";
 626
 627                                         my $hires = "media_dir/s/hires";
 628                                         mkdir $hires unless -e $hires;
 629                                         my $max_slide = scalar( glob("$hires/*") ) || 0;
 630                                         symlink "$dir/$t.png", "$hires/s$max_slide.png";
 631                                         push @subtitles, [ $t, $t, "[$max_slide] video time $t slide $max_slide" ];
 632                                         warn "created slide $max_slide at $t from $shot\n";
 633                                 }
 634
 635                                 $line = '';
 636                         } else {
 637                                 $line .= $chr;
 638                         }
 639
 640
 641                 } elsif ( $fileno == fileno $to_mplayer ) {
 642 #                       warn "command";
 643                 } else {
 644                         die "invalid fileno $fileno";
 645                 }
 646         }
 647
 648 }
 649