bin/mplayer.pl

   1 #!/usr/bin/perl
   2
   3 use warnings;
   4 use strict;
   5
   6 use IPC::Open3 qw(open3);
   7 use IO::Epoll;
   8 use Data::Dump qw(dump);
   9 use File::Slurp;
  10 use YAML;
  11 use JSON;
  12 use HTML::TreeBuilder;
  13 use Imager;
  14
  15
  16 my $movie = shift @ARGV;
  17
  18 sub base_dir { $1 if $_[0] =~ m{^(.+)/[^/]+$} }
  19
  20 if ( ! $movie && -e 'media/editing' ) {
  21         $movie = readlink 'media/editing';
  22 } elsif ( -d $movie && $movie =~ m{media/} ) {
  23         $movie .= '/video.ogv';
  24 } elsif ( -f $movie && $movie !~ m{video\.ogv} ) {
  25         my $movie_master = $movie;
  26         my $movie = base_dir($movie) . '/video.ogv';
  27         symlink $movie_master, $movie;
  28         warn "symlink $movie_master <- $movie\n";
  29 } elsif ( -f $movie ) {
  30         warn "using video $movie";
  31 } else {
  32         die "Usage: $0 media/conference-Title_of_talk[/video.ogv'\n";
  33 }
  34
  35 my $media_dir = base_dir($movie);
  36
  37 unlink 'media/editing';
  38 symlink $movie, 'media/editing';
  39
  40 warn "# media_dir $media_dir\n";
  41
  42 my $edl = "/dev/shm/edl";
  43 my $subtitles = $movie;
  44 $subtitles =~ s{\.\w+$}{.srt};
  45
  46 my $preroll = 3;
  47
  48 my $slide_factor = 4; # 1/4 size of video
  49
  50 our $to_mplayer;
  51 our $from_mplayer;
  52 our $err_mplayer;
  53 our $prop = {};
  54
  55 my $pid = open3( $to_mplayer, $from_mplayer, $err_mplayer,
  56          'mplayer',
  57                 '-slave', '-idle',
  58                 '-quiet',
  59                 '-edlout', $edl,
  60                 '-osdlevel', 3,
  61                 '-vf' => 'screenshot',
  62 );
  63
  64 my $epfd = epoll_create(10);
  65
  66 epoll_ctl($epfd, EPOLL_CTL_ADD, fileno STDIN         , EPOLLIN  ) >= 0 || die $!;
  67 epoll_ctl($epfd, EPOLL_CTL_ADD, fileno $from_mplayer , EPOLLIN  ) >= 0 || die $!;
  68 #epoll_ctl($epfd, EPOLL_CTL_ADD, fileno $to_mplayer   , EPOLLOUT ) >= 0 || die $!;
  69
  70 sub load_movie {
  71         warn "$movie ", -s $movie, " bytes $edl\n";
  72         print $to_mplayer qq|loadfile "$movie"\n|;
  73         print $to_mplayer "get_property $_\n" foreach ( qw/metadata video_codec video_bitrate width height fps length/ );
  74 }
  75
  76
  77 my $term_id = `xdotool getwindowfocus`;
  78 our $mplayer_id;
  79
  80
  81 sub focus_mplayer {
  82         $mplayer_id ||= `xdotool search mplayer`;
  83         warn "focus_mplayer $mplayer_id\n";
  84         system "xdotool windowactivate $mplayer_id"
  85 }
  86
  87 sub focus_term {
  88         warn "focus_term $term_id\n";
  89         system "xdotool windowactivate $term_id";
  90 }
  91
  92 sub preroll {
  93         my ( $pos, $osd ) = @_;
  94         $osd =~ s{\W+}{ }gs;
  95         warn "PREROLL $pos $osd\n";
  96         print $to_mplayer "osd_show_text \"PREROLL $osd\" ", $preroll * 1000, "\n";
  97         my $to = $pos - $preroll;
  98         $to = 0 if $to < 0;
  99         print $to_mplayer "set_property time_pos $to\n";
 100         print $to_mplayer "get_property time_pos\n";
 101         print $to_mplayer "play\n";
 102 }
 103
 104
 105 $|=1;
 106
 107 my $line;
 108 my $repl;
 109
 110 sub repl {
 111         print "> ";
 112         my $cmd = <STDIN>;
 113         warn ">>> $cmd\n";
 114         print $to_mplayer $cmd;
 115 }
 116
 117
 118 our @subtitles;
 119
 120 sub html5tv {
 121
 122         if ( ! $prop->{width} || ! $prop->{height} ) {
 123                 warn "SKIP no size yet\n";
 124                 return;
 125         }
 126
 127         if ( ! @subtitles ) {
 128                 warn "SKIP no subtitles yet\n";
 129                 return;
 130         }
 131
 132
 133         my $sync;
 134
 135         my @slide_t;
 136
 137         my @videos;
 138
 139         foreach my $s ( @subtitles ) {
 140                 push @{ $sync->{htmlEvents}->{'#subtitle'} }, {
 141                         startTime => $s->[0],
 142                         endTime   => $s->[1],
 143                         html      => $s->[2],
 144                 };
 145
 146                 if ( $s->[2] =~ m{video:(.+)} ) {
 147                         my $video = $1;
 148                         my $path = "$media_dir/$video";
 149                         if ( ! -e $path ) {
 150                                 warn "MISSING $path: $!\n";
 151                         } else {
 152                                 my $frame_dir = "$media_dir/s/$video";
 153                                 system "mplayer -vo jpeg:outdir=$frame_dir -frames 1 -ss 0 $media_dir/$video"
 154                                         if ! -e $frame_dir;
 155                                 push @videos, [ @$s, $video ];
 156                         }
 157                 }
 158
 159                 next unless $s->[2] =~ m{\[(\d+)\]};
 160
 161
 162                 push @{ $sync->{customEvents} }, {
 163                         startTime => $s->[0],
 164                         endTime   => $s->[1],
 165                         action    => 'chapterChange',
 166                         args => {
 167                                 carousel => 'theCarousel',
 168                                 id => "chapter$1",
 169                                 title => $s->[2],
 170                                 description => $s->[2],
 171                                 src => sprintf('%s/s/%dx%d/p%03d.jpg', $media_dir, $prop->{width} / $slide_factor, $prop->{height} / $slide_factor, $1),
 172                                 href => '',
 173                         },
 174                 };
 175
 176                 push @slide_t, $s->[0];
 177         }
 178
 179         my $res = $prop->{width} . 'x' . $prop->{height};
 180
 181         foreach ( 0 .. $#slide_t ) {
 182                 push @{ $sync->{htmlEvents}->{'#slide'} }, {
 183                         startTime => $slide_t[$_],
 184                         endTime   => $slide_t[$_ + 1] || $prop->{length},
 185                         html      => sprintf( '<img src=%s/s/%s/p%03d.jpg>', $media_dir, $res, $_ + 1 ),
 186                 };
 187         }
 188
 189         my @slides_hires = glob '$media_dir/s/hires/p*.jpg';
 190         @slides_hires    = glob 'shot*.png' unless @slides_hires;
 191         my $factor_s_path;
 192
 193         foreach my $factor ( 4, 2, 1 ) {
 194                 my $w = $prop->{width}  / $factor;
 195                 my $h = $prop->{height} / $factor;
 196
 197                 my $path = "$media_dir/s/${w}x${h}";
 198                 $factor_s_path->{$factor} = $path;
 199
 200                 if ( ! -d $path ) {
 201                         mkdir $path;
 202                         warn "created $path\n";
 203
 204                         foreach my $hires ( @slides_hires ) {
 205
 206                                 my $file = $hires;
 207                                 $file =~ s{^.+/(p\d+\.\w)}{$path/$1};
 208
 209                                 my $im = Imager->new( file => $hires );
 210                                 $im->scale( xpixels => $w, ypixels => $h, type => 'min' )->write( file => $file );
 211                                 warn "resized $file ", -s $file, " bytes\n";
 212                         }
 213                 }
 214
 215         }
 216
 217         my ( $slide_width, $slide_height );
 218
 219         my $im = Imager->new( file => $factor_s_path->{ 1 } . '/p001.jpg"')
 220                         || Imager->new( file => "shot0001.png" ) # from mplayer [s]
 221                         ;
 222
 223         if ( $im ) {
 224                 $slide_width  = $im->getwidth  / $slide_factor;
 225                 $slide_height = $im->getheight / $slide_factor;
 226         } else {
 227                 warn "can't find first slide default to 1/$slide_factor of video size\n";
 228                 $slide_width  = $prop->{width}  / $slide_factor;
 229                 $slide_height = $prop->{height} / $slide_factor;
 230         }
 231
 232         my $html5tv = {
 233                 sync => $sync,
 234                 video => $prop,
 235                 slide => {
 236                         width => $slide_width,
 237                         height => $slide_height,
 238                 },
 239         };
 240
 241         $html5tv->{video_tags} =
 242                 join("\n",
 243                         map {
 244                                 my $s = $_;
 245                                 my $id = $s->[3];
 246                                 $id =~ s{\W+}{_}g;
 247
 248                                 push @{ $html5tv->{sync}->{customEvents} }, {
 249                                         startTime => $s->[0],
 250                                         endTime   => $s->[1],
 251                                         action    => 'additional_video',
 252                                         args => {
 253                                                 id => $id,
 254                                                 title => $s->[2],
 255                                                 description => $s->[2],
 256                                                 src => "$media_dir/s/$s->[3]/00000001.jpg",
 257                                                 href => '',
 258                                         },
 259                                 };
 260
 261                                 qq|
 262                                         <video id="$id" style="display: none" controls="controls" width="$html5tv->{video}->{width}px" height="$html5tv->{video}->{height}px">
 263                                         <source src="$media_dir/$_->[3]" />
 264                                         </video>
 265                                 |
 266                         } @videos
 267                 )
 268         ;
 269
 270         sub customEvents_sorted {
 271
 272                 if ( ref $html5tv->{sync}->{customEvents} ne 'ARRAY' ) {
 273                         my $max =
 274                         warn "ERROR: no slide markers [1] .. [", scalar @slides_hires, "] in subtitles\n";
 275                         return;
 276                 }
 277
 278                 sort { $a->{startTime} <=> $b->{startTime} }
 279                 @{ $html5tv->{sync}->{customEvents} }
 280         }
 281
 282         my $index = 1;
 283
 284         $_->{args}->{index} = $index++ foreach customEvents_sorted;
 285
 286         warn "last customEvent $index\n";
 287
 288         $html5tv->{subtitles_table}
 289                 = qq|<table id="subtitles">|
 290                 . join("\n",
 291                         map { qq|
 292                                 <tr id="sub_$_->{index}">
 293                                         <td class="seek_video">$_->{startTime}</td>
 294                                         <td class="seek_video">$_->{endTime}</td>
 295                                         <td>$_->{args}->{title}</td>
 296                                 </tr>
 297                         | }
 298                         customEvents_sorted
 299                 )
 300                 . qq|</table><a href="$media_dir/video.srt">download subtitles</a>|
 301                 ;
 302
 303         my $hcalendar = '<div style="color: red">Create <tt>hcalendar.html</tt> to fill this space</div>';
 304         my $hcal_path = '$media_dir/hcalendar.html';
 305         if ( -e $hcal_path ) {
 306                 $html5tv->{hcalendar} = read_file $hcal_path;
 307                 my $tree = HTML::TreeBuilder->new;
 308                 $tree->parse_file($hcal_path);
 309                 if ( my $vevent = $tree->look_down( class => 'vevent' ) ) {
 310                         $html5tv->{title} = $vevent->look_down( class=> 'summary' )->as_trimmed_text;
 311                 }
 312         }
 313
 314         warn "# html5tv ", dump $html5tv;
 315
 316         my $sync_path = '$media_dir/video.js';
 317         write_file $sync_path, "var html5tv = " . to_json($html5tv) . " ;\n";
 318         warn "sync $sync_path ", -s $sync_path, " bytes\n";
 319
 320         my $html = read_file 'www/tv.html';
 321         $html =~ s|{([^}]+)}|my $n = $1; $n =~ s(\.)(}->{)g; eval "\$html5tv->{$n}"|egs ||
 322                 warn "no interpolation in template!";
 323
 324         write_file '$media_dir.html', $html;
 325
 326         my $carousel_width = $prop->{width} + $slide_width - 80;
 327         $carousel_width -= $carousel_width % ( $slide_width + 6 ); # round to full slide
 328         my $carousel_height =   $slide_height + 2;
 329
 330         write_file '$media_dir/video.css', qq|
 331
 332 .jcarousel-skin-ie7 .jcarousel-container-horizontal,
 333 .jcarousel-skin-ie7 .jcarousel-clip-horizontal {
 334         width: ${carousel_width}px;
 335         height: ${carousel_height}px;
 336 }
 337
 338 .jcarousel-skin-ie7 .jcarousel-item {
 339         width: ${slide_width}px;
 340         height: ${slide_height}px;
 341         margin: 0 2px 0 2px;
 342 }
 343
 344 .active {
 345         background-color: #ffc;
 346 }
 347
 348 div#videoContainer {
 349         width: $prop->{width}px;
 350         height: $prop->{height}px;
 351         font-family: Arial, Helvetica, sans-serif;
 352         margin: 0 10px 0px 0;
 353         position: relative;
 354         display: inline;
 355 }
 356
 357
 358 div#subtitle {
 359         bottom: 24px;
 360         color: white;
 361         font-size: 100%;
 362         font-weight: bold;
 363         height: 22px;
 364         line-height: 1em;
 365         margin: 0  0 0 0;
 366         padding: 1px 10px 5px 10px ;
 367         position: absolute;
 368         text-align: center;
 369         width: $html5tv->{video}->{width}px;
 370 }
 371
 372
 373
 374 .jcarousel-skin-ie7 .jcarousel-item img:hover {
 375 //      border-color: #555 !important;
 376 }
 377
 378 .jcarousel-skin-ie7 .jcarousel-item:hover div.thumbnailOverlay {
 379         visibility: visible !important;
 380 }
 381
 382 .jcarousel-skin-ie7 .jcarousel-item div.thumbnailOverlay {
 383         background: black;
 384         bottom: 1px;
 385         color: #00EEFF;
 386         visibility: hidden;
 387         font-size: 10px;
 388         font-family: Arial, Verdana;
 389         font-weight: bold;
 390         line-height: 0.9em;
 391         opacity: 0.5;
 392         position: absolute;
 393         text-align: center;
 394         z-index: 10;
 395         padding: 2px 0 2px 0;
 396         width: ${slide_width}px;
 397 }
 398
 399 .seek_video {
 400         text-align: right;
 401         font-family: monospace;
 402 }
 403
 404         |;
 405
 406         return 1;
 407 }
 408
 409
 410 sub t_srt {
 411         my $t = shift;
 412         my $hh = int( $t / 3600 );
 413         $t -= $hh * 3600;
 414         my $mm = int( $t / 60 );
 415         $t -= $mm * 60;
 416         my $srt = sprintf "%02d:%02d:%04.1f", $hh, $mm, $t;
 417         $srt =~ s{\.}{,};
 418         return $srt;
 419 }
 420
 421 sub save_subtitles {
 422
 423         html5tv || return;
 424
 425         my $nr = 0;
 426         my $srt = "\n";
 427         foreach my $s ( @subtitles ) {
 428                 $srt .= $nr++ . "\n"
 429                         . t_srt( $s->[0] ) . " --> " . t_srt( $s->[1] ) . "\n"
 430                         . $s->[2] . "\n\n"
 431                         ;
 432         }
 433         warn $srt;
 434
 435         write_file $subtitles, $srt;
 436         YAML::DumpFile "$subtitles.yaml", sort { $a->[0] <=> $b->[0] } @subtitles;
 437
 438         print $to_mplayer "sub_remove\n";
 439         print $to_mplayer qq|sub_load "$subtitles"\n|;
 440         print $to_mplayer "sub_select 1\n";
 441 }
 442
 443 sub load_subtitles {
 444         @subtitles = YAML::LoadFile "$subtitles.yaml";
 445         warn "subtitles ", dump @subtitles;
 446         save_subtitles;
 447 }
 448
 449 load_subtitles if -e "$subtitles.yaml";
 450
 451 sub edit_subtitles {
 452         print $to_mplayer qq|pause\n|;
 453         focus_term;
 454         system( qq|vi "$subtitles.yaml"| ) == 0 and load_subtitles;
 455         focus_mplayer;
 456 }
 457
 458 sub add_subtitle {
 459         print $to_mplayer qq|pause\n|;
 460
 461         focus_term;
 462
 463         warn "subtitles ", dump( @subtitles );
 464         print "## ";
 465         my $line = <STDIN>;
 466         $subtitles[ $#subtitles ]->[2] = $line if defined $line;
 467
 468         save_subtitles;
 469
 470         focus_mplayer;
 471
 472         preroll $subtitles[ $#subtitles ]->[0], $line;
 473 }
 474
 475 sub time_pos {
 476         print $to_mplayer qq|get_property time_pos\n|;
 477         my $pos = <$from_mplayer>;
 478         if ( $pos =~ m{^ANS_time_pos=(\d+\.\d+)} ) {
 479                 warn "# time_pos $1\n";
 480                 return $1;
 481         }
 482 }
 483
 484 sub sub_fmt {
 485         my $s = shift;
 486         sprintf "%1.5f - %1.5f %s %s\n", @$s, join(' | ',@_);
 487 }
 488
 489 sub prev_subtitle {
 490         my $pos = time_pos;
 491         my $s = ( grep { $_->[0] < $pos } @subtitles )[0] || return;
 492         warn "<<<< subtitle ", sub_fmt $s;
 493         preroll $s->[0], $s->[2];
 494 #       print $to_mplayer "set_property time_pos $s->[0]\n";
 495 }
 496
 497 sub next_subtitle {
 498         my $pos = time_pos + $preroll;
 499         my $s = ( grep { $_->[0] > $pos } @subtitles )[0] || return;
 500         warn ">>>> subtitle ", sub_fmt $s;
 501         preroll $s->[0], $s->[2];
 502 #       print $to_mplayer "set_property time_pos $s->[0]\n";
 503 }
 504
 505 sub current_subtitle {
 506         my $callback = shift;
 507         my $pos = time_pos;
 508         my $visible;
 509         foreach my $nr ( 0 .. $#subtitles ) {
 510                 my $s = $subtitles[$nr];
 511                 if ( $s->[0] <= $pos && $s->[1] >= $pos ) {
 512                         warn sub_fmt $s, $pos;
 513                         $visible = $nr;
 514                         $callback->( $visible, $pos ) if $callback;
 515                         return ( $visible, $pos );
 516                 }
 517         }
 518         warn "# $pos no visible subtitle\n";
 519 }
 520
 521 sub move_subtitle {
 522         my $offset = shift;
 523         current_subtitle( sub {
 524                 my ( $nr, $pos ) = @_;
 525                 my $new_start = $subtitles[$nr]->[0] += $offset;
 526                 warn "subtitle $nr $pos $offset $new_start\n";
 527                 save_subtitles;
 528                 preroll $new_start, "$pos $offset $new_start";
 529         } );
 530 }
 531
 532
 533
 534 # XXX main epool loop
 535
 536 load_movie;
 537
 538 while ( my $events = epoll_wait($epfd, 10, 1000) ) { # Max 10 events returned, 1s timeout
 539
 540         warn "no events" unless $events;
 541
 542         foreach my $e ( @$events ) {
 543 #               warn "# event: ", dump($e), $/;
 544
 545                 my $fileno = $e->[0];
 546
 547                 if ( $fileno == fileno STDIN ) {
 548                         my $chr;
 549                         sysread STDIN, $chr, 1;
 550                         print $chr;
 551                 } elsif ( $fileno == fileno $from_mplayer ) {
 552                         my $chr;
 553                         sysread $from_mplayer, $chr, 1;
 554                         print $chr;
 555
 556                         if ( $chr =~ m{[\n\r]} ) {
 557
 558                                 exit if $line =~ m{Exiting};
 559
 560                                 if ( $line =~ m{ANS_(\w+)=(\S+)} ) {
 561                                         $prop->{$1} = $2;
 562                                         warn "prop $1 = $2\n";
 563                                 } elsif ( $line =~ m{No bind found for key '(.+)'} ) {
 564
 565                                         # XXX keyboard shortcuts
 566
 567                                           $1 eq 'c'  ? repl
 568                                         : $1 eq ','  ? add_subtitle
 569                                         : $1 eq 'F1' ? prev_subtitle
 570                                         : $1 eq 'F2' ? move_subtitle( -0.3 )
 571                                         : $1 eq 'F3' ? move_subtitle( +0.3 )
 572                                         : $1 eq 'F4' ? next_subtitle
 573                                         : $1 eq 'F5' ? save_subtitles
 574                                         : $1 eq 'F9' ? add_subtitle
 575                                         : $1 eq 'F12' ? edit_subtitles
 576                                         : warn "CUSTOM $1\n"
 577                                         ;
 578
 579                                 } elsif ( $line =~ m{EDL}i ) {
 580
 581                                         print $to_mplayer qq|osd_show_text "$line"\n|;
 582
 583                                         if ( my $pos = time_pos ) {
 584                                                 if ( $line =~ m{start}i ) {
 585                                                         push @subtitles, [ $pos, $pos, '-' ];
 586                                                 } else {
 587                                                         $subtitles[ $#subtitles ]->[1] = $pos;
 588                                                 }
 589                                         }
 590                                 }
 591
 592                                 $line = '';
 593                         } else {
 594                                 $line .= $chr;
 595                         }
 596
 597
 598                 } elsif ( $fileno == fileno $to_mplayer ) {
 599 #                       warn "command";
 600                 } else {
 601                         die "invalid fileno $fileno";
 602                 }
 603         }
 604
 605 }
 606