[BACK]Return to ServerTorrents.pl CVS log [TXT][DIR] Up to [local] / openbsd / OpenBSDTorrents

Diff for /openbsd/OpenBSDTorrents/ServerTorrents.pl between version 1.19 and 1.30

version 1.19, 2005/05/21 01:48:03 version 1.30, 2011/12/08 02:08:09
Line 1 
Line 1 
 #!/usr/bin/perl -T  #!/usr/bin/perl -T
 #$Id$  #$RedRiver: ServerTorrents.pl,v 1.29 2010/03/08 20:19:37 andrew Exp $
 use strict;  use strict;
 use warnings;  use warnings;
 use diagnostics;  use diagnostics;
   
 use LWP::UserAgent;  use LWP::UserAgent;
 use Time::Local;  use Time::Local;
   use File::Basename;
   
   #use YAML;
   
 use lib 'lib';  use lib 'lib';
 use OpenBSDTorrents;  use OpenBSDTorrents;
 use BT::MetaInfo::Cached;  use BT::MetaInfo::Cached;
   
 %ENV = ();  %ENV = ();
   
 #use YAML;  
   
 justme();  justme();
   
 my @Sizes = ('', 'Ki', 'Mi', 'Gi', 'Ti');  my @Sizes = ( '', 'Ki', 'Mi', 'Gi', 'Ti' );
 my $ua = LWP::UserAgent->new;  my $ua = LWP::UserAgent->new;
   
 my $response = $ua->get($OBT->{URL_TORRENTS});  my $response = $ua->get( $OBT->{URL_TORRENTS} );
   
 my %server_torrents;  my %server_torrents;
 if ($response->is_success) {  if ( $response->is_success ) {
     my $content = $response->content;  # or whatever      my $content = $response->content;    # or whatever
     $content =~ s/^.*<!-- BEGIN LIST -->//s || die "Beginning of list not found!";      $content =~ s/^.*<!-- BEGIN LIST -->//s
     $content =~ s/<!-- END LIST -->.*$//s   || die "End of list not found!";          || die "Beginning of list not found!";
     unless ($content =~ /No data/) {      $content =~ s/<!-- END LIST -->.*$//s || die "End of list not found!";
         foreach (split /\n/, $content) {      unless ( $content =~ /No data/ ) {
           foreach ( split /\n/, $content ) {
             s/^\s+//;              s/^\s+//;
             s/\s+$//;              s/\s+$//;
             next unless $_;              next unless $_;
             my ($name, $hash) = split /\t/;              my ( $name, $hash, $disabled ) = split /\t/;
             next if $name eq 'File';              next if $name eq 'File';
   
             $name =~ s#^/torrents/##;              $name =~ s#.*/##;
             $server_torrents{$name} = $hash;              $server_torrents{$hash} = {
                   name     => $name,
                   disabled => $disabled,
               };
         }          }
     }      }
 } else {  }
   else {
     die $response->status_line;      die $response->status_line;
 }  }
   
   my %torrents;
   opendir DIR, $OBT->{DIR_TORRENT}
       or die "Couldn't opendir $OBT->{DIR_TORRENT}: $!";
   foreach my $torrent ( readdir DIR ) {
       chomp $torrent;
       next unless $torrent =~ /\.torrent$/;
   
 my %files;      if ($torrent =~ /^([^\/]+)$/) {
 opendir DIR, $OBT->{DIR_TORRENT} or die "Couldn't opendir $OBT->{DIR_TORRENT}: $!";          $torrent = $1;
 foreach (readdir DIR) {      }
         chomp;      else {
         if (/^([^\/]+)$/) {          die "Invalid character in $torrent: $!";
                 $_ = $1;      }
         } else {  
                 die "Invalid character in $_: $!";  
         }  
         next unless /\.torrent$/;  
         my ($name, $year, $mon, $mday, $hour, $min) =  
            /^(.*)-(\d{4})-(\d{2})-(\d{2})-(\d{2})(\d{2})/;  
   
         my $t;      my $name = basename( $torrent, '.torrent' );
         eval {  
                 $t = BT::MetaInfo::Cached->new(  
                         $OBT->{DIR_TORRENT} . '/' . $_,  
                         {  
                                 cache_root =>  
                                 $OBT->{DIR_HOME} . '/FileCache'  
                         }  
                 );  
         };  
   
         if ($@) {      if ( my ( $base, $year, $mon, $mday, $hour, $min )
                 warn "Error reading torrent $_\n";          = $torrent =~ /^(.*)-(\d{4})-(\d{2})-(\d{2})-(\d{2})(\d{2})/ )
                 next;      {
         }          $name = $base;
       }
   
         my $epoch = $t->creation_date;      my $t;
       eval {
           $t = BT::MetaInfo::Cached->new(
               $OBT->{DIR_TORRENT} . '/' . $torrent,
               {   cache_root => '/tmp/OBTFileCache'
   
         $files{$name}{$epoch} = {                      #$OBT->{DIR_HOME} . '/FileCache'
                 file      => $_,              }
                 details   => $t,          );
                 name      => $name,      };
                 epoch     => $epoch,      if ($@) {
         };          warn "Error reading torrent $torrent\n";
           next;
       }
   
       #my $epoch = $t->creation_date;
   
       my $hash = unpack( "H*", $t->info_hash );
       $torrents{$hash} = {
           file    => $torrent,
           details => $t,
           name    => $name,
           #epoch   => $epoch,
       };
   
       if ( !exists $server_torrents{$hash} ) {
           Upload_Torrent( $torrents{$hash} );
       }
       elsif ( $server_torrents{$hash}{disabled} ) {
           Update_Torrent( $server_torrents{$hash}{name}, $hash );
       }
 }  }
 closedir DIR;  closedir DIR;
   
 #print Dump \%server_torrents, \%files;  #print Dump \%server_torrents;
   #exit;
   
 foreach my $name (keys %files) {  foreach my $hash ( keys %server_torrents ) {
         #print "$name\n";  
         foreach my $epoch ( sort { $b <=> $a } keys %{ $files{$name} } ) {  
                 #print "\t$epoch\n";  
                 my $torrent = $files{$name}{$epoch}{file};  
   
                 my $hash = $files{$name}{$epoch}{'details'}->info_hash;      #printf "SERVER: [%s] [%s]\n", $hash, $torrent;
                 $hash = unpack("H*", $hash);      if (   ( !exists $torrents{$hash} )
           && ( !$server_torrents{$hash}{disabled} ) )
       {
           Update_Torrent( $server_torrents{$hash}{name}, $hash, 1 );
       }
   }
   
                 next if (  $ua->get( $OBT->{URL_SANITY} );
                         exists $server_torrents{$torrent} &&  
                         $server_torrents{$torrent} eq $hash  
                 );  
   
                 Upload_Torrent($files{$name}{$epoch});  sub Upload_Torrent {
         }      my $torrent = shift;
 }      my $t       = $torrent->{'details'};
   
 foreach my $file (keys %server_torrents) {      my $file = $torrent->{'file'};
         my ($name, $year, $mon, $mday, $hour, $min) =      #print "Uploading $file\n";
            $file =~  
            /^(.*)-(\d{4})-(\d{2})-(\d{2})-(\d{2})(\d{2})/;  
         unless (exists $files{$name}) {  
                 Delete_Torrent($file);  
         }  
 }  
   
 $ua->get($OBT->{URL_SANITY});      my $size = $t->total_size;
       my ( $sec, $min, $hour, $mday, $mon, $year, $wday, $yday )
           = gmtime( $t->creation_date );
       $year += 1900;
       $mon++;
       my $time = sprintf "%04d.%02d.%02d %02d:%02d",
           $year, $mon, $mday, $hour, $min;
   
 sub Upload_Torrent      ( $sec, $min, $hour, $mday, $mon, $year, $wday, $yday )
 {          = localtime( $t->creation_date );
         my $torrent = shift;      $year += 1900;
         my $t = $torrent->{'details'};      $mon++;
       my $sql_time = sprintf "%04d-%02d-%02d %02d:%02d",
           $year, $mon, $mday, $hour, $min;
   
         my $file = $torrent->{'file'};      my $i = 0;
         print "Uploading $file\n";      while ( $size > 1024 ) {
           $size /= 1024;
           $i++;
       }
       $size = sprintf( '%.2f', $size );
       $size .= $Sizes[$i] . 'B';
   
         my $size = $t->total_size;      my $comment = $t->{comment};
         my ($sec, $min, $hour, $mday, $mon, $year, $wday, $yday) =      $comment =~ s/\n.*$//s;
                 gmtime($t->creation_date);  
         $year += 1900;  
         $mon++;  
         my $time = sprintf "%04d.%02d.%02d %02d:%02d",  
                 $year, $mon, $mday,  $hour, $min;  
   
         ($sec, $min, $hour, $mday, $mon, $year, $wday, $yday) =      my $filename
                 localtime($t->creation_date);          = $comment =~ /($OBT->{BASENAME}.+)/
         $year += 1900;          ? $1
         $mon++;          : $file;
         my $sql_time = sprintf "%04d-%02d-%02d %02d:%02d",      $filename =~ s#/# #g;
                 $year, $mon, $mday,  $hour, $min;      $filename =~ s/\.torrent\z//;
   
         my $i = 0;      $comment  .= " [$size]";
         while ($size > 1024) {      $filename .= " [$time]";
                 $size /= 1024;  
                 $i++;  
         }  
         $size = sprintf('%.2f', $size);  
         $size .= $Sizes[$i] . 'B';  
   
         my $comment = $t->{comment};  
         $comment =~ s/\n.*$//s;  
   
         my ($filename) = $comment =~ /Files from (.+)/;  
         $filename =~ s#/# #g;  
   
         $comment  .= " [$size]";  
         $filename .= " [$time]";  
   
         my $response = $ua->post($OBT->{URL_UPLOAD}, {      my $response = $ua->post(
                 username => $OBT->{UPLOAD_USER},          $OBT->{URL_UPLOAD},
                 password => $OBT->{UPLOAD_PASS},          {   username => $OBT->{UPLOAD_USER},
                 torrent  => [ $OBT->{DIR_TORRENT} . "/$file" ],              password => $OBT->{UPLOAD_PASS},
                 url      => "/torrents/$file",              torrent  => [ $OBT->{DIR_TORRENT} . "/$file" ],
                 filename => $filename,              url      => "/torrents/$file",
                 filedate => $sql_time,              filename => $filename,
                 info     => $comment,              filedate => $sql_time,
                 hash     => '',              info     => $comment,
                 autoset  => 'enabled', # -> checked="checked"              hash     => '',
         }, Content_Type => 'form-data');              autoset => 'enabled',    # -> checked="checked"
           },
           Content_Type => 'form-data'
       );
   
         if ($response->is_success) {      if ( $response->is_success ) {
                 print STDERR "Uploaded  $file\n";          print STDERR "Uploaded  $file\n";
                 #print $response->content;  
         } else {          #print $response->content;
                 die $response->status_line;      }
         }      else {
           die $response->status_line;
       }
 }  }
   
 sub Delete_Torrent  sub Update_Torrent {
 {      my $filename = shift;
         my $file = shift;      my $hash     = shift;
         print "Will delete $file soon enough\n";      my $disable  = shift || 0;
       die "No hash passed!" unless $hash;
   
       #print "Removing $filename [$hash]\n";
   
       my $response = $ua->post(
           $OBT->{'URL_UPDATE'},
           {   username => $OBT->{UPLOAD_USER},
               password => $OBT->{UPLOAD_PASS},
               filename => $filename,
               hash     => $hash,
               disable  => $disable,
           },
           Content_Type => 'form-data'
       );
       my $status = $disable ? 'Disabled' : 'Enabled';
   
       if ( $response->is_success ) {
           my ($result) = $response->content =~ /class="error"\>([^<]+)\</;
   
           if ( $result eq 'Torrent disabled set to ' . $disable ) {
               print STDERR "$status $filename [$hash]\n";
           }
           elsif ($result) {
               print STDERR "Error: $result (removing $filename [$hash])\n";
           }
           else {
               print STDERR
                   "An unknown error occurred removing $filename [$hash]\n";
           }
       }
       else {
           die $response->status_line . " removing $filename [$hash]\n";
       }
 }  }
Legend:
Removed from v.1.19  
changed lines
  Added in v.1.30
FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>