yapfaq.pl

   1 #! /usr/bin/perl -W
   2 #
   3 # yapfaq Version 0.6 by Thomas Hochstein
   4 # (Original author: Marc Brockschmidt)
   5 #
   6 # This script posts any project described in its config-file. Most people
   7 # will use it in combination with cron(8).
   8 #
   9 # Copyright (C) 2003 Marc Brockschmidt <marc@marcbrockschmidt.de>
  10 # Copyright (c) 2010 Thomas Hochstein <thh@inter.net>
  11 #
  12 # It can be redistributed and/or modified under the same terms under
  13 # which Perl itself is published.
  14
  15 my $Version = "0.6-unreleased";
  16
  17 my $NNTPServer = "localhost";
  18 my $NNTPUser = "";
  19 my $NNTPPass = "";
  20 my $Sender = "";
  21 my $ConfigFile = "yapfaq.cfg";
  22 my $UsePGP = 0;
  23
  24 ################################## PGP-Config #################################
  25
  26 my $pgp           = '/usr/bin/pgp';            # path to pgp
  27 my $PGPVersion    = '2';                       # Use 2 for 2.X, 5 for PGP > 2.X and GPG for GPG
  28
  29 my $PGPSigner     = '';                        # sign as who?
  30 my $PGPPass       = '';                        # pgp2 only
  31 my $PathtoPGPPass = '';                        # pgp2, pgp5 and gpg
  32
  33
  34 my $pgpbegin  ='-----BEGIN PGP SIGNATURE-----';# Begin of PGP-Signature
  35 my $pgpend    ='-----END PGP SIGNATURE-----';  # End of PGP-Signature
  36 my $pgptmpf   ='pgptmp';                       # temporary file for PGP.
  37 my $pgpheader ='X-PGP-Sig';
  38
  39 my @PGPSignHeaders = ('From', 'Newsgroups', 'Subject', 'Control',
  40         'Supersedes', 'Followup-To', 'Date', 'Sender', 'Approved',
  41         'Message-ID', 'Reply-To', 'Cancel-Lock', 'Cancel-Key',
  42         'Also-Control', 'Distribution');
  43
  44 my @PGPorderheaders = ('from', 'newsgroups', 'subject', 'control',
  45         'supersedes', 'followup-To', 'date', 'organization', 'lines',
  46         'sender', 'approved', 'distribution', 'message-id',
  47         'references', 'reply-to', 'mime-version', 'content-type',
  48         'content-transfer-encoding', 'summary', 'keywords', 'cancel-lock',
  49         'cancel-key', 'also-control', 'x-pgp', 'user-agent');
  50
  51 ############################# End of Configuration #############################
  52
  53 use strict;
  54 use Net::NNTP;
  55 use Date::Calc qw(Add_Delta_YM Add_Delta_Days Delta_Days Today);
  56 use Fcntl ':flock'; # import LOCK_* constants
  57 my ($TDY, $TDM, $TDD) = Today(); #TD: Today's date
  58
  59 my @Config;
  60 readconfig (\$ConfigFile, \@Config);
  61
  62 foreach (@Config) {
  63   my ($LPD,$LPM,$LPY) = (01, 01, 0001);  #LP: Last posting-date
  64   my ($NPY,$NPM,$NPD);                   #NP: Next posting-date
  65   my $SupersedeMID;
  66
  67   my ($ActName,$File,$PFreq,$Expire) =($$_{'name'},$$_{'file'},$$_{'posting-frequency'},$$_{'expires'});
  68   my ($From,$Subject,$NG,$Fup2)=($$_{'from'},$$_{'subject'},$$_{'ngs'},$$_{'fup2'});
  69   my ($MIDF,$ReplyTo,$ExtHea)=($$_{'mid-format'},$$_{'reply-to'},$$_{'extraheader'});
  70   my ($Supersede)            =($$_{'supersede'});
  71
  72   if (open (FH, "<$File.cfg")) {
  73     while(<FH>){
  74       if (/##;; Lastpost:\s*(\d{1,2})\.(\d{1,2})\.(\d{2}(\d{2})?)/){
  75         ($LPD, $LPM, $LPY) = ($1, $2, $3);
  76       } elsif (/^##;;\s*LastMID:\s*(<\S+@\S+>)\s*$/) {
  77         $SupersedeMID = $1;
  78       }
  79     }
  80     close FH;
  81   } else {
  82     warn "$0: W: Couldn't open $File.cfg: $!\n";
  83   }
  84
  85   $SupersedeMID = "" unless $Supersede;
  86
  87   ($NPY,$NPM,$NPD) = calcdelta ($LPY,$LPM,$LPD,$PFreq);
  88
  89   if (Delta_Days($NPY,$NPM,$NPD,$TDY,$TDM,$TDD) >= 0 ) {
  90     postfaq(\$ActName,\$File,\$From,\$Subject,\$NG,\$Fup2,\$MIDF,\$ExtHea,\$Sender,\$TDY,\$TDM,\$TDD,\$ReplyTo,\$SupersedeMID,\$Expire);
  91   }
  92 }
  93
  94 exit;
  95
  96 ################################## readconfig ##################################
  97 # Takes a filename and the reference to an array, which will hold hashes with
  98 # the data from $File.
  99
 100 sub readconfig{
 101   my ($File, $Config) = @_;
 102   my ($LastEntry, $Error, $i) = ('','',0);
 103
 104   open FH, "<$$File" or die "$0: E: Can't open $$File: $!";
 105   while (<FH>) {
 106     if (/^(\s*(\S+)\s*=\s*'?(.*?)'?\s*(#.*$|$)|^(.*?)'?\s*(#.*$|$))/ && not /^\s*$/) {
 107       $LastEntry = lc($2) if $2;
 108       $$Config[$i]{$LastEntry} .= $3 if $3;
 109       $$Config[$i]{$LastEntry} .= "\n$5" if $5 && $5;
 110     }
 111     if (/^\s*=====\s*$/) {
 112       $i++;
 113     }
 114   }
 115   close FH;
 116
 117   #Check saved values:
 118   for $i (0..$i){
 119     unless($$Config[$i]{'from'} =~ /\S+\@(\S+\.)?\S{2,}\.\S{2,}/) {
 120       $Error .= "E: The From-header for your project \"$$Config[$i]{'name'}\" seems to be incorrect.\n"
 121     }
 122     unless($$Config[$i]{'ngs'} =~ /^\S+$/) {
 123       $Error .= "E: The Newsgroups-header for your project \"$$Config[$i]{'name'}\" contains whitespaces.\n"
 124     }
 125     unless(!$$Config[$i]{'fup2'} || $$Config[$i]{'fup2'} =~ /^\S+$/) {
 126       $Error .= "E: The Followup-To-header for your project \"$$Config[$i]{'name'}\" contains whitespaces.\n"
 127     }
 128     unless($$Config[$i]{'posting-frequency'} =~ /^\s*\d+\s*[dwmy]\s*$/) {
 129       $Error .= "E: The Posting-frequency for your project \"$$Config[$i]{'name'}\" is invalid.\n"
 130     }
 131     unless($$Config[$i]{'expires'} =~ /^\s*\d+\s*[dwmy]\s*$/) {
 132       $$Config[$i]{'expires'} = '3m'; # set default: 3 month
 133           warn "$0: W: The Expires for your project \"$$Config[$i]{'name'}\" is invalid - set to 3 month.\n";
 134     }
 135     $Error .= "-" x 25 . "\n" if $Error;
 136   }
 137   die $Error if $Error;
 138 }
 139
 140 ################################# calcdelta #################################
 141 # Takes a date (year,  month and day) and a time period (1d, 1w, 1m, 1y, ...)
 142 # and adds the latter to the former
 143
 144 sub calcdelta {
 145   my ($Year, $Month, $Day, $Period) = @_;
 146   my ($NYear, $NMonth, $NDay);
 147
 148   if ($Period =~ /(\d+)\s*([dw])/) { # Is counted in days or weeks: Use Add_Delta_Days.
 149     ($NYear, $NMonth, $NDay) = Add_Delta_Days($Year, $Month, $Day, (($2 eq "w")?$1 * 7: $1 * 1));
 150   } elsif ($Period =~ /(\d+)\s*([my])/) { #Is counted in months or years: Use Add_Delta_YM
 151     ($NYear, $NMonth, $NDay) = Add_Delta_YM($Year, $Month, $Day, (($2 eq "m")?(0,$1):($1,0)));
 152   }
 153   return ($NYear, $NMonth, $NDay);
 154 }
 155
 156 ################################## postfaq ##################################
 157 # Takes a filename and many other vars.
 158 #
 159 # It reads the data-file $File and then posts the article.
 160
 161 sub postfaq {
 162   my ($ActName,$File,$From,$Subject,$NG,$Fup2,$MIDF,$ExtraHeaders,$Sender,$TDY,$TDM,$TDD,$ReplyTo,$Supersedes,$Expire) = @_;
 163   my (@Header,@Body,$MID,$InRealBody,$LastModified);
 164
 165   #Prepare MID:
 166   $$TDM = ($$TDM < 10 && $$TDM !~ /^0/) ? "0" . $$TDM : $$TDM;
 167   $$TDD = ($$TDD < 10 && $$TDD !~ /^0/) ? "0" . $$TDD : $$TDD;
 168
 169   $MID = $$MIDF;
 170   $MID =~ s/\%n/$$ActName/g;
 171   $MID =~ s/\%d/$$TDD/g;
 172   $MID =~ s/\%m/$$TDM/g;
 173   $MID =~ s/\%y/$$TDY/g;
 174
 175
 176   #Now get the body:
 177   open (FH, "<$$File");
 178   while (<FH>){
 179     s/\r//;
 180     push (@Body, $_), next if $InRealBody;
 181     $InRealBody++ if /^$/;
 182     $LastModified = $1 if /^Last-modified: (\S+)$/i;
 183     push @Body, $_;
 184   }
 185   close FH;
 186   push @Body, "\n" if ($Body[-1] ne "\n");
 187
 188   #Create Date- and Expires-Header:
 189   my @time = localtime;
 190   my $ss =  ($time[0]<10) ? "0" . $time[0] : $time[0];
 191   my $mm =  ($time[1]<10) ? "0" . $time[1] : $time[1];
 192   my $hh =  ($time[2]<10) ? "0" . $time[2] : $time[2];
 193   my $day = $time[3];
 194   my $month = ($time[4]+1<10) ? "0" . ($time[4]+1) : $time[4]+1;
 195   my $monthN = ("Jan","Feb","Mar","Apr","May","Jun","Jul","Aug","Sep","Oct","Nov","Dec")[$time[4]];
 196   my $wday = ("Sun","Mon","Tue","Wed","Thu","Fri","Sat")[$time[6]];
 197   my $year = (1900 + $time[5]);
 198   my $tz = $time[8] ? " +0200" : " +0100";
 199
 200   my ($expY,$expM,$expD) = calcdelta ($year,$month,$day,$$Expire);
 201   my $expmonthN = ("Jan","Feb","Mar","Apr","May","Jun","Jul","Aug","Sep","Oct","Nov","Dec")[$expM-1];
 202
 203   my $date = "$day $monthN $year " . $hh . ":" . $mm . ":" . $ss . $tz;
 204   my $expdate = "$expD $expmonthN $expY $hh:$mm:$ss$tz";
 205
 206   #Replace %LM by the content of the news.answer-pseudo-header Last-modified:
 207   if ($LastModified) {
 208     $$Subject =~ s/\%LM/$LastModified/;
 209   }
 210
 211   #Now create the complete Header:
 212   push @Header, "From: $$From\n";
 213   push @Header, "Newsgroups: $$NG\n";
 214   push @Header, "Followup-To: $$Fup2\n" if $$Fup2;
 215   push @Header, "Subject: $$Subject\n";
 216   push @Header, "Message-ID: $MID\n";
 217   push @Header, "Supersedes: $$Supersedes\n" if $$Supersedes;
 218   push @Header, "Date: $date\n";
 219   push @Header, "Expires: $expdate\n";
 220   push @Header, "Sender: $$Sender\n" if $$Sender;
 221   push @Header, "Mime-Version: 1.0\n";
 222   push @Header, "Reply-To: $$ReplyTo\n" if $$ReplyTo;
 223   push @Header, "Content-Type: text/plain; charset=ISO-8859-15\n";
 224   push @Header, "Content-Transfer-Encoding: 8bit\n";
 225   push @Header, "User-Agent: yapfaq/$Version\n";
 226   if ($$ExtraHeaders) {
 227     push @Header, "$_\n" for (split /\n/, $$ExtraHeaders);
 228   }
 229
 230   my @Article = ($UsePGP)?@{signpgp(\@Header, \@Body)}:(@Header, "\n", @Body);
 231
 232   post(\@Article);
 233
 234   open (FH, ">$$File.cfg") or die "$0: E: Can't open $$File.cfg: $!";
 235   print FH "##;; Lastpost: $day.$month.$year\n";
 236   print FH "##;; LastMID: $MID\n";
 237   close FH;
 238 }
 239
 240 ################################## post ##################################
 241 # Takes a complete article (Header and Body).
 242 #
 243 # It opens a connection to $NNTPServer and posts the message.
 244
 245 sub post {
 246   my ($ArticleR) = @_;
 247
 248   my $NewsConnection = Net::NNTP->new($NNTPServer, Reader => 1)
 249     or die "$0: E: Can't connect to news server '$NNTPServer'!\n";
 250
 251   $NewsConnection->authinfo ($NNTPUser, $NNTPPass);
 252   $NewsConnection->post();
 253   $NewsConnection->datasend (@$ArticleR);
 254   $NewsConnection->dataend();
 255
 256   if (!$NewsConnection->ok()) {
 257     open FH, ">>ERROR.dat";
 258     print FH "\nPosting failed! Saving to ERROR.dat. Response from news server:\n";
 259     print FH $NewsConnection->code();
 260     print FH $NewsConnection->message();
 261     print FH "\n";
 262     print FH @$ArticleR;
 263     print FH "-" x 80, "\n";
 264     close FH;
 265   }
 266
 267   $NewsConnection->quit();
 268 }
 269
 270 #-------- sub getpgpcommand
 271 # getpgpcommand generates the command to sign the message and returns it.
 272 #
 273 # Receives:
 274 #       - $PGPVersion: A scalar holding the PGPVersion
 275 sub getpgpcommand {
 276   my ($PGPVersion) = @_;
 277   my $PGPCommand;
 278
 279   if ($PGPVersion eq '2') {
 280     if ($PathtoPGPPass && !$PGPPass) {
 281       open (PGPPW, $PathtoPGPPass) or die "$0: E: Can't open $PathtoPGPPass: $!";
 282       $PGPPass = <PGPPW>;
 283       close PGPPW;
 284     }
 285
 286     if ($PGPPass) {
 287       $PGPCommand = "PGPPASS=\"".$PGPPass."\" ".$pgp." -u \"".$PGPSigner."\" +verbose=0 language='en' -saft <".$pgptmpf.".txt >".$pgptmpf.".txt.asc";
 288     } else {
 289       die "$0: E: PGP-Passphrase is unknown!\n";
 290     }
 291   } elsif ($PGPVersion eq '5') {
 292     if ($PathtoPGPPass) {
 293       $PGPCommand = "PGPPASSFD=2 ".$pgp."s -u \"".$PGPSigner."\" -t --armor -o ".$pgptmpf.".txt.asc -z -f < ".$pgptmpf.".txt 2<".$PathtoPGPPass;
 294     } else {
 295       die "$0: E: PGP-Passphrase is unknown!\n";
 296     }
 297   } elsif ($PGPVersion =~ m/GPG/io) {
 298     if ($PathtoPGPPass) {
 299       $PGPCommand = $pgp." --digest-algo MD5 -a -u \"".$PGPSigner."\" -o ".$pgptmpf.".txt.asc --no-tty --batch --passphrase-fd 2 2<".$PathtoPGPPass." --clearsign ".$pgptmpf.".txt";
 300     } else {
 301       die "$0: E: Passphrase is unknown!\n";
 302     }
 303   } else {
 304     die "$0: E: Unknown PGP-Version $PGPVersion!";
 305   }
 306   return $PGPCommand;
 307 }
 308
 309
 310 #-------- sub signarticle
 311 # signarticle signs an articel and returns a reference to an array
 312 #       containing the whole signed Message.
 313 #
 314 # Receives:
 315 #       - $HeaderAR: A reference to a array containing the articles headers.
 316 #       - $BodyR: A reference to an array containing the body.
 317 #
 318 # Returns:
 319 #       - $MessageRef: A reference to an array containing the whole message.
 320 sub signpgp {
 321   my ($HeaderAR, $BodyR) = @_;
 322   my (@pgphead, @pgpbody, $pgphead, $pgpbody, $header, $signheaders, @signheaders, $currentheader, $HeaderR, $line);
 323
 324   foreach my $line (@$HeaderAR) {
 325     if ($line =~ /^(\S+):\s+(.*)$/s) {
 326       $currentheader = $1;
 327       $$HeaderR{lc($currentheader)} = "$1: $2";
 328     } else {
 329       $$HeaderR{lc($currentheader)} .= $line;
 330     }
 331   }
 332
 333   foreach (@PGPSignHeaders) {
 334     if (defined($$HeaderR{lc($_)}) && $$HeaderR{lc($_)} =~ m/^[^\s:]+: .+/o) {
 335       push @signheaders, $_;
 336     }
 337   }
 338
 339   $pgpbody = join ("", @$BodyR);
 340
 341   # Delete and create the temporary pgp-Files
 342   unlink "$pgptmpf.txt";
 343   unlink "$pgptmpf.txt.asc";
 344   $signheaders = join(",", @signheaders);
 345
 346   $pgphead = "X-Signed-Headers: $signheaders\n";
 347   foreach $header (@signheaders) {
 348     if ($$HeaderR{lc($header)} =~ m/^[^\s:]+: (.+?)\n?$/so) {
 349       $pgphead .= $header.": ".$1."\n";
 350     }
 351   }
 352
 353   open(FH, ">" . $pgptmpf . ".txt") or die "$0: E: can't open $pgptmpf: $!\n";
 354   print FH $pgphead, "\n", $pgpbody;
 355   print FH "\n" if ($PGPVersion =~ m/GPG/io);   # workaround a pgp/gpg incompatibility - should IMHO be fixed in pgpverify
 356   close(FH) or warn "$0: W: Couldn't close TMP: $!\n";
 357
 358   # Start PGP, then read the signature;
 359   my $PGPCommand = getpgpcommand($PGPVersion);
 360   `$PGPCommand`;
 361
 362   open (FH, "<" . $pgptmpf . ".txt.asc") or die "$0: E: can't open ".$pgptmpf.".txt.asc: $!\n";
 363   $/ = "$pgpbegin\n";
 364   $_ = <FH>;
 365   unless (m/\Q$pgpbegin\E$/o) {
 366 #    unlink $pgptmpf . ".txt";
 367 #    unlink $pgptmpf . ".txt.asc";
 368     die "$0: E: $pgpbegin not found in ".$pgptmpf.".txt.asc\n"
 369   }
 370   unlink($pgptmpf . ".txt") or warn "$0: W: Couldn't unlink $pgptmpf.txt: $!\n";
 371
 372   $/ = "\n";
 373   $_ = <FH>;
 374   unless (m/^Version: (\S+)(?:\s(\S+))?/o) {
 375     unlink $pgptmpf . ".txt";
 376     unlink $pgptmpf . ".txt.asc";
 377     die "$0: E: didn't find PGP Version line where expected.\n";
 378   }
 379
 380   if (defined($2)) {
 381     $$HeaderR{$pgpheader} = $1."-".$2." ".$signheaders;
 382   } else {
 383     $$HeaderR{$pgpheader} = $1." ".$signheaders;
 384   }
 385
 386   do {          # skip other pgp headers like
 387     $_ = <FH>;  # "charset:"||"comment:" until empty line
 388   } while ! /^$/;
 389
 390   while (<FH>) {
 391     chomp;
 392     last if /^\Q$pgpend\E$/;
 393     $$HeaderR{$pgpheader} .= "\n\t$_";
 394   }
 395
 396   $$HeaderR{$pgpheader} .= "\n" unless ($$HeaderR{$pgpheader} =~ /\n$/s);
 397
 398   $_ = <FH>;
 399   unless (eof(FH)) {
 400     unlink $pgptmpf . ".txt";
 401     unlink $pgptmpf . ".txt.asc";
 402     die "$0: E: unexpected data following $pgpend\n";
 403   }
 404   close(FH);
 405   unlink "$pgptmpf.txt.asc";
 406
 407   my $tmppgpheader = $pgpheader . ": " . $$HeaderR{$pgpheader};
 408   delete $$HeaderR{$pgpheader};
 409
 410   @pgphead = ();
 411   foreach $header (@PGPorderheaders) {
 412     if ($$HeaderR{$header} && $$HeaderR{$header} ne "\n") {
 413       push(@pgphead, "$$HeaderR{$header}");
 414       delete $$HeaderR{$header};
 415     }
 416   }
 417
 418   foreach $header (keys %$HeaderR) {
 419     if ($$HeaderR{$header} && $$HeaderR{$header} ne "\n") {
 420       push(@pgphead, "$$HeaderR{$header}");
 421       delete $$HeaderR{$header};
 422     }
 423   }
 424
 425   push @pgphead, ("X-PGP-Key: " . $PGPSigner . "\n"), $tmppgpheader;
 426   undef $tmppgpheader;
 427
 428   @pgpbody = split /$/m, $pgpbody;
 429   my @pgpmessage = (@pgphead, "\n", @pgpbody);
 430   return \@pgpmessage;
 431 }