twirssi.pl

   1 use strict;
   2 use Irssi;
   3 use Irssi::Irc;
   4 use HTTP::Date;
   5 use HTML::Entities;
   6 use File::Temp;
   7 use LWP::Simple;
   8 use Data::Dumper;
   9 use Encode;
  10 $Data::Dumper::Indent = 1;
  11
  12 use vars qw($VERSION %IRSSI);
  13
  14 $VERSION = "2.3.0beta";
  15 my ($REV) = '$Rev: 687 $' =~ /(\d+)/;
  16 %IRSSI = (
  17     authors     => 'Dan Boger',
  18     contact     => 'zigdon@gmail.com',
  19     name        => 'twirssi',
  20     description => 'Send twitter updates using /tweet.  '
  21       . 'Can optionally set your bitlbee /away message to same',
  22     license => 'GNU GPL v2',
  23     url     => 'http://twirssi.com',
  24     changed => '$Date: 2009-08-07 01:24:53 -0700 (Fri, 07 Aug 2009) $',
  25 );
  26
  27 my $window;
  28 my $twit;
  29 my %twits;
  30 my $user;
  31 my $defservice;
  32 my $poll;
  33 my $last_poll;
  34 my $last_friends_poll = 0;
  35 my %nicks;
  36 my %friends;
  37 my %tweet_cache;
  38 my %id_map;
  39 my $failwhale  = 0;
  40 my $first_call = 1;
  41 my $child_pid;
  42 my %fix_replies_index;
  43
  44 my %irssi_to_mirc_colors = (
  45     '%k' => '01',
  46     '%r' => '05',
  47     '%g' => '03',
  48     '%y' => '07',
  49     '%b' => '02',
  50     '%m' => '06',
  51     '%c' => '10',
  52     '%w' => '15',
  53     '%K' => '14',
  54     '%R' => '04',
  55     '%G' => '09',
  56     '%Y' => '08',
  57     '%B' => '12',
  58     '%M' => '13',
  59     '%C' => '11',
  60     '%W' => '00',
  61 );
  62
  63 sub cmd_direct {
  64     my ( $data, $server, $win ) = @_;
  65
  66     return unless &logged_in($twit);
  67
  68     my ( $target, $text ) = split ' ', $data, 2;
  69     unless ( $target and $text ) {
  70         &notice("Usage: /dm <nick> <message>");
  71         return;
  72     }
  73
  74     &cmd_direct_as( "$user $data", $server, $win );
  75 }
  76
  77 sub cmd_direct_as {
  78     my ( $data, $server, $win ) = @_;
  79
  80     return unless &logged_in($twit);
  81
  82     my ( $username, $target, $text ) = split ' ', $data, 3;
  83     unless ( $username and $target and $text ) {
  84         &notice("Usage: /dm_as <username> <nick> <message>");
  85         return;
  86     }
  87
  88     return unless $username = &valid_username($username);
  89
  90     eval {
  91         if ( $twits{$username}
  92             ->new_direct_message( { user => $target, text => $text } ) )
  93         {
  94             &notice("DM sent to $target");
  95             $nicks{$target} = time;
  96         } else {
  97             my $error;
  98             eval {
  99                 $error = JSON::Any->jsonToObj( $twits{$username}->get_error() );
 100                 $error = $error->{error};
 101             };
 102             die $error if $error;
 103             &notice("DM to $target failed");
 104         }
 105     };
 106
 107     if ($@) {
 108         &notice("DM caused an error: $@");
 109         return;
 110     }
 111 }
 112
 113 sub cmd_retweet {
 114     my ( $data, $server, $win ) = @_;
 115
 116     return unless &logged_in($twit);
 117
 118     $data =~ s/^\s+|\s+$//;
 119     unless ($data) {
 120         &notice("Usage: /retweet <nick[:num]> [comment]");
 121         return;
 122     }
 123
 124     my ( $id, $data ) = split ' ', $data, 2;
 125
 126     &cmd_retweet_as( "$user $id $data", $server, $win );
 127 }
 128
 129 sub cmd_retweet_as {
 130     my ( $data, $server, $win ) = @_;
 131
 132     unless ( Irssi::settings_get_bool("twirssi_track_replies") ) {
 133         &notice("twirssi_track_replies is required in order to reteet.");
 134         return;
 135     }
 136
 137     return unless &logged_in($twit);
 138
 139     $data =~ s/^\s+|\s+$//;
 140     my ( $username, $id, $data ) = split ' ', $data, 3;
 141
 142     unless ($username) {
 143         &notice("Usage: /retweet_as <username> <nick[:num]> [comment]");
 144         return;
 145     }
 146
 147     return unless $username = &valid_username($username);
 148
 149     my $nick;
 150     $id =~ s/[^\w\d\-:]+//g;
 151     ( $nick, $id ) = split /:/, $id;
 152     unless ( exists $id_map{ lc $nick } ) {
 153         &notice("Can't find a tweet from $nick to retweet!");
 154         return;
 155     }
 156
 157     $id = $id_map{__indexes}{$nick} unless $id;
 158     unless ( $id_map{ lc $nick }[$id] ) {
 159         &notice("Can't find a tweet numbered $id from $nick to retweet!");
 160         return;
 161     }
 162
 163     unless ( $id_map{__tweets}{ lc $nick }[$id] ) {
 164         &notice("The text of this tweet isn't saved, sorry!");
 165         return;
 166     }
 167
 168 # Irssi::settings_add_str( "twirssi", "twirssi_retweet_format", 'RT $n: $t ${-- $c$}' );
 169     my $text = Irssi::settings_get_str("twirssi_retweet_format");
 170     $text =~ s/\$n/\@$nick/g;
 171     if ($data) {
 172         $text =~ s/\${|\$}//g;
 173         $text =~ s/\$c/$data/;
 174     } else {
 175         $text =~ s/\${.*?\$}//;
 176     }
 177     $text =~ s/\$t/$id_map{__tweets}{ lc $nick }[$id]/;
 178
 179     $data = &shorten($text);
 180
 181     return if &too_long($data);
 182
 183     my $success = 1;
 184     eval {
 185         unless (
 186             $twits{$username}->update(
 187                 {
 188                     status => $data,
 189
 190                     # in_reply_to_status_id => $id_map{ lc $nick }[$id]
 191                 }
 192             )
 193           )
 194         {
 195             &notice("Update failed");
 196             $success = 0;
 197         }
 198     };
 199     return unless $success;
 200
 201     if ($@) {
 202         &notice("Update caused an error: $@.  Aborted");
 203         return;
 204     }
 205
 206     foreach ( $data =~ /@([-\w]+)/ ) {
 207         $nicks{$1} = time;
 208     }
 209
 210     &notice("Retweet sent");
 211 }
 212
 213 sub cmd_tweet {
 214     my ( $data, $server, $win ) = @_;
 215
 216     return unless &logged_in($twit);
 217
 218     $data =~ s/^\s+|\s+$//;
 219     unless ($data) {
 220         &notice("Usage: /tweet <update>");
 221         return;
 222     }
 223
 224     &cmd_tweet_as( "$user\@$defservice $data", $server, $win );
 225 }
 226
 227 sub cmd_tweet_as {
 228     my ( $data, $server, $win ) = @_;
 229
 230     return unless &logged_in($twit);
 231
 232     $data =~ s/^\s+|\s+$//;
 233     $data =~ s/\s\s+/ /g;
 234     my ( $username, $data ) = split ' ', $data, 2;
 235
 236     unless ( $username and $data ) {
 237         &notice("Usage: /tweet_as <username> <update>");
 238         return;
 239     }
 240
 241     return unless $username = &valid_username($username);
 242
 243     $data = &shorten($data);
 244
 245     return if &too_long($data);
 246
 247     my $success = 1;
 248     eval {
 249         unless ( $twits{$username}->update($data) )
 250         {
 251             &notice("Update failed");
 252             $success = 0;
 253         }
 254     };
 255     return unless $success;
 256
 257     if ($@) {
 258         &notice("Update caused an error: $@.  Aborted.");
 259         return;
 260     }
 261
 262     foreach ( $data =~ /@([-\w]+)/ ) {
 263         $nicks{$1} = time;
 264     }
 265
 266     my $away = &update_away($data);
 267
 268     &notice( "Update sent" . ( $away ? " (and away msg set)" : "" ) );
 269 }
 270
 271 sub cmd_reply {
 272     my ( $data, $server, $win ) = @_;
 273
 274     return unless &logged_in($twit);
 275
 276     $data =~ s/^\s+|\s+$//;
 277     unless ($data) {
 278         &notice("Usage: /reply <nick[:num]> <update>");
 279         return;
 280     }
 281
 282     my ( $id, $data ) = split ' ', $data, 2;
 283     unless ( $id and $data ) {
 284         &notice("Usage: /reply <nick[:num]> <update>");
 285         return;
 286     }
 287
 288     &cmd_reply_as( "$user $id $data", $server, $win );
 289 }
 290
 291 sub cmd_reply_as {
 292     my ( $data, $server, $win ) = @_;
 293
 294     unless ( Irssi::settings_get_bool("twirssi_track_replies") ) {
 295         &notice("twirssi_track_replies is required in order to reply to "
 296               . "specific tweets.  Either enable it, or just use /tweet "
 297               . "\@username <text>." );
 298         return;
 299     }
 300
 301     return unless &logged_in($twit);
 302
 303     $data =~ s/^\s+|\s+$//;
 304     my ( $username, $id, $data ) = split ' ', $data, 3;
 305
 306     unless ( $username and $data ) {
 307         &notice("Usage: /reply_as <username> <nick[:num]> <update>");
 308         return;
 309     }
 310
 311     return unless $username = &valid_username($username);
 312
 313     my $nick;
 314     $id =~ s/[^\w\d\-:]+//g;
 315     ( $nick, $id ) = split /:/, $id;
 316     unless ( exists $id_map{ lc $nick } ) {
 317         &notice("Can't find a tweet from $nick to reply to!");
 318         return;
 319     }
 320
 321     $id = $id_map{__indexes}{$nick} unless $id;
 322     unless ( $id_map{ lc $nick }[$id] ) {
 323         &notice("Can't find a tweet numbered $id from $nick to reply to!");
 324         return;
 325     }
 326
 327     if ( Irssi::settings_get_bool("twirssi_replies_autonick") ) {
 328
 329         # remove any @nick at the beginning of the reply, as we'll add it anyway
 330         $data =~ s/^\s*\@?$nick\s*//;
 331         $data = "\@$nick " . $data;
 332     }
 333
 334     $data = &shorten($data);
 335
 336     return if &too_long($data);
 337
 338     my $success = 1;
 339     eval {
 340         unless (
 341             $twits{$username}->update(
 342                 {
 343                     status                => $data,
 344                     in_reply_to_status_id => $id_map{ lc $nick }[$id]
 345                 }
 346             )
 347           )
 348         {
 349             &notice("Update failed");
 350             $success = 0;
 351         }
 352     };
 353     return unless $success;
 354
 355     if ($@) {
 356         &notice("Update caused an error: $@.  Aborted");
 357         return;
 358     }
 359
 360     foreach ( $data =~ /@([-\w]+)/ ) {
 361         $nicks{$1} = time;
 362     }
 363
 364     my $away = &update_away($data);
 365
 366     &notice( "Update sent" . ( $away ? " (and away msg set)" : "" ) );
 367 }
 368
 369 sub gen_cmd {
 370     my ( $usage_str, $api_name, $post_ref ) = @_;
 371
 372     return sub {
 373         my ( $data, $server, $win ) = @_;
 374
 375         return unless &logged_in($twit);
 376
 377         $data =~ s/^\s+|\s+$//;
 378         unless ($data) {
 379             &notice("Usage: $usage_str");
 380             return;
 381         }
 382
 383         my $success = 1;
 384         eval {
 385             unless ( $twit->$api_name($data) )
 386             {
 387                 &notice("$api_name failed");
 388                 $success = 0;
 389             }
 390         };
 391         return unless $success;
 392
 393         if ($@) {
 394             &notice("$api_name caused an error.  Aborted.");
 395             return;
 396         }
 397
 398         &$post_ref($data) if $post_ref;
 399       }
 400 }
 401
 402 sub cmd_switch {
 403     my ( $data, $server, $win ) = @_;
 404
 405     $data =~ s/^\s+|\s+$//g;
 406     $data = &normalize_username($data);
 407     if ( exists $twits{$data} ) {
 408         &notice("Switching to $data");
 409         $twit = $twits{$data};
 410         if ( $data =~ /(.*)\@(.*)/ ) {
 411             $user       = $1;
 412             $defservice = $2;
 413         } else {
 414             &notice("Couldn't figure out what service '$data' is on");
 415         }
 416     } else {
 417         &notice("Unknown user $data");
 418     }
 419 }
 420
 421 sub cmd_logout {
 422     my ( $data, $server, $win ) = @_;
 423
 424     $data =~ s/^\s+|\s+$//g;
 425     $data = $user unless $data;
 426     return unless $data = &valid_username($data);
 427
 428     &notice("Logging out $data...");
 429     $twits{$data}->end_session();
 430     delete $twits{$data};
 431     undef $twit;
 432     if ( keys %twits ) {
 433         &cmd_switch( ( keys %twits )[0], $server, $win );
 434     } else {
 435         Irssi::timeout_remove($poll) if $poll;
 436         undef $poll;
 437     }
 438 }
 439
 440 sub cmd_login {
 441     my ( $data, $server, $win ) = @_;
 442     my $pass;
 443     if ($data) {
 444         ( $user, $pass ) = split ' ', $data, 2;
 445         unless ($pass) {
 446             &notice("usage: /twitter_login <username>[\@<service>] <password>");
 447             return;
 448         }
 449     } elsif ( my $autouser = Irssi::settings_get_str("twitter_usernames")
 450         and my $autopass = Irssi::settings_get_str("twitter_passwords") )
 451     {
 452         my @user = split /\s*,\s*/, $autouser;
 453         my @pass = split /\s*,\s*/, $autopass;
 454
 455         # if a password ends with a '\', it was meant to escape the comma, and
 456         # it should be concatinated with the next one
 457         my @unescaped;
 458         while (@pass) {
 459             my $p = shift @pass;
 460             while ( $p =~ /\\$/ and @pass ) {
 461                 $p .= "," . shift @pass;
 462             }
 463             push @unescaped, $p;
 464         }
 465
 466         if ( @user != @unescaped ) {
 467             &notice("Number of usernames doesn't match "
 468                   . "the number of passwords - auto-login failed" );
 469         } else {
 470             my ( $u, $p );
 471             while ( @user and @unescaped ) {
 472                 $u = shift @user;
 473                 $p = shift @unescaped;
 474                 &cmd_login("$u $p");
 475             }
 476             return;
 477         }
 478     } else {
 479         &notice("/twitter_login requires either a username and password "
 480               . "or twitter_usernames and twitter_passwords to be set." );
 481         return;
 482     }
 483
 484     %friends = %nicks = ();
 485
 486     my $service;
 487     if ( $user =~ /^(.*)@(twitter|identica)$/ ) {
 488         ( $user, $service ) = ( $1, $2 );
 489     } else {
 490         $service = Irssi::settings_get_str("twirssi_default_service");
 491     }
 492     $defservice = $service = ucfirst lc $service;
 493
 494     eval "use Net::$service";
 495     if ($@) {
 496         &notice(
 497             "Failed to load Net::$service when trying to log in as $user: $@");
 498         return;
 499     }
 500
 501     $twit = "Net::$service"->new(
 502         username => $user,
 503         password => $pass,
 504         source   => "twirssi",
 505         ssl      => Irssi::settings_get_bool("twirssi_avoid_ssl") ? 0 : 1,
 506     );
 507
 508     unless ($twit) {
 509         &notice("Failed to create Net::$service object!  Aborting.");
 510         return;
 511     }
 512
 513     if ( my $timeout = Irssi::settings_get_int("twitter_timeout")
 514         and $twit->can('ua') )
 515     {
 516         $twit->ua->timeout($timeout);
 517     }
 518
 519     unless ( $twit->verify_credentials() ) {
 520         &notice("Login as $user\@$service failed");
 521
 522         if ( not Irssi::settings_get_bool("twirssi_avoid_ssl") ) {
 523             &notice(
 524                 "It's possible you're missing one of the modules required for "
 525                   . "SSL logins.  Try setting twirssi_avoid_ssl to on.  See "
 526                   . "http://cpansearch.perl.org/src/GAAS/libwww-perl-5.831/README.SSL "
 527                   . "for the detailed requirements." );
 528         }
 529
 530         $twit = undef;
 531         if ( keys %twits ) {
 532             &cmd_switch( ( keys %twits )[0], $server, $win );
 533         }
 534         return;
 535     }
 536
 537     if ($twit) {
 538         my $rate_limit = $twit->rate_limit_status();
 539         if ( $rate_limit and $rate_limit->{remaining_hits} < 1 ) {
 540             &notice(
 541                 "Rate limit exceeded, try again after $rate_limit->{reset_time}"
 542             );
 543             $twit = undef;
 544             return;
 545         }
 546
 547         $twits{"$user\@$service"} = $twit;
 548         Irssi::timeout_remove($poll) if $poll;
 549         $poll = Irssi::timeout_add( &get_poll_time * 1000, \&get_updates, "" );
 550         &notice("Logged in as $user\@$service, loading friends list...");
 551         &load_friends();
 552         &notice( "loaded friends: ", scalar keys %friends );
 553         if ( Irssi::settings_get_bool("twirssi_first_run") ) {
 554             Irssi::settings_set_bool( "twirssi_first_run", 0 );
 555         }
 556         %nicks = %friends;
 557         $nicks{$user} = 0;
 558         return 1;
 559     } else {
 560         &notice("Login failed");
 561     }
 562 }
 563
 564 sub cmd_add_follow {
 565     my ( $data, $server, $win ) = @_;
 566
 567     unless ($data) {
 568         &notice("Usage: /twitter_add_follow_extra <username>");
 569         return;
 570     }
 571
 572     $data =~ s/^\s+|\s+$//;
 573     $data =~ s/^\@//;
 574     $data = lc $data;
 575
 576     if ( exists $id_map{__fixreplies}{"$user\@$defservice"}{$data} ) {
 577         &notice("Already following all replies by \@$data");
 578         return;
 579     }
 580
 581     $id_map{__fixreplies}{"$user\@$defservice"}{$data} = 1;
 582     &notice("Will now follow all replies by \@$data");
 583 }
 584
 585 sub cmd_del_follow {
 586     my ( $data, $server, $win ) = @_;
 587
 588     unless ($data) {
 589         &notice("Usage: /twitter_del_follow_extra <username>");
 590         return;
 591     }
 592
 593     $data =~ s/^\s+|\s+$//;
 594     $data =~ s/^\@//;
 595     $data = lc $data;
 596
 597     unless ( exists $id_map{__fixreplies}{"$user\@$defservice"}{$data} ) {
 598         &notice("Wasn't following all replies by \@$data");
 599         return;
 600     }
 601
 602     delete $id_map{__fixreplies}{"$user\@$defservice"}{$data};
 603     &notice("Will no longer follow all replies by \@$data");
 604 }
 605
 606 sub cmd_list_follow {
 607     my ( $data, $server, $win ) = @_;
 608
 609     my $found = 0;
 610     foreach my $suser ( sort keys %{ $id_map{__fixreplies} } ) {
 611         my $frusers;
 612         foreach my $fruser ( sort keys %{ $id_map{__fixreplies}{$suser} } ) {
 613             $frusers = $frusers ? "$frusers, $fruser" : $fruser;
 614         }
 615         if ($frusers) {
 616             $found = 1;
 617             &notice("Following all replies as \@$suser: $frusers");
 618         }
 619     }
 620
 621     unless ($found) {
 622         &notice("Not following all replies by anyone");
 623     }
 624 }
 625
 626 sub cmd_add_search {
 627     my ( $data, $server, $win ) = @_;
 628
 629     unless ( $twit and $twit->can('search') ) {
 630         &notice("ERROR: Your version of Net::Twitter ($Net::Twitter::VERSION) "
 631               . "doesn't support searches." );
 632         return;
 633     }
 634
 635     $data =~ s/^\s+|\s+$//;
 636     $data = lc $data;
 637
 638     unless ($data) {
 639         &notice("Usage: /twitter_subscribe <topic>");
 640         return;
 641     }
 642
 643     if ( exists $id_map{__searches}{"$user\@$defservice"}{$data} ) {
 644         &notice("Already had a subscription for '$data'");
 645         return;
 646     }
 647
 648     $id_map{__searches}{"$user\@$defservice"}{$data} = 1;
 649     &notice("Added subscription for '$data'");
 650 }
 651
 652 sub cmd_del_search {
 653     my ( $data, $server, $win ) = @_;
 654
 655     unless ( $twit and $twit->can('search') ) {
 656         &notice("ERROR: Your version of Net::Twitter ($Net::Twitter::VERSION) "
 657               . "doesn't support searches." );
 658         return;
 659     }
 660     $data =~ s/^\s+|\s+$//;
 661     $data = lc $data;
 662
 663     unless ($data) {
 664         &notice("Usage: /twitter_unsubscribe <topic>");
 665         return;
 666     }
 667
 668     unless ( exists $id_map{__searches}{"$user\@$defservice"}{$data} ) {
 669         &notice("No subscription found for '$data'");
 670         return;
 671     }
 672
 673     delete $id_map{__searches}{"$user\@$defservice"}{$data};
 674     &notice("Removed subscription for '$data'");
 675 }
 676
 677 sub cmd_list_search {
 678     my ( $data, $server, $win ) = @_;
 679
 680     my $found = 0;
 681     foreach my $suser ( sort keys %{ $id_map{__searches} } ) {
 682         my $topics;
 683         foreach my $topic ( sort keys %{ $id_map{__searches}{$suser} } ) {
 684             $topics = $topics ? "$topics, $topic" : $topic;
 685         }
 686         if ($topics) {
 687             $found = 1;
 688             &notice("Search subscriptions for \@$suser: $topics");
 689         }
 690     }
 691
 692     unless ($found) {
 693         &notice("No search subscriptions set up");
 694     }
 695 }
 696
 697 sub cmd_upgrade {
 698     my ( $data, $server, $win ) = @_;
 699
 700     my $loc = Irssi::settings_get_str("twirssi_location");
 701     unless ( -w $loc ) {
 702         &notice( "$loc isn't writable, can't upgrade." .
 703                  "  Perhaps you need to /set twirssi_location?"
 704         );
 705         return;
 706     }
 707
 708     my $md5;
 709     unless ( $data or Irssi::settings_get_bool("twirssi_upgrade_beta") ) {
 710         eval { use Digest::MD5; };
 711
 712         if ($@) {
 713             &notice( "Failed to load Digest::MD5." .
 714                      "  Try '/twirssi_upgrade nomd5' to skip MD5 verification"
 715             );
 716             return;
 717         }
 718
 719         $md5 = get("http://twirssi.com/md5sum");
 720         chomp $md5;
 721         $md5 =~ s/ .*//;
 722         unless ($md5) {
 723             &notice("Failed to download md5sum from peeron!  Aborting.");
 724             return;
 725         }
 726
 727         unless ( open( CUR, $loc ) ) {
 728             &notice( "Failed to read $loc." .
 729                      "  Check that /set twirssi_location is set to the correct location."
 730             );
 731             return;
 732         }
 733
 734         my $cur_md5 = Digest::MD5::md5_hex(<CUR>);
 735         close CUR;
 736
 737         if ( $cur_md5 eq $md5 ) {
 738             &notice("Current twirssi seems to be up to date.");
 739             return;
 740         }
 741     }
 742
 743     my $URL =
 744       Irssi::settings_get_bool("twirssi_upgrade_beta")
 745       ? "http://github.com/zigdon/twirssi/raw/master/twirssi.pl"
 746       : "http://twirssi.com/twirssi.pl";
 747     &notice("Downloading twirssi from $URL");
 748     LWP::Simple::getstore( $URL, "$loc.upgrade" );
 749
 750     unless ( -s "$loc.upgrade" ) {
 751         &notice("Failed to save $loc.upgrade."
 752               . "  Check that /set twirssi_location is set to the correct location."
 753         );
 754         return;
 755     }
 756
 757     unless ( $data or Irssi::settings_get_bool("twirssi_upgrade_beta") ) {
 758         unless ( open( NEW, "$loc.upgrade" ) ) {
 759             &notice("Failed to read $loc.upgrade."
 760                   . "  Check that /set twirssi_location is set to the correct location."
 761             );
 762             return;
 763         }
 764
 765         my $new_md5 = Digest::MD5::md5_hex(<NEW>);
 766         close NEW;
 767
 768         if ( $new_md5 ne $md5 ) {
 769             &notice("MD5 verification failed. expected $md5, got $new_md5");
 770             return;
 771         }
 772     }
 773
 774     rename $loc, "$loc.backup"
 775       or &notice("Failed to back up $loc: $!.  Aborting")
 776       and return;
 777     rename "$loc.upgrade", $loc
 778       or &notice("Failed to rename $loc.upgrade: $!.  Aborting")
 779       and return;
 780
 781     my ( $dir, $file ) = ( $loc =~ m{(.*)/([^/]+)$} );
 782     if ( -e "$dir/autorun/$file" ) {
 783         &notice("Updating $dir/autorun/$file");
 784         unlink "$dir/autorun/$file"
 785           or &notice("Failed to remove old $file from autorun: $!");
 786         symlink "../$file", "$dir/autorun/$file"
 787           or &notice("Failed to create symlink in autorun directory: $!");
 788     }
 789
 790     &notice("Download complete.  Reload twirssi with /script load $file");
 791 }
 792
 793 sub load_friends {
 794     my $fh   = shift;
 795     my $page = 1;
 796     my %new_friends;
 797     eval {
 798         while (1)
 799         {
 800             print $fh "type:debug Loading friends page $page...\n"
 801               if ( $fh and &debug );
 802             my $friends = $twit->friends( { page => $page } );
 803             last unless $friends;
 804             $new_friends{ $_->{screen_name} } = time foreach @$friends;
 805             $page++;
 806             last if @$friends == 0 or $page == 10;
 807         }
 808     };
 809
 810     if ($@) {
 811         print $fh "type:debug Error during friends list update.  Aborted.\n";
 812         return;
 813     }
 814
 815     my ( $added, $removed ) = ( 0, 0 );
 816     print $fh "type:debug Scanning for new friends...\n" if ( $fh and &debug );
 817     foreach ( keys %new_friends ) {
 818         next if exists $friends{$_};
 819         $friends{$_} = time;
 820         $added++;
 821     }
 822
 823     print $fh "type:debug Scanning for removed friends...\n"
 824       if ( $fh and &debug );
 825     foreach ( keys %friends ) {
 826         next if exists $new_friends{$_};
 827         delete $friends{$_};
 828         $removed++;
 829     }
 830
 831     return ( $added, $removed );
 832 }
 833
 834 sub get_updates {
 835     print scalar localtime, " - get_updates starting" if &debug;
 836
 837     $window =
 838       Irssi::window_find_name( Irssi::settings_get_str('twitter_window') );
 839     unless ($window) {
 840         Irssi::active_win()
 841           ->print( "Can't find a window named '"
 842               . Irssi::settings_get_str('twitter_window')
 843               . "'.  Create it or change the value of twitter_window" );
 844     }
 845
 846     return unless &logged_in($twit);
 847
 848     my ( $fh, $filename ) = File::Temp::tempfile();
 849     binmode( $fh, ":utf8" );
 850     $child_pid = fork();
 851
 852     if ($child_pid) {    # parent
 853         Irssi::timeout_add_once( 5000, 'monitor_child',
 854             [ "$filename.done", 0 ] );
 855         Irssi::pidwait_add($child_pid);
 856     } elsif ( defined $child_pid ) {    # child
 857         close STDIN;
 858         close STDOUT;
 859         close STDERR;
 860
 861         my $new_poll = time;
 862
 863         my $error = 0;
 864         my %context_cache;
 865         foreach ( keys %twits ) {
 866             $error++ unless &do_updates( $fh, $_, $twits{$_}, \%context_cache );
 867
 868             if ( $id_map{__fixreplies}{$_} ) {
 869                 my @frusers = sort keys %{ $id_map{__fixreplies}{$_} };
 870
 871                 $error++
 872                   unless &get_timeline( $fh, $frusers[ $fix_replies_index{$_} ],
 873                     $_, $twits{$_}, \%context_cache );
 874
 875                 $fix_replies_index{$_}++;
 876                 $fix_replies_index{$_} = 0
 877                   if $fix_replies_index{$_} >= @frusers;
 878                 print $fh "id:$fix_replies_index{$_} ",
 879                           "account:$_ type:fix_replies_index\n";
 880             }
 881         }
 882
 883         print $fh "__friends__\n";
 884         if (
 885             time - $last_friends_poll >
 886             Irssi::settings_get_int('twitter_friends_poll') )
 887         {
 888             print $fh "__updated ", time, "\n";
 889             my ( $added, $removed ) = &load_friends($fh);
 890             if ( $added + $removed ) {
 891                 print $fh "type:debug %R***%n Friends list updated: ",
 892                   join( ", ",
 893                     sprintf( "%d added",   $added ),
 894                     sprintf( "%d removed", $removed ) ),
 895                   "\n";
 896             }
 897         }
 898
 899         foreach ( sort keys %friends ) {
 900             print $fh "$_ $friends{$_}\n";
 901         }
 902
 903         if ($error) {
 904             print $fh "type:debug Update encountered errors.  Aborted\n";
 905             print $fh "-- $last_poll";
 906         } else {
 907             print $fh "-- $new_poll";
 908         }
 909         close $fh;
 910         rename $filename, "$filename.done";
 911         exit;
 912     } else {
 913         &ccrap("Failed to fork for updating: $!");
 914     }
 915     print scalar localtime, " - get_updates ends" if &debug;
 916 }
 917
 918 sub do_updates {
 919     my ( $fh, $username, $obj, $cache ) = @_;
 920
 921     my $rate_limit = $obj->rate_limit_status();
 922     if ( $rate_limit and $rate_limit->{remaining_hits} < 1 ) {
 923         &notice("Rate limit exceeded for $username");
 924         return undef;
 925     }
 926
 927     print scalar localtime, " - Polling for updates for $username" if &debug;
 928     my $tweets;
 929     my $new_poll_id = 0;
 930     eval {
 931         if ( $id_map{__last_id}{$username}{timeline} )
 932         {
 933             $tweets = $obj->friends_timeline( { count => 100 } );
 934         } else {
 935             $tweets = $obj->friends_timeline();
 936         }
 937     };
 938
 939     if ($@) {
 940         print $fh "type:debug Error during friends_timeline call: Aborted.\n";
 941         print $fh "type:debug : $_\n" foreach split /\n/, Dumper($@);
 942         return undef;
 943     }
 944
 945     unless ( ref $tweets ) {
 946         if ( $obj->can("get_error") ) {
 947             my $error = "Unknown error";
 948             eval { $error = JSON::Any->jsonToObj( $obj->get_error() ) };
 949             unless ($@) { $error = $obj->get_error() }
 950             print $fh
 951               "type:debug API Error during friends_timeline call: Aborted\n";
 952             print $fh "type:debug : $_\n" foreach split /\n/, Dumper($error);
 953
 954         } else {
 955             print $fh
 956               "type:debug API Error during friends_timeline call. Aborted.\n";
 957         }
 958         return undef;
 959     }
 960
 961     foreach my $t ( reverse @$tweets ) {
 962         my $text = decode_entities( $t->{text} );
 963         $text =~ s/[\n\r]/ /g;
 964         my $reply = "tweet";
 965         if (    Irssi::settings_get_bool("show_reply_context")
 966             and $t->{in_reply_to_screen_name} ne $username
 967             and $t->{in_reply_to_screen_name}
 968             and not exists $friends{ $t->{in_reply_to_screen_name} } )
 969         {
 970             $nicks{ $t->{in_reply_to_screen_name} } = time;
 971             my $context;
 972             unless ( $cache->{ $t->{in_reply_to_status_id} } ) {
 973                 eval {
 974                     $cache->{ $t->{in_reply_to_status_id} } =
 975                       $obj->show_status( $t->{in_reply_to_status_id} );
 976                 };
 977
 978             }
 979             $context = $cache->{ $t->{in_reply_to_status_id} };
 980
 981             if ($context) {
 982                 my $ctext = decode_entities( $context->{text} );
 983                 $ctext =~ s/[\n\r]/ /g;
 984                 if ( $context->{truncated} and ref($obj) ne 'Net::Identica' ) {
 985                     $ctext .=
 986                         " -- http://twitter.com/$context->{user}{screen_name}"
 987                       . "/status/$context->{id}";
 988                 }
 989                 printf $fh "id:%s account:%s nick:%s type:tweet %s\n",
 990                   $context->{id}, $username,
 991                   $context->{user}{screen_name}, $ctext;
 992                 $reply = "reply";
 993             }
 994         }
 995         next
 996           if $t->{user}{screen_name} eq $username
 997               and not Irssi::settings_get_bool("show_own_tweets");
 998         if ( $t->{truncated} and ref($obj) ne 'Net::Identica' ) {
 999             $text .= " -- http://twitter.com/$t->{user}{screen_name}"
1000               . "/status/$t->{id}";
1001         }
1002         printf $fh "id:%s account:%s nick:%s type:%s %s\n",
1003           $t->{id}, $username, $t->{user}{screen_name}, $reply, $text;
1004         $new_poll_id = $t->{id} if $new_poll_id < $t->{id};
1005     }
1006     printf $fh "id:%s account:%s type:last_id timeline\n",
1007       $new_poll_id, $username;
1008
1009     print scalar localtime, " - Polling for replies since ",
1010       $id_map{__last_id}{$username}{reply}
1011       if &debug;
1012     $new_poll_id = 0;
1013     eval {
1014         if ( $id_map{__last_id}{$username}{reply} )
1015         {
1016             $tweets = $obj->replies(
1017                 { since_id => $id_map{__last_id}{$username}{reply} } )
1018               || [];
1019         } else {
1020             $tweets = $obj->replies() || [];
1021         }
1022     };
1023
1024     if ($@) {
1025         print $fh "type:debug Error during replies call.  Aborted.\n";
1026         return undef;
1027     }
1028
1029     foreach my $t ( reverse @$tweets ) {
1030         next
1031           if exists $friends{ $t->{user}{screen_name} };
1032
1033         my $text = decode_entities( $t->{text} );
1034         $text =~ s/[\n\r]/ /g;
1035         if ( $t->{truncated} ) {
1036             $text .= " -- http://twitter.com/$t->{user}{screen_name}"
1037               . "/status/$t->{id}";
1038         }
1039         printf $fh "id:%s account:%s nick:%s type:tweet %s\n",
1040           $t->{id}, $username, $t->{user}{screen_name}, $text;
1041         $new_poll_id = $t->{id} if $new_poll_id < $t->{id};
1042     }
1043     printf $fh "id:%s account:%s type:last_id reply\n", $new_poll_id, $username;
1044
1045     print scalar localtime, " - Polling for DMs" if &debug;
1046     $new_poll_id = 0;
1047     eval {
1048         if ( $id_map{__last_id}{$username}{dm} )
1049         {
1050             $tweets = $obj->direct_messages(
1051                 { since_id => $id_map{__last_id}{$username}{dm} } )
1052               || [];
1053         } else {
1054             $tweets = $obj->direct_messages() || [];
1055         }
1056     };
1057
1058     if ($@) {
1059         print $fh "type:debug Error during direct_messages call.  Aborted.\n";
1060         return undef;
1061     }
1062
1063     foreach my $t ( reverse @$tweets ) {
1064         my $text = decode_entities( $t->{text} );
1065         $text =~ s/[\n\r]/ /g;
1066         printf $fh "id:%s account:%s nick:%s type:dm %s\n",
1067           $t->{id}, $username, $t->{sender_screen_name}, $text;
1068         $new_poll_id = $t->{id} if $new_poll_id < $t->{id};
1069     }
1070     printf $fh "id:%s account:%s type:last_id dm\n", $new_poll_id, $username;
1071
1072     print scalar localtime, " - Polling for subscriptions" if &debug;
1073     if ( $obj->can('search') and $id_map{__searches}{$username} ) {
1074         my $search;
1075         foreach my $topic ( sort keys %{ $id_map{__searches}{$username} } ) {
1076             print $fh "type:debug searching for $topic since ",
1077               "$id_map{__searches}{$username}{$topic}\n";
1078             eval {
1079                 $search = $obj->search(
1080                     {
1081                         q        => $topic,
1082                         since_id => $id_map{__searches}{$username}{$topic}
1083                     }
1084                 );
1085             };
1086
1087             if ($@) {
1088                 print $fh
1089                   "type:debug Error during search($topic) call.  Aborted.\n";
1090                 return undef;
1091             }
1092
1093             unless ( $search->{max_id} ) {
1094                 print $fh "type:debug Invalid search results when searching",
1095                   " for $topic. Aborted.\n";
1096                 return undef;
1097             }
1098
1099             $id_map{__searches}{$username}{$topic} = $search->{max_id};
1100             printf $fh "id:%s account:%s type:searchid topic:%s\n",
1101               $search->{max_id}, $username, $topic;
1102
1103             foreach my $t ( reverse @{ $search->{results} } ) {
1104                 my $text = decode_entities( $t->{text} );
1105                 $text =~ s/[\n\r]/ /g;
1106                 printf $fh "id:%s account:%s nick:%s type:search topic:%s %s\n",
1107                   $t->{id}, $username, $t->{from_user}, $topic, $text;
1108                 $new_poll_id = $t->{id}
1109                   if not $new_poll_id
1110                       or $t->{id} < $new_poll_id;
1111             }
1112         }
1113     }
1114
1115     print scalar localtime, " - Done" if &debug;
1116
1117     return 1;
1118 }
1119
1120 sub get_timeline {
1121     my ( $fh, $target, $username, $obj, $cache ) = @_;
1122     my $tweets;
1123     my $last_id = $id_map{__last_id}{$username}{$target};
1124
1125     print $fh "type:debug get_timeline(" .
1126               "$fix_replies_index{$username}=$target > $last_id) started." .
1127               "  username = $username\n";
1128     eval {
1129         $tweets = $obj->user_timeline(
1130             {
1131                 id => $target,
1132                 (
1133                     $last_id ? (since_id => $last_id) : ()
1134                 ),
1135             }
1136         );
1137     };
1138
1139     if ($@) {
1140         print $fh
1141           "type:debug Error during user_timeline($target) call: Aborted.\n";
1142         print $fh "type:debug : $_\n" foreach split /\n/, Dumper($@);
1143         return undef;
1144     }
1145
1146     unless ($tweets) {
1147         print $fh
1148           "type:debug user_timeline($target) call returned undef!  Aborted\n";
1149         return 1;
1150     }
1151
1152     foreach my $t ( reverse @$tweets ) {
1153         my $text = decode_entities( $t->{text} );
1154         $text =~ s/[\n\r]/ /g;
1155         my $reply = "tweet";
1156         if (    Irssi::settings_get_bool("show_reply_context")
1157             and $t->{in_reply_to_screen_name} ne $username
1158             and $t->{in_reply_to_screen_name}
1159             and not exists $friends{ $t->{in_reply_to_screen_name} } )
1160         {
1161             $nicks{ $t->{in_reply_to_screen_name} } = time;
1162             my $context;
1163             unless ( $cache->{ $t->{in_reply_to_status_id} } ) {
1164                 eval {
1165                     $cache->{ $t->{in_reply_to_status_id} } =
1166                       $obj->show_status( $t->{in_reply_to_status_id} );
1167                 };
1168
1169             }
1170             $context = $cache->{ $t->{in_reply_to_status_id} };
1171
1172             if ($context) {
1173                 my $ctext = decode_entities( $context->{text} );
1174                 $ctext =~ s/[\n\r]/ /g;
1175                 if ( $context->{truncated} and ref($obj) ne 'Net::Identica' ) {
1176                     $ctext .=
1177                         " -- http://twitter.com/$context->{user}{screen_name}"
1178                       . "/status/$context->{id}";
1179                 }
1180                 printf $fh "id:%s account:%s nick:%s type:tweet %s\n",
1181                   $context->{id}, $username,
1182                   $context->{user}{screen_name}, $ctext;
1183                 $reply = "reply";
1184             }
1185         }
1186         if ( $t->{truncated} and ref($obj) ne 'Net::Identica' ) {
1187             $text .= " -- http://twitter.com/$t->{user}{screen_name}"
1188               . "/status/$t->{id}";
1189         }
1190         printf $fh "id:%s account:%s nick:%s type:%s %s\n",
1191           $t->{id}, $username, $t->{user}{screen_name}, $reply, $text;
1192         $last_id = $t->{id} if $last_id < $t->{id};
1193     }
1194     printf $fh "id:%s account:%s type:last_id_fixreplies %s\n",
1195         $last_id, $username, $target;
1196
1197     return 1;
1198 }
1199
1200 sub monitor_child {
1201     my ($data)   = @_;
1202     my $filename = $data->[0];
1203     my $attempt  = $data->[1];
1204
1205     print scalar localtime, " - checking child log at $filename ($attempt)"
1206       if &debug;
1207     my ($new_last_poll);
1208
1209     # first time we run we don't want to print out *everything*, so we just
1210     # pretend
1211
1212     if ( open FILE, $filename ) {
1213         binmode FILE, ":utf8";
1214         my @lines;
1215         my %new_cache;
1216         while (<FILE>) {
1217             last if /^__friends__/;
1218             unless (/\n$/) {    # skip partial lines
1219                                 # print "Skipping partial line: $_" if &debug;
1220                 next;
1221             }
1222             chomp;
1223             my $hilight = 0;
1224             my %meta;
1225
1226             foreach my $key (qw/id account nick type topic/) {
1227                 if (s/^$key:(\S+)\s*//) {
1228                     $meta{$key} = $1;
1229                 }
1230             }
1231
1232             if ( $meta{type} and $meta{type} eq 'fix_replies_index' ) {
1233                 $fix_replies_index{ $meta{account} } = $meta{id};
1234                 print "fix_replies_index for $meta{account} set to $meta{id}"
1235                   if &debug;
1236                 next;
1237             }
1238
1239             if ( not $meta{type} or $meta{type} !~ /searchid|last_id/ ) {
1240                 if ( exists $meta{id} and exists $new_cache{ $meta{id} } ) {
1241                     next;
1242                 }
1243
1244                 $new_cache{ $meta{id} } = time;
1245
1246                 if ( exists $meta{id} and exists $tweet_cache{ $meta{id} } ) {
1247                     next;
1248                 }
1249             }
1250
1251             my $account = "";
1252             $meta{account} =~ s/\@(\w+)$//;
1253             $meta{service} = $1;
1254             if (
1255                 lc $meta{service} eq
1256                 lc Irssi::settings_get_str("twirssi_default_service") )
1257             {
1258                 $account = "$meta{account}: "
1259                   if lc "$meta{account}\@$meta{service}" ne lc
1260                       "$user\@$defservice";
1261             } else {
1262                 $account = "$meta{account}\@$meta{service}: ";
1263             }
1264
1265             my $marker = "";
1266             if (    $meta{type} ne 'dm'
1267                 and Irssi::settings_get_bool("twirssi_track_replies")
1268                 and $meta{nick}
1269                 and $meta{id} )
1270             {
1271                 $marker = ( $id_map{__indexes}{ $meta{nick} } + 1 ) % 100;
1272                 $id_map{ lc $meta{nick} }[$marker]           = $meta{id};
1273                 $id_map{__indexes}{ $meta{nick} }            = $marker;
1274                 $id_map{__tweets}{ lc $meta{nick} }[$marker] = $_;
1275                 $marker                                      = ":$marker";
1276             }
1277
1278             my $hilight_color =
1279               $irssi_to_mirc_colors{ Irssi::settings_get_str("hilight_color") };
1280             my $nick = "\@$meta{account}";
1281             if ( $_ =~ /\Q$nick\E(?:\W|$)/i
1282                 and Irssi::settings_get_bool("twirssi_hilights") )
1283             {
1284                 $meta{nick} = "\cC$hilight_color$meta{nick}\cO";
1285                 $hilight = MSGLEVEL_HILIGHT;
1286             }
1287
1288             if ( $meta{type} =~ /tweet|reply/ ) {
1289                 push @lines,
1290                   [
1291                     ( MSGLEVEL_PUBLIC | $hilight ),
1292                     $meta{type}, $account, $meta{nick}, $marker, $_
1293                   ];
1294             } elsif ( $meta{type} eq 'search' ) {
1295                 push @lines,
1296                   [
1297                     ( MSGLEVEL_PUBLIC | $hilight ),
1298                     $meta{type}, $account, $meta{topic},
1299                     $meta{nick}, $marker,  $_
1300                   ];
1301                 if (
1302                     exists $id_map{__searches}{ $meta{account} }{ $meta{topic} }
1303                     and $meta{id} >
1304                     $id_map{__searches}{ $meta{account} }{ $meta{topic} } )
1305                 {
1306                     $id_map{__searches}{ $meta{account} }{ $meta{topic} } =
1307                       $meta{id};
1308                 }
1309             } elsif ( $meta{type} eq 'dm' ) {
1310                 push @lines,
1311                   [
1312                     ( MSGLEVEL_MSGS | $hilight ),
1313                     $meta{type}, $account, $meta{nick}, $_
1314                   ];
1315             } elsif ( $meta{type} eq 'searchid' ) {
1316                 print "Search '$meta{topic}' returned id $meta{id}" if &debug;
1317                 if (
1318                     not
1319                     exists $id_map{__searches}{ $meta{account} }{ $meta{topic} }
1320                     or $meta{id} >=
1321                     $id_map{__searches}{ $meta{account} }{ $meta{topic} } )
1322                 {
1323                     $id_map{__searches}{ $meta{account} }{ $meta{topic} } =
1324                       $meta{id};
1325                 } elsif (&debug) {
1326                     print "Search '$meta{topic}' returned invalid id $meta{id}";
1327                 }
1328             } elsif ( $meta{type} eq 'last_id' ) {
1329                 $id_map{__last_id}{"$meta{account}\@$meta{service}"}{$_} =
1330                   $meta{id}
1331                   if $id_map{__last_id}{"$meta{account}\@$meta{service}"}{$_} <
1332                       $meta{id};
1333             } elsif ( $meta{type} eq 'last_id_fixreplies' ) {
1334                 $id_map{__last_id}{"$meta{account}\@$meta{service}"}{$_} =
1335                   $meta{id}
1336                   if $id_map{__last_id}{"$meta{account}\@$meta{service}"}{$_} <
1337                       $meta{id};
1338             } elsif ( $meta{type} eq 'error' ) {
1339                 push @lines, [ MSGLEVEL_MSGS, $_ ];
1340             } elsif ( $meta{type} eq 'debug' ) {
1341                 print "$_" if &debug,;
1342             } else {
1343                 print "Unknown line type $meta{type}: $_" if &debug,;
1344             }
1345         }
1346
1347         %friends = ();
1348         while (<FILE>) {
1349             if (/^__updated (\d+)$/) {
1350                 $last_friends_poll = $1;
1351                 print "Friend list updated" if &debug;
1352                 next;
1353             }
1354
1355             if (/^-- (\d+)$/) {
1356                 $new_last_poll = $1;
1357                 if ( $new_last_poll >= $last_poll ) {
1358                     last;
1359                 } else {
1360                     print "Impossible!  ",
1361                       "new_last_poll=$new_last_poll < last_poll=$last_poll!"
1362                       if &debug;
1363                     undef $new_last_poll;
1364                     next;
1365                 }
1366             }
1367             my ( $f, $t ) = split ' ', $_;
1368             $nicks{$f} = $friends{$f} = $t;
1369         }
1370
1371         if ($new_last_poll) {
1372             print "new last_poll    = $new_last_poll" if &debug;
1373             print "new last_poll_id = ", Dumper( $id_map{__last_id} ) if &debug;
1374             if ($first_call) {
1375                 print "First call, not printing updates" if &debug;
1376             } else {
1377                 foreach my $line (@lines) {
1378                     $window->printformat(
1379                         $line->[0],
1380                         "twirssi_" . $line->[1],
1381                         @$line[ 2 .. $#$line - 1 ],
1382                         &hilight( $line->[-1] )
1383                     );
1384                 }
1385             }
1386
1387             close FILE;
1388             unlink $filename
1389               or warn "Failed to remove $filename: $!"
1390               unless &debug;
1391
1392             # commit the pending cache lines to the actual cache, now that
1393             # we've printed our output
1394             %tweet_cache = ( %tweet_cache, %new_cache );
1395
1396             # keep enough cached tweets, to make sure we don't show duplicates.
1397             foreach ( keys %tweet_cache ) {
1398                 next if $tweet_cache{$_} >= $last_poll - 3600;
1399                 delete $tweet_cache{$_};
1400             }
1401             $last_poll = $new_last_poll;
1402
1403             # make sure the pid is removed from the waitpid list
1404             Irssi::pidwait_remove($child_pid);
1405
1406             # and that we don't leave any zombies behind, somehow
1407             wait();
1408
1409             # save id_map hash
1410             if ( keys %id_map
1411                 and my $file =
1412                 Irssi::settings_get_str("twirssi_replies_store") )
1413             {
1414                 if ( open JSON, ">$file" ) {
1415                     print JSON JSON::Any->objToJson( \%id_map );
1416                     close JSON;
1417                 } else {
1418                     &ccrap("Failed to write replies to $file: $!");
1419                 }
1420             }
1421             $failwhale  = 0;
1422             $first_call = 0;
1423             return;
1424         }
1425     }
1426
1427     close FILE;
1428
1429     if ( $attempt < 24 ) {
1430         Irssi::timeout_add_once( 5000, 'monitor_child',
1431             [ $filename, $attempt + 1 ] );
1432     } else {
1433         print "Giving up on polling $filename" if &debug;
1434         Irssi::pidwait_remove($child_pid);
1435         wait();
1436         unlink $filename unless &debug;
1437
1438         return unless Irssi::settings_get_bool("twirssi_notify_timeouts");
1439
1440         my $since;
1441         my @time = localtime($last_poll);
1442         if ( time - $last_poll < 24 * 60 * 60 ) {
1443             $since = sprintf( "%d:%02d", @time[ 2, 1 ] );
1444         } else {
1445             $since = scalar localtime($last_poll);
1446         }
1447
1448         if ( not $failwhale and time - $last_poll > 60 * 60 ) {
1449             foreach my $whale (
1450                 q{     v  v        v},
1451                 q{     |  |  v     |  v},
1452                 q{     | .-, |     |  |},
1453                 q{  .--./ /  |  _.---.| },
1454                 q{   '-. (__..-"       \\},
1455                 q{      \\          a    |},
1456                 q{       ',.__.   ,__.-'/},
1457                 q{         '--/_.'----'`}
1458               )
1459             {
1460                 &ccrap($whale);
1461             }
1462             $failwhale = 1;
1463         }
1464
1465         if ( time - $last_poll < 600 ) {
1466             &ccrap("Haven't been able to get updated tweets since $since");
1467         }
1468     }
1469 }
1470
1471 sub debug {
1472     return Irssi::settings_get_bool("twirssi_debug");
1473 }
1474
1475 sub notice {
1476     $window->print( "%R***%n @_", MSGLEVEL_PUBLIC );
1477 }
1478
1479 sub ccrap {
1480     $window->print( "%R***%n @_", MSGLEVEL_CLIENTCRAP );
1481 }
1482
1483 sub update_away {
1484     my $data = shift;
1485
1486     if (    Irssi::settings_get_bool("tweet_to_away")
1487         and $data !~ /\@\w/
1488         and $data !~ /^[dD] / )
1489     {
1490         my $server =
1491           Irssi::server_find_tag( Irssi::settings_get_str("bitlbee_server") );
1492         if ($server) {
1493             $server->send_raw("away :$data");
1494             return 1;
1495         } else {
1496             &ccrap( "Can't find bitlbee server.",
1497                 "Update bitlbee_server or disable tweet_to_away" );
1498             return 0;
1499         }
1500     }
1501
1502     return 0;
1503 }
1504
1505 sub too_long {
1506     my $data    = shift;
1507     my $noalert = shift;
1508
1509     if ( length $data > 140 ) {
1510         &notice( "Tweet too long (" . length($data) . " characters) - aborted" )
1511           unless $noalert;
1512         return 1;
1513     }
1514
1515     return 0;
1516 }
1517
1518 sub valid_username {
1519     my $username = shift;
1520
1521     $username = &normalize_username($username);
1522
1523     unless ( exists $twits{$username} ) {
1524         &notice("Unknown username $username");
1525         return undef;
1526     }
1527
1528     return $username;
1529 }
1530
1531 sub logged_in {
1532     my $obj = shift;
1533     unless ($obj) {
1534         &notice("Not logged in!  Use /twitter_login username pass!");
1535         return 0;
1536     }
1537
1538     return 1;
1539 }
1540
1541 sub sig_complete {
1542     my ( $complist, $window, $word, $linestart, $want_space ) = @_;
1543
1544     if (
1545         $linestart =~ /^\/(?:retweet|twitter_reply)(?:_as)?\s*$/
1546         or ( Irssi::settings_get_bool("twirssi_use_reply_aliases")
1547             and $linestart =~ /^\/reply(?:_as)?\s*$/ )
1548       )
1549     {    # /twitter_reply gets a nick:num
1550         $word =~ s/^@//;
1551         @$complist = map { "$_:$id_map{__indexes}{$_}" }
1552           sort { $nicks{$b} <=> $nicks{$a} }
1553           grep /^\Q$word/i,
1554           keys %{ $id_map{__indexes} };
1555     }
1556
1557     if ( $linestart =~ /^\/(twitter_unfriend|twitter_add_follow_extra|twitter_del_follow_extra)\s*$/ )
1558     {    # /twitter_unfriend gets a nick
1559         $word =~ s/^@//;
1560         push @$complist, grep /^\Q$word/i,
1561           sort { $nicks{$b} <=> $nicks{$a} } keys %nicks;
1562     }
1563
1564     # /tweet, /tweet_as, /dm, /dm_as - complete @nicks (and nicks as the first
1565     # arg to dm)
1566     if ( $linestart =~ /^\/(?:tweet|dm)/ ) {
1567         my $prefix = $word =~ s/^@//;
1568         $prefix = 0 if $linestart eq '/dm' or $linestart eq '/dm_as';
1569         push @$complist, grep /^\Q$word/i,
1570           sort { $nicks{$b} <=> $nicks{$a} } keys %nicks;
1571         @$complist = map { "\@$_" } @$complist if $prefix;
1572     }
1573 }
1574
1575 sub event_send_text {
1576     my ( $line, $server, $win ) = @_;
1577     my $awin = Irssi::active_win();
1578
1579     # if the window where we got our text was the twitter window, and the user
1580     # wants to be lazy, tweet away!
1581     if ( ( $awin->get_active_name() eq $window->{name} )
1582         and Irssi::settings_get_bool("tweet_window_input") )
1583     {
1584         &cmd_tweet( $line, $server, $win );
1585     }
1586 }
1587
1588 sub get_poll_time {
1589     my $poll = Irssi::settings_get_int("twitter_poll_interval");
1590     return $poll if $poll >= 60;
1591     return 60;
1592 }
1593
1594 sub hilight {
1595     my $text = shift;
1596
1597     if ( Irssi::settings_get_str("twirssi_nick_color") ) {
1598         my $c = Irssi::settings_get_str("twirssi_nick_color");
1599         $c = $irssi_to_mirc_colors{$c};
1600         $text =~ s/(^|\W)\@([-\w]+)/$1\cC$c\@$2\cO/g if $c;
1601     }
1602     if ( Irssi::settings_get_str("twirssi_topic_color") ) {
1603         my $c = Irssi::settings_get_str("twirssi_topic_color");
1604         $c = $irssi_to_mirc_colors{$c};
1605         $text =~ s/(^|\W)(\#|\!)([-\w]+)/$1\cC$c$2$3\cO/g if $c;
1606     }
1607     $text =~ s/[\n\r]/ /g;
1608
1609     return $text;
1610 }
1611
1612 sub shorten {
1613     my $data = shift;
1614
1615     my $provider = Irssi::settings_get_str("short_url_provider");
1616     if (
1617         (
1618             Irssi::settings_get_bool("twirssi_always_shorten")
1619             or &too_long( $data, 1 )
1620         )
1621         and $provider
1622       )
1623     {
1624         my @args;
1625         if ( $provider eq 'Bitly' ) {
1626             @args[ 1, 2 ] = split ',',
1627               Irssi::settings_get_str("short_url_args"), 2;
1628             unless ( @args == 3 ) {
1629                 &ccrap(
1630                     "WWW::Shorten::Bitly requires a username and API key.",
1631                     "Set short_url_args to username,API_key or change your",
1632                     "short_url_provider."
1633                 );
1634                 return decode "utf8", $data;
1635             }
1636         }
1637
1638         foreach my $url ( $data =~ /(https?:\/\/\S+[\w\/])/g ) {
1639             eval {
1640                 $args[0] = $url;
1641                 my $short = makeashorterlink(@args);
1642                 if ($short) {
1643                     $data =~ s/\Q$url/$short/g;
1644                 } else {
1645                     &notice("Failed to shorten $url!");
1646                 }
1647             };
1648         }
1649     }
1650
1651     return decode "utf8", $data;
1652 }
1653
1654 sub normalize_username {
1655     my $user = shift;
1656
1657     my ( $username, $service ) = split /\@/, $user, 2;
1658     if ($service) {
1659         $service = ucfirst lc $service;
1660     } else {
1661         $service =
1662           ucfirst lc Irssi::settings_get_str("twirssi_default_service");
1663         unless ( exists $twits{"$username\@$service"} ) {
1664             $service = undef;
1665             foreach my $t ( sort keys %twits ) {
1666                 next unless $t =~ /^\Q$username\E\@(Twitter|Identica)/;
1667                 $service = $1;
1668                 last;
1669             }
1670
1671             unless ($service) {
1672                 &notice("Can't find a logged in user '$user'");
1673             }
1674         }
1675     }
1676
1677     return "$username\@$service";
1678 }
1679
1680 Irssi::signal_add( "send text", "event_send_text" );
1681
1682 Irssi::theme_register(
1683     [
1684         'twirssi_tweet',  '[$0%B@$1%n$2] $3',
1685         'twirssi_search', '[$0%r$1%n:%B@$2%n$3] $4',
1686         'twirssi_reply',  '[$0\--> %B@$1%n$2] $3',
1687         'twirssi_dm',     '[$0%r@$1%n (%WDM%n)] $2',
1688         'twirssi_error',  'ERROR: $0',
1689     ]
1690 );
1691
1692 Irssi::settings_add_int( "twirssi", "twitter_poll_interval", 300 );
1693 Irssi::settings_add_str( "twirssi", "twitter_window",          "twitter" );
1694 Irssi::settings_add_str( "twirssi", "bitlbee_server",          "bitlbee" );
1695 Irssi::settings_add_str( "twirssi", "short_url_provider",      "TinyURL" );
1696 Irssi::settings_add_str( "twirssi", "short_url_args",          undef );
1697 Irssi::settings_add_str( "twirssi", "twitter_usernames",       undef );
1698 Irssi::settings_add_str( "twirssi", "twitter_passwords",       undef );
1699 Irssi::settings_add_str( "twirssi", "twirssi_default_service", "Twitter" );
1700 Irssi::settings_add_str( "twirssi", "twirssi_nick_color",      "%B" );
1701 Irssi::settings_add_str( "twirssi", "twirssi_topic_color",     "%r" );
1702 Irssi::settings_add_str( "twirssi", "twirssi_retweet_format",
1703     'RT $n: "$t" ${-- $c$}' );
1704 Irssi::settings_add_str( "twirssi", "twirssi_location",
1705     ".irssi/scripts/twirssi.pl" );
1706 Irssi::settings_add_str( "twirssi", "twirssi_replies_store",
1707     ".irssi/scripts/twirssi.json" );
1708
1709 Irssi::settings_add_int( "twirssi", "twitter_friends_poll", 600 );
1710 Irssi::settings_add_int( "twirssi", "twitter_timeout",      30 );
1711
1712 Irssi::settings_add_bool( "twirssi", "twirssi_upgrade_beta",      0 );
1713 Irssi::settings_add_bool( "twirssi", "tweet_to_away",             0 );
1714 Irssi::settings_add_bool( "twirssi", "show_reply_context",        0 );
1715 Irssi::settings_add_bool( "twirssi", "show_own_tweets",           1 );
1716 Irssi::settings_add_bool( "twirssi", "twirssi_debug",             0 );
1717 Irssi::settings_add_bool( "twirssi", "twirssi_first_run",         1 );
1718 Irssi::settings_add_bool( "twirssi", "twirssi_track_replies",     1 );
1719 Irssi::settings_add_bool( "twirssi", "twirssi_replies_autonick",  1 );
1720 Irssi::settings_add_bool( "twirssi", "twirssi_use_reply_aliases", 0 );
1721 Irssi::settings_add_bool( "twirssi", "twirssi_notify_timeouts",   1 );
1722 Irssi::settings_add_bool( "twirssi", "twirssi_hilights",          1 );
1723 Irssi::settings_add_bool( "twirssi", "twirssi_always_shorten",    0 );
1724 Irssi::settings_add_bool( "twirssi", "tweet_window_input",        0 );
1725 Irssi::settings_add_bool( "twirssi", "twirssi_avoid_ssl",         0 );
1726
1727 $last_poll = time - &get_poll_time;
1728 $window = Irssi::window_find_name( Irssi::settings_get_str('twitter_window') );
1729 if ( !$window ) {
1730     Irssi::active_win()
1731       ->print( "Couldn't find a window named '"
1732           . Irssi::settings_get_str('twitter_window')
1733           . "', trying to create it." );
1734     $window =
1735       Irssi::Windowitem::window_create(
1736         Irssi::settings_get_str('twitter_window'), 1 );
1737     $window->set_name( Irssi::settings_get_str('twitter_window') );
1738 }
1739
1740 if ($window) {
1741     Irssi::command_bind( "dm",                         "cmd_direct" );
1742     Irssi::command_bind( "dm_as",                      "cmd_direct_as" );
1743     Irssi::command_bind( "tweet",                      "cmd_tweet" );
1744     Irssi::command_bind( "tweet_as",                   "cmd_tweet_as" );
1745     Irssi::command_bind( "retweet",                    "cmd_retweet" );
1746     Irssi::command_bind( "retweet_as",                 "cmd_retweet_as" );
1747     Irssi::command_bind( "twitter_reply",              "cmd_reply" );
1748     Irssi::command_bind( "twitter_reply_as",           "cmd_reply_as" );
1749     Irssi::command_bind( "twitter_login",              "cmd_login" );
1750     Irssi::command_bind( "twitter_logout",             "cmd_logout" );
1751     Irssi::command_bind( "twitter_switch",             "cmd_switch" );
1752     Irssi::command_bind( "twitter_subscribe",          "cmd_add_search" );
1753     Irssi::command_bind( "twitter_unsubscribe",        "cmd_del_search" );
1754     Irssi::command_bind( "twitter_list_subscriptions", "cmd_list_search" );
1755     Irssi::command_bind( "twirssi_upgrade",            "cmd_upgrade" );
1756     Irssi::command_bind( "twitter_updates",            "get_updates" );
1757     Irssi::command_bind( "twitter_add_follow_extra",   "cmd_add_follow" );
1758     Irssi::command_bind( "twitter_del_follow_extra",   "cmd_del_follow" );
1759     Irssi::command_bind( "twitter_list_follow_extra",  "cmd_list_follow" );
1760     Irssi::command_bind( "bitlbee_away",               "update_away" );
1761     if ( Irssi::settings_get_bool("twirssi_use_reply_aliases") ) {
1762         Irssi::command_bind( "reply",    "cmd_reply" );
1763         Irssi::command_bind( "reply_as", "cmd_reply_as" );
1764     }
1765     Irssi::command_bind(
1766         "twirssi_dump",
1767         sub {
1768             print "twits: ", join ", ",
1769               map { "u: $_->{username}\@" . ref($_) } values %twits;
1770             print "selected: $user\@$defservice";
1771             print "friends: ", join ", ", sort keys %friends;
1772             print "nicks: ",   join ", ", sort keys %nicks;
1773             print "searches: ", Dumper \%{ $id_map{__searches} };
1774             print "last poll: $last_poll";
1775             if ( open DUMP, ">/tmp/twirssi.cache.txt" ) {
1776                 print DUMP Dumper \%tweet_cache;
1777                 close DUMP;
1778                 print "cache written out to /tmp/twirssi.cache.txt";
1779             }
1780         }
1781     );
1782     Irssi::command_bind(
1783         "twirssi_version",
1784         sub {
1785             &notice(
1786                 "Twirssi v$VERSION (r$REV); "
1787                   . (
1788                     $Net::Twitter::VERSION
1789                     ? "Net::Twitter v$Net::Twitter::VERSION. "
1790                     : ""
1791                   )
1792                   . (
1793                     $Net::Identica::VERSION
1794                     ? "Net::Identica v$Net::Identica::VERSION. "
1795                     : ""
1796                   )
1797                   . "JSON in use: "
1798                   . JSON::Any::handler()
1799                   . ".  See details at http://twirssi.com/"
1800             );
1801         }
1802     );
1803     Irssi::command_bind(
1804         "twitter_follow",
1805         &gen_cmd(
1806             "/twitter_follow <username>",
1807             "create_friend",
1808             sub { &notice("Following $_[0]"); $nicks{ $_[0] } = time; }
1809         )
1810     );
1811     Irssi::command_bind(
1812         "twitter_unfollow",
1813         &gen_cmd(
1814             "/twitter_unfriend <username>",
1815             "destroy_friend",
1816             sub { &notice("Stopped following $_[0]"); delete $nicks{ $_[0] }; }
1817         )
1818     );
1819     Irssi::command_bind(
1820         "twitter_device_updates",
1821         &gen_cmd(
1822             "/twitter_device_updates none|im|sms",
1823             "update_delivery_device",
1824             sub { &notice("Device updated to $_[0]"); }
1825         )
1826     );
1827     Irssi::command_bind(
1828         "twitter_block",
1829         &gen_cmd(
1830             "/twitter_block <username>",
1831             "create_block",
1832             sub { &notice("Blocked $_[0]"); }
1833         )
1834     );
1835     Irssi::command_bind(
1836         "twitter_unblock",
1837         &gen_cmd(
1838             "/twitter_unblock <username>",
1839             "destroy_block",
1840             sub { &notice("Unblock $_[0]"); }
1841         )
1842     );
1843     Irssi::signal_add_last( 'complete word' => \&sig_complete );
1844
1845     &notice("  %Y<%C(%B^%C)%N                   TWIRSSI v%R$VERSION%N (r$REV)");
1846     &notice("   %C(_(\\%N           http://twirssi.com/ for full docs");
1847     &notice(
1848         "    %Y||%C `%N Log in with /twitter_login, send updates with /tweet");
1849
1850     my $file = Irssi::settings_get_str("twirssi_replies_store");
1851     if ( $file and -r $file ) {
1852         if ( open( JSON, $file ) ) {
1853             local $/;
1854             my $json = <JSON>;
1855             close JSON;
1856             eval {
1857                 my $ref = JSON::Any->jsonToObj($json);
1858                 %id_map = %$ref;
1859                 my $num = keys %{ $id_map{__indexes} };
1860                 &notice( sprintf "Loaded old replies from %d contact%s.",
1861                     $num, ( $num == 1 ? "" : "s" ) );
1862                 &cmd_list_search;
1863                 &cmd_list_follow;
1864             };
1865         } else {
1866             &notice("Failed to load old replies from $file: $!");
1867         }
1868     }
1869
1870     if ( my $provider = Irssi::settings_get_str("short_url_provider") ) {
1871         &notice("Loading WWW::Shorten::$provider...");
1872         eval "use WWW::Shorten::$provider;";
1873
1874         if ($@) {
1875             &notice(
1876                 "Failed to load WWW::Shorten::$provider - either clear",
1877                 "short_url_provider or install the CPAN module"
1878             );
1879         }
1880     }
1881
1882     if (    my $autouser = Irssi::settings_get_str("twitter_usernames")
1883         and my $autopass = Irssi::settings_get_str("twitter_passwords") )
1884     {
1885         &cmd_login();
1886         &get_updates;
1887     }
1888
1889 } else {
1890     Irssi::active_win()
1891       ->print( "Create a window named "
1892           . Irssi::settings_get_str('twitter_window')
1893           . " or change the value of twitter_window.  Then, reload twirssi." );
1894 }
1895
1896 # vim: set sts=4 expandtab: