store items in CouchDB
[ILL-Zotero-RT] / zotero.pl
1 #!/usr/bin/perl
2 use warnings;
3 use strict;
4
5 use LWP::Simple;
6 use XML::Simple;
7 use JSON;
8 use Data::Dump qw(dump);
9 use RT::Client::REST;
10
11 use CouchDB;
12 use Digest::MD5 qw(md5_hex);
13
14 my $UserID = $ENV{UserID} || die "usage: UserID=1234 key=abcd $0";
15 my $key    = $ENV{key}    || die "key required";
16
17 my $FETCH  = $ENV{FETCH}  || 0;
18
19 my $db = CouchDB->new('10.60.0.95', 5984);
20 eval { $db->put("z_$UserID") }; # create user database
21
22 my $url = "https://api.zotero.org/users/$UserID/items?key=$key&format=atom&content=json&order=dateModified&sort=desc";
23
24 my $file = "$UserID.atom";
25
26 warn "# $url\n";
27 if ( $FETCH && mirror( $url => $file ) == RC_NOT_MODIFIED ) {
28         warn "not modified";
29 #       exit 0;
30 }
31
32 my $feed = XMLin( $file );
33 #warn "# feed ",dump($feed);
34
35 my $tree;
36 my $ticket_items;
37
38 my $items;
39
40 foreach my $entry ( keys %{ $feed->{entry} } ) {
41         warn "# entry $entry ",dump($entry);
42         my $id = $entry;
43         $id =~ s{.+/items/}{}; # leave just ID
44
45         my $item = $feed->{entry}->{$entry};
46         warn "# entry $entry ",dump($item);
47
48         foreach my $link ( @{ $item->{link} } ) {
49                 warn "# link $id ",dump($link);
50                 if ( $link->{rel} eq 'up' ) {
51                         my $up = $link->{href};
52                         $up =~ s{.+/items/}{};
53                         $up =~ s{\?.+}{};
54                         push @{ $tree->{$up} }, $id;
55                 }
56         }
57
58         $item->{zapi_etag} = $item->{content}->{'zapi:etag'};
59
60         if ( $item->{content}->{'zapi:type'} eq 'json' ) {
61                 my $json = $item->{content}->{content};
62                 warn "# $json\n";
63                 $json = $item->{content} = decode_json $json;
64                 warn "# json $id ", dump $json;
65
66                 foreach my $tag ( @{ $json->{tags} } ) {
67                         $tag = $tag->{tag};
68                         warn "# tag $id $tag\n";
69                         next unless $tag =~ m/#(\d+)/;
70                         push @{ $ticket_items->{$1} }, $id;
71                 }
72         }
73
74         $items->{$id} = $item;
75
76         my $old_item = $db->get( "z_$UserID/$id" );
77         warn "# old_item ",dump($old_item);
78         my $item_md5 = md5_hex encode_json $item;
79         $item->{item_md5} = $item_md5;
80         if ( $old_item->{zapi_etag} ne $item->{zapi_etag} || $item_md5 ne $old_item->{item_md5} ) {
81                 $item->{_rev} = $old_item->{_rev};
82                 $db->put( "z_$UserID/$id" => $item );
83         }
84 }
85
86 warn "# tree ",dump( $tree );
87
88 warn "# ticket_items ",dump( $ticket_items );
89
90
91 my $rt = RT::Client::REST->new(
92         server => 'http://rt.rot13.org/rt',
93         timeout => 30,
94 );
95
96 $rt->login(username => $ENV{RT_USER}, password => $ENV{RT_PASSWORD});
97
98 foreach my $nr ( keys %$ticket_items ) {
99
100         my $ticket = $rt->show(type => 'ticket', id => $nr);
101         warn "# ticket $nr ",dump($ticket);
102
103         if ( $ticket->{Queue} !~ m/ILL/i ) {
104                 warn "SKIP $ticket not in ILL queue!";
105                 next;
106         }
107
108         foreach my $id ( @{ $ticket_items->{$nr} } ) {
109                 warn "# item $id ",dump( $items->{$id} );
110
111 #               $rt->comment( ticket_id => $nr, message => dump( $items->{$id} ) );
112
113                 last; # FIXME just first
114
115         }
116
117 }