symlink .git reposotory from persistant storage to /dev/shm on start
[dell-switch] / snmp-topology.pl
1 #!/usr/bin/perl
2 use warnings;
3 use strict;
4 use autodie;
5
6 use Data::Dump qw(dump);
7
8 my $dir="/dev/shm/snmp-topology";
9
10 my $stat;
11
12 my @dumps = @ARGV;
13 @dumps = glob("$dir/*") unless @dumps;
14
15 sub macfmt {
16         my $mac = shift;
17         $mac =~ s/^([0-9a-f]):/0$1:/i;
18         while ( $mac =~ s/:([0-9a-f]):/:0$1:/ig ) {};
19         $mac =~ s/:([0-9a-f])$/:0$1/i;
20         return $mac;
21 }
22
23 foreach my $file ( @dumps ) {
24
25         open(my $fh, '<', $file);
26         my $sw = $file; $sw =~ s/^.*\///;
27         while(<$fh>) {
28                 chomp;
29                 if ( m/^SNMPv2-MIB::(sysName|sysDescr)\.0 = STRING: (.+)/ ) {
30                         $stat->{$sw}->{$1} = $2;
31 =for xxx
32                 } elsif ( m/^(IF-MIB)::(ifPhysAddress)\.0 = (\w+): (.+)/ ) {
33                         my ($name,$oid,$type,$value) = ($1,$2,$3,$4);
34                         #$value =~ s/\(\d+\)$// if $type eq 'INTEGER';
35                         $stat->{$sw}->{$name}->{$oid} = $value;
36 =cut
37                 } elsif ( m/^(IF-MIB)::(ifPhysAddress)\[(\d+)\] = (\w+): (.+)/ ) {
38                         my ($name,$oid,$i,$type,$value) = ($1,$2,$3,$4,$5);
39                         #warn "# $sw ",dump($name,$oid,$i,$type,$value),$/;
40                         #$stat->{$sw}->{$name}->{$oid}->[$i] = $value;
41                         $stat->{_mac2sw}->{$value} = $sw;
42                 } elsif ( m/^BRIDGE-MIB::dot1dTpFdbPort\[STRING: ([^\]]+)\] = INTEGER: (\d+)/ ) {
43                         my ( $mac, $port ) = ($1,$2);
44                         push @{ $stat->{_sw_mac_port_vlan}->{$sw}->{$mac}->{$port} }, '';
45                 } elsif ( m/^Q-BRIDGE-MIB::dot1qTpFdbPort\[(\d+)\]\[STRING: ([^\]]+)\] = INTEGER: (\d+)/ ) {
46                         my ( $vlan, $mac, $port ) = ($1,$2,$3);
47                         push @{ $stat->{_sw_mac_port_vlan}->{$sw}->{$mac}->{$port} }, $vlan;
48                 }
49         }
50         #warn "# $sw ",dump( $stat->{$sw} );
51 }
52 #warn "# stat = ",dump($stat);
53
54 open(my $fh, '>', '/dev/shm/mac2sw');
55 foreach my $mac ( keys %{ $stat->{_mac2sw} } ) {
56         print $fh macfmt($mac), " ", $stat->{_mac2sw}->{$mac}, "\n";
57 };
58
59 # XXX inject additional mac in filter to include wap devices
60 my $mac_include = '/dev/shm/mac.wap';
61 if ( -e $mac_include ) {
62         my $count = 0;
63         open(my $fh, '<', $mac_include);
64         while(<$fh>) {
65                 chomp;
66                 my ($mac,$host) = split(/\s+/,$_,2);
67                 $mac =~ s/^0//; $mac =~ s/:0/:/g; # mungle mac to snmp format without leading zeros
68                 $stat->{_mac2sw}->{$mac} = $host;
69                 $count++;
70         }
71 #       warn "# $mac_include added to _mac2sw = ",dump($stat->{_mac2sw}),$/;
72         warn "# $mac_include added to _mac2sw $count hosts\n";
73 }
74
75 my $s = $stat->{_sw_mac_port_vlan};
76 foreach my $sw ( keys %$s ) {
77         foreach my $mac ( keys %{ $s->{$sw} } ) {
78                 if ( my $mac_name = $stat->{_mac2sw}->{ $mac } ) {
79                         next if $sw eq $mac_name; # mikrotik seems to see itself
80                         foreach my $port ( keys %{ $s->{$sw}->{$mac} } ) {
81                                 #$stat->{_sw_port_sw}->{$sw}->{$port}->{$mac_name} = $s->{$sw}->{$mac}->{$port};
82                                 push @{ $stat->{_sw_port_sw}->{$sw}->{$port} }, $mac_name;
83                                 push @{ $stat->{_sw_sw_port}->{$sw}->{$mac_name} }, $port;
84                         }
85                 }
86         }
87 }
88
89 warn "# _sw_port_sw = ",dump($stat->{_sw_port_sw});
90 warn "# _sw_sw_port = ",dump($stat->{_sw_sw_port});
91
92
93 my $s = $stat->{_sw_port_sw};
94 our $later;
95 my $last_later;
96
97 our @single_sw_port_visible;
98 sub single_sw_port_visible {
99         @single_sw_port_visible = ();
100         my $s = {};
101         foreach my $sw ( keys %$later ) {
102                 if ( exists $stat->{_found}->{$sw} ) {
103                         my @d = delete $later->{$sw};
104                         warn "REMOVED $sw from later it's _found! later was = ",dump( \@d );
105                         next;
106                 }
107                 my @ports = sort keys %{ $later->{$sw} };
108                 foreach my $port ( @ports ) {
109                         my @visible = uniq_visible( @{ $later->{$sw}->{$port} } );
110                         if ( $#visible < 0 ) {
111                                 warn "REMOVED $sw $port from later it's empty";
112                                 delete $later->{$sw}->{$port};
113                                 next;
114                         }
115                         $s->{$sw}->{$port} = [ @visible ];
116                         push @single_sw_port_visible, [ $sw, $port, $visible[0] ] if $#visible == 0; # single
117                 }
118         }
119         my $d_s = dump($s);
120         my $d_l = dump($later);
121         if ( $d_s ne $d_l ) {
122                 $later = $s;
123                 warn "# single_sw_port_visible = ",dump( \@single_sw_port_visible );
124                 warn "# reduced later = ",dump( $later );
125         }
126 }
127
128 sub uniq {
129         my @visible = @_;
130         my $u; $u->{$_}++ foreach @visible;
131         @visible = sort keys %$u;
132         return @visible;
133 }
134
135 sub uniq_visible {
136         my @visible = uniq(@_);
137         @visible = grep { ! exists $stat->{_found}->{$_} } @visible;
138         return @visible;
139 }
140
141 sub to_later {
142         my $sw = shift;
143         my $port = shift;
144         my @visible = uniq_visible(@_);
145         warn "# to_later $sw $port visible = ",dump( \@visible ),"\n";
146         $later->{$sw}->{$port} = [ @visible ];
147         return @visible;
148 }
149
150 while ( ref $s ) {
151 #warn "## s = ",dump($s);
152 foreach my $sw ( sort keys %$s ) {
153
154         #warn "## $sw s = ",dump($s->{$sw}),$/;
155
156         my @ports = sort { $a <=> $b } uniq( keys %{ $s->{$sw} } );
157
158         foreach my $port ( @ports ) {
159                 warn "## $sw $port => ",join(' ', @{$s->{$sw}->{$port}}),$/;
160         }
161
162         if ( $#ports == 0 ) {
163                 my $port = $ports[0];
164                 #print "$sw $port TRUNK\n";
165                 push @{$stat->{_trunk}->{$sw}}, $port; # FIXME multiple trunks?
166                 #warn "## _trunk = ",dump( $stat->{_trunk} ).$/;
167
168                 my @visible = uniq_visible( @{ $s->{$sw}->{$port} } );
169                 to_later( $sw, $port, @visible );
170                 next;
171         }
172
173         foreach my $port ( @ports ) {
174                 my @visible = uniq_visible( @{ $s->{$sw}->{$port} } );
175                 warn "### $sw $port visible=",dump(\@visible),$/;
176
177                 if ( $#visible == 0 ) {
178                         warn "++++ $sw $port $visible[0]\n";
179                         #print "$sw $port $visible[0]\n";
180                         $stat->{_found}->{$visible[0]} = "$sw $port";
181                         single_sw_port_visible();
182
183                 } elsif ( $#visible > 0 ) {
184                         to_later( $sw, $port, @visible );
185                 } else {
186                         warn "#### $sw $port doesn't have anything visible, reseting visibility\n";
187                         to_later( $sw, $port, @{ $stat->{_sw_port_sw}->{$sw}->{$port} } );
188                 }
189                         
190         }
191         warn "## _found = ",dump( $stat->{_found} ),$/;
192 }
193
194 warn "NEXT later = ",dump($later),$/;
195
196 single_sw_port_visible();
197
198 my $d = dump($later);
199 if ( $d eq $last_later ) {
200         warn "FIXME later didn't change single_sw_port_visible = ",dump( \@single_sw_port_visible ),$/;
201
202         my $did_patch = 0;
203
204         while ( @single_sw_port_visible ) {
205                 my $single = shift @single_sw_port_visible;
206                 my ( $sw, $port, $visible ) = @$single;
207                 warn "XXX $sw | $port | $visible\n";
208
209                 foreach my $port ( keys %{ $later->{$visible} } ) {
210                         # check back in original full map to see if it was visible
211                         my @visible = @{ $stat->{_sw_port_sw}->{$visible}->{$port} };
212                         if ( scalar grep(/$sw/,@visible) ) {
213                                 warn "PATCH $visible $port -> $sw ONLY";
214                                 $stat->{_found}->{$sw} = "$visible $port";
215
216                                 my @d = delete $later->{$visible}->{$port};
217                                 warn "DELETED $visible $port ",dump(@d);
218                                 $did_patch++;
219
220                                 single_sw_port_visible();
221                         } else {
222                                 warn "FATAL $visible $port NO $sw IN ",dump( \@visible );
223                         }
224                 }
225
226                 if ( ! $did_patch ) {
227                         # OK, we have link from trunk probably, which port was originally visible on?
228
229                         foreach my $port ( keys %{ $stat->{_sw_port_sw}->{$visible} } ) {
230                                 my @visible = grep /$sw/, @{ $stat->{_sw_port_sw}->{$visible}->{$port} };
231                                 if  ( scalar @visible ) {
232                                         warn "PATCH-2 $visible $port -> $sw\n";
233                                         $stat->{_found}->{$sw} = "$visible $port";
234
235                                         my @d = delete $later->{$visible}->{$port};
236                                         warn "DELETED $visible $port ",dump(@d);
237                                         $did_patch++;
238
239                                         single_sw_port_visible();
240                                 } else {
241                                         warn "FATAL $visible $port _sw_port_sw doesn't have $sw";
242                                 }
243                         }
244                 }
245
246         }
247
248         warn "## applied $did_patch patches to unblock\n";
249
250         last if $d eq $last_later;
251         
252 }
253 $last_later = $d;
254
255 $later = undef;
256
257 } # while
258
259 warn "FINAL _found = ",dump( $stat->{_found} ),$/;
260 warn "FINAL _trunk = ",dump( $stat->{_trunk} ),$/;
261 warn "FINAL later  = ",dump( $later ),$/;
262
263
264 my $node;
265 my @edges;
266
267 my $ports = $ENV{PORTS} || 1; # FIXME
268
269
270 open(my $dot, '>', '/tmp/snmp-topology.dot');
271
272 my $shape = $ports ? 'record' : 'ellipse';
273 my $rankdir = 'LR'; #$ports ? 'TB' : 'LR';
274 print $dot <<"__DOT__";
275 digraph topology {
276 graph [ rankdir = $rankdir ]
277 node [ shape = $shape ]
278 edge [ color = "gray" ]
279 __DOT__
280
281 foreach my $to_sw ( keys %{ $stat->{_found} } ) {
282         my ($from_sw, $from_port) = split(/ /,$stat->{_found}->{$to_sw},2);
283         my @to_port = uniq(@{ $stat->{_trunk}->{$to_sw} });
284         my $to_port = $to_port[0];
285         warn "ERROR: $to_sw has ",dump(\@to_port), " ports instead of just one!" if $#to_port > 0;
286         printf "%s %s -> %s %s\n", $from_sw, $from_port, $to_sw, $to_port;
287         push @edges, [ $from_sw, $to_sw, $from_port, $to_port ];
288         push @{ $node->{$from_sw} }, [ $from_port, $to_sw ];
289         push @{ $node->{$to_sw} }, [ $to_port, $from_sw ]
290 }
291
292 warn "# edges = ",dump(\@edges);
293 warn "# node = ",dump($node);
294
295 if ( $ports ) {
296         foreach my $n ( keys %$node ) {
297                 no warnings;
298                 my @port_sw =
299                         sort { $a->[0] <=> $b->[0] }
300                         @{ $node->{$n} };
301 #warn "XXX $n ",dump( \@port_sw );
302                 print $dot qq!"$n" [ label="!.uc($n).'|' . join('|', map { sprintf "<%d>%2d %s", $_->[0], $_->[0], $_->[1] } @port_sw ) . qq!" ];\n!;
303         }
304 }
305
306 foreach my $e ( @edges ) {
307         if (! $ports) {
308                 print $dot sprintf qq{ "%s" -> "%s" [ taillabel="%s" ; headlabel="%s" ]\n}, @$e;
309         } else {
310                 no warnings;
311                 print $dot sprintf qq{ "%s":%d -> "%s":%d\n}, $e->[0], $e->[2], $e->[1], $e->[3];
312         }
313 }
314
315 print $dot "}\n";
316