make oneself broadcast
[spider.git] / perl / Aranea.pm
1 #
2 # The new protocol for real at last
3 #
4 # $Id$
5 #
6 # Copyright (c) 2005 Dirk Koopman G1TLH
7 #
8
9 package Aranea;
10
11 use strict;
12
13 use DXUtil;
14 use DXChannel;
15 use DXUser;
16 use DXM;
17 use DXLog;
18 use DXDebug;
19 use Filter;
20 use Time::HiRes qw(gettimeofday tv_interval);
21 use DXHash;
22 use Route;
23 use Route::Node;
24 use Script;
25 use Verify;
26 use DXDupe;
27 use Thingy;
28 use Thingy::Rt;
29 use Thingy::Hello;
30 use Thingy::Bye;
31 use RouteDB;
32 use DXProt;
33 use DXCommandmode;
34
35 use vars qw($VERSION $BRANCH);
36
37 main::mkver($VERSION = q$Revision$);
38
39 use vars qw(@ISA $ntpflag $dupeage $cf_interval $hello_interval);
40
41 @ISA = qw(DXChannel);
42
43 $ntpflag = 0;                                   # should be set in startup if NTP in use
44 $dupeage = 12*60*60;                    # duplicates stored half a day 
45 $cf_interval = 30*60;                   # interval between config broadcasts
46 $hello_interval = 3*60*60;              # interval between hello broadcasts for me and local users
47
48 my $seqno = 0;
49 my $dayno = 0;
50 my $daystart = 0;
51
52 sub init
53 {
54
55 }
56
57 sub new
58 {
59         my $self = DXChannel::alloc(@_);
60
61         # add this node to the table, the values get filled in later
62         my $pkg = shift;
63         my $call = shift;
64         $self->{'sort'} = 'W';
65         return $self;
66 }
67
68 sub start
69 {
70         my ($self, $line, $sort) = @_;
71         my $call = $self->{call};
72         my $user = $self->{user};
73
74         # log it
75         my $host = $self->{conn}->{peerhost} || "unknown";
76         Log('Aranea', "$call connected from $host");
77
78         # remember type of connection
79         $self->{consort} = $line;
80         $self->{outbound} = $sort eq 'O';
81         my $priv = $user->priv;
82         $priv = $user->priv(1) unless $priv;
83         $self->{priv} = $priv;     # other clusters can always be 'normal' users
84         $self->{lang} = $user->lang || 'en';
85         $self->{consort} = $line;       # save the connection type
86         $self->{here} = 1;
87         $self->{width} = 80;
88
89         # sort out registration
90         $self->{registered} = 1;
91
92         # get the output filters
93         $self->{spotsfilter} = Filter::read_in('spots', $call, 0) || Filter::read_in('spots', 'node_default', 0);
94         $self->{wwvfilter} = Filter::read_in('wwv', $call, 0) || Filter::read_in('wwv', 'node_default', 0);
95         $self->{wcyfilter} = Filter::read_in('wcy', $call, 0) || Filter::read_in('wcy', 'node_default', 0);
96         $self->{annfilter} = Filter::read_in('ann', $call, 0) || Filter::read_in('ann', 'node_default', 0) ;
97         $self->{routefilter} = Filter::read_in('route', $call, 0) || Filter::read_in('route', 'node_default', 0) unless $self->{isolate} ;
98
99
100         # get the INPUT filters (these only pertain to Clusters)
101         $self->{inspotsfilter} = Filter::read_in('spots', $call, 1) || Filter::read_in('spots', 'node_default', 1);
102         $self->{inwwvfilter} = Filter::read_in('wwv', $call, 1) || Filter::read_in('wwv', 'node_default', 1);
103         $self->{inwcyfilter} = Filter::read_in('wcy', $call, 1) || Filter::read_in('wcy', 'node_default', 1);
104         $self->{inannfilter} = Filter::read_in('ann', $call, 1) || Filter::read_in('ann', 'node_default', 1);
105         $self->{inroutefilter} = Filter::read_in('route', $call, 1) || Filter::read_in('route', 'node_default', 1) unless $self->{isolate};
106         
107         $self->conn->echo(0) if $self->conn->can('echo');
108         
109         # ping neighbour node stuff
110         my $ping = $user->pingint;
111         $ping = $DXProt::pingint unless defined $ping;
112         $self->{pingint} = $ping;
113         $self->{nopings} = $user->nopings || $DXProt::obscount;
114         $self->{pingtime} = [ ];
115         $self->{pingave} = 999;
116         $self->{metric} ||= 100;
117         $self->{lastping} = $main::systime;
118         
119         $self->state('normal');
120         $self->{pc50_t} = $main::systime;
121
122         # send info to all logged in thingies
123         $self->tell_login('loginn');
124
125         # broadcast our configuration to the world
126         unless ($self->{outbound}) {
127                 my $thing = Thingy::Rt->new_cf;
128                 $thing->broadcast;
129                 $self->lastcf($main::systime);
130         }
131         
132         # run a script send the output to the debug file
133         my $script = new Script(lc $call) || new Script('node_default');
134         $script->run($self) if $script;
135 }
136
137 #
138 # This is the normal despatcher
139 #
140 sub normal
141 {
142         my ($self, $line) = @_;
143         my $thing = input($line);
144         $thing->queue($self) if $thing;
145 }
146
147 #
148 # periodic processing (every second)
149 #
150
151 my $lastmin = time;
152
153 sub process
154 {
155
156         # calc day number
157         my $d = (gmtime($main::systime))[3];
158         if ($d != $dayno) {
159                 $dayno = $d;
160                 $daystart = $main::systime - ($main::systime % 86400);
161         }
162         if ($main::systime >= $lastmin + 60) {
163                 per_minute();
164                 $lastmin = $main::systime;
165         }
166 }
167
168 sub per_minute
169 {
170         # send hello and cf packages periodically
171         foreach my $dxchan (DXChannel::get_all()) {
172                 next if $dxchan->is_aranea;
173                 if ($main::systime >= $dxchan->lasthello + $hello_interval) {
174                         my $thing = Thingy::Hello->new(h => $dxchan->here);
175                         $thing->{user} = $dxchan->{call} unless $dxchan == $main::me;
176                         if (my $v = $dxchan->{version}) {
177                                 if ($dxchan->is_spider) {
178                                         $thing->{sw} = 'DXSp';
179                                 }
180                                 $thing->{v} = $v;
181                         }
182                         $thing->{b} = $dxchan->{build} if $dxchan->{build};
183                         $thing->broadcast($dxchan);
184                         $dxchan->lasthello($main::systime);
185                 }
186                 if ($dxchan->is_node) {
187                         if ($main::systime >= $dxchan->lastcf + $cf_interval) {
188                                 my $call = $dxchan->call;
189                                 my $thing = Thingy::Rt->new();
190                                 $thing->{user} = $call unless $dxchan == $main::me;
191                                 if (my $nref = Route::Node::get($call)) {
192                                         $thing->copy_pc16_data($nref);
193                                         $thing->broadcast($dxchan);
194                                         $dxchan->lastcf($main::systime);
195                                 } else {
196                                         dbg("Aranea::per_minute: Route::Node for $call disappeared");
197                                         $dxchan->disconnect;
198                                 }
199                         }
200                 }
201         }
202 }
203
204 sub disconnect
205 {
206         my $self = shift;
207         my $call = $self->call;
208
209         return if $self->{disconnecting}++;
210
211         my $thing = Thingy::Bye->new(origin=>$main::mycall, user=>$call);
212         $thing->broadcast($self);
213
214         # get rid of any PC16/17/19
215         DXProt::eph_del_regex("^PC1[679]*$call");
216
217         # do routing stuff, remove me from routing table
218         my $node = Route::Node::get($call);
219         my @rout;
220         if ($node) {
221                 @rout = $node->del($main::routeroot);
222                 
223                 # and all my ephemera as well
224                 for (@rout) {
225                         my $c = $_->call;
226                         DXProt::eph_del_regex("^PC1[679].*$c");
227                 }
228         }
229
230         RouteDB::delete_interface($call);
231         
232         # unbusy and stop and outgoing mail
233         my $mref = DXMsg::get_busy($call);
234         $mref->stop_msg($call) if $mref;
235         
236         # broadcast to all other nodes that all the nodes connected to via me are gone
237         DXProt::route_pc21($self, $main::mycall, undef, @rout) if @rout;
238
239         # remove outstanding pings
240 #       delete $pings{$call};
241         
242         # I was the last node visited
243     $self->user->node($main::mycall);
244
245         # send info to all logged in thingies
246         $self->tell_login('logoutn');
247
248         Log('Aranea', $call . " Disconnected");
249
250         $self->SUPER::disconnect;
251 }
252
253
254 # generate new header (this is a general subroutine, not a method
255 # because it has to be used before a channel is fully initialised).
256 #
257
258 sub formathead
259 {
260         my $mycall = shift;
261         my $dts = shift;
262         my $hop = shift;
263         my $user = shift;
264         my $group = shift;
265         
266         my $s = "$mycall,$dts,$hop";
267         $s .= ",$user" if $user;
268         if ($group) {
269                 $s .= "," unless $user;
270                 $s .= ",$group" if $group;
271         } 
272         return $s;
273 }
274
275 sub genheader
276 {
277         my $mycall = shift;
278         my $to = shift;
279         my $from = shift;
280         
281         my $date = ((($dayno << 1) | $ntpflag) << 18) |  ($main::systime % 86400);
282         my $r = formathead($mycall, sprintf('%6X%04X', $date, $seqno), 0, $from, $to);
283         $seqno++;
284         $seqno = 0 if $seqno > 0x0ffff;
285         return $r;
286 }
287
288 #
289 # decode the date time sequence group
290 #
291
292 sub decode_dts
293 {
294         my $dts = shift;
295         my ($dt, $seqno) = map {hex} unpack "A6 A4", $dts;
296         my $secs = $dt & 0x3FFFF;
297         $dt >>= 18;
298         my $day = $dt >> 1;
299         my $ntp = $dt & 1;
300         my $t;
301         if ($dayno == $day) {
302                 $t = $daystart + $secs;
303         } elsif ($dayno < $day) {
304                 $t = $daystart + (($day-$dayno) * 86400) + $secs;
305         } else {
306                 $t = $daystart + (($dayno-$day) * 86400) + $secs;
307         }
308         return ($t, $seqno, $ntp);
309 }
310
311 # subroutines to encode and decode values in lists 
312 sub tencode
313 {
314         my $s = shift;
315         $s =~ s/([\%=|,\'\x00-\x1f\x7f-\xff])/sprintf("%%%02X", ord($1))/eg; 
316 #       $s = "'$s'" if $s =~ / /;
317         return $s;
318 }
319
320 sub tdecode
321 {
322         my $s = shift;
323         $s =~ s/^'(.*)'$/$1/;
324         $s =~ s/\%([0-9A-F][0-9A-F])/chr(hex($1))/eg;
325         return length $s ? $s : '';
326 }
327
328 sub genmsg
329 {
330         my $thing = shift;
331         my $list = ref $_[0] ? shift : \@_;
332         my ($name) = uc ref $thing;
333         $name =~ /::(\w+)$/;
334         $name = $1;
335         my $head = genheader($thing->{origin}, 
336                                                  ($thing->{group} || $thing->{touser} || $thing->{tonode}),
337                                                  ($thing->{user} || $thing->{fromuser} || $thing->{fromnode})
338                                                 );
339          
340         my $data = uc $name . ',';
341         while (@$list) {
342                 my $k = lc shift @$list;
343                 my $v = $thing->{$k};
344                 $data .= "$k=" . tencode($v) . ',' if defined $v;
345         }
346         chop $data;
347         return "$head|$data";
348 }
349
350
351 sub decode_input
352 {
353         my $self = shift;
354         my $line = shift;
355         return ('I', $self->{call}, $line);
356 }
357
358 sub input
359 {
360         my $line = shift;
361         my ($head, $data) = split /\|/, $line, 2;
362         return unless $head && $data;
363
364         my ($origin, $dts, $hop, $user, $group) = split /,/, $head;
365         return if DXDupe::check("Ara,$origin,$dts", $dupeage);
366         my $err;
367         $err .= "incomplete header," unless $origin && $dts && defined $hop;
368         my ($cmd, $rdata) = split /,/, $data, 2;
369
370         # validate it further
371         $err .= "missing cmd or data," unless $cmd && $data;
372         $err .= "invalid command ($cmd)," unless $cmd =~ /^[A-Z][A-Z0-9]*$/;
373         my ($gp, $tus) = split /:/, $group, 2 if $group;
374
375         $err .= "from me," if $origin eq $main::mycall;
376         $err .= "invalid group ($gp)," if $gp && $gp !~ /^[A-Z0-9]{2,}$/;
377         $err .= "invalid tocall ($tus)," if $tus && !is_callsign($tus);
378         $err .= "invalid fromcall ($user)," if $user && !is_callsign($user);
379
380         my $class = 'Thingy::' . ucfirst(lc $cmd);
381         my $thing;
382         my ($t, $seqno, $ntp) = decode_dts($dts) unless $err;
383         dbg("dts: $dts = $ntp $t($main::systime) $seqno") if isdbg('dts');
384         $err .= "invalid date/seq," unless $t;
385         
386         if ($err) {
387                 chop $err;
388                 dbg("Aranea input: $err");
389         } elsif ($class->can('new')) {
390                 # create the appropriate Thingy
391                 $thing = $class->new();
392
393                 # reconstitute the header but wth hop increased by one
394                 $head = formathead($origin, $dts, ++$hop, $user, $group);
395                 $thing->{Aranea} = "$head|$data";
396
397                 # store useful data
398                 $thing->{origin} = $origin;
399                 $thing->{time} = $t;
400                 $thing->{group} = $gp if $gp;
401                 $thing->{touser} = $tus if $tus;
402                 $thing->{user} = $user if $user;
403                 $thing->{hopsaway} = $hop; 
404
405                 if ($rdata) {
406                         for (split(/,/, $rdata)) {
407                                 if (/=/) {
408                                         my ($k,$v) = split /=/, $_, 2;
409                                         $thing->{$k} = tdecode($v);
410                                 } else {
411                                         $thing->{$_} = 1;
412                                 }
413                         }
414                 }
415                 
416                 # post process the thing, this generally adds on semantic meaning
417                 # does parameter checking etc. It also adds / prepares the thingy so
418                 # this is compatible with older protocol and arranges data so
419                 # that the filtering can still work.
420                 if ($thing->can('from_Aranea')) {
421
422                         # if a thing is ok then return that thing, otherwise return
423                         # nothing
424                         $thing = $thing->from_Aranea;
425                 }
426         }
427         return $thing;
428 }
429
430 # this is the DXChannel send
431 # note that this does NOT send out stuff in same way as other DXChannels
432 # it is just as it comes, no extra bits added (here)
433 sub send                                                # this is always later and always data
434 {
435         my $self = shift;
436         my $conn = $self->{conn};
437         return unless $conn;
438         my $call = $self->{call};
439
440         for (@_) {
441 #               chomp;
442         my @lines = split /\n/;
443                 for (@lines) {
444                         $conn->send_later($_);
445                         dbg("-> D $call $_") if isdbg('chan');
446                 }
447         }
448         $self->{t} = $main::systime;
449 }
450
451 #
452 # load of dummies for DXChannel broadcasts
453 # these will go away in time?
454 # These are all from PC protocol
455 #
456
457 sub dx_spot
458 {
459         my $self = shift;
460         my $line = shift;
461         my $isolate = shift;
462         my ($filter, $hops);
463
464         if ($self->{spotsfilter}) {
465                 ($filter, $hops) = $self->{spotsfilter}->it(@_);
466                 return unless $filter;
467         }
468 #       send_prot_line($self, $filter, $hops, $isolate, $line);
469 }
470
471 sub wwv
472 {
473         my $self = shift;
474         my $line = shift;
475         my $isolate = shift;
476         my ($filter, $hops);
477         
478         if ($self->{wwvfilter}) {
479                 ($filter, $hops) = $self->{wwvfilter}->it(@_);
480                 return unless $filter;
481         }
482 #       send_prot_line($self, $filter, $hops, $isolate, $line)
483 }
484
485 sub wcy
486 {
487         my $self = shift;
488         my $line = shift;
489         my $isolate = shift;
490         my ($filter, $hops);
491
492         if ($self->{wcyfilter}) {
493                 ($filter, $hops) = $self->{wcyfilter}->it(@_);
494                 return unless $filter;
495         }
496 #       send_prot_line($self, $filter, $hops, $isolate, $line) if $self->is_clx || $self->is_spider || $self->is_dxnet;
497 }
498
499 sub announce
500 {
501         my $self = shift;
502         my $line = shift;
503         my $isolate = shift;
504         my $to = shift;
505         my $target = shift;
506         my $text = shift;
507         my ($filter, $hops);
508
509         if ($self->{annfilter}) {
510                 ($filter, $hops) = $self->{annfilter}->it(@_);
511                 return unless $filter;
512         }
513 #       send_prot_line($self, $filter, $hops, $isolate, $line) unless $_[1] eq $main::mycall;
514 }
515
516 sub chat
517 {
518         goto &announce;
519 }
520
521 1;