22c82ea4ccccbaa9cb3003415b3d43bd72947d54
[spider.git] / perl / DXProtHandle.pm
1 #
2 #
3 # This module impliments the handlers for the protocal mode for a dx cluster
4 #
5 # Copyright (c) 1998-2007 Dirk Koopman G1TLH
6 #
7 #
8 #
9
10 package DXProt;
11
12 @ISA = qw(DXChannel);
13
14 use DXUtil;
15 use DXChannel;
16 use DXUser;
17 use DXM;
18 use DXProtVars;
19 use DXCommandmode;
20 use DXLog;
21 use Spot;
22 use DXProtout;
23 use DXDebug;
24 use Filter;
25 use Local;
26 use DXDb;
27 use AnnTalk;
28 use Geomag;
29 use WCY;
30 use BadWords;
31 use DXHash;
32 use Route;
33 use Route::Node;
34 use Script;
35 use DXCIDR;
36
37 use strict;
38 use warnings qw(all);
39 no warnings qw(uninitialized);
40
41
42
43 use vars qw($pc11_max_age $pc23_max_age $last_pc50 $eph_restime $eph_info_restime $eph_pc34_restime
44                         $last_hour $last10 %eph  %pings %rcmds $ann_to_talk
45                         $pingint $obscount %pc19list $chatdupeage $chatimportfn
46                         $investigation_int $pc19_version $myprot_version
47                         %nodehops $baddx $badspotter $badnode $censorpc
48                         $allowzero $decode_dk0wcy $send_opernam @checklist
49                         $eph_pc15_restime $pc9x_past_age $pc9x_dupe_age
50                         $pc10_dupe_age $pc92_slug_changes $last_pc92_slug
51                         $pc92Ain $pc92Cin $pc92Din $pc92Kin $pc9x_time_tolerance
52                         $pc92filterdef $senderverify $pc11_dwell_time $pc11_extract_route
53                    );
54
55 $pc9x_dupe_age = 60;                    # catch loops of circular (usually) D records
56 $pc10_dupe_age = 45;                    # just something to catch duplicate PC10->PC93 conversions
57 $pc92_slug_changes = 60*1;              # slug any changes going outward for this long
58 $last_pc92_slug = 0;                    # the last time we sent out any delayed add or del PC92s
59 $pc9x_time_tolerance = 15*60;   # the time on a pc9x is allowed to be out by this amount
60 $pc9x_past_age = (122*60)+              # maximum age in the past of a px9x (a config record might be the only
61 $pc9x_time_tolerance;           # thing a node might send - once an hour and we allow an extra hour for luck)
62                                 # this is actually the partition between "yesterday" and "today" but old.
63 $senderverify = 0;                              # 1 - check for forged PC11 or PC61.
64                                 # 2 - if forged, dump them.
65 $pc11_dwell_time = 2;                   # number of seconds to wait for a PC61 to come to substitute the PC11
66 $pc11_extract_route = 1;                # generate missing  user route entry and IP address from passing PC61s
67
68
69 $pc92filterdef = bless ([
70                           # tag, sort, field, priv, special parser
71                           ['call', 'c', 0],
72                           ['by', 'c', 0],
73                           ['dxcc', 'nc', 1],
74                           ['itu', 'ni', 2],
75                           ['zone', 'nz', 3],
76                          ], 'Filter::Cmd');
77
78 our %pc11q;
79 # this is a place to park an incoming PC11 in the sure and certain hope that
80 # a PC61 will be along soon. This has the side benefit that it will delay a
81 # a PC11 for one second - assuming that it is not removed by a PC61 version
82
83 # incoming talk commands
84 sub handle_10
85 {
86         my $self = shift;
87         my $pcno = shift;
88         my $line = shift;
89         my $origin = shift;
90         my $pc = shift;
91
92         # this is to catch loops caused by bad software ...
93         if (eph_dup($line, $pc10_dupe_age)) {
94                 return;
95         }
96
97
98         # is it for me or one of mine?
99         my ($from, $to, $via, $call, $dxchan);
100         $from = $pc->[1];
101         if ($pc->[5] gt ' ') {
102                 $via = $pc->[2];
103                 $to = $pc->[5];
104         } else {
105                 $to = $pc->[2];
106         }
107
108         # if this is a 'nodx' node then ignore it
109         if ($badnode->in($pc->[6]) || ($via && $badnode->in($via))) {
110                 dbg($line) if isdbg('nologchan');
111                 dbg("PCPROT: Bad Node, dropped");
112                 return;
113         }
114
115
116         my $nossid = $from;
117         $nossid =~ s/-\d+$//;
118         if ($badspotter->in($nossid)) {
119                 dbg($line) if isdbg('nologchan');
120                 dbg("PCPROT: Bad Spotter, dropped");
121                 return;
122         }
123
124         # if we are converting announces to talk is it a dup?
125         if ($ann_to_talk) {
126                 if (AnnTalk::is_talk_candidate($from, $pc->[3]) && AnnTalk::dup($from, $to, $pc->[3])) {
127                         dbg("PCPROT: Dupe talk from announce, dropped") if isdbg('chanerr');
128                         return;
129                 }
130         }
131         
132         # will we allow it at all?
133         if ($censorpc) {
134                 my @bad;
135                 if (@bad = BadWords::check($pc->[3])) {
136                         my $bw = join ', ', @bad; 
137                         dbg($line) if isdbg('nologchan');
138                         dbg("PCPROT: Badwords: '$bw', dropped");
139                         return;
140                 }
141         }
142
143         # convert this to a PC93, coming from mycall with origin set and process it as such
144         $main::me->normal(pc93($to, $from, $via, $pc->[3], $pc->[6]));
145 }
146
147 my %pc11_saved;                                 # delayed PC11s
148 my $pc11_rx;                                    # no of pc11 rxed
149 my $pc61_rx;                                    # no of pc61 rxed
150 my $pc11_to_61;                                 # no of 'better' pc61, that replaced stored waiting pc11
151 my $rpc11_to_61;                                # no of pc11s 'promoted' to pc61 by IP captured in routing table
152
153 # DX Spot handling
154 sub handle_11
155 {
156         my $self = shift;
157         my $pcno = shift;
158         my $line = shift;
159         my $origin = shift;
160         my $pc = shift;
161         my $recurse = shift || 0;
162
163         # route 'foreign' pc26s
164         if ($pcno == 26) {
165                 if ($pc->[7] ne $main::mycall) {
166                         $self->route($pc->[7], $line);
167                         return;
168                 }
169         }
170
171         dbg("INPUT $self->{call}: $line origin $origin recurse: $recurse") if isdbg("pc11") || isdbg("pc61"); 
172
173 #       my ($hops) = $pc->[8] =~ /^H(\d+)/;
174
175         # is the spotted callsign blank? This should really be trapped earlier but it
176         # could break other protocol sentences. Also check for lower case characters.
177         if ($pc->[2] =~ /^\s*$/) {
178                 dbg($line) if isdbg('nologchan');
179                 dbg("PCPROT: blank callsign, dropped");
180                 return;
181         }
182         if ($pc->[2] =~ /[a-z]/) {
183                 dbg($line) if isdbg('nologchan');
184                 dbg("PCPROT: lowercase characters, dropped");
185                 return;
186         }
187
188
189         # if this is a 'nodx' node then ignore it
190         if ($badnode->in($pc->[7])) {
191                 dbg($line) if isdbg('nologchan');
192                 dbg("PCPROT: Bad Node $pc->[7], dropped");
193                 return;
194         }
195
196         # convert the date to a unix date
197         my $d = cltounix($pc->[3], $pc->[4]);
198         # bang out (and don't pass on) if date is invalid or the spot is too old (or too young)
199         if (!$d || (($pcno == 11 || $pcno == 61) && ($d < $main::systime - $pc11_max_age || $d > $main::systime + 900))) {
200                 dbg($line) if isdbg('nologchan');
201                 dbg("PCPROT: Spot ignored, invalid date or out of range ($pc->[3] $pc->[4])\n");
202                 return;
203         }
204
205         # is it 'baddx'
206         if ($baddx->in($pc->[2])) {
207                 dbg("PCPROT: Bad DX spot '$pc->[2]', ignored");
208                 dbg($line) if isdbg('nologchan');
209                 return;
210         }
211
212         # is it claiming to be BUST(ed)
213         $pc->[5] =~ s/^\s+//;                   # take any leading blanks off
214         $pc->[2] = unpad($pc->[2]);             # take off leading and trailing blanks from spotted callsign
215         if ($pc->[2] =~ /BUST\w*$/) {
216                 dbg($line) if isdbg('nologchan');
217                 dbg("PCPROT: useless 'BUSTED' spot") if isdbg('chanerr');
218                 return;
219         }
220         
221         my $nossid = $pc->[6];
222     $nossid =~ s/-\d+$//;
223
224         my @spot = Spot::prepare($pc->[1], $pc->[2], $d, $pc->[5], $nossid, $pc->[7], $pc->[8]);
225
226         #   $f0 = frequency
227         #   $f1 = call
228         #   $f2 = date in unix format
229         #   $f3 = comment
230         #   $f4 = spotter
231         #   $f5 = spotted dxcc country
232         #   $f6 = spotter dxcc country
233         #   $f7 = origin
234         #   $f8 = spotted itu
235         #   $f9 = spotted cq zone
236         #   $f10 = spotter itu
237         #   $f11 = spotter cq zone
238         #   $f12 = spotted us state
239         #   $f13 = spotter us state
240         #   $f14 = ip address
241
242
243         # is this is a 'bad spotter' or an unknown user then ignore it. 
244         if ($badspotter->in($nossid)) {
245                 dbg($line) if isdbg('nologchan');
246                 dbg("PCPROT: Bad Spotter $pc->[6], dropped");
247                 return;
248         }
249
250         # global spot filtering on INPUT
251         if ($self->{inspotsfilter}) {
252                 my ($filter, $hops) = $self->{inspotsfilter}->it(@spot);
253                 unless ($filter) {
254                         dbg("PCPROT: Rejected by input spot filter") if isdbg('chanerr');
255                         return;
256                 }
257         }
258
259
260         # this is where we decide to delay PC11s in the hope that a PC61 will be along soon.
261         
262         my $key = join '|', @spot[0..2,4,7]; # not including text
263
264         unless ($recurse) {
265                 if ($pcno == 61) {
266                         if (Spot::dup_find(@spot[0..4,7])) {
267                                 dbg("DUPE $pc->[0] $self->{call}: key: $key dumped") if isdbg('pc11');
268                                 return;
269                         } else {
270                                 ++$pc61_rx;
271                         }
272
273                         # as we have a route to a user, if it does not exist, create and link if (and only if) the node exists as well
274                         if ($pc->[8]) {
275                                 my $new = $pc->[8];
276                                 # $new =~ s/,/:/g;
277                                 my $r = Route::User::get($pc->[6]);
278                                 unless ($r) {
279                                         my $rn = Route::Node::get($pc->[7]) || Route::Node->new($pc->[7]);
280                                         $rn->add_user($pc->[6], 0, $pc->[8]);
281                                         $r = Route::User::get($pc->[6]);
282                                 }
283                                 if ($r) {
284                                         if ($r->ip ne $pc->[8]) {
285                                                 my $old = $r->ip;
286                                                 $r->ip($new);
287                                                 dbg("ROUTE ALTER IP node: $pc->[7] user: $pc->[6] old IP: '$old'-> new IP: '$new'") if isdbg('pc11');
288                                         } else {
289                                                 dbg("ROUTE NEW IP node: $pc->[7] user: $pc->[6] IP: '$new'") if isdbg('pc11');
290                                         }
291                                 } else {
292                                         dbg("ROUTE ADD Failed for node $pc->[7] user $pc->[6]") if isdbg('pc11');
293                                 }
294                         }
295
296                         if ($pc11_saved{$key}) {
297                                 ++$pc11_to_61;
298                                 my $percent = $pc11_rx ? $pc11_to_61 * 100 / $pc11_rx : 0;
299                                 dbg(sprintf("PROMOTED BETTER $self->{call}: $pc->[0] $key, using pc61, WAITING pc11 DUMPED: $pc61_rx pc11: $pc11_rx better pc61: $pc11_to_61 (%0.1f%%)", $percent)) if isdbg("pc11");
300                                 delete $pc11_saved{$key};
301                         }
302                 }
303                 if ($pcno == 11) {
304
305                         if (Spot::dup_find(@spot[0..4,7])) {
306                                 dbg("DUPE $pc->[0] $self->{call}: key: $key dumped") if isdbg('pc11');
307                                 return;
308                         } else {
309                                 ++$pc11_rx;
310                         }
311
312                         if ($pc11_saved{$key}) {
313                                 dbg("DUPE $pc->[0] $self->{call } key: $key is saved, ignored") if isdbg("pc11");
314                                 return;         # because it's a dup
315                         }
316
317                         # can we promote this to a PC61?
318                         my $r = Route::User::get($spot[4]); # find spotter
319
320                         if ($r && $r->ip) {                     # do we have an ip addres
321                                 $pcno = 61;
322                                 $pc->[0] = 'PC61';
323                                 $pc->[7] = $spot[14] = $r->ip;
324                                 ++$rpc11_to_61;
325                                 my $percent = $pc11_rx ? $rpc11_to_61 * 100 / $pc11_rx : 0;
326                                 dbg(sprintf("PROMOTED ROUTE $self->{call}: pc11 $key PROMOTED to pc61 with IP $spot[14] pc61: $pc61_rx pc11: $pc11_rx route->pc61 $rpc11_to_61 (%0.1f%%)", $percent)) if isdbg("pc11");
327                                 delete $pc11_saved{$key};
328                         }
329
330                         # if it is STILL (despite all efforts to change it) a PC11
331                         # save it and wait - it will be called from pc11_process
332                         if ($pcno == 11) {
333                                 $pc11_saved{$key} = [$main::systime, $self, $pcno, $line, $origin, $pc];
334                                 dbg("WAITING $self->{call}: NEW $pc->[0] spot $key waiting for a better offer") if isdbg("pc11");
335                                 return;
336                         }
337                 }
338         }
339
340
341         
342         # this goes after the input filtering, but before the add
343         # so that if it is input filtered, it isn't added to the dup
344         # list. This allows it to come in from a "legitimate" source
345         if (Spot::dup(@spot[0..4,7])) {
346                 dbg("PCPROT: Duplicate Spot  $self->{call}: $pc->[0] $key ignored\n") if isdbg('chanerr') || isdbg('dupespot') || isdbg('pc11');
347                 return;
348         }
349
350         dbg("PROCESSING $self->{call}: $pc->[0] key: $key") if isdbg('pc11');
351         
352         # we check IP addresses for PC61 - this will also dedupe PC11 copies
353         if (@$pc > 8 && is_ipaddr($pc->[8])) {
354                 my $ip = $pc->[8];
355                 $ip =~ s/,/:/g;
356                 $ip =~ s/^::ffff://;
357                 if (DXCIDR::find($ip)) {
358                         dbg($line) if isdbg('nologchan');
359                         dbg("PCPROT: $ip in badip list, dropped");
360                         return;
361                 }
362         }
363
364         
365         # here we verify the spotter is currently connected to the node it says it is one. AKA email sender verify
366         # but without the explicit probe to the node. We are relying on "historical" information, but it very likely
367         # to be current once we have seen the first PC92C from that node.
368         #
369         # As for spots generated from non-PC92 nodes, we'll see after about  do_pc9x3h20m...
370         #
371         if ($senderverify) {
372                 my $nroute = Route::Node::get($pc->[7]);
373                 my $uroute = Route::Node::get($pc->[6]);
374                 my $local = DXChannel::get($pc->[7]);
375                 
376                 if ($nroute && ($nroute->last_PC92C || ($local && !$local->do_pc9x))) {
377                         my $s = '';
378                         my $ip = $pcno == 61 ?  $pc->[8] : '';
379 #                       $s .= "User $pc->[6] not logged in, " unless $uroute;
380                         $s .= "User $pc->[6] not on node $pc->[7], " unless $nroute->is_user($pc->[6]);
381 #                       $s .= "Node $pc->[7] at '$ip' not on Node's IP " . $nroute->ip if $ip && $nroute && $nroute->ip && $nroute->ip ne $ip;
382                         if ($s) {
383                                 my $action = $senderverify > 1 ? ", DUMPED" : '';
384                                 $s =~ s/, $//;
385                                 dbg("PCPROT: Suspicious Spot $pc->[2] on $pc->[1] by $pc->[6]($ip)\@$pc->[7] $s$action");
386                                 return unless $senderverify < 2;
387                         }
388                 }
389         }
390
391         # we until here to do any censorship to try and reduce the amount of noise that repeated copies
392         # from other connected nodes cause
393         if ($censorpc) {
394                 my @bad;
395                 if (@bad = BadWords::check($pc->[5])) {
396                         my $bw = join ', ', @bad;
397                         dbg($line) if isdbg('nologchan');
398                         dbg("PCPROT: Badwords: '$bw', dropped");
399                         return;
400                 }
401         }
402
403         
404         # add it
405         Spot::add(@spot);
406
407         my $ip = '';
408         $ip ||= $spot[14] if exists $spot[14];
409         if (isdbg('progress')) {
410                 my $sip = $ip ? sprintf "($ip)" : '' unless $ip =~ m|[\(\)\*]|;
411                 $sip ||= '';
412                 my $d = ztime($spot[2]);
413                 my $s = "SPOT: $spot[1] on $spot[0] \@ $d by $spot[4]$sip\@$spot[7]";
414                 $s .= $spot[3] ? " '$spot[3]'" : q{ ''};
415                 $s .=  " route: $origin";
416                 dbg($s);
417         }
418         
419         #
420         # @spot at this point contains:-
421         # freq, spotted call, time, text, spotter, spotted cc, spotters cc, orig node
422         # then  spotted itu, spotted cq, spotters itu, spotters cq
423         # you should be able to route on any of these
424         #
425
426         # fix up qra locators of known users
427         my $user = DXUser::get_current($spot[4]);
428         if ($user) {
429                 my $qra = $user->qra;
430                 unless ($qra && is_qra($qra)) {
431                         my $lat = $user->lat;
432                         my $long = $user->long;
433                         if (defined $lat && defined $long) {
434                                 $user->qra(DXBearing::lltoqra($lat, $long));
435                                 $user->put;
436                         }
437                 }
438
439                 # send a remote command to a distant cluster if it is visible and there is no
440                 # qra locator and we havn't done it for a month.
441
442                 unless ($user->qra) {
443                         my $node;
444                         my $to = $user->homenode;
445                         my $last = $user->lastoper || 0;
446                         if ($send_opernam && $to && $to ne $main::mycall && $main::systime > $last + $DXUser::lastoperinterval && ($node = Route::Node::get($to)) ) {
447                                 my $cmd = "forward/opernam $spot[4]";
448                                 # send the rcmd but we aren't interested in the replies...
449                                 my $dxchan = $node->dxchan;
450                                 if ($dxchan && $dxchan->is_clx) {
451                                         route(undef, $to, pc84($main::mycall, $to, $main::mycall, $cmd));
452                                 } else {
453                                         route(undef, $to, pc34($main::mycall, $to, $cmd));
454                                 }
455                                 if ($to ne $origin) {
456                                         $to = $origin;
457                                         $node = Route::Node::get($to);
458                                         if ($node) {
459                                                 $dxchan = $node->dxchan;
460                                                 if ($dxchan && $dxchan->is_clx) {
461                                                         route(undef, $to, pc84($main::mycall, $to, $main::mycall, $cmd));
462                                                 } else {
463                                                         route(undef, $to, pc34($main::mycall, $to, $cmd));
464                                                 }
465                                         }
466                                 }
467                                 $user->lastoper($main::systime);
468                                 $user->put;
469                         }
470                 }
471         }
472
473         # local processing
474         if (defined &Local::spot) {
475                 my $r;
476                 eval {
477                         $r = Local::spot($self, @spot);
478                 };
479                 return if $r;
480         }
481
482         # DON'T be silly and send on PC26s!
483         return if $pcno == 26;
484
485         # send out the filtered spots
486         send_dx_spot($self, $line, @spot) if @spot;
487
488         # cancel any recursion as we have now processed it
489         my $count =  $pc11_to_61+$rpc11_to_61;
490         my $percent = ($pc11_rx + $pc61_rx) ? ($pc11_rx * 100) / ($pc11_rx + $pc61_rx) : 0;
491         my $pc11_61 = $pc11_rx ? ($count * 100) / $pc11_rx : 0;
492         my $data = "$self->{call} $pc->[0] key: $key";
493         my $stats = sprintf "pc11: $pc11_rx pc61: $pc61_rx pc11%%: %0.1f%% pc11->pc61: $count(%0.1f%%)", $percent, $pc11_61;
494         if ($recurse) {
495                 if ($pc11_saved{$key}) {
496                         dbg("END RECURSED $data removed and finished $stats") if isdbg('pc11');
497                         delete $pc11_saved{$key};
498                 } else {
499                         dbg("END RECURSED $data finished $stats") if isdbg('pc11'); 
500                 }
501                 $recurse = 0;
502         } else {
503                 dbg("END NORMAL $data finished $stats") if isdbg('pc11');
504         }
505 }
506
507 # used to kick outstanding PC11 if required
508 sub pc11_process
509 {
510         foreach my $key (keys %pc11_saved) {
511                 my $r = $pc11_saved{$key};
512                 if ($main::systime > $r->[0] + $pc11_dwell_time) {
513                         dbg("RECURSE PC11 spot $key timed out waiting, resend") if isdbg("pc11");
514                         my $self = $r->[1];
515                         delete $pc11_saved{$key};
516                         $self->handle_11(@$r[2..5], 1);
517                 }
518         }
519 }
520
521 # return the pc11 / pc61 / promotions data
522 sub get_pc11_61_stats
523 {
524         my $promotions =  $pc11_to_61+$rpc11_to_61;
525         my $percent = ($pc11_rx + $pc61_rx) ? ($pc11_rx * 100) / ($pc11_rx + $pc61_rx) : 0;
526         my $pc11_61p = $pc11_rx ? ($promotions * 100) / $pc11_rx : 0;
527         return {
528                         pc11_rx => $pc11_rx+0,
529                         pc61_rx => $pc61_rx+0,
530                         pc11_to_61 => $pc11_to_61+0,
531                         rpc11_to_61 => $rpc11_to_61+0,
532                         promotions => $promotions+0,
533                         pc11_percent => $percent+0,
534                         promotions_percent => $pc11_61p+0,
535                    };
536 }
537
538 # announces
539 sub handle_12
540 {
541         my $self = shift;
542         my $pcno = shift;
543         my $line = shift;
544         my $origin = shift;
545         my $pc = shift;
546
547         # announce duplicate checking
548         $pc->[3] =~ s/^\s+//;                   # remove leading blanks
549
550         # if this is a 'nodx' node then ignore it
551         if ($badnode->in($pc->[5])) {
552                 dbg($line) if isdbg('nologchan');
553                 dbg("PCPROT: Bad Node, dropped");
554                 return;
555         }
556
557         # if this is a 'bad spotter' user then ignore it
558         my $nossid = $pc->[1];
559         $nossid =~ s/-\d+$//;
560         if ($badspotter->in($nossid)) {
561                 dbg($line) if isdbg('nologchan');
562                 dbg("PCPROT: Bad Spotter, dropped");
563                 return;
564         }
565
566         # ignore PC12s from origins that use PCxx protocol
567         my $oref = Route::get($origin);
568         if ($oref->do_pc9x) {
569                 dbg("PCPROT: PC12 rxed from PC9x node, ignored") if isdbg('chanerr');
570                 return;
571         }
572
573         if ($censorpc) {
574                 my @bad;
575                 if (@bad = BadWords::check($pc->[3])) {
576                         my $bw = join ', ', @bad;
577                         dbg($line) if isdbg('nologchan');
578                         dbg("PCPROT: Badwords: '$bw', dropped");
579                         return;
580                 }
581         }
582
583
584         my $dxchan;
585
586         if ((($dxchan = DXChannel::get($pc->[2])) && $dxchan->is_user) || $pc->[4] =~ /^[\#\w.]+$/){
587                 $self->send_chat(0, $line, @$pc[1..6]);
588         } elsif ($pc->[2] eq '*' || $pc->[2] eq $main::mycall) {
589
590                 # ignore something that looks like a chat line coming in with sysop
591                 # flag - this is a kludge...
592                 if ($pc->[3] =~ /^\#\d+ / && $pc->[4] eq '*') {
593                         dbg('PCPROT: Probable chat rewrite, dropped') if isdbg('chanerr');
594                         return;
595                 }
596
597                 # here's a bit of fun, convert incoming ann with a callsign in the first word
598                 # or one saying 'to <call>' to a talk if we can route to the recipient
599                 if ($ann_to_talk) {
600                         my $call = AnnTalk::is_talk_candidate($pc->[1], $pc->[3]);
601                         if ($call) {
602                                 my $ref = Route::get($call);
603                                 if ($ref) {
604                                         $dxchan = $ref->dxchan;
605                                         $dxchan->talk($pc->[1], $call, undef, $pc->[3], $pc->[5]) if $dxchan != $self;
606                                         return;
607                                 }
608                         }
609                 }
610
611                 # send it
612                 $self->send_announce(0, $line, @$pc[1..6]);
613         } else {
614                 $self->route($pc->[2], $line);
615         }
616
617         # local processing
618         if (defined &Local::ann) {
619                 my $r;
620                 eval {
621                         $r = Local::ann($self, $line, @$pc[1..6]);
622                 };
623                 return if $r;
624         }
625 }
626
627 sub handle_15
628 {
629         my $self = shift;
630         my $pcno = shift;
631         my $line = shift;
632         my $origin = shift;
633         my $pc = shift;
634
635         if (eph_dup($line, $eph_pc15_restime)) {
636                 return;
637         } else {
638                 unless ($self->{isolate}) {
639                         DXChannel::broadcast_nodes($line, $self) if $line =~ /\^H\d+\^?~?$/; # send it to everyone but me
640                 }
641         }
642 }
643
644 # incoming user
645 sub handle_16
646 {
647         my $self = shift;
648         my $pcno = shift;
649         my $line = shift;
650         my $origin = shift;
651         my $pc = shift;
652
653         # general checks
654         my $dxchan;
655         my $ncall = $pc->[1];
656         my $newline = "PC16^";
657
658         # dos I want users from this channel?
659         unless ($self->user->wantpc16) {
660                 dbg("PCPROT: don't send users to $self->{call}") if isdbg('chanerr');
661                 return;
662         }
663
664         # is it me?
665         if ($ncall eq $main::mycall) {
666                 dbg("PCPROT: trying to alter config on this node from outside!") if isdbg('chanerr');
667                 return;
668         }
669
670         my $h;
671         $h = 1 if DXChannel::get($ncall);
672         if ($h && $self->{call} ne $ncall) {
673                 dbg("PCPROT: trying to update a local node, ignored") if isdbg('chanerr');
674                 return;
675         }
676
677         if (eph_dup($line)) {
678                 return;
679         }
680
681         # isolate now means only accept stuff from this call only
682         if ($self->{isolate} && $ncall ne $self->{call}) {
683                 dbg("PCPROT: $self->{call} isolated, $ncall ignored") if isdbg('chanerr');
684                 return;
685         }
686
687         my $parent = Route::Node::get($ncall);
688
689         if ($parent) {
690                 $dxchan = $parent->dxchan;
691                 if ($dxchan && $dxchan ne $self) {
692                         dbg("PCPROT: PC16 from $self->{call} trying to alter locally connected $ncall, ignored!") if isdbg('chanerr');
693                         return;
694                 }
695
696                 # input filter if required
697                 return unless $self->in_filter_route($parent);
698         } else {
699                 $parent = Route::Node->new($ncall);
700         }
701
702         unless ($h) {
703                 if ($parent->via_pc92) {
704                         dbg("PCPROT: non-local node controlled by PC92, ignored") if isdbg('chanerr');
705                         return;
706                 }
707         }
708
709         my $i;
710         my @rout;
711         for ($i = 2; $i < $#$pc; $i++) {
712                 my ($call, $conf, $here) = $pc->[$i] =~ /^(\S+) (\S) (\d)/o;
713                 next unless $call && $conf && defined $here && is_callsign($call);
714                 next if $call eq $main::mycall;
715
716                 eph_del_regex("^PC17\\^$call\\^$ncall");
717
718                 $conf = $conf eq '*';
719
720                 # reject this if we think it is a node already
721                 my $r = Route::Node::get($call);
722                 my $u = DXUser::get_current($call) unless $r;
723                 if ($r || ($u && $u->is_node)) {
724                         dbg("PCPROT: $call is a node") if isdbg('chanerr');
725                         next;
726                 }
727
728                 $r = Route::User::get($call);
729                 my $flags = Route::here($here)|Route::conf($conf);
730
731                 if ($r) {
732                         my $au = $r->addparent($parent);
733                         if ($r->flags != $flags) {
734                                 $r->flags($flags);
735                                 $au = $r;
736                         }
737                         push @rout, $r if $h && $au;
738                 } else {
739                         my @ans = $parent->add_user($call, $flags);
740                         push @rout, @ans if $h && @ans;
741                 }
742
743                 # add this station to the user database, if required
744                 my $user = DXUser::get_current($ncall);
745                 $user = DXUser->new($call) unless $user;
746                 $user->homenode($parent->call) if !$user->homenode;
747                 $user->node($parent->call);
748                 $user->lastin($main::systime) unless DXChannel::get($call);
749                 $user->put;
750
751                 # send info to all logged in thingies
752                 $self->tell_login('loginu', "$ncall: $call") if $user->is_local_node;
753                 $self->tell_buddies('loginb', $call, $ncall);
754         }
755         if (@rout) {
756                 $self->route_pc16($origin, $line, $parent, @rout) if @rout;
757 #               $self->route_pc92a($main::mycall, undef, $parent, @rout) if $h && $self->{state} eq 'normal';
758         }
759 }
760
761 # remove a user
762 sub handle_17
763 {
764         my $self = shift;
765         my $pcno = shift;
766         my $line = shift;
767         my $origin = shift;
768         my $pc = shift;
769
770         my $dxchan;
771         my $ncall = $pc->[2];
772         my $ucall = $pc->[1];
773
774         eph_del_regex("^PC16\\^$ncall.*$ucall");
775
776         # do I want users from this channel?
777         unless ($self->user->wantpc16) {
778                 dbg("PCPROT: don't send users to $self->{call}") if isdbg('chanerr');
779                 return;
780         }
781
782         if ($ncall eq $main::mycall) {
783                 dbg("PCPROT: trying to alter config on this node from outside!") if isdbg('chanerr');
784                 return;
785         }
786
787         # isolate now means only accept stuff from this call only
788         if ($self->{isolate} && $ncall ne $self->{call}) {
789                 dbg("PCPROT: $self->{call} isolated, $ncall ignored") if isdbg('chanerr');
790                 return;
791         }
792
793         my $uref = Route::User::get($ucall);
794         unless ($uref) {
795                 dbg("PCPROT: Route::User $ucall not in config") if isdbg('chanerr');
796                 return;
797         }
798         my $parent = Route::Node::get($ncall);
799         unless ($parent) {
800                 dbg("PCPROT: Route::Node $ncall not in config") if isdbg('chanerr');
801                 return;
802         }
803
804         $dxchan = DXChannel::get($ncall);
805         if ($dxchan && $dxchan ne $self) {
806                 dbg("PCPROT: PC17 from $self->{call} trying to alter locally connected $ncall, ignored!") if isdbg('chanerr');
807                 return;
808         }
809
810         unless ($dxchan) {
811                 if ($parent->via_pc92) {
812                         dbg("PCPROT: non-local node controlled by PC92, ignored") if isdbg('chanerr');
813                         return;
814                 }
815         }
816
817         if (DXChannel::get($ucall)) {
818                 dbg("PCPROT: trying do disconnect local user, ignored") if isdbg('chanerr');
819                 return;
820         }
821
822         # input filter if required and then remove user if present
823 #               return unless $self->in_filter_route($parent);
824         $parent->del_user($uref);
825
826         # send info to all logged in thingies
827         my $user = DXUser::get_current($ncall);
828         $self->tell_login('logoutu', "$ncall: $ucall") if $user && $user->is_local_node;
829         $self->tell_buddies('logoutb', $ucall, $ncall);
830
831         if (eph_dup($line)) {
832                 return;
833         }
834
835         $self->route_pc17($origin, $line, $parent, $uref);
836 #       $self->route_pc92d($main::mycall, undef, $parent, $uref) if $dxchan;
837 }
838
839 # link request
840 sub handle_18
841 {
842         my $self = shift;
843         my $pcno = shift;
844         my $line = shift;
845         my $origin = shift;
846         my $pc = shift;
847
848         $self->state('init');
849
850         my $parent = Route::Node::get($self->{call});
851         
852         # record the type and version offered
853         if (my ($software, $version) = $pc->[1] =~ /(DXSpider|CC\s*Cluster)\s+Version: (\d+(?:\.\d+)?)/i) {
854                 $version += 0;
855                 $version += 53 if $version < 6;
856                 $self->{version} = $version;
857                 $self->user->version($version);
858                 $parent->version($version);
859                 my ($build) = $pc->[1] =~ /Build: (\d+(?:\.\d+)?)/;
860                 $build += 0;
861                 $self->{build} = $build;
862                 $self->user->build($build);
863                 $parent->build($build);
864                 dbg("$self->{call} = $software version $version build $build");
865                 unless ($self->is_spider) {
866                         dbg("Change U " . $self->user->sort . " C $self->{sort} -> S");
867                         $self->user->sort('S');
868                         $self->user->put;
869                         $self->sort('S');
870                 }
871 #               $self->{handle_xml}++ if DXXml::available() && $pc->[1] =~ /\bxml/;
872         } elsif (my ($software, $version, $build) = $pc->[1] =~ /(AR-Cluster)\s+Version:\s+(\d+\.\d+).?(\d+\.\d+)?/) {
873                 dbg("$self->{call} = $software version $version build $build");
874                 $self->{version} = $version;
875                 $self->user->version($version);
876                 $parent->version($version);
877                 $self->{build} = $build;
878                 $self->user->build($build);
879                 $parent->build($build);
880                 unless ($self->is_arcluster) {
881                         dbg("Change U " . $self->user->sort . " C $self->{sort} -> R");
882                         $self->user->sort('R');
883                         $self->user->put;
884                         $self->sort('R');
885                 }
886         } else {
887                 dbg("$self->{call} = Unknown software ($pc->[1] $pc->[2])");
888                 $self->version(50.0);
889                 $self->version($pc->[2] / 100) if $pc->[2] && $pc->[2] =~ /^\d+$/;
890                 $self->user->version($self->version);
891         }
892
893         if ($pc->[1] =~ /CC\*Cluster/i || $pc->[1] =~ /\bpc9x/i) {
894                 if ($self->{isolate}) {
895                         dbg("$self->{call} pc9x recognised, but node is isolated, using old protocol");
896                 } elsif (!$self->user->wantpc9x) {
897                         dbg("$self->{call} pc9x explicitly switched off, using old protocol");
898                 } else {
899                         $self->{do_pc9x} = 1;
900                         dbg("$self->{call} Set do PC9x");
901                 }
902         }
903
904         # first clear out any nodes on this dxchannel
905         my @rout = $parent->del_nodes;
906         $self->route_pc21($origin, $line, @rout, $parent) if @rout;
907         $self->send_local_config();
908         $self->send(pc20());
909 }
910
911 sub check_add_user
912 {
913         my $call = shift;
914         my $type = shift;
915         my $homenode = shift;
916
917         # add this station to the user database, if required (don't remove SSID from nodes)
918         my $user = DXUser::get_current($call);
919         unless ($user) {
920                 $user = DXUser->new($call);
921                 $user->sort($type || 'U');
922                 if ($user->is_node) {
923                         $user->priv(1);         # I have relented and defaulted nodes
924                         $user->lockout(1) if $user->is_node;
925                 } else {
926                         $user->homenode($homenode) if $homenode;
927                         $user->node($homenode);
928                         $user->priv(0);
929                 }
930                 $user->lastin($main::systime); # this make it last longer than just this invocation
931                 $user->put;                             # just to make sure it gets written away!!!
932                 dbg("DXProt: PC92 new user record for $call created");
933         }
934
935         # this is to fix a problem I introduced some build ago by using this function for users
936         # whereas it was only being used for nodes.
937         if ($user->is_user && $user->lockout && ($user->priv // 0) == 1) {
938                 $user->priv(0);
939                 $user->lockout(0);
940                 dbg("DXProt: PC92 user record for $call depriv'd and unlocked");
941                 $user->put;
942         }
943         return $user;
944 }
945
946 # incoming cluster list
947 sub handle_19
948 {
949         my $self = shift;
950         my $pcno = shift;
951         my $line = shift;
952         my $origin = shift;
953         my $pc = shift;
954
955         my $i;
956         my $newline = "PC19^";
957
958         # new routing list
959         my (@rout, @pc92out);
960
961         # first get the INTERFACE node
962         my $parent = Route::Node::get($self->{call});
963         unless ($parent) {
964                 dbg("PCPROT: my parent $self->{call} has disappeared");
965                 $self->disconnect;
966                 return;
967         }
968
969         my $h;
970
971         # parse the PC19
972         #
973         # We are making a major change from now on. We are only going to accept
974         # PC19s from directly connected nodes.  This means that we are probably
975         # going to throw away most of the data that we are being sent.
976         #
977         # The justification for this is that most of it is wrong or out of date
978         # anyway.
979         #
980         # From now on we are only going to believe PC92 data and locally connected
981         # non-pc92 nodes.
982         #
983         for ($i = 1; $i < $#$pc-1; $i += 4) {
984                 my $here = $pc->[$i];
985                 my $call = uc $pc->[$i+1];
986                 my $conf = $pc->[$i+2];
987                 my $ver = $pc->[$i+3];
988                 next unless defined $here && defined $conf && is_callsign($call);
989
990                 eph_del_regex("^PC(?:21\\^$call|17\\^[^\\^]+\\^$call)");
991
992                 # check for sane parameters
993                 #                               $ver = 5000 if $ver eq '0000';
994                 next unless $ver && $ver =~ /^\d+$/;
995                 next if $ver < 5000;    # only works with version 5 software
996                 next if length $call < 3; # min 3 letter callsigns
997                 next if $call eq $main::mycall || $call eq $main::myalias;
998
999                 # check that this PC19 isn't trying to alter the wrong dxchan
1000                 $h = 0;
1001                 my $dxchan = DXChannel::get($call);
1002                 if ($dxchan) {
1003                         if ($dxchan == $self) {
1004                                 $h = 1;
1005                         } else {
1006                                 dbg("PCPROT: PC19 from $self->{call} trying to alter wrong locally connected $call, ignored!") if isdbg('chanerr');
1007                                 next;
1008                         }
1009                 }
1010
1011                 # isolate now means only accept stuff from this call only
1012                 if ($self->{isolate} && $call ne $self->{call}) {
1013                         dbg("PCPROT: $self->{call} isolated, $call ignored") if isdbg('chanerr');
1014                         next;
1015                 }
1016
1017                 my $user = check_add_user($call, 'A');
1018
1019 #               if (eph_dup($genline)) {
1020 #                       dbg("PCPROT: dup PC19 for $call detected") if isdbg('chanerr');
1021 #                       next;
1022 #               }
1023
1024
1025                 unless ($h) {
1026                         if ($parent->via_pc92) {
1027                                 dbg("PCPROT: non-local node controlled by PC92, ignored") if isdbg('chanerr');
1028                                 next;
1029                         }
1030                 }
1031
1032                 my $r = Route::Node::get($call);
1033                 my $flags = Route::here($here)|Route::conf($conf);
1034
1035                 # modify the routing table if it is in it, otherwise store it in the pc19list for now
1036                 if ($r) {
1037                         my $ar;
1038                         if ($call ne $parent->call) {
1039                                 if ($self->in_filter_route($r)) {
1040                                         $ar = $parent->add($call, $ver, $flags);
1041 #                                       push @rout, $ar if $ar;
1042                                 } else {
1043                                         next;
1044                                 }
1045                         }
1046                         if ($r->version ne $ver || $r->flags != $flags) {
1047                                 $r->version($ver);
1048                                 $r->flags($flags);
1049                         }
1050                         push @rout, $r;
1051                 } else {
1052                         if ($call eq $self->{call} || $user->wantroutepc19) {
1053                                 my $new = Route->new($call); # throw away
1054                                 if ($self->in_filter_route($new)) {
1055                                         my $ar = $parent->add($call, $ver, $flags);
1056                                         $user->wantroutepc19(1) unless defined $user->wantroutepc19;
1057                                         push @rout, $ar if $ar;
1058                                         push @pc92out, $r if $h;
1059                                 } else {
1060                                         next;
1061                                 }
1062                         }
1063                 }
1064
1065                 # unbusy and stop and outgoing mail (ie if somehow we receive another PC19 without a disconnect)
1066                 my $mref = DXMsg::get_busy($call);
1067                 $mref->stop_msg($call) if $mref;
1068
1069                 $user->lastin($main::systime) unless DXChannel::get($call);
1070                 $user->put;
1071         }
1072
1073         # we are not automatically sending out PC19s, we send out a composite PC21,PC19 instead
1074         # but remember there will only be one (pair) these because any extras will be
1075         # thrown away.
1076         if (@rout) {
1077 #               $self->route_pc21($self->{call}, $line, @rout);
1078                 $self->route_pc19($self->{call}, $line, @rout);
1079         }
1080         if (@pc92out && !$pc92_slug_changes) {
1081                 $self->route_pc92a($main::mycall, $line, $main::routeroot, @pc92out) if $self->{state} eq 'normal';
1082         }
1083 }
1084
1085 # send local configuration
1086 sub handle_20
1087 {
1088         my $self = shift;
1089         my $pcno = shift;
1090         my $line = shift;
1091         my $origin = shift;
1092         my $pc = shift;
1093
1094         if ($self->{do_pc9x} && $self->{state} ne 'init92' && $self->{state} ne 'normal') {
1095                 $self->send("Reseting to oldstyle routing because login call not sent in any pc92");
1096                 $self->{do_pc9x} = 0;
1097         }
1098         $self->send_local_config;
1099         $self->send(pc22());
1100         $self->state('normal');
1101         $self->{lastping} = 0;
1102         $self->route_pc92a($main::mycall, undef, $main::routeroot, Route::Node::get($self->{call}));
1103 }
1104
1105 # delete a cluster from the list
1106 #
1107 # This should never occur for directly connected nodes.
1108 #
1109 sub handle_21
1110 {
1111         my $self = shift;
1112         my $pcno = shift;
1113         my $line = shift;
1114         my $origin = shift;
1115         my $pc = shift;
1116
1117         my $call = uc $pc->[1];
1118
1119         eph_del_regex("^PC1[679].*$call");
1120
1121         # if I get a PC21 from the same callsign as self then ignore it
1122         if ($call eq $self->{call}) {
1123                 dbg("PCPROT: self referencing PC21 from $self->{call}");
1124                 return;
1125         }
1126
1127         # for the above reason and also because of the check for PC21s coming
1128         # in for self->call from outside being ignored further down
1129         # we don't need any isolation code here, because we will never
1130         # act on a PC21 with self->call in it.
1131
1132         my $parent = Route::Node::get($self->{call});
1133         unless ($parent) {
1134                 dbg("PCPROT: my parent $self->{call} has disappeared");
1135                 $self->disconnect;
1136                 return;
1137         }
1138
1139         my @rout;
1140
1141         if ($call ne $main::mycall && $call ne $main::myalias) { # don't allow malicious buggers to disconnect me!
1142                 my $node = Route::Node::get($call);
1143                 if ($node) {
1144
1145                         if ($node->via_pc92) {
1146                                 dbg("PCPROT: controlled by PC92, ignored") if isdbg('chanerr');
1147                                 return;
1148                         }
1149
1150                         my $dxchan = DXChannel::get($call);
1151                         if ($dxchan && $dxchan != $self) {
1152                                 dbg("PCPROT: PC21 from $self->{call} trying to alter locally connected $call, ignored!") if isdbg('chan');
1153                                 return;
1154                         }
1155
1156                         # input filter it
1157                         return unless $self->in_filter_route($node);
1158
1159                         # routing objects, force a PC21 if it is local
1160                         push @rout, $node->del($parent);
1161                         push @rout, $call if $dxchan && @rout == 0;
1162                 }
1163         } else {
1164                 dbg("PCPROT: I WILL _NOT_ be disconnected!") if isdbg('chan');
1165                 return;
1166         }
1167
1168         if (eph_dup($line)) {
1169                 return;
1170         }
1171
1172         if (@rout) {
1173                 $self->route_pc21($origin, $line, @rout);
1174 #               $self->route_pc92d($main::mycall, $line, $main::routeroot, @rout);
1175         }
1176 }
1177
1178
1179 sub handle_22
1180 {
1181         my $self = shift;
1182         my $pcno = shift;
1183         my $line = shift;
1184         my $origin = shift;
1185         my $pc = shift;
1186
1187         if ($self->{do_pc9x}) {
1188                 if ($self->{state} ne 'init92' && $self->{state} ne 'normal') {
1189                         $self->send("Reseting to oldstyle routing because login call not sent in any pc92");
1190                         $self->{do_pc9x} = 0;
1191                 }
1192         }
1193         $self->{lastping} = 0;
1194         $self->state('normal');
1195         $self->route_pc92a($main::mycall, undef, $main::routeroot, Route::Node::get($self->{call}));
1196 }
1197
1198 # WWV info
1199 sub handle_23
1200 {
1201         my $self = shift;
1202         my $pcno = shift;
1203         my $line = shift;
1204         my $origin = shift;
1205         my $pc = shift;
1206
1207         # route foreign' pc27s
1208         if ($pcno == 27) {
1209                 if ($pc->[8] ne $main::mycall) {
1210                         $self->route($pc->[8], $line);
1211                         return;
1212                 }
1213         }
1214
1215
1216         # do some de-duping
1217         my $d = cltounix($pc->[1], sprintf("%02d18Z", $pc->[2]));
1218         my $sfi = unpad($pc->[3]);
1219         my $k = unpad($pc->[4]);
1220         my $i = unpad($pc->[5]);
1221         my ($r) = $pc->[6] =~ /R=(\d+)/;
1222         $r = 0 unless $r;
1223         if (($pcno == 23 && $d < $main::systime - $pc23_max_age) || $d > $main::systime + 1500 || $pc->[2] < 0 || $pc->[2] > 23) {
1224                 dbg("PCPROT: WWV Date ($pc->[1] $pc->[2]) out of range") if isdbg('chanerr');
1225                 return;
1226         }
1227
1228         # global wwv filtering on INPUT
1229         my @dxcc = ((Prefix::cty_data($pc->[7]))[0..2], (Prefix::cty_data($pc->[8]))[0..2]);
1230         if ($self->{inwwvfilter}) {
1231                 my ($filter, $hops) = $self->{inwwvfilter}->it(@$pc[7,8], $origin, @dxcc);
1232                 unless ($filter) {
1233                         dbg("PCPROT: Rejected by input wwv filter") if isdbg('chanerr');
1234                         return;
1235                 }
1236         }
1237         $pc->[7] =~ s/-\d+$//o;         # remove spotter's ssid
1238         if (Geomag::dup($d,$sfi,$k,$i,$pc->[6],$pc->[7])) {
1239                 dbg("PCPROT: Dup WWV Spot ignored\n") if isdbg('chanerr');
1240                 return;
1241         }
1242
1243         # note this only takes the first one it gets
1244         Geomag::update($d, $pc->[2], $sfi, $k, $i, @$pc[6..8], $r);
1245         dbg("WWV: <$pc->[2]>, sfi=$sfi k=$k info=$i '$pc->[6]' $pc->[7]\@$pc->[8] $r route: $origin") if isdbg('progress');
1246
1247         if (defined &Local::wwv) {
1248                 my $rep;
1249                 eval {
1250                         $rep = Local::wwv($self, $pc->[1], $pc->[2], $sfi, $k, $i, @$pc[6..8], $r);
1251                 };
1252                 return if $rep;
1253         }
1254
1255         # DON'T be silly and send on PC27s!
1256         return if $pcno == 27;
1257
1258         # broadcast to the eager world
1259         send_wwv_spot($self, $line, $d, $pc->[2], $sfi, $k, $i, @$pc[6..8]);
1260 }
1261
1262 # set here status
1263 sub handle_24
1264 {
1265         my $self = shift;
1266         my $pcno = shift;
1267         my $line = shift;
1268         my $origin = shift;
1269         my $pc = shift;
1270
1271         my $call = uc $pc->[1];
1272         my ($nref, $uref);
1273         $nref = Route::Node::get($call);
1274         $uref = Route::User::get($call);
1275         return unless $nref || $uref; # if we don't know where they are, it's pointless sending it on
1276
1277         if (eph_dup($line)) {
1278                 return;
1279         }
1280
1281         $nref->here($pc->[2]) if $nref;
1282         $uref->here($pc->[2]) if $uref;
1283         my $ref = $nref || $uref;
1284         return unless $self->in_filter_route($ref);
1285
1286         $self->route_pc24($origin, $line, $ref, $pc->[3]);
1287 }
1288
1289 # merge request
1290 sub handle_25
1291 {
1292         my $self = shift;
1293         my $pcno = shift;
1294         my $line = shift;
1295         my $origin = shift;
1296         my $pc = shift;
1297
1298         if ($pc->[1] ne $main::mycall) {
1299                 $self->route($pc->[1], $line);
1300                 return;
1301         }
1302         if ($pc->[2] eq $main::mycall) {
1303                 dbg("PCPROT: Trying to merge to myself, ignored") if isdbg('chan');
1304                 return;
1305         }
1306
1307         Log('DXProt', "Merge request for $pc->[3] spots and $pc->[4] WWV from $pc->[2]");
1308
1309         # spots
1310         if ($pc->[3] > 0) {
1311                 my @in = reverse Spot::search(1, undef, undef, 0, $pc->[3]);
1312                 my $in;
1313                 foreach $in (@in) {
1314                         $self->send(pc26(@{$in}[0..4], $pc->[2]));
1315                 }
1316         }
1317
1318         # wwv
1319         if ($pc->[4] > 0) {
1320                 my @in = reverse Geomag::search(0, $pc->[4], time, 1);
1321                 my $in;
1322                 foreach $in (@in) {
1323                         $self->send(pc27(@{$in}[0..5], $pc->[2]));
1324                 }
1325         }
1326 }
1327
1328 sub handle_26 {goto &handle_11}
1329 sub handle_27 {goto &handle_23}
1330
1331 # mail/file handling
1332 sub handle_28
1333 {
1334         my $self = shift;
1335         my $pcno = shift;
1336         my $line = shift;
1337         my $origin = shift;
1338         my $pc = shift;
1339
1340         if ($pc->[1] eq $main::mycall) {
1341                 no strict 'refs';
1342                 my $sub = "DXMsg::handle_$pcno";
1343                 &$sub($self, @$pc);
1344         } else {
1345                 $self->route($pc->[1], $line) unless $self->is_clx;
1346         }
1347 }
1348
1349 sub handle_29 {goto &handle_28}
1350 sub handle_30 {goto &handle_28}
1351 sub handle_31 {goto &handle_28}
1352 sub handle_32 {goto &handle_28}
1353 sub handle_33 {goto &handle_28}
1354
1355 sub handle_34
1356 {
1357         my $self = shift;
1358         my $pcno = shift;
1359         my $line = shift;
1360         my $origin = shift;
1361         my $pc = shift;
1362
1363         if (eph_dup($line, $eph_pc34_restime)) {
1364                 return;
1365         } else {
1366                 $self->process_rcmd($pc->[1], $pc->[2], $pc->[2], $pc->[3]);
1367         }
1368 }
1369
1370 # remote command replies
1371 sub handle_35
1372 {
1373         my $self = shift;
1374         my $pcno = shift;
1375         my $line = shift;
1376         my $origin = shift;
1377         my $pc = shift;
1378
1379         eph_del_regex("^PC35\\^$pc->[2]\\^$pc->[1]\\^");
1380         $self->process_rcmd_reply($pc->[1], $pc->[2], $pc->[1], $pc->[3]);
1381 }
1382
1383 sub handle_36 {goto &handle_34}
1384
1385 # database stuff
1386 sub handle_37
1387 {
1388         my $self = shift;
1389         my $pcno = shift;
1390         my $line = shift;
1391         my $origin = shift;
1392         my $pc = shift;
1393
1394         if ($pc->[1] eq $main::mycall) {
1395                 no strict 'refs';
1396                 my $sub = "DXDb::handle_$pcno";
1397                 &$sub($self, @$pc);
1398         } else {
1399                 $self->route($pc->[1], $line) unless $self->is_clx;
1400         }
1401 }
1402
1403 # node connected list from neighbour
1404 sub handle_38
1405 {
1406         my $self = shift;
1407         my $pcno = shift;
1408         my $line = shift;
1409         my $origin = shift;
1410         my $pc = shift;
1411 }
1412
1413 # incoming disconnect
1414 sub handle_39
1415 {
1416         my $self = shift;
1417         my $pcno = shift;
1418         my $line = shift;
1419         my $origin = shift;
1420         my $pc = shift;
1421
1422         if ($pc->[1] eq $self->{call}) {
1423                 $self->disconnect(1);
1424         } else {
1425                 dbg("PCPROT: came in on wrong channel") if isdbg('chanerr');
1426         }
1427 }
1428
1429 sub handle_40 {goto &handle_28}
1430
1431 # user info
1432 sub handle_41
1433 {
1434         my $self = shift;
1435         my $pcno = shift;
1436         my $line = shift;
1437         my $origin = shift;
1438         my $pc = shift;
1439
1440         my $call = $pc->[1];
1441         my $sort = $pc->[2];
1442         my $val = $pc->[3];
1443
1444         my $l = "PC41^$call^$sort";
1445         if (eph_dup($l, $eph_info_restime)) {
1446                 return;
1447         }
1448
1449         # input filter if required
1450         #                       my $ref = Route::get($call) || Route->new($call);
1451         #                       return unless $self->in_filter_route($ref);
1452
1453         if ($val eq $sort || $val =~ /^\s*$/) {
1454                 dbg('PCPROT: invalid value') if isdbg('chanerr');
1455                 return;
1456         }
1457
1458         if ($call eq $main::mycall || $call eq $main::myalias) {
1459                 dbg "DXPROT: PC41 trying to update $call from outside via $origin, ignored";
1460                 return;
1461         }
1462         my $chan = DXChannel::get($call);
1463         if ($chan) {
1464                 dbg "DXPROT: PC41 trying to update online $call from outside via $origin, ignored";
1465                 return;
1466         }
1467
1468         # add this station to the user database, if required
1469         my $user = DXUser::get_current($call);
1470         $user = DXUser->new($call) unless $user;
1471
1472         if ($sort == 1) {
1473                 if (($val =~ /spotter/i || $val =~ /self/i) && $user->name && $user->name ne $val) {
1474                         dbg("PCPROT: invalid name") if isdbg('chanerr');
1475                         return;
1476                 }
1477                 $user->name($val);
1478         } elsif ($sort == 2) {
1479                 $user->qth($val);
1480         } elsif ($sort == 3) {
1481                 if (is_latlong($val)) {
1482                         my ($lat, $long) = DXBearing::stoll($val);
1483                         $user->lat($lat) if $lat;
1484                         $user->long($long) if $long;
1485                         $user->qra(DXBearing::lltoqra($lat, $long)) unless $user->qra;
1486                 } else {
1487                         dbg('PCPROT: not a valid lat/long') if isdbg('chanerr');
1488                         return;
1489                 }
1490         } elsif ($sort == 4) {
1491                 $user->homenode($val);
1492         } elsif ($sort == 5) {
1493                 if (is_qra(uc $val)) {
1494                         my ($lat, $long) = DXBearing::qratoll(uc $val);
1495                         $user->lat($lat) if $lat && !$user->lat;
1496                         $user->long($long) if $long && !$user->long;
1497                         $user->qra(uc $val);
1498                 } else {
1499                         dbg('PCPROT: not a valid QRA locator') if isdbg('chanerr');
1500                         return;
1501                 }
1502         }
1503         $user->lastoper($main::systime); # to cut down on excessive for/opers being generated
1504         $user->put;
1505
1506         unless ($self->{isolate}) {
1507                 DXChannel::broadcast_nodes($line, $self); # send it to everyone but me
1508         }
1509
1510         #  perhaps this IS what we want after all
1511         #                       $self->route_pc41($ref, $call, $sort, $val, $pc->[4]);
1512 }
1513
1514 sub handle_42 {goto &handle_28}
1515
1516
1517 # database
1518 sub handle_44 {goto &handle_37}
1519 sub handle_45 {goto &handle_37}
1520 sub handle_46 {goto &handle_37}
1521 sub handle_47 {goto &handle_37}
1522 sub handle_48 {goto &handle_37}
1523
1524 # message and database
1525 sub handle_49
1526 {
1527         my $self = shift;
1528         my $pcno = shift;
1529         my $line = shift;
1530         my $origin = shift;
1531         my $pc = shift;
1532
1533         if (eph_dup($line)) {
1534                 return;
1535         }
1536
1537         if ($pc->[1] eq $main::mycall) {
1538                 DXMsg::handle_49($self, @$pc);
1539         } else {
1540                 $self->route($pc->[1], $line) unless $self->is_clx;
1541         }
1542 }
1543
1544 # keep alive/user list
1545 sub handle_50
1546 {
1547         my $self = shift;
1548         my $pcno = shift;
1549         my $line = shift;
1550         my $origin = shift;
1551         my $pc = shift;
1552
1553         return if (eph_dup($line));
1554
1555         my $call = $pc->[1];
1556
1557         my $node = Route::Node::get($call);
1558         if ($node) {
1559                 return unless $node->call eq $self->{call};
1560                 $node->usercount($pc->[2]) unless $node->users;
1561                 $node->reset_obs;
1562                 $node->PC92C_dxchan($self->call, $pc->[-1]);
1563
1564                 # input filter if required
1565 #               return unless $self->in_filter_route($node);
1566
1567                 unless ($self->{isolate}) {
1568                         DXChannel::broadcast_nodes($line, $self); # send it to everyone but me
1569                 }
1570 #               $self->route_pc50($origin, $line, $node, $pc->[2], $pc->[3]) unless eph_dup($line);
1571         }
1572 }
1573
1574 # incoming ping requests/answers
1575 sub handle_51
1576 {
1577         my $self = shift;
1578         my $pcno = shift;
1579         my $line = shift;
1580         my $origin = shift;
1581         my $pc = shift;
1582
1583         my $to = $pc->[1];
1584         my $from = $pc->[2];
1585         my $flag = $pc->[3];
1586
1587         if ($to eq $main::myalias) {
1588                 dbg("DXPROT: Ping addressed to \$myalias ($main::myalias), ignored") if isdbg('chan');
1589                 return;
1590         }
1591
1592         # is it for us?
1593         if ($to eq $main::mycall) {
1594                 if ($flag == 1) {
1595                         $self->send(pc51($from, $to, '0'));
1596                 } else {
1597                         DXXml::Ping::handle_ping_reply($self, $from);
1598                 }
1599         } else {
1600                 if (eph_dup($line)) {
1601                         return;
1602                 }
1603                 # route down an appropriate thingy
1604                 $self->route($to, $line);
1605         }
1606 }
1607
1608 sub handle_61 { goto &handle_11; }
1609
1610 # dunno but route it
1611 sub handle_75
1612 {
1613         my $self = shift;
1614         my $pcno = shift;
1615         my $line = shift;
1616         my $origin = shift;
1617         my $pc = shift;
1618
1619         my $call = $pc->[1];
1620         if ($call ne $main::mycall) {
1621                 $self->route($call, $line);
1622         }
1623 }
1624
1625 # WCY broadcasts
1626 sub handle_73
1627 {
1628         my $self = shift;
1629         my $pcno = shift;
1630         my $line = shift;
1631         my $origin = shift;
1632         my $pc = shift;
1633
1634         my $call = $pc->[1];
1635
1636         # do some de-duping
1637         my $d = cltounix($call, sprintf("%02d18Z", $pc->[2]));
1638         if (($pcno == 23 && $d < $main::systime - $pc23_max_age) || $d > $main::systime + 1500 || $pc->[2] < 0 || $pc->[2] > 23) {
1639                 dbg("PCPROT: WCY Date ($call $pc->[2]) out of range") if isdbg('chanerr');
1640                 return;
1641         }
1642         $pc = [ map { unpad($_) } @$pc ];
1643         if (WCY::dup($d)) {
1644                 dbg("PCPROT: Dup WCY Spot ignored\n") if isdbg('chanerr');
1645                 return;
1646         }
1647
1648         my $wcy = WCY::update($d, @$pc[2..12]);
1649         dbg("WCY: <$pc->[2]> K=$pc->[5] expK=$pc->[6] A=$pc->[4] R=$pc->[7] SFI=$pc->[3] SA=$pc->[8] GMF=$pc->[9] Au=$pc->[10] $pc->[11]\@$pc->[12] route: $origin") if isdbg('progress');
1650
1651         if (defined &Local::wcy) {
1652                 my $rep;
1653                 eval {
1654                         $rep = Local::wcy($self, @$pc[1..12]);
1655                 };
1656                 return if $rep;
1657         }
1658
1659         # broadcast to the eager world
1660         send_wcy_spot($self, $line, $d, @$pc[2..12]);
1661 }
1662
1663 # remote commands (incoming)
1664 sub handle_84
1665 {
1666         my $self = shift;
1667         my $pcno = shift;
1668         my $line = shift;
1669         my $origin = shift;
1670         my $pc = shift;
1671
1672         $self->process_rcmd($pc->[1], $pc->[2], $pc->[3], $pc->[4]);
1673 }
1674
1675 # remote command replies
1676 sub handle_85
1677 {
1678         my $self = shift;
1679         my $pcno = shift;
1680         my $line = shift;
1681         my $origin = shift;
1682         my $pc = shift;
1683
1684         $self->process_rcmd_reply($pc->[1], $pc->[2], $pc->[3], $pc->[4]);
1685 }
1686
1687 # decode a pc92 call: flag call : version : build
1688 sub _decode_pc92_call
1689 {
1690         my $icall = shift;
1691         my @part = split /:/, $icall;
1692         my ($flag, $call) = unpack "A A*", $part[0];
1693         unless (defined $flag && $flag ge '0' && $flag le '7') {
1694                 dbg("PCPROT: $icall no flag byte (0-7) at front of call, ignored") if isdbg('chanerr');
1695                 return ();
1696         }
1697         unless ($call && is_callsign($call)) {
1698                 dbg("PCPROT: $icall no recognisable callsign, ignored") if isdbg('chanerr');
1699                 return ();
1700         }
1701         my $is_node = $flag & 4;
1702         my $is_extnode = $flag & 2;
1703         my $here = $flag & 1;
1704         my $version = $part[1] || 0;
1705         my $build = $part[2] || 0;
1706         my $ip = $part[3] || '';
1707
1708         # remember that, at this stage, IPV6 addresses have : replaced by ,
1709         if (length $version > 4 && $version =~ /[,\.][\da-f]{1,4}/i) {
1710                 $ip = $version;
1711                 $version = 0;
1712         }
1713         $version =~ s/\D//g;
1714         $version = 0 unless $version && $version =~ /^[0-9]+$/;
1715         $build =~ s/^0\.//;
1716         $build =~ s/\D//g;
1717         $build = 0 unless $build &&  $build =~ /^[0-9]+$/;
1718         if ($ip) {
1719         $ip =~ s/,/:/g;
1720         $ip =~ s/^::ffff://i;
1721                 $ip = '' unless is_ipaddr($ip);
1722     }
1723         dbg("'$icall' = '" . join("', '", $call, $is_node, $is_extnode, $here, $version, $build, $ip) . "'") if isdbg('pc92');
1724         return ($call, $is_node, $is_extnode, $here, $version+0, $build+0, $ip);
1725 }
1726
1727 # decode a pc92 call: flag call : version : build
1728 sub _encode_pc92_call
1729 {
1730         my $ref = shift;
1731
1732         # plain call or value
1733         return $ref unless ref $ref;
1734
1735         my $ext = shift || 0;
1736         my $flag = 0;
1737         my $call = $ref->call;
1738         my $extra = '';
1739         $flag |= $ref->here ? 1 : 0;
1740         if ($ref->isa('Route::Node') || $ref->isa('DXProt')) {
1741                 $flag |= 4;
1742                 my $dxchan = DXChannel::get($call);
1743                 $flag |= 2 if $call ne $main::mycall && $dxchan && !$dxchan->{do_pc9x};
1744                 if (($ext & 1) && $ref->version) {
1745                         my $version = $ref->version || 1.0;
1746                         $version =  $version * 100 + 5300 if $version < 50;
1747                         $extra .= ":" . $version;
1748                 }
1749         }
1750         if (($ext & 2) && $ref->ip) {
1751                 my $ip = $ref->ip;
1752                 $ip =~ s/:/,/g;
1753                 $extra .= ':' . $ip;
1754         }
1755
1756         return "$flag$call$extra";
1757 }
1758
1759 my %things_add;
1760 my %things_del;
1761
1762 sub _add_thingy
1763 {
1764         my $parent = shift;
1765         my $s = shift;
1766         my $dxchan = shift;
1767         my $hops = shift;
1768
1769         my ($call, $is_node, $is_extnode, $here, $version, $build, $ip) = @$s;
1770         my @rout;
1771
1772         # remove spurious IPV6 prefix on IPV4 addresses
1773         $build ||= 0;
1774         $version ||= 0;
1775
1776         if ($call) {
1777                 my $ncall = $parent->call;
1778                 if ($ncall ne $call) {
1779                         my $user;
1780                         my $r;
1781
1782                         # normalise call, delete any unnormalised calls in the users file.
1783                         # then ignore this thingy
1784                         my $normcall = normalise_call($call);
1785                         if ($normcall ne $call) {
1786                                 next if DXChannel::get($call);
1787                                 $user = DXUser::get($call);
1788                                 dbg("DXProt::_add_thingy call $call normalised to $normcall, deleting spurious user $call");
1789                                 $user->del if $user;
1790                             $call = $normcall; # this is safe because a route add will ignore duplicates
1791                         }
1792                         
1793                         if ($is_node) {
1794                                 dbg("ROUTE: added node $call to $ncall") if isdbg('routelow');
1795                                 $user = check_add_user($call, 'A');
1796                                 @rout = $parent->add($call, $version, Route::here($here), $ip);
1797                                 $r = Route::Node::get($call);
1798                                 $r->PC92C_dxchan($dxchan->call, $hops) if $r;
1799                                 if ($version && is_numeric($version) && !$r->K && !$user->K) {
1800                                         my $old = $user->sort;
1801                                         if ($user->is_ak1a && (($version >= 5455 &&  $build > 0) || ($version >= 3000 && $version <= 3500)) ) {
1802                                                 $user->sort('S');
1803                                                 dbg("PCPROT::_add_thingy node $call v: $version b: $build sort ($old) updated to " . $user->sort);
1804                                         } elsif ($user->is_spider && ($version < 3000 || ($version > 4000 && $version < 5455))) {
1805                                                 unless ($version > 0  && $build == 0) {
1806                                                         $user->sort('A');
1807                                                         $build ||= 0;
1808                                                         dbg("PCPROT::_add_thingy node $call v: $version b: $build sort ($old) downgraded to " . $user->sort);
1809                                                 }
1810                                         }
1811                                 }
1812                                 $r->version($user->version) if $user->version;
1813                                 $r->build($user->build) if $user->build;
1814                                 $r->K(1) if $user->K;
1815                         } else {
1816                                 dbg("ROUTE: added user $call to $ncall") if isdbg('routelow');
1817                                 $user = check_add_user($call, 'U', $parent->call);
1818                                 @rout = $parent->add_user($call, Route::here($here), $ip);
1819                                 $dxchan->tell_buddies('loginb', $call, $ncall) if $dxchan;
1820                                 $r = Route::User::get($call);
1821                         }
1822                         if ($ip) {
1823                                 $r->ip($ip);
1824                                 Log('DXProt', "PC92A $call -> $ip on $ncall");
1825                         }
1826                         if ($pc92_slug_changes && $parent == $main::routeroot) {
1827                                 $things_add{$call} = Route::get($call);
1828                                 delete $things_del{$call};
1829                         }
1830                         $user->close($main::systime, $ip) if $user;             # this just updates lastseen and the connlist list containing the IP address
1831                 } else {                                
1832                         dbgprintring(10) if isdbg('nologchan');
1833                         dbg("DXProt::add_thingy: Trying to add parent $call to itself $ncall, ignored");
1834                 }
1835         }
1836         
1837         return @rout;
1838 }
1839
1840 sub _del_thingy
1841 {
1842         my $parent = shift;
1843         my $s = shift;
1844         my $dxchan = shift;
1845         my ($call, $is_node, $is_extnode, $here, $version, $build) = @$s;
1846         my @rout;
1847         if ($call) {
1848                 my $ref;
1849                 if ($is_node) {
1850                         $ref = Route::Node::get($call);
1851                         dbg("ROUTE: deleting node $call from " . $parent->call) if isdbg('routelow');
1852                         @rout = $ref->del($parent) if $ref;
1853                 } else {
1854                         dbg("ROUTE: deleting user $call from " . $parent->call) if isdbg('routelow');
1855                         $ref = Route::User::get($call);
1856                         if ($ref) {
1857                                 $dxchan->tell_buddies('logoutb', $call, $parent->call) if $dxchan;
1858                                 @rout = $parent->del_user($ref);
1859                         }
1860                 }
1861                 if ($pc92_slug_changes && $parent == $main::routeroot) {
1862                         $things_del{$call} = $ref unless exists $things_add{$call};
1863                         delete $things_add{$call};
1864                 }
1865         }
1866         return @rout;
1867 }
1868
1869 # this will only happen if we are slugging changes and
1870 # there are some changes to be sent, it will create an add or a delete
1871 # or both
1872 sub gen_pc92_changes
1873 {
1874         my @add = values %things_add;
1875         my @del = values %things_del;
1876         return (\@add, \@del);
1877 }
1878
1879 sub clear_pc92_changes
1880 {
1881         %things_add = %things_del = ();
1882         $last_pc92_slug = $main::systime;
1883 }
1884
1885 my $_last_time;
1886 my $_last_occurs;
1887 my $_last_pc9x_id;
1888
1889 sub last_pc9x_id
1890 {
1891         return $_last_pc9x_id;
1892 }
1893
1894 sub gen_pc9x_t
1895 {
1896         if (!$_last_time || $_last_time != $main::systime) {
1897                 $_last_time = $main::systime;
1898                 $_last_occurs = 0;
1899                 return $_last_pc9x_id = $_last_time - $main::systime_daystart;
1900         } else {
1901                 $_last_occurs++;
1902                 return $_last_pc9x_id = sprintf "%d.%02d", $_last_time - $main::systime_daystart, $_last_occurs;
1903         }
1904 }
1905
1906 sub check_pc9x_t
1907 {
1908         my $call = shift;
1909         my $t = shift;
1910         my $pc = shift;
1911         my $create = shift;
1912
1913         # check that the time is between 0 >= $t < 86400
1914         unless ($t >= 0 && $t < 86400) {
1915                 dbg("PCPROT: time invalid t: $t, ignored") if isdbg('chanerr');
1916                 return undef;
1917         }
1918
1919         # check that the time of this pc9x is within tolerance (default 15 mins either way)
1920         my $now = $main::systime - $main::systime_daystart ;
1921         my $diff = abs($now - $t);
1922         unless ($diff < $pc9x_time_tolerance || 86400 - $diff < $pc9x_time_tolerance) {
1923                 my $c = ref $call ? $call->call : $call;
1924                 dbg("PC9XERR: $c time out of range t: $t now: $now diff: $diff > $pc9x_time_tolerance, ignored") if isdbg('chan');
1925                 return undef;
1926         }
1927
1928         my $parent = ref $call ? $call : Route::Node::get($call);
1929         if ($parent) {
1930                 # we only do this for external calls whose routing table
1931                 # record come and go. The reference for mycall is permanent
1932                 # and not that frequently used, it also never times out, so
1933                 # the id on it is completely unreliable. Besides, only commands
1934                 # originating on this box will go through this code...
1935                 if ($parent->call ne $main::mycall) {
1936                         my $lastid = $parent->lastid;
1937                         if (defined $lastid) {
1938                                 if ($t < $lastid) {
1939                                         # note that this is where we determine whether this pc9x has come in yesterday
1940                                         # but is still greater (modulo 86400) than the lastid or is simply an old
1941                                         # duplicate sentence. To determine this we need to do some module 86400
1942                                         # arithmetic. High numbers mean that this is an old duplicate sentence,
1943                                         # low numbers that it is a new sentence.
1944                                         #
1945                                         # Typically you will see yesterday being taken on $t = 84, $lastid = 86235
1946                                         # and old dupes with $t = 234, $lastid = 256 (which give answers 249 and
1947                                         # 86378 respectively in the calculation below).
1948                                         #
1949                                         if ($t+86400-$lastid > $pc9x_past_age) {
1950                                                 dbg("PCPROT: dup id on $t <= lastid $lastid, ignored") if isdbg('chanerr') || isdbg('pc92dedupe');
1951                                                 return undef;
1952                                         }
1953                                 } elsif ($t == $lastid) {
1954                                         dbg("PCPROT: dup id on $t == lastid $lastid, ignored") if isdbg('chanerr') || isdbg('pc92dedupe');
1955                                         return undef;
1956                                 } else {
1957                                         # check that if we have a low number in lastid that yesterday's numbers
1958                                         # (likely in the 85000+ area) don't override them, thus causing flip flopping
1959                                         if ($lastid+86400-$t < $pc9x_past_age) {
1960                                                 dbg("PCPROT: dup id on $t in yesterday, lastid $lastid, ignored") if isdbg('chanerr') || isdbg('pc92dedupe');
1961                                                 return undef;
1962                                         }
1963                                 }
1964                         }
1965                 }
1966         } elsif ($create) {
1967                 $parent = Route::Node->new($call);
1968         } else {
1969                 dbg("PCPROT: $call does not exist, ignored") if isdbg('pc92dedupe');
1970                 return undef;
1971         }
1972         if (isdbg('pc92dedupe')) {
1973                 my $exists = exists $parent->{lastid}; # naughty, naughty :-)
1974                 my $val = $parent->{lastid};
1975                 my $s = $exists ? (defined $val ? $val : 'exists/undef') : 'undef';
1976                 dbg("PCPROT: $call pc92 id lastid $s -> $t");
1977         }
1978         $parent->lastid($t);
1979
1980         return $parent;
1981 }
1982
1983 sub pc92_handle_first_slot
1984 {
1985         my $self = shift;
1986         my $slot = shift;
1987         my $parent = shift;
1988         my $t = shift;
1989         my $hops = shift;
1990         my $oparent = $parent;
1991
1992         my @radd;
1993
1994         my ($call, $is_node, $is_extnode, $here, $version, $build) = @$slot;
1995         if ($call && $is_node) {
1996                 if ($call eq $main::mycall) {
1997                         LogDbg('err', "PCPROT: $self->{call} : $call looped back onto \$main::mycall ($main::mycall), ignored");
1998                         return;
1999                 }
2000                 if ($call eq $main::myalias) {
2001                         LogDbg('err', "PCPROT: $self->{call} : $call looped back onto \$main::myalias ($main::myalias), ignored");
2002                         return;
2003                 }
2004                 # this is only accepted from my "self".
2005                 # this also kills configs from PC92 nodes with external PC19 nodes that are also
2006                 # locally connected. Local nodes always take precedence. But we remember the lastid
2007                 # to try to reduce the number of dupe PC92s for this external node.
2008                 if (DXChannel::get($call) && $call ne $self->{call}) {
2009                         $parent = check_pc9x_t($call, $t, 92); # this will update the lastid time
2010                         dbg("PCPROT: locally connected node $call from other another node $self->{call}, ignored") if isdbg('chanerr');
2011                         return;
2012                 }
2013                 if ($is_extnode) {
2014                         # reparent to external node (note that we must have received a 'C' or 'A' record
2015                         # from the true parent node for this external before we get one for the this node
2016                         unless ($parent = Route::Node::get($call)) {
2017                                 if ($is_extnode && $oparent) {
2018                                         @radd = _add_thingy($oparent, $slot, $self, $hops);
2019                                         $parent = $radd[0];
2020                                 } else {
2021                                         dbg("PCPROT: no previous C or A for this external node received, ignored") if isdbg('chanerr');
2022                                         return;
2023                                 }
2024                         }
2025                         $parent = check_pc9x_t($call, $t, 92) || return;
2026                         $parent->via_pc92(1);
2027                         $parent->PC92C_dxchan($self->{call}, $hops);
2028                 }
2029         } else {
2030                 dbg("PCPROT: must be \$mycall or external node as first entry, ignored") if isdbg('chanerr');
2031                 return;
2032         }
2033         $parent->here(Route::here($here));
2034         $parent->version($version || $pc19_version) if $version;
2035     $parent->build($build) if $build;
2036         $parent->PC92C_dxchan($self->{call}, $hops) unless $self->{call} eq $parent->call;
2037         return ($parent, @radd);
2038 }
2039
2040 # DXSpider routing entries
2041 sub handle_92
2042 {
2043         my $self = shift;
2044         my $pcno = shift;
2045         my $line = shift;
2046         my $origin = shift;
2047         my $pc = shift;
2048
2049         my (@radd, @rdel);
2050
2051         my $pcall = $pc->[1];
2052         my $t = $pc->[2];
2053         my $sort = $pc->[3];
2054         my $hops = $pc->[-1];
2055
2056         # this catches loops of A/Ds
2057 #       if (eph_dup($line, $pc9x_dupe_age)) {
2058 #               return;
2059 #       }
2060
2061         if ($pcall eq $main::mycall) {
2062                 LogDbg('err', "PCPROT: looped back, ignored");
2063                 return;
2064         }
2065
2066         if ($pcall eq $main::myalias) {
2067                 LogDbg('err', "PCPROT: looped back to \$myalias ($main::myalias), misconfiguration ignored");
2068                 return;
2069         }
2070
2071         if ($pcall eq $self->{call} && $self->{state} eq 'init') {
2072                 if ($self->{isolate}) {
2073                         dbg("DXPROT: PC9x received, but $pcall is isolated, ignored");
2074                         return;
2075                 } elsif (!$self->user->wantpc9x) {
2076                         dbg("DXPROT: PC9x explicitly switched off on $pcall, ignored");
2077                         return;
2078                 } else {
2079                         $self->state('init92');
2080                         $self->{do_pc9x} = 1;
2081                         dbg("DXPROT: Do pc9x set on $pcall");
2082                 }
2083         }
2084         unless ($self->{do_pc9x}) {
2085                 dbg("PCPROT: PC9x come in from non-PC9x node, ignored") if isdbg('chanerr');
2086                 return;
2087         }
2088
2089         # don't create routing entries for D records that don't already exist
2090         # this is what causes all those PC92 loops!
2091         my $parent = check_pc9x_t($pcall, $t, 92, $sort ne 'D') || return;
2092         my $oparent = $parent;
2093
2094         $parent->do_pc9x(1);
2095         $parent->via_pc92(1);
2096
2097         if ($sort eq 'F' || $sort eq 'R') {
2098
2099                 # this is the route finding section
2100                 # here is where the consequences of the 'find' command
2101                 # are dealt with
2102
2103                 my $from = $pc->[4];
2104                 my $target = $pc->[5];
2105
2106                 if ($sort eq 'F') {
2107                         my $flag;
2108                         my $ref;
2109                         my $dxchan;
2110                         if ($ref = DXChannel::get($target)) {
2111                                 $flag = 1;              # we are directly connected
2112                         } else {
2113                                 $ref = Route::get($target);
2114                                 $dxchan = $ref->dxchan;
2115                                 $flag = 2;
2116                         }
2117                         if ($ref && $flag && $dxchan) {
2118                                 $self->send(pc92r($from, $target, $flag, int($dxchan->{pingave}*1000)));
2119                                 return;
2120                         }
2121                 } elsif ($sort eq 'R') {
2122                         if (my $dxchan = DXChannel::get($from)) {
2123                                 handle_pc92_find_reply($dxchan, $pcall, $from, $target, @$pc[6,7]);
2124                         } else {
2125                                 my $ref = Route::get($from);
2126                                 if ($ref) {
2127                                         my @dxchan = grep {$_->do_pc9x} $ref->alldxchan;
2128                                         if (@dxchan) {
2129                                                 $_->send($line) for @dxchan;
2130                                         } else {
2131                                                 dbg("PCPROT: $self->{call} : type R no return route, ignored") if isdbg('chanerr') || isdbg('route');
2132                                         }
2133                                 } else {
2134                                         dbg("PCPROT: $self->{call} : type R no return route, ignored") if isdbg('chanerr') || isdbg('route');
2135                                 }
2136                         }
2137                         return;
2138                 }
2139
2140         } elsif ($sort eq 'K') {
2141                 $pc92Kin += length $line;
2142
2143                 # remember the last channel we arrived on
2144                 $parent->PC92C_dxchan($self->{call}, $hops) unless $self->{call} eq $parent->call;
2145
2146                 my @ent = _decode_pc92_call($pc->[4]);
2147
2148                 if (@ent) {
2149                         my $add;
2150
2151                         ($parent, $add) = $self->pc92_handle_first_slot(\@ent, $parent, $t, $hops);
2152                         return unless $parent; # dupe
2153                         
2154                         push @radd, $add if $add;
2155                         $parent->reset_obs;
2156                         my $call = $parent->call;
2157                         my $version = $ent[4] || 0;
2158                         my $build = $ent[5] ||  0;
2159                         $build =~ s/^0\.//;
2160                         my $oldbuild = $parent->build || 0;
2161                         my $oldversion = $parent->version || 0;
2162                         my $user = check_add_user($parent->call, 'S');
2163                         my $oldsort = $user->sort // '';
2164
2165                         dbg("PCPROT: PC92 K v: $version ov: $oldversion b: $build ob: $oldbuild pk: " . ($parent->K || '0') . " uk: " . ($user->K || 0)) if isdbg('pc92k');
2166                                 
2167                         if (is_numeric($version) || is_numeric($build)) {
2168                                 my $changed = 0;
2169                                 if (($oldversion ne $version || $build ne $oldbuild)) {
2170                                         dbg("PCPROT: PC92 K node $call updated version: $version (was $oldversion) build: $build (was $oldbuild)");
2171                                         $user->version($parent->version($version));
2172                                         $user->build($parent->build($build));
2173                                         ++$changed;
2174                                 }
2175                                 if ($oldsort ne 'S') {
2176                                         dbg("PCPROT: PC92 K node $call updated sort: $sort (was $oldsort)");
2177                                         $user->sort('S');
2178                                         ++$changed;
2179                                 }
2180                                 unless ($user->K) {
2181                                         dbg("PCPROT: PC92 K node $call updated - marked as PC92 K user");
2182                                         $user->K(1);
2183                                         ++$changed;
2184                                 }
2185                                 $user->put if $changed;
2186                                 $parent->K(1); # mark this as come in on a K
2187                         } else {
2188                                 dbg("DXProt PC92 K version call $call: invalid version: '$version' or build: '$version', ignored");
2189                         }
2190                         dbg("ROUTE: reset obscount on $call now " . $parent->obscount) if isdbg('obscount');
2191                 }
2192         } elsif ($sort eq 'A' || $sort eq 'D' || $sort eq 'C') {
2193
2194                 $pc92Ain += length $line if $sort eq 'A';
2195                 $pc92Cin += length $line if $sort eq 'C';
2196                 $pc92Din += length $line if $sort eq 'D';
2197
2198                 # remember the last channel we arrived on
2199                 $parent->PC92C_dxchan($self->{call}, $hops) unless $self->{call} eq $parent->call;
2200
2201                 # this is the main route section
2202                 # here is where all the routes are created and destroyed
2203
2204                 # cope with missing duplicate node calls in the first slot
2205                 my $me = $pc->[4] || '';
2206                 $me ||= _encode_pc92_call($parent) unless $me ;
2207
2208                 my @ent = map {my @a = _decode_pc92_call($_); @a ? \@a : ()} grep {$_ && /^[0-7]/} $me, @$pc[5 .. $#$pc];
2209
2210                 if (@ent) {
2211
2212                         # look at the first one which will always be a node of some sort
2213                         # except in the case of 'A' or 'D' in which the $pcall is used
2214                         # otherwise use the node call and update any information
2215                         # that needs to be done.
2216                         my $add;
2217
2218                         ($parent, $add) = $self->pc92_handle_first_slot($ent[0], $parent, $t, $hops);
2219                         return unless $parent; # dupe
2220
2221                         shift @ent;
2222                         push @radd, $add if $add;
2223                 }
2224
2225                 # do a pass through removing any references to either mycall
2226                 my @nent;
2227                 for (@ent) {
2228                         my $dxc;
2229                         next unless $_ && @$_;
2230                         if ($_->[0] eq $main::mycall) {
2231                                 dbg("PCPROT: $self->{call} : type $sort $_->[0] refers to me, ignored") if isdbg('route');
2232                                 next;
2233                         }
2234                         if ($_->[0] eq $main::myalias && $_->[1] || $_->[0] eq $main::mycall && $_->[1] == 0) {
2235                                 LogDbg('err',"PCPROT: $self->{call} : type $sort $_->[0] trying to change type to " . $_->[1]?"Node":"User" . ", ignored");
2236                                 next;
2237                         }
2238                         
2239                         push @nent, $_;
2240                 }
2241
2242                 if ($sort eq 'A') {
2243                         for (@nent) {
2244                                 push @radd, _add_thingy($parent, $_, $self, $hops);
2245                         }
2246                 } elsif ($sort eq 'D') {
2247                         for (@nent) {
2248                                 push @rdel, _del_thingy($parent, $_, $self);
2249                         }
2250                 } elsif ($sort eq 'C') {
2251                         my (@nodes, @users);
2252
2253                         # we reset obscounts on config records as well as K records
2254                         $parent->reset_obs;
2255                         dbg("ROUTE: reset obscount on $parent->{call} now " . $parent->obscount) if isdbg('obscount');
2256
2257                         #
2258                         foreach my $r (@nent) {
2259                                 #                       my ($call, $is_node, $is_extnode, $here, $version, $build) = _decode_pc92_call($_);
2260                                 if ($r->[0]) {
2261                                         if ($r->[1]) {
2262                                                 push @nodes, $r->[0];
2263                                         } else {
2264                                                 push @users, $r->[0];
2265                                         }
2266                                 } else {
2267                                         dbg("PCPROT: $self->{call} :  pc92 call entry '$_' not decoded, ignored") if isdbg('chanerr') || isdbg('route');
2268                                 }
2269                         }
2270
2271                         my ($dnodes, $dusers, $nnodes, $nusers) = $parent->calc_config_changes(\@nodes, \@users);
2272
2273                         # add users here
2274                         foreach my $r (@nent) {
2275                                 my $call = $r->[0];
2276                                 if ($call) {
2277                                         push @radd,_add_thingy($parent, $r, $self, $hops) if grep $call eq $_, (@$nnodes, @$nusers);
2278                                 }
2279                         }
2280                         # del users here
2281                         foreach my $r (@$dnodes) {
2282                                 push @rdel,_del_thingy($parent, [$r, 1], $self);
2283                         }
2284                         foreach my $r (@$dusers) {
2285                                 push @rdel,_del_thingy($parent, [$r, 0], $self);
2286                         }
2287
2288                         # remember this last PC92C for rebroadcast on demand
2289                         $parent->last_PC92C($line);
2290                 } else {
2291                         dbg("PCPROT: unknown action '$sort', ignored") if isdbg('chanerr');
2292                         return;
2293                 }
2294
2295                 foreach my $r (@rdel) {
2296                         next unless $r;
2297
2298                         $self->route_pc21($pcall, undef, $r) if $r->isa('Route::Node');
2299                         $self->route_pc17($pcall, undef, $parent, $r) if $r->isa('Route::User');
2300                 }
2301                 my @pc19 = grep { $_ && $_->isa('Route::Node') } @radd;
2302                 my @pc16 = grep { $_ && $_->isa('Route::User') } @radd;
2303                 unshift @pc19, $parent if $self->{state} eq 'init92' && $oparent == $parent;
2304                 $self->route_pc19($pcall, undef, @pc19) if @pc19;
2305                 $self->route_pc16($pcall, undef, $parent, @pc16) if @pc16;
2306         }
2307
2308         # broadcast it if we get here
2309         $self->broadcast_route_pc9x($pcall, undef, $line, 0);
2310 }
2311
2312 # get all the routes for a thing, bearing in mind that the thing (e.g. a user)
2313 # might be on two or more nodes at the same time or that there may be more than
2314 # one equal distance neighbour to a node.
2315 #
2316 # What this means that if sh/route g1tlh shows that he is on (say) two nodes, then
2317 # a Route::findroutes is done on each of those two nodes, the best route(s) taken from
2318 # each and then combined to give a set of dxchans to send the PC9x record down
2319 #
2320 sub find_pc9x_routes
2321 {
2322         my $to = shift;
2323         my $ref = Route::get($to);
2324         my @parent;
2325         my %cand;
2326
2327         if ($ref->isa('Route::User')) {
2328                 my $dxchan = DXChannel::get($to);
2329                 push @parent, $to if $dxchan;
2330                 push @parent, $ref->parents;
2331         } else {
2332                 @parent = $to;
2333         }
2334         foreach my $p (@parent) {
2335                 my $lasthops;
2336                 my @routes = Route::findroutes($p);
2337                 foreach my $r (@routes) {
2338                         $lasthops = $r->[0] unless defined $lasthops;
2339                         if ($r->[0] == $lasthops) {
2340                                 $cand{$r->[1]->call} = $r->[1];
2341                         } else {
2342                                 last;
2343                         }
2344                 }
2345         }
2346         return values %cand;
2347 }
2348
2349 sub handle_93
2350 {
2351         my $self = shift;
2352         my $pcno = shift;
2353         my $line = shift;
2354         my $origin = shift;
2355         my $pc = shift;
2356
2357 #       $self->{do_pc9x} ||= 1;
2358
2359         my $pcall = $pc->[1];                   # this is now checked earlier
2360
2361         # remember that we are converting PC10->PC93 and self will be $main::me if it
2362         # comes from us
2363         unless ($self->{do_pc9x}) {
2364                 dbg("PCPROT: PC9x come in from non-PC9x node, ignored") if isdbg('chanerr');
2365                 return;
2366         }
2367
2368         my $t = $pc->[2];
2369         my $parent = check_pc9x_t($pcall, $t, 93, 1) || return;
2370
2371         my $to = uc $pc->[3];
2372         my $from = uc $pc->[4];
2373         my $via = uc $pc->[5];
2374         my $text = $pc->[6];
2375         my $onode = uc $pc->[7];
2376         $onode = $pcall if @$pc <= 8;
2377
2378         # this is catch loops caused by bad software ...
2379         if (eph_dup("PC93|$from|$text|$onode", $pc10_dupe_age)) {
2380                 return;
2381         }
2382
2383         if (isdbg('progress')) {
2384                 my $vs = $via ne '*' ? " via $via" : ''; 
2385                 my $s = "ANNTALK: $from\@$onode$vs -> $to '$text' route: $origin";
2386                 dbg($s);
2387         }
2388
2389         # if this is a 'bad spotter' user then ignore it
2390         my $nossid = $from;
2391         $nossid =~ s/-\d+$//;
2392         if ($badspotter->in($nossid)) {
2393                 dbg($line) if isdbg('nologchan');
2394                 dbg("PCPROT: Bad Spotter, dropped");
2395                 return;
2396         }
2397
2398         # ignore PC93 coming in from outside this node with a target of local
2399         if ($to eq 'LOCAL' && $self != $main::me) {
2400                 dbg("PCPROT: incoming LOCAL chat not from local node, ignored") if isdbg('chanerr');
2401                 return;
2402         }
2403
2404         # will we allow it at all?
2405         if ($censorpc) {
2406                 my @bad;
2407                 if (@bad = BadWords::check($text)) {
2408                         my $bw = join ', ', @bad;
2409                         dbg($line) if isdbg('nologchan');
2410                         dbg("PCPROT: Badwords: '$bw', dropped");
2411                         return;
2412                 }
2413         }
2414
2415         # if it is routeable then then treat it like a talk
2416         my $ref = Route::get($to);
2417         if ($ref) {
2418                 my $dxchan;
2419
2420                 # convert to PC10 or local talks where appropriate
2421                 # PC93 capable nodes of the same hop count all get a copy
2422                 # if there is a PC10 node then it will get a copy and that
2423                 # will be it. Hopefully such a node will not figure highly
2424                 # in the route list, unless it is local, 'cos it don't issue PC92s!
2425                 # note that both local and PC93s at the same time are possible if the
2426                 # user on more than one node.
2427                 my @routes = find_pc9x_routes($to);
2428                 my $lasthops;
2429                 foreach $dxchan (@routes) {
2430                         if (ref $dxchan && $dxchan->isa('DXChannel')) {
2431                                 if ($dxchan->{do_pc9x}) {
2432                                         $dxchan->send($line);
2433                                 } else {
2434                                         $dxchan->talk($from, $to, $via, $text, $onode);
2435                                 }
2436                         } else {
2437                                 dbg("ERROR: $to -> $dxchan is not a DXChannel! (convert to pc10)");
2438                         }
2439                 }
2440                 return;
2441
2442         } elsif ($to eq '*' || $to eq 'SYSOP' || $to eq 'WX') {
2443                 # announces
2444                 my $sysop = $to eq 'SYSOP' ? '*' : ' ';
2445                 my $wx = $to eq 'WX' ? '1' : '0';
2446                 my $local = $via eq 'LOCAL' ? '*' : $via;
2447
2448                 $self->send_announce(1, pc12($from, $text, $local, $sysop, $wx, $pcall), $from, $local, $text, $sysop, $pcall, $wx, $via eq 'LOCAL' ? $via : undef);
2449                 return if $via eq 'LOCAL';
2450         } elsif (!is_callsign($to) && $text =~ /^#\d+ /) {
2451                 # chat messages really only locally connected users
2452                 $self->send_chat(1, $line, $from, '*', $text, $to, $pcall, '0');
2453         }
2454
2455         # broadcast this chat sentence everywhere unless it is targetted to 'LOCAL'
2456         $self->broadcast_route_pc9x($pcall, undef, $line, 0) unless $to eq 'LOCAL' || $via eq 'LOCAL';
2457 }
2458
2459 # if get here then rebroadcast the thing with its Hop count decremented (if
2460 # there is one). If it has a hop count and it decrements to zero then don't
2461 # rebroadcast it.
2462 #
2463 # NOTE - don't arrive here UNLESS YOU WANT this lump of protocol to be
2464 #        REBROADCAST!!!!
2465 #
2466
2467 sub handle_default
2468 {
2469         my $self = shift;
2470         my $pcno = shift;
2471         my $line = shift;
2472         my $origin = shift;
2473         my $pc = shift;
2474
2475         unless (eph_dup($line)) {
2476                 if ($pcno >= 90) {
2477                         my $pcall = $pc->[1];
2478                         unless (is_callsign($pcall)) {
2479                                 dbg("PCPROT: invalid callsign string '$pc->[1]', ignored") if isdbg('chanerr');
2480                                 return;
2481                         }
2482                         my $t = $pc->[2];
2483                         my $parent = check_pc9x_t($pcall, $t, $pcno, 1) || return;
2484                         $self->broadcast_route_pc9x($pcall, undef, $line, 0);
2485                 } else {
2486                         unless ($self->{isolate}) {
2487                                 DXChannel::broadcast_nodes($line, $self) if $line =~ /\^H\d+\^?~?$/; # send it to everyone but me
2488                         }
2489                 }
2490         }
2491 }
2492
2493 1;