improve PC11/PC61 stats
[spider.git] / perl / DXProtHandle.pm
1 #
2 #
3 # This module impliments the handlers for the protocal mode for a dx cluster
4 #
5 # Copyright (c) 1998-2007 Dirk Koopman G1TLH
6 #
7 #
8 #
9
10 package DXProt;
11
12 @ISA = qw(DXChannel);
13
14 use DXUtil;
15 use DXChannel;
16 use DXUser;
17 use DXM;
18 use DXProtVars;
19 use DXCommandmode;
20 use DXLog;
21 use Spot;
22 use DXProtout;
23 use DXDebug;
24 use Filter;
25 use Local;
26 use DXDb;
27 use AnnTalk;
28 use Geomag;
29 use WCY;
30 use BadWords;
31 use DXHash;
32 use Route;
33 use Route::Node;
34 use Script;
35 use DXCIDR;
36
37 use strict;
38 use warnings qw(all);
39 no warnings qw(uninitialized);
40
41
42
43 use vars qw($pc11_max_age $pc23_max_age $last_pc50 $eph_restime $eph_info_restime $eph_pc34_restime
44                         $last_hour $last10 %eph  %pings %rcmds $ann_to_talk
45                         $pingint $obscount %pc19list $chatdupeage $chatimportfn
46                         $investigation_int $pc19_version $myprot_version
47                         %nodehops $baddx $badspotter $badnode $censorpc
48                         $allowzero $decode_dk0wcy $send_opernam @checklist
49                         $eph_pc15_restime $pc9x_past_age $pc9x_dupe_age
50                         $pc10_dupe_age $pc92_slug_changes $last_pc92_slug
51                         $pc92Ain $pc92Cin $pc92Din $pc92Kin $pc9x_time_tolerance
52                         $pc92filterdef $senderverify $pc11_dwell_time $pc11_extract_route
53                    );
54
55 $pc9x_dupe_age = 60;                    # catch loops of circular (usually) D records
56 $pc10_dupe_age = 45;                    # just something to catch duplicate PC10->PC93 conversions
57 $pc92_slug_changes = 60*1;              # slug any changes going outward for this long
58 $last_pc92_slug = 0;                    # the last time we sent out any delayed add or del PC92s
59 $pc9x_time_tolerance = 15*60;   # the time on a pc9x is allowed to be out by this amount
60 $pc9x_past_age = (122*60)+              # maximum age in the past of a px9x (a config record might be the only
61 $pc9x_time_tolerance;           # thing a node might send - once an hour and we allow an extra hour for luck)
62                                 # this is actually the partition between "yesterday" and "today" but old.
63 $senderverify = 0;                              # 1 - check for forged PC11 or PC61.
64                                 # 2 - if forged, dump them.
65 $pc11_dwell_time = 2;                   # number of seconds to wait for a PC61 to come to substitute the PC11
66 $pc11_extract_route = 1;                # generate missing  user route entry and IP address from passing PC61s
67
68
69 $pc92filterdef = bless ([
70                           # tag, sort, field, priv, special parser
71                           ['call', 'c', 0],
72                           ['by', 'c', 0],
73                           ['dxcc', 'nc', 1],
74                           ['itu', 'ni', 2],
75                           ['zone', 'nz', 3],
76                          ], 'Filter::Cmd');
77
78 our %pc11q;
79 # this is a place to park an incoming PC11 in the sure and certain hope that
80 # a PC61 will be along soon. This has the side benefit that it will delay a
81 # a PC11 for one second - assuming that it is not removed by a PC61 version
82
83 # incoming talk commands
84 sub handle_10
85 {
86         my $self = shift;
87         my $pcno = shift;
88         my $line = shift;
89         my $origin = shift;
90         my $pc = shift;
91
92         # this is to catch loops caused by bad software ...
93         if (eph_dup($line, $pc10_dupe_age)) {
94                 return;
95         }
96
97
98         # is it for me or one of mine?
99         my ($from, $to, $via, $call, $dxchan);
100         $from = $pc->[1];
101         if ($pc->[5] gt ' ') {
102                 $via = $pc->[2];
103                 $to = $pc->[5];
104         } else {
105                 $to = $pc->[2];
106         }
107
108         # if this is a 'nodx' node then ignore it
109         if ($badnode->in($pc->[6]) || ($via && $badnode->in($via))) {
110                 dbg($line) if isdbg('nologchan');
111                 dbg("PCPROT: Bad Node, dropped");
112                 return;
113         }
114
115
116         my $nossid = $from;
117         $nossid =~ s/-\d+$//;
118         if ($badspotter->in($nossid)) {
119                 dbg($line) if isdbg('nologchan');
120                 dbg("PCPROT: Bad Spotter, dropped");
121                 return;
122         }
123
124         # if we are converting announces to talk is it a dup?
125         if ($ann_to_talk) {
126                 if (AnnTalk::is_talk_candidate($from, $pc->[3]) && AnnTalk::dup($from, $to, $pc->[3])) {
127                         dbg("PCPROT: Dupe talk from announce, dropped") if isdbg('chanerr');
128                         return;
129                 }
130         }
131         
132         # will we allow it at all?
133         if ($censorpc) {
134                 my @bad;
135                 if (@bad = BadWords::check($pc->[3])) {
136                         my $bw = join ', ', @bad; 
137                         dbg($line) if isdbg('nologchan');
138                         dbg("PCPROT: Badwords: '$bw', dropped");
139                         return;
140                 }
141         }
142
143         # convert this to a PC93, coming from mycall with origin set and process it as such
144         $main::me->normal(pc93($to, $from, $via, $pc->[3], $pc->[6]));
145 }
146
147 my %pc11_saved;                                 # delayed PC11s
148 my $pc11_rx;                                    # no of pc11 rxed
149 my $pc61_rx;                                    # no of pc61 rxed
150 my $pc11_to_61;                                 # no of 'better' pc61, that replaced stored waiting pc11
151 my $rpc11_to_61;                                # no of pc11s 'promoted' to pc61 by IP captured in routing table
152
153 # DX Spot handling
154 sub handle_11
155 {
156         my $self = shift;
157         my $pcno = shift;
158         my $line = shift;
159         my $origin = shift;
160         my $pc = shift;
161         my $recurse = shift || 0;
162
163         # route 'foreign' pc26s
164         if ($pcno == 26) {
165                 if ($pc->[7] ne $main::mycall) {
166                         $self->route($pc->[7], $line);
167                         return;
168                 }
169         }
170
171         dbg("---") if isdbg("pc11") || isdbg("pc61"); 
172         dbg("INPUT $self->{call}: $line via: $origin recurse: $recurse") if isdbg("pc11") || isdbg("pc61"); 
173
174 #       my ($hops) = $pc->[8] =~ /^H(\d+)/;
175
176         # is the spotted callsign blank? This should really be trapped earlier but it
177         # could break other protocol sentences. Also check for lower case characters.
178         if ($pc->[2] =~ /^\s*$/) {
179                 dbg($line) if isdbg('nologchan');
180                 dbg("PCPROT: blank callsign, dropped");
181                 return;
182         }
183         if ($pc->[2] =~ /[a-z]/) {
184                 dbg($line) if isdbg('nologchan');
185                 dbg("PCPROT: lowercase characters, dropped");
186                 return;
187         }
188
189
190         # if this is a 'nodx' node then ignore it
191         if ($badnode->in($pc->[7])) {
192                 dbg($line) if isdbg('nologchan');
193                 dbg("PCPROT: Bad Node $pc->[7], dropped");
194                 return;
195         }
196
197         # convert the date to a unix date
198         my $d = cltounix($pc->[3], $pc->[4]);
199         # bang out (and don't pass on) if date is invalid or the spot is too old (or too young)
200         if (!$d || (($pcno == 11 || $pcno == 61) && ($d < $main::systime - $pc11_max_age || $d > $main::systime + 900))) {
201                 dbg($line) if isdbg('nologchan');
202                 dbg("PCPROT: Spot ignored, invalid date or out of range ($pc->[3] $pc->[4])\n");
203                 return;
204         }
205
206         # is it 'baddx'
207         if ($baddx->in($pc->[2])) {
208                 dbg("PCPROT: Bad DX spot '$pc->[2]', ignored");
209                 dbg($line) if isdbg('nologchan');
210                 return;
211         }
212
213         # is it claiming to be BUST(ed)
214         $pc->[5] =~ s/^\s+//;                   # take any leading blanks off
215         $pc->[2] = unpad($pc->[2]);             # take off leading and trailing blanks from spotted callsign
216         if ($pc->[2] =~ /BUST\w*$/) {
217                 dbg($line) if isdbg('nologchan');
218                 dbg("PCPROT: useless 'BUSTED' spot") if isdbg('chanerr');
219                 return;
220         }
221         
222         my $nossid = $pc->[6];
223     $nossid =~ s/-\d+$//;
224
225         my @spot = Spot::prepare($pc->[1], $pc->[2], $d, $pc->[5], $nossid, $pc->[7], $pc->[8]);
226
227         #   $f0 = frequency
228         #   $f1 = call
229         #   $f2 = date in unix format
230         #   $f3 = comment
231         #   $f4 = spotter
232         #   $f5 = spotted dxcc country
233         #   $f6 = spotter dxcc country
234         #   $f7 = origin
235         #   $f8 = spotted itu
236         #   $f9 = spotted cq zone
237         #   $f10 = spotter itu
238         #   $f11 = spotter cq zone
239         #   $f12 = spotted us state
240         #   $f13 = spotter us state
241         #   $f14 = ip address
242
243
244         # is this is a 'bad spotter' or an unknown user then ignore it. 
245         if ($badspotter->in($nossid)) {
246                 dbg($line) if isdbg('nologchan');
247                 dbg("PCPROT: Bad Spotter $pc->[6], dropped");
248                 return;
249         }
250
251         # global spot filtering on INPUT
252         if ($self->{inspotsfilter}) {
253                 my ($filter, $hops) = $self->{inspotsfilter}->it(@spot);
254                 unless ($filter) {
255                         dbg("PCPROT: Rejected by input spot filter") if isdbg('chanerr');
256                         return;
257                 }
258         }
259
260         # Populate the routing table
261         my $rn = Route::Node::get($pc->[7]);
262         unless ($rn) {
263                 $rn = Route::Node->new($pc->[7]);
264                 dbg("ROUTE $self->{call}: ADD NEW node: $pc->[7]") if isdbg('pc11');
265         }
266         my $r = Route::User::get($pc->[6]);
267         unless ($r) {
268                 $rn->add_user($pc->[6], 0, undef);
269                 dbg("ROUTE $self->{call}: ADD NEW user: $pc->[6] -> $pc->[7]") if isdbg('pc11');
270                 $r = Route::User::get($pc->[6]);
271         }
272         
273         # Add/Change any IP address info
274         if ($pcno == 61) {
275
276                 # as we have a route to a user, if it (or the node) does not exist then create them
277                 # link the user to the node if not already done.
278                 # then add or alter the IP address
279                 if ($pc->[8]) {
280                         my $new = $pc->[8];
281                         if ($r) {
282                                 if ($r->ip ne $new) {
283                                         if ($r->ip) {
284                                                 my $old = $r->ip;
285                                                 $r->ip($new);
286                                                 dbg("ROUTE $self->{call}: ALTER IP node: $pc->[7] user: $pc->[6] old IP: '$old'-> new IP: '$new'") if isdbg('pc11');
287                                         } else{
288                                                 $r->ip($new);
289                                                 dbg("ROUTE $self->{call}: NEW IP node: $pc->[7] user: $pc->[6] IP: '$new'") if isdbg('pc11');
290                                         }
291                                 }
292                         } else {
293                                 dbg("ROUTE $self->{call}: ADD Failed for node $pc->[7] user $pc->[6]") if isdbg('pc11');
294                         }
295                 } else {
296                         dbg("PCPROT: ROUTE $self->{call} NO IP ADDRESS in '$line'!");
297                 }
298         }
299
300         # this is where we decide to delay PC11s in the hope that a PC61 will be along soon.
301         my $key = join '|', @spot[0..2,4,7]; # not including text
302
303         unless ($recurse) {
304
305                 if ($pcno == 61) {
306
307                         if ($pc11_saved{$key}) {
308                                 # before we promote  because it's a better pc61, check that it's not a dupe (but don't insert it).
309                                 if (Spot::dup_find(@spot[0..4,7])) {
310                                         dbg("PCPROT: Duplicate Spot  $self->{call}: $pc->[0] $key ignored\n") if isdbg('chanerr') || isdbg('dupespot') || isdbg('pc11');
311                                         delete $pc11_saved{$key};
312                                         return;
313                                 }
314
315                                 ++$pc11_to_61;
316
317                                 my $percent = $pc11_rx ? $pc11_to_61 * 100 / $pc11_rx : 0;
318                                 dbg(sprintf("PROMOTED $self->{call}: BETTER $pc->[0] $key, using pc61, WAITING pc11 DUMPED: $pc61_rx pc11: $pc11_rx better pc61: $pc11_to_61 (%0.1f%%)", $percent)) if isdbg("pc11");
319
320                                 delete $pc11_saved{$key}; # because we have promoted it, no longer needed.
321
322                                 # so unlike the promotion by route, there is a stored, but uncounted PC11
323                                 # which have discarded. But we have chosed to use better PC61 that's just come in
324                                 # so we allow the PC61 to be counted later, but count the now discarded PC11
325                                 # because it *did* come in.
326                                 ++$pc11_rx;
327                         } 
328                 }
329
330                 if ($pcno == 11) {
331
332                         # if this fires then we have already had one or more PC11s but no PC61 for this spot
333                         if ($pc11_saved{$key}) {
334                                 dbg("DUPE $self->{call} $pc->[0] key: $key is saved, ignored") if isdbg("pc11");
335                                 return;         # because it's a dup
336                         }
337
338                         # before we promote by route, check that it's not been preceded by a previous PC61
339                         if (Spot::dup_find(@spot[0..4,7])) {
340                                 my $s = exists $pc11_saved{$key} ? " stored $key removed" : "";
341                                 dbg("PCPROT: Duplicate Spot $self->{call}: PC11$s, recurse: $recurse, ignored\n") if isdbg('chanerr') || isdbg('dupespot') || isdbg('pc11');
342                                 delete $pc11_saved{$key};
343                                 return;
344                         }
345
346
347                         # If we have an ip address we can promote by route
348                         if ($r && $r->ip) {
349                                 $pcno = 61;
350                                 $pc->[0] = 'PC61';
351                                 my $hops = $pc->[8];
352                                 $pc->[8] = $spot[14] = $r->ip;
353                                 ++$rpc11_to_61;
354                                 my $percent = $pc11_rx ? $rpc11_to_61 * 100 / $pc11_rx : 0;
355                                 dbg(sprintf("PROMOTED $self->{call}: ROUTE pc11 $key PROMOTED to pc61 with IP $spot[14] pc61: $pc61_rx pc11: $pc11_rx route->pc61 $rpc11_to_61 (%0.1f%%)", $percent)) if isdbg("pc11");
356                                 $line = join '^', @$pc, $hops, '~';
357
358                                 # update the stats (NOTE, thie record was a PC11, it has now become a PC61
359                                 # this is NOT the same choosing a better PC61, that is a separate record. 
360                                 ++$pc11_rx;             # 'cos we received as a PC11 it and it won't be a pc11 anymore 
361                                 --$pc61_rx;             # 'cos we'll increment it later as it's now a pc61, no double counting
362                                 
363 #                               dbg("CHANGED saved key: $key PC11 line to $line") if isdbg('pc11');
364                                 delete $pc11_saved{$key};
365                         }
366
367                         # if it is STILL (despite all efforts to change it) a PC11
368                         # save it and wait - it will be called from pc11_process
369                         if ($pcno == 11) {
370                                 $pc11_saved{$key} = [$main::systime, $self, $pcno, $line, $origin, $pc];
371                                 dbg("WAITING $self->{call}: NEW $pc->[0] spot $key waiting for a better offer") if isdbg("pc11");
372                                 return;
373                         }
374                 }
375         }
376         
377         # this goes after the input filtering, but before the add
378         # so that if it is input filtered, it isn't added to the dup
379         # list. This allows it to come in from a "legitimate" source
380         #
381         ## NOTE: this is where we insert the spot into the DXDupe cache
382         #
383         if (Spot::dup(@spot[0..4,7])) {
384                 dbg("PCPROT: Duplicate Spot  $self->{call}: $pc->[0] $key ignored\n") if isdbg('chanerr') || isdbg('dupespot') || isdbg('pc11');
385                 return;
386         }
387
388         dbg("PROCESSING $self->{call}: $pc->[0] key: $key") if isdbg('pc11');
389         
390         if ($pcno == 11) {
391                 ++$pc11_rx;
392         } else {
393                 ++$pc61_rx;
394         }
395
396         # we check IP addresses for PC61 - this will also dedupe PC11 promotions
397         if (@$pc > 8 && is_ipaddr($pc->[8])) {
398                 my $ip = $pc->[8];
399                 $ip =~ s/,/:/g;
400                 $ip =~ s/^::ffff://;
401                 if (DXCIDR::find($ip)) {
402                         dbg($line) if isdbg('nologchan');
403                         dbg("PCPROT: PC61 $ip in badip list, dropped");
404                         return;
405                 }
406         }
407         
408         # here we verify the spotter is currently connected to the node it says it is one. AKA email sender verify
409         # but without the explicit probe to the node. We are relying on "historical" information, but it very likely
410         # to be current once we have seen the first PC92C from that node.
411         #
412         # As for spots generated from non-PC92 nodes, we'll see after about  do_pc9x3h20m...
413         #
414         if ($senderverify) {
415                 my $nroute = Route::Node::get($pc->[7]);
416                 my $uroute = Route::Node::get($pc->[6]);
417                 my $local = DXChannel::get($pc->[7]);
418                 
419                 if ($nroute && ($nroute->last_PC92C || ($local && !$local->do_pc9x))) {
420                         my $s = '';
421                         my $ip = $pcno == 61 ?  $pc->[8] : '';
422 #                       $s .= "User $pc->[6] not logged in, " unless $uroute;
423                         $s .= "User $pc->[6] not on node $pc->[7], " unless $nroute->is_user($pc->[6]);
424 #                       $s .= "Node $pc->[7] at '$ip' not on Node's IP " . $nroute->ip if $ip && $nroute && $nroute->ip && $nroute->ip ne $ip;
425                         if ($s) {
426                                 my $action = $senderverify > 1 ? ", DUMPED" : '';
427                                 $s =~ s/, $//;
428                                 dbg("PCPROT: Suspicious Spot $pc->[2] on $pc->[1] by $pc->[6]($ip)\@$pc->[7] $s$action");
429                                 return unless $senderverify < 2;
430                         }
431                 }
432         }
433
434         # we until here to do any censorship to try and reduce the amount of noise that repeated copies
435         # from other connected nodes cause
436         if ($censorpc) {
437                 my @bad;
438                 if (@bad = BadWords::check($pc->[5])) {
439                         my $bw = join ', ', @bad;
440                         dbg($line) if isdbg('nologchan');
441                         dbg("PCPROT: Badwords: '$bw', dropped");
442                         return;
443                 }
444         }
445
446         
447         # add it
448         Spot::add(@spot);
449
450         my $ip = '';
451         $ip ||= $spot[14] if exists $spot[14];
452         if (isdbg('progress')) {
453                 my $sip = $ip ? sprintf "($ip)" : '' unless $ip =~ m|[\(\)\*]|;
454                 $sip ||= '';
455                 my $d = ztime($spot[2]);
456                 my $s = "SPOT: $spot[1] on $spot[0] \@ $d by $spot[4]$sip\@$spot[7]";
457                 $s .= $spot[3] ? " '$spot[3]'" : q{ ''};
458                 $s .=  " route: $origin";
459                 dbg($s);
460         }
461         
462         #
463         # @spot at this point contains:-
464         # freq, spotted call, time, text, spotter, spotted cc, spotters cc, orig node
465         # then  spotted itu, spotted cq, spotters itu, spotters cq
466         # you should be able to route on any of these
467         #
468
469         # fix up qra locators of known users
470         my $user = DXUser::get_current($spot[4]);
471         if ($user) {
472                 my $qra = $user->qra;
473                 unless ($qra && is_qra($qra)) {
474                         my $lat = $user->lat;
475                         my $long = $user->long;
476                         if (defined $lat && defined $long) {
477                                 $user->qra(DXBearing::lltoqra($lat, $long));
478                                 $user->put;
479                         }
480                 }
481
482                 # send a remote command to a distant cluster if it is visible and there is no
483                 # qra locator and we havn't done it for a month.
484
485                 unless ($user->qra) {
486                         my $node;
487                         my $to = $user->homenode;
488                         my $last = $user->lastoper || 0;
489                         if ($send_opernam && $to && $to ne $main::mycall && $main::systime > $last + $DXUser::lastoperinterval && ($node = Route::Node::get($to)) ) {
490                                 my $cmd = "forward/opernam $spot[4]";
491                                 # send the rcmd but we aren't interested in the replies...
492                                 my $dxchan = $node->dxchan;
493                                 if ($dxchan && $dxchan->is_clx) {
494                                         route(undef, $to, pc84($main::mycall, $to, $main::mycall, $cmd));
495                                 } else {
496                                         route(undef, $to, pc34($main::mycall, $to, $cmd));
497                                 }
498                                 if ($to ne $origin) {
499                                         $to = $origin;
500                                         $node = Route::Node::get($to);
501                                         if ($node) {
502                                                 $dxchan = $node->dxchan;
503                                                 if ($dxchan && $dxchan->is_clx) {
504                                                         route(undef, $to, pc84($main::mycall, $to, $main::mycall, $cmd));
505                                                 } else {
506                                                         route(undef, $to, pc34($main::mycall, $to, $cmd));
507                                                 }
508                                         }
509                                 }
510                                 $user->lastoper($main::systime);
511                                 $user->put;
512                         }
513                 }
514         }
515
516         # local processing
517         if (defined &Local::spot) {
518                 my $r;
519                 eval {
520                         $r = Local::spot($self, @spot);
521                 };
522                 return if $r;
523         }
524
525         # DON'T be silly and send on PC26s!
526         return if $pcno == 26;
527
528         # send out the filtered spots
529         send_dx_spot($self, $line, @spot) if @spot;
530
531         # cancel any recursion as we have now processed it
532         my $count =  $pc11_to_61+$rpc11_to_61;
533         my $percent = ($pc11_rx + $pc61_rx) ? ($pc11_rx * 100) / ($pc11_rx + $pc61_rx) : 0;
534         my $pc11_61 = $pc11_rx ? ($count * 100) / $pc11_rx : 0;
535         my $data = "$pc->[0] key: $key";
536         my $stats = sprintf "pc11: $pc11_rx pc61: $pc61_rx pc11%%: %0.1f%% pc11->pc61: $count(%0.1f%%)", $percent, $pc11_61;
537         if ($recurse) {
538                 if ($pc11_saved{$key}) {
539                         dbg("END $self->{call}: RECURSED $data removed and finished $stats") if isdbg('pc11');
540                         delete $pc11_saved{$key};
541                 } else {
542                         dbg("END $self->{call}: RECURSED NO KEY finished $stats") if isdbg('pc11'); 
543                 }
544                 $recurse = 0;
545         } else {
546                 dbg("END $self->{call}: NORMAL $data finished $stats") if isdbg('pc11');
547         }
548 }
549
550 # used to kick outstanding PC11 if required
551 sub pc11_process
552 {
553         foreach my $key (keys %pc11_saved) {
554                 my $r = $pc11_saved{$key};
555                 if ($main::systime > $r->[0] + $pc11_dwell_time) {
556                         dbg("---") if isdbg("pc11");
557                         dbg("RECURSE $r->[1]->{call}: PC11 spot $key timed out waiting, resend") if isdbg("pc11");
558                         my $self = $r->[1];
559                         delete $pc11_saved{$key};
560                         $self->handle_11(@$r[2..5], 1);
561                 }
562         }
563 }
564
565 # return the pc11 / pc61 / promotions data
566 sub get_pc11_61_stats
567 {
568         my $promotions =  $pc11_to_61+$rpc11_to_61;
569         my $percent = ($pc11_rx + $pc61_rx) ? ($pc11_rx * 100) / ($pc11_rx + $pc61_rx) : 0;
570         my $pc11_61p = $pc11_rx ? ($promotions * 100) / $pc11_rx : 0;
571         return {
572                         pc11_rx => $pc11_rx+0,
573                         pc61_rx => $pc61_rx+0,
574                         pc11_to_61 => $pc11_to_61+0,
575                         rpc11_to_61 => $rpc11_to_61+0,
576                         promotions => $promotions+0,
577                         pc11_percent => $percent+0,
578                         promotions_percent => $pc11_61p+0,
579                    };
580 }
581
582 # announces
583 sub handle_12
584 {
585         my $self = shift;
586         my $pcno = shift;
587         my $line = shift;
588         my $origin = shift;
589         my $pc = shift;
590
591         # announce duplicate checking
592         $pc->[3] =~ s/^\s+//;                   # remove leading blanks
593
594         # if this is a 'nodx' node then ignore it
595         if ($badnode->in($pc->[5])) {
596                 dbg($line) if isdbg('nologchan');
597                 dbg("PCPROT: Bad Node, dropped");
598                 return;
599         }
600
601         # if this is a 'bad spotter' user then ignore it
602         my $nossid = $pc->[1];
603         $nossid =~ s/-\d+$//;
604         if ($badspotter->in($nossid)) {
605                 dbg($line) if isdbg('nologchan');
606                 dbg("PCPROT: Bad Spotter, dropped");
607                 return;
608         }
609
610         # ignore PC12s from origins that use PCxx protocol
611         my $oref = Route::get($origin);
612         if ($oref->do_pc9x) {
613                 dbg("PCPROT: PC12 rxed from PC9x node, ignored") if isdbg('chanerr');
614                 return;
615         }
616
617         if ($censorpc) {
618                 my @bad;
619                 if (@bad = BadWords::check($pc->[3])) {
620                         my $bw = join ', ', @bad;
621                         dbg($line) if isdbg('nologchan');
622                         dbg("PCPROT: Badwords: '$bw', dropped");
623                         return;
624                 }
625         }
626
627
628         my $dxchan;
629
630         if ((($dxchan = DXChannel::get($pc->[2])) && $dxchan->is_user) || $pc->[4] =~ /^[\#\w.]+$/){
631                 $self->send_chat(0, $line, @$pc[1..6]);
632         } elsif ($pc->[2] eq '*' || $pc->[2] eq $main::mycall) {
633
634                 # ignore something that looks like a chat line coming in with sysop
635                 # flag - this is a kludge...
636                 if ($pc->[3] =~ /^\#\d+ / && $pc->[4] eq '*') {
637                         dbg('PCPROT: Probable chat rewrite, dropped') if isdbg('chanerr');
638                         return;
639                 }
640
641                 # here's a bit of fun, convert incoming ann with a callsign in the first word
642                 # or one saying 'to <call>' to a talk if we can route to the recipient
643                 if ($ann_to_talk) {
644                         my $call = AnnTalk::is_talk_candidate($pc->[1], $pc->[3]);
645                         if ($call) {
646                                 my $ref = Route::get($call);
647                                 if ($ref) {
648                                         $dxchan = $ref->dxchan;
649                                         $dxchan->talk($pc->[1], $call, undef, $pc->[3], $pc->[5]) if $dxchan != $self;
650                                         return;
651                                 }
652                         }
653                 }
654
655                 # send it
656                 $self->send_announce(0, $line, @$pc[1..6]);
657         } else {
658                 $self->route($pc->[2], $line);
659         }
660
661         # local processing
662         if (defined &Local::ann) {
663                 my $r;
664                 eval {
665                         $r = Local::ann($self, $line, @$pc[1..6]);
666                 };
667                 return if $r;
668         }
669 }
670
671 sub handle_15
672 {
673         my $self = shift;
674         my $pcno = shift;
675         my $line = shift;
676         my $origin = shift;
677         my $pc = shift;
678
679         if (eph_dup($line, $eph_pc15_restime)) {
680                 return;
681         } else {
682                 unless ($self->{isolate}) {
683                         DXChannel::broadcast_nodes($line, $self) if $line =~ /\^H\d+\^?~?$/; # send it to everyone but me
684                 }
685         }
686 }
687
688 # incoming user
689 sub handle_16
690 {
691         my $self = shift;
692         my $pcno = shift;
693         my $line = shift;
694         my $origin = shift;
695         my $pc = shift;
696
697         # general checks
698         my $dxchan;
699         my $ncall = $pc->[1];
700         my $newline = "PC16^";
701
702         # dos I want users from this channel?
703         unless ($self->user->wantpc16) {
704                 dbg("PCPROT: don't send users to $self->{call}") if isdbg('chanerr');
705                 return;
706         }
707
708         # is it me?
709         if ($ncall eq $main::mycall) {
710                 dbg("PCPROT: trying to alter config on this node from outside!") if isdbg('chanerr');
711                 return;
712         }
713
714         my $h;
715         $h = 1 if DXChannel::get($ncall);
716         if ($h && $self->{call} ne $ncall) {
717                 dbg("PCPROT: trying to update a local node, ignored") if isdbg('chanerr');
718                 return;
719         }
720
721         if (eph_dup($line)) {
722                 return;
723         }
724
725         # isolate now means only accept stuff from this call only
726         if ($self->{isolate} && $ncall ne $self->{call}) {
727                 dbg("PCPROT: $self->{call} isolated, $ncall ignored") if isdbg('chanerr');
728                 return;
729         }
730
731         my $parent = Route::Node::get($ncall);
732
733         if ($parent) {
734                 $dxchan = $parent->dxchan;
735                 if ($dxchan && $dxchan ne $self) {
736                         dbg("PCPROT: PC16 from $self->{call} trying to alter locally connected $ncall, ignored!") if isdbg('chanerr');
737                         return;
738                 }
739
740                 # input filter if required
741                 return unless $self->in_filter_route($parent);
742         } else {
743                 $parent = Route::Node->new($ncall);
744         }
745
746         unless ($h) {
747                 if ($parent->via_pc92) {
748                         dbg("PCPROT: non-local node controlled by PC92, ignored") if isdbg('chanerr');
749                         return;
750                 }
751         }
752
753         my $i;
754         my @rout;
755         for ($i = 2; $i < $#$pc; $i++) {
756                 my ($call, $conf, $here) = $pc->[$i] =~ /^(\S+) (\S) (\d)/o;
757                 next unless $call && $conf && defined $here && is_callsign($call);
758                 next if $call eq $main::mycall;
759
760                 eph_del_regex("^PC17\\^$call\\^$ncall");
761
762                 $conf = $conf eq '*';
763
764                 # reject this if we think it is a node already
765                 my $r = Route::Node::get($call);
766                 my $u = DXUser::get_current($call) unless $r;
767                 if ($r || ($u && $u->is_node)) {
768                         dbg("PCPROT: $call is a node") if isdbg('chanerr');
769                         next;
770                 }
771
772                 $r = Route::User::get($call);
773                 my $flags = Route::here($here)|Route::conf($conf);
774
775                 if ($r) {
776                         my $au = $r->addparent($parent);
777                         if ($r->flags != $flags) {
778                                 $r->flags($flags);
779                                 $au = $r;
780                         }
781                         push @rout, $r if $h && $au;
782                 } else {
783                         my @ans = $parent->add_user($call, $flags);
784                         push @rout, @ans if $h && @ans;
785                 }
786
787                 # add this station to the user database, if required
788                 my $user = DXUser::get_current($ncall);
789                 $user = DXUser->new($call) unless $user;
790                 $user->homenode($parent->call) if !$user->homenode;
791                 $user->node($parent->call);
792                 $user->lastin($main::systime) unless DXChannel::get($call);
793                 $user->put;
794
795                 # send info to all logged in thingies
796                 $self->tell_login('loginu', "$ncall: $call") if $user->is_local_node;
797                 $self->tell_buddies('loginb', $call, $ncall);
798         }
799         if (@rout) {
800                 $self->route_pc16($origin, $line, $parent, @rout) if @rout;
801 #               $self->route_pc92a($main::mycall, undef, $parent, @rout) if $h && $self->{state} eq 'normal';
802         }
803 }
804
805 # remove a user
806 sub handle_17
807 {
808         my $self = shift;
809         my $pcno = shift;
810         my $line = shift;
811         my $origin = shift;
812         my $pc = shift;
813
814         my $dxchan;
815         my $ncall = $pc->[2];
816         my $ucall = $pc->[1];
817
818         eph_del_regex("^PC16\\^$ncall.*$ucall");
819
820         # do I want users from this channel?
821         unless ($self->user->wantpc16) {
822                 dbg("PCPROT: don't send users to $self->{call}") if isdbg('chanerr');
823                 return;
824         }
825
826         if ($ncall eq $main::mycall) {
827                 dbg("PCPROT: trying to alter config on this node from outside!") if isdbg('chanerr');
828                 return;
829         }
830
831         # isolate now means only accept stuff from this call only
832         if ($self->{isolate} && $ncall ne $self->{call}) {
833                 dbg("PCPROT: $self->{call} isolated, $ncall ignored") if isdbg('chanerr');
834                 return;
835         }
836
837         my $uref = Route::User::get($ucall);
838         unless ($uref) {
839                 dbg("PCPROT: Route::User $ucall not in config") if isdbg('chanerr');
840                 return;
841         }
842         my $parent = Route::Node::get($ncall);
843         unless ($parent) {
844                 dbg("PCPROT: Route::Node $ncall not in config") if isdbg('chanerr');
845                 return;
846         }
847
848         $dxchan = DXChannel::get($ncall);
849         if ($dxchan && $dxchan ne $self) {
850                 dbg("PCPROT: PC17 from $self->{call} trying to alter locally connected $ncall, ignored!") if isdbg('chanerr');
851                 return;
852         }
853
854         unless ($dxchan) {
855                 if ($parent->via_pc92) {
856                         dbg("PCPROT: non-local node controlled by PC92, ignored") if isdbg('chanerr');
857                         return;
858                 }
859         }
860
861         if (DXChannel::get($ucall)) {
862                 dbg("PCPROT: trying do disconnect local user, ignored") if isdbg('chanerr');
863                 return;
864         }
865
866         # input filter if required and then remove user if present
867 #               return unless $self->in_filter_route($parent);
868         $parent->del_user($uref);
869
870         # send info to all logged in thingies
871         my $user = DXUser::get_current($ncall);
872         $self->tell_login('logoutu', "$ncall: $ucall") if $user && $user->is_local_node;
873         $self->tell_buddies('logoutb', $ucall, $ncall);
874
875         if (eph_dup($line)) {
876                 return;
877         }
878
879         $self->route_pc17($origin, $line, $parent, $uref);
880 #       $self->route_pc92d($main::mycall, undef, $parent, $uref) if $dxchan;
881 }
882
883 # link request
884 sub handle_18
885 {
886         my $self = shift;
887         my $pcno = shift;
888         my $line = shift;
889         my $origin = shift;
890         my $pc = shift;
891
892         $self->state('init');
893
894         my $parent = Route::Node::get($self->{call});
895         
896         # record the type and version offered
897         if (my ($software, $version) = $pc->[1] =~ /(DXSpider|CC\s*Cluster)\s+Version: (\d+(?:\.\d+)?)/i) {
898                 $version += 0;
899                 $version += 53 if $version < 6;
900                 $self->{version} = $version;
901                 $self->user->version($version);
902                 $parent->version($version);
903                 my ($build) = $pc->[1] =~ /Build: (\d+(?:\.\d+)?)/;
904                 $build += 0;
905                 $build = 0 unless $build > 1;
906                 $self->{build} = $build;
907                 $self->user->build($build);
908                 $parent->build($build);
909                 dbg("$self->{call} = $software version $version build $build");
910                 unless ($self->is_spider) {
911                         dbg("Change U " . $self->user->sort . " C $self->{sort} -> S");
912                         $self->user->sort('S');
913                         $self->user->put;
914                         $self->sort('S');
915                 }
916 #               $self->{handle_xml}++ if DXXml::available() && $pc->[1] =~ /\bxml/;
917         } elsif (my ($software, $version, $build) = $pc->[1] =~ /(AR-Cluster)\s+Version:\s+(\d+\.\d+).?(\d+\.\d+)?/) {
918                 dbg("$self->{call} = $software version $version build $build");
919                 $self->{version} = $version;
920                 $self->user->version($version);
921                 $parent->version($version);
922                 $self->{build} = $build;
923                 $self->user->build($build);
924                 $parent->build($build);
925                 unless ($self->is_arcluster) {
926                         dbg("Change U " . $self->user->sort . " C $self->{sort} -> R");
927                         $self->user->sort('R');
928                         $self->user->put;
929                         $self->sort('R');
930                 }
931         } else {
932                 dbg("$self->{call} = Unknown software ($pc->[1] $pc->[2])");
933                 $self->version(50.0);
934                 $self->version($pc->[2] / 100) if $pc->[2] && $pc->[2] =~ /^\d+$/;
935                 $self->user->version($self->version);
936         }
937
938         if ($pc->[1] =~ /CC\s*Cluster/i || $pc->[1] =~ /\bpc9x/i) {
939                 if ($self->{isolate}) {
940                         dbg("$self->{call} pc9x recognised, but node is isolated, using old protocol");
941                 } elsif (!$self->user->wantpc9x) {
942                         dbg("$self->{call} pc9x explicitly switched off, using old protocol");
943                 } else {
944                         $self->{do_pc9x} = 1;
945                         dbg("$self->{call} Set do PC9x");
946                 }
947         }
948
949         # first clear out any nodes on this dxchannel
950         my @rout = $parent->del_nodes;
951         $self->route_pc21($origin, $line, @rout, $parent) if @rout;
952         $self->send_local_config();
953         $self->send(pc20());
954 }
955
956 sub check_add_user
957 {
958         my $call = shift;
959         my $type = shift;
960         my $homenode = shift;
961
962         # add this station to the user database, if required (don't remove SSID from nodes)
963         my $user = DXUser::get_current($call);
964         unless ($user) {
965                 $user = DXUser->new($call);
966                 $user->sort($type || 'U');
967                 if ($user->is_node) {
968                         $user->priv(1);         # I have relented and defaulted nodes
969                         $user->lockout(1) if $user->is_node;
970                 } else {
971                         $user->homenode($homenode) if $homenode;
972                         $user->node($homenode);
973                         $user->priv(0);
974                 }
975                 $user->lastin($main::systime); # this make it last longer than just this invocation
976                 $user->put;                             # just to make sure it gets written away!!!
977                 dbg("DXProt: PC92 new user record for $call created");
978         }
979
980         # this is to fix a problem I introduced some build ago by using this function for users
981         # whereas it was only being used for nodes.
982         if ($user->is_user && $user->lockout && ($user->priv // 0) == 1) {
983                 $user->priv(0);
984                 $user->lockout(0);
985                 dbg("DXProt: PC92 user record for $call depriv'd and unlocked");
986                 $user->put;
987         }
988         return $user;
989 }
990
991 # incoming cluster list
992 sub handle_19
993 {
994         my $self = shift;
995         my $pcno = shift;
996         my $line = shift;
997         my $origin = shift;
998         my $pc = shift;
999
1000         my $i;
1001         my $newline = "PC19^";
1002
1003         # new routing list
1004         my (@rout, @pc92out);
1005
1006         # first get the INTERFACE node
1007         my $parent = Route::Node::get($self->{call});
1008         unless ($parent) {
1009                 dbg("PCPROT: my parent $self->{call} has disappeared");
1010                 $self->disconnect;
1011                 return;
1012         }
1013
1014         my $h;
1015
1016         # parse the PC19
1017         #
1018         # We are making a major change from now on. We are only going to accept
1019         # PC19s from directly connected nodes.  This means that we are probably
1020         # going to throw away most of the data that we are being sent.
1021         #
1022         # The justification for this is that most of it is wrong or out of date
1023         # anyway.
1024         #
1025         # From now on we are only going to believe PC92 data and locally connected
1026         # non-pc92 nodes.
1027         #
1028         for ($i = 1; $i < $#$pc-1; $i += 4) {
1029                 my $here = $pc->[$i];
1030                 my $call = uc $pc->[$i+1];
1031                 my $conf = $pc->[$i+2];
1032                 my $ver = $pc->[$i+3];
1033                 next unless defined $here && defined $conf && is_callsign($call);
1034
1035                 eph_del_regex("^PC(?:21\\^$call|17\\^[^\\^]+\\^$call)");
1036
1037                 # check for sane parameters
1038                 #                               $ver = 5000 if $ver eq '0000';
1039                 next unless $ver && $ver =~ /^\d+$/;
1040                 next if $ver < 5000;    # only works with version 5 software
1041                 next if length $call < 3; # min 3 letter callsigns
1042                 next if $call eq $main::mycall || $call eq $main::myalias;
1043
1044                 # check that this PC19 isn't trying to alter the wrong dxchan
1045                 $h = 0;
1046                 my $dxchan = DXChannel::get($call);
1047                 if ($dxchan) {
1048                         if ($dxchan == $self) {
1049                                 $h = 1;
1050                         } else {
1051                                 dbg("PCPROT: PC19 from $self->{call} trying to alter wrong locally connected $call, ignored!") if isdbg('chanerr');
1052                                 next;
1053                         }
1054                 }
1055
1056                 # isolate now means only accept stuff from this call only
1057                 if ($self->{isolate} && $call ne $self->{call}) {
1058                         dbg("PCPROT: $self->{call} isolated, $call ignored") if isdbg('chanerr');
1059                         next;
1060                 }
1061
1062                 my $user = check_add_user($call, 'A');
1063
1064 #               if (eph_dup($genline)) {
1065 #                       dbg("PCPROT: dup PC19 for $call detected") if isdbg('chanerr');
1066 #                       next;
1067 #               }
1068
1069
1070                 unless ($h) {
1071                         if ($parent->via_pc92) {
1072                                 dbg("PCPROT: non-local node controlled by PC92, ignored") if isdbg('chanerr');
1073                                 next;
1074                         }
1075                 }
1076
1077                 my $r = Route::Node::get($call);
1078                 my $flags = Route::here($here)|Route::conf($conf);
1079
1080                 # modify the routing table if it is in it, otherwise store it in the pc19list for now
1081                 if ($r) {
1082                         my $ar;
1083                         if ($call ne $parent->call) {
1084                                 if ($self->in_filter_route($r)) {
1085                                         $ar = $parent->add($call, $ver, $flags);
1086 #                                       push @rout, $ar if $ar;
1087                                 } else {
1088                                         next;
1089                                 }
1090                         }
1091                         if ($r->version ne $ver || $r->flags != $flags) {
1092                                 $r->version($ver);
1093                                 $r->flags($flags);
1094                         }
1095                         push @rout, $r;
1096                 } else {
1097                         if ($call eq $self->{call} || $user->wantroutepc19) {
1098                                 my $new = Route->new($call); # throw away
1099                                 if ($self->in_filter_route($new)) {
1100                                         my $ar = $parent->add($call, $ver, $flags);
1101                                         $user->wantroutepc19(1) unless defined $user->wantroutepc19;
1102                                         push @rout, $ar if $ar;
1103                                         push @pc92out, $r if $h;
1104                                 } else {
1105                                         next;
1106                                 }
1107                         }
1108                 }
1109
1110                 # unbusy and stop and outgoing mail (ie if somehow we receive another PC19 without a disconnect)
1111                 my $mref = DXMsg::get_busy($call);
1112                 $mref->stop_msg($call) if $mref;
1113
1114                 $user->lastin($main::systime) unless DXChannel::get($call);
1115                 $user->put;
1116         }
1117
1118         # we are not automatically sending out PC19s, we send out a composite PC21,PC19 instead
1119         # but remember there will only be one (pair) these because any extras will be
1120         # thrown away.
1121         if (@rout) {
1122 #               $self->route_pc21($self->{call}, $line, @rout);
1123                 $self->route_pc19($self->{call}, $line, @rout);
1124         }
1125         if (@pc92out && !$pc92_slug_changes) {
1126                 $self->route_pc92a($main::mycall, $line, $main::routeroot, @pc92out) if $self->{state} eq 'normal';
1127         }
1128 }
1129
1130 # send local configuration
1131 sub handle_20
1132 {
1133         my $self = shift;
1134         my $pcno = shift;
1135         my $line = shift;
1136         my $origin = shift;
1137         my $pc = shift;
1138
1139         if ($self->{do_pc9x} && $self->{state} ne 'init92' && $self->{state} ne 'normal') {
1140                 $self->send("Reseting to oldstyle routing because login call not sent in any pc92");
1141                 $self->{do_pc9x} = 0;
1142         }
1143         $self->send_local_config;
1144         $self->send(pc22());
1145         $self->state('normal');
1146         $self->{lastping} = 0;
1147         $self->route_pc92a($main::mycall, undef, $main::routeroot, Route::Node::get($self->{call}));
1148 }
1149
1150 # delete a cluster from the list
1151 #
1152 # This should never occur for directly connected nodes.
1153 #
1154 sub handle_21
1155 {
1156         my $self = shift;
1157         my $pcno = shift;
1158         my $line = shift;
1159         my $origin = shift;
1160         my $pc = shift;
1161
1162         my $call = uc $pc->[1];
1163
1164         eph_del_regex("^PC1[679].*$call");
1165
1166         # if I get a PC21 from the same callsign as self then ignore it
1167         if ($call eq $self->{call}) {
1168                 dbg("PCPROT: self referencing PC21 from $self->{call}");
1169                 return;
1170         }
1171
1172         # for the above reason and also because of the check for PC21s coming
1173         # in for self->call from outside being ignored further down
1174         # we don't need any isolation code here, because we will never
1175         # act on a PC21 with self->call in it.
1176
1177         my $parent = Route::Node::get($self->{call});
1178         unless ($parent) {
1179                 dbg("PCPROT: my parent $self->{call} has disappeared");
1180                 $self->disconnect;
1181                 return;
1182         }
1183
1184         my @rout;
1185
1186         if ($call ne $main::mycall && $call ne $main::myalias) { # don't allow malicious buggers to disconnect me!
1187                 my $node = Route::Node::get($call);
1188                 if ($node) {
1189
1190                         if ($node->via_pc92) {
1191                                 dbg("PCPROT: controlled by PC92, ignored") if isdbg('chanerr');
1192                                 return;
1193                         }
1194
1195                         my $dxchan = DXChannel::get($call);
1196                         if ($dxchan && $dxchan != $self) {
1197                                 dbg("PCPROT: PC21 from $self->{call} trying to alter locally connected $call, ignored!") if isdbg('chan');
1198                                 return;
1199                         }
1200
1201                         # input filter it
1202                         return unless $self->in_filter_route($node);
1203
1204                         # routing objects, force a PC21 if it is local
1205                         push @rout, $node->del($parent);
1206                         push @rout, $call if $dxchan && @rout == 0;
1207                 }
1208         } else {
1209                 dbg("PCPROT: I WILL _NOT_ be disconnected!") if isdbg('chan');
1210                 return;
1211         }
1212
1213         if (eph_dup($line)) {
1214                 return;
1215         }
1216
1217         if (@rout) {
1218                 $self->route_pc21($origin, $line, @rout);
1219 #               $self->route_pc92d($main::mycall, $line, $main::routeroot, @rout);
1220         }
1221 }
1222
1223
1224 sub handle_22
1225 {
1226         my $self = shift;
1227         my $pcno = shift;
1228         my $line = shift;
1229         my $origin = shift;
1230         my $pc = shift;
1231
1232         if ($self->{do_pc9x}) {
1233                 if ($self->{state} ne 'init92' && $self->{state} ne 'normal') {
1234                         $self->send("Reseting to oldstyle routing because login call not sent in any pc92");
1235                         $self->{do_pc9x} = 0;
1236                 }
1237         }
1238         $self->{lastping} = 0;
1239         $self->state('normal');
1240         $self->route_pc92a($main::mycall, undef, $main::routeroot, Route::Node::get($self->{call}));
1241 }
1242
1243 # WWV info
1244 sub handle_23
1245 {
1246         my $self = shift;
1247         my $pcno = shift;
1248         my $line = shift;
1249         my $origin = shift;
1250         my $pc = shift;
1251
1252         # route foreign' pc27s
1253         if ($pcno == 27) {
1254                 if ($pc->[8] ne $main::mycall) {
1255                         $self->route($pc->[8], $line);
1256                         return;
1257                 }
1258         }
1259
1260
1261         # do some de-duping
1262         my $d = cltounix($pc->[1], sprintf("%02d18Z", $pc->[2]));
1263         my $sfi = unpad($pc->[3]);
1264         my $k = unpad($pc->[4]);
1265         my $i = unpad($pc->[5]);
1266         my ($r) = $pc->[6] =~ /R=(\d+)/;
1267         $r = 0 unless $r;
1268         if (($pcno == 23 && $d < $main::systime - $pc23_max_age) || $d > $main::systime + 1500 || $pc->[2] < 0 || $pc->[2] > 23) {
1269                 dbg("PCPROT: WWV Date ($pc->[1] $pc->[2]) out of range") if isdbg('chanerr');
1270                 return;
1271         }
1272
1273         # global wwv filtering on INPUT
1274         my @dxcc = ((Prefix::cty_data($pc->[7]))[0..2], (Prefix::cty_data($pc->[8]))[0..2]);
1275         if ($self->{inwwvfilter}) {
1276                 my ($filter, $hops) = $self->{inwwvfilter}->it(@$pc[7,8], $origin, @dxcc);
1277                 unless ($filter) {
1278                         dbg("PCPROT: Rejected by input wwv filter") if isdbg('chanerr');
1279                         return;
1280                 }
1281         }
1282         $pc->[7] =~ s/-\d+$//o;         # remove spotter's ssid
1283         if (Geomag::dup($d,$sfi,$k,$i,$pc->[6],$pc->[7])) {
1284                 dbg("PCPROT: Dup WWV Spot ignored\n") if isdbg('chanerr');
1285                 return;
1286         }
1287
1288         # note this only takes the first one it gets
1289         Geomag::update($d, $pc->[2], $sfi, $k, $i, @$pc[6..8], $r);
1290         dbg("WWV: <$pc->[2]>, sfi=$sfi k=$k info=$i '$pc->[6]' $pc->[7]\@$pc->[8] $r route: $origin") if isdbg('progress');
1291
1292         if (defined &Local::wwv) {
1293                 my $rep;
1294                 eval {
1295                         $rep = Local::wwv($self, $pc->[1], $pc->[2], $sfi, $k, $i, @$pc[6..8], $r);
1296                 };
1297                 return if $rep;
1298         }
1299
1300         # DON'T be silly and send on PC27s!
1301         return if $pcno == 27;
1302
1303         # broadcast to the eager world
1304         send_wwv_spot($self, $line, $d, $pc->[2], $sfi, $k, $i, @$pc[6..8]);
1305 }
1306
1307 # set here status
1308 sub handle_24
1309 {
1310         my $self = shift;
1311         my $pcno = shift;
1312         my $line = shift;
1313         my $origin = shift;
1314         my $pc = shift;
1315
1316         my $call = uc $pc->[1];
1317         my ($nref, $uref);
1318         $nref = Route::Node::get($call);
1319         $uref = Route::User::get($call);
1320         return unless $nref || $uref; # if we don't know where they are, it's pointless sending it on
1321
1322         if (eph_dup($line)) {
1323                 return;
1324         }
1325
1326         $nref->here($pc->[2]) if $nref;
1327         $uref->here($pc->[2]) if $uref;
1328         my $ref = $nref || $uref;
1329         return unless $self->in_filter_route($ref);
1330
1331         $self->route_pc24($origin, $line, $ref, $pc->[3]);
1332 }
1333
1334 # merge request
1335 sub handle_25
1336 {
1337         my $self = shift;
1338         my $pcno = shift;
1339         my $line = shift;
1340         my $origin = shift;
1341         my $pc = shift;
1342
1343         if ($pc->[1] ne $main::mycall) {
1344                 $self->route($pc->[1], $line);
1345                 return;
1346         }
1347         if ($pc->[2] eq $main::mycall) {
1348                 dbg("PCPROT: Trying to merge to myself, ignored") if isdbg('chan');
1349                 return;
1350         }
1351
1352         Log('DXProt', "Merge request for $pc->[3] spots and $pc->[4] WWV from $pc->[2]");
1353
1354         # spots
1355         if ($pc->[3] > 0) {
1356                 my @in = reverse Spot::search(1, undef, undef, 0, $pc->[3]);
1357                 my $in;
1358                 foreach $in (@in) {
1359                         $self->send(pc26(@{$in}[0..4], $pc->[2]));
1360                 }
1361         }
1362
1363         # wwv
1364         if ($pc->[4] > 0) {
1365                 my @in = reverse Geomag::search(0, $pc->[4], time, 1);
1366                 my $in;
1367                 foreach $in (@in) {
1368                         $self->send(pc27(@{$in}[0..5], $pc->[2]));
1369                 }
1370         }
1371 }
1372
1373 sub handle_26 {goto &handle_11}
1374 sub handle_27 {goto &handle_23}
1375
1376 # mail/file handling
1377 sub handle_28
1378 {
1379         my $self = shift;
1380         my $pcno = shift;
1381         my $line = shift;
1382         my $origin = shift;
1383         my $pc = shift;
1384
1385         if ($pc->[1] eq $main::mycall) {
1386                 no strict 'refs';
1387                 my $sub = "DXMsg::handle_$pcno";
1388                 &$sub($self, @$pc);
1389         } else {
1390                 $self->route($pc->[1], $line) unless $self->is_clx;
1391         }
1392 }
1393
1394 sub handle_29 {goto &handle_28}
1395 sub handle_30 {goto &handle_28}
1396 sub handle_31 {goto &handle_28}
1397 sub handle_32 {goto &handle_28}
1398 sub handle_33 {goto &handle_28}
1399
1400 sub handle_34
1401 {
1402         my $self = shift;
1403         my $pcno = shift;
1404         my $line = shift;
1405         my $origin = shift;
1406         my $pc = shift;
1407
1408         if (eph_dup($line, $eph_pc34_restime)) {
1409                 return;
1410         } else {
1411                 $self->process_rcmd($pc->[1], $pc->[2], $pc->[2], $pc->[3]);
1412         }
1413 }
1414
1415 # remote command replies
1416 sub handle_35
1417 {
1418         my $self = shift;
1419         my $pcno = shift;
1420         my $line = shift;
1421         my $origin = shift;
1422         my $pc = shift;
1423
1424         eph_del_regex("^PC35\\^$pc->[2]\\^$pc->[1]\\^");
1425         $self->process_rcmd_reply($pc->[1], $pc->[2], $pc->[1], $pc->[3]);
1426 }
1427
1428 sub handle_36 {goto &handle_34}
1429
1430 # database stuff
1431 sub handle_37
1432 {
1433         my $self = shift;
1434         my $pcno = shift;
1435         my $line = shift;
1436         my $origin = shift;
1437         my $pc = shift;
1438
1439         if ($pc->[1] eq $main::mycall) {
1440                 no strict 'refs';
1441                 my $sub = "DXDb::handle_$pcno";
1442                 &$sub($self, @$pc);
1443         } else {
1444                 $self->route($pc->[1], $line) unless $self->is_clx;
1445         }
1446 }
1447
1448 # node connected list from neighbour
1449 sub handle_38
1450 {
1451         my $self = shift;
1452         my $pcno = shift;
1453         my $line = shift;
1454         my $origin = shift;
1455         my $pc = shift;
1456 }
1457
1458 # incoming disconnect
1459 sub handle_39
1460 {
1461         my $self = shift;
1462         my $pcno = shift;
1463         my $line = shift;
1464         my $origin = shift;
1465         my $pc = shift;
1466
1467         if ($pc->[1] eq $self->{call}) {
1468                 $self->disconnect(1);
1469         } else {
1470                 dbg("PCPROT: came in on wrong channel") if isdbg('chanerr');
1471         }
1472 }
1473
1474 sub handle_40 {goto &handle_28}
1475
1476 # user info
1477 sub handle_41
1478 {
1479         my $self = shift;
1480         my $pcno = shift;
1481         my $line = shift;
1482         my $origin = shift;
1483         my $pc = shift;
1484
1485         my $call = $pc->[1];
1486         my $sort = $pc->[2];
1487         my $val = $pc->[3];
1488
1489         my $l = "PC41^$call^$sort";
1490         if (eph_dup($l, $eph_info_restime)) {
1491                 return;
1492         }
1493
1494         # input filter if required
1495         #                       my $ref = Route::get($call) || Route->new($call);
1496         #                       return unless $self->in_filter_route($ref);
1497
1498         if ($val eq $sort || $val =~ /^\s*$/) {
1499                 dbg('PCPROT: invalid value') if isdbg('chanerr');
1500                 return;
1501         }
1502
1503         if ($call eq $main::mycall || $call eq $main::myalias) {
1504                 dbg "DXPROT: PC41 trying to update $call from outside via $origin, ignored";
1505                 return;
1506         }
1507         my $chan = DXChannel::get($call);
1508         if ($chan) {
1509                 dbg "DXPROT: PC41 trying to update online $call from outside via $origin, ignored";
1510                 return;
1511         }
1512
1513         # add this station to the user database, if required
1514         my $user = DXUser::get_current($call);
1515         $user = DXUser->new($call) unless $user;
1516
1517         if ($sort == 1) {
1518                 if (($val =~ /spotter/i || $val =~ /self/i) && $user->name && $user->name ne $val) {
1519                         dbg("PCPROT: invalid name") if isdbg('chanerr');
1520                         return;
1521                 }
1522                 $user->name($val);
1523         } elsif ($sort == 2) {
1524                 $user->qth($val);
1525         } elsif ($sort == 3) {
1526                 if (is_latlong($val)) {
1527                         my ($lat, $long) = DXBearing::stoll($val);
1528                         $user->lat($lat) if $lat;
1529                         $user->long($long) if $long;
1530                         $user->qra(DXBearing::lltoqra($lat, $long)) unless $user->qra;
1531                 } else {
1532                         dbg('PCPROT: not a valid lat/long') if isdbg('chanerr');
1533                         return;
1534                 }
1535         } elsif ($sort == 4) {
1536                 $user->homenode($val);
1537         } elsif ($sort == 5) {
1538                 if (is_qra(uc $val)) {
1539                         my ($lat, $long) = DXBearing::qratoll(uc $val);
1540                         $user->lat($lat) if $lat && !$user->lat;
1541                         $user->long($long) if $long && !$user->long;
1542                         $user->qra(uc $val);
1543                 } else {
1544                         dbg('PCPROT: not a valid QRA locator') if isdbg('chanerr');
1545                         return;
1546                 }
1547         }
1548         $user->lastoper($main::systime); # to cut down on excessive for/opers being generated
1549         $user->put;
1550
1551         unless ($self->{isolate}) {
1552                 DXChannel::broadcast_nodes($line, $self); # send it to everyone but me
1553         }
1554
1555         #  perhaps this IS what we want after all
1556         #                       $self->route_pc41($ref, $call, $sort, $val, $pc->[4]);
1557 }
1558
1559 sub handle_42 {goto &handle_28}
1560
1561
1562 # database
1563 sub handle_44 {goto &handle_37}
1564 sub handle_45 {goto &handle_37}
1565 sub handle_46 {goto &handle_37}
1566 sub handle_47 {goto &handle_37}
1567 sub handle_48 {goto &handle_37}
1568
1569 # message and database
1570 sub handle_49
1571 {
1572         my $self = shift;
1573         my $pcno = shift;
1574         my $line = shift;
1575         my $origin = shift;
1576         my $pc = shift;
1577
1578         if (eph_dup($line)) {
1579                 return;
1580         }
1581
1582         if ($pc->[1] eq $main::mycall) {
1583                 DXMsg::handle_49($self, @$pc);
1584         } else {
1585                 $self->route($pc->[1], $line) unless $self->is_clx;
1586         }
1587 }
1588
1589 # keep alive/user list
1590 sub handle_50
1591 {
1592         my $self = shift;
1593         my $pcno = shift;
1594         my $line = shift;
1595         my $origin = shift;
1596         my $pc = shift;
1597
1598         return if (eph_dup($line));
1599
1600         my $call = $pc->[1];
1601
1602         my $node = Route::Node::get($call);
1603         if ($node) {
1604                 return unless $node->call eq $self->{call};
1605                 $node->usercount($pc->[2]) unless $node->users;
1606                 $node->reset_obs;
1607                 $node->PC92C_dxchan($self->call, $pc->[-1]);
1608
1609                 # input filter if required
1610 #               return unless $self->in_filter_route($node);
1611
1612                 unless ($self->{isolate}) {
1613                         DXChannel::broadcast_nodes($line, $self); # send it to everyone but me
1614                 }
1615 #               $self->route_pc50($origin, $line, $node, $pc->[2], $pc->[3]) unless eph_dup($line);
1616         }
1617 }
1618
1619 # incoming ping requests/answers
1620 sub handle_51
1621 {
1622         my $self = shift;
1623         my $pcno = shift;
1624         my $line = shift;
1625         my $origin = shift;
1626         my $pc = shift;
1627
1628         my $to = $pc->[1];
1629         my $from = $pc->[2];
1630         my $flag = $pc->[3];
1631
1632         if ($to eq $main::myalias) {
1633                 dbg("DXPROT: Ping addressed to \$myalias ($main::myalias), ignored") if isdbg('chan');
1634                 return;
1635         }
1636
1637         # is it for us?
1638         if ($to eq $main::mycall) {
1639                 if ($flag == 1) {
1640                         $self->send(pc51($from, $to, '0'));
1641                 } else {
1642                         DXXml::Ping::handle_ping_reply($self, $from);
1643                 }
1644         } else {
1645                 if (eph_dup($line)) {
1646                         return;
1647                 }
1648                 # route down an appropriate thingy
1649                 $self->route($to, $line);
1650         }
1651 }
1652
1653 sub handle_61 { goto &handle_11; }
1654
1655 # dunno but route it
1656 sub handle_75
1657 {
1658         my $self = shift;
1659         my $pcno = shift;
1660         my $line = shift;
1661         my $origin = shift;
1662         my $pc = shift;
1663
1664         my $call = $pc->[1];
1665         if ($call ne $main::mycall) {
1666                 $self->route($call, $line);
1667         }
1668 }
1669
1670 # WCY broadcasts
1671 sub handle_73
1672 {
1673         my $self = shift;
1674         my $pcno = shift;
1675         my $line = shift;
1676         my $origin = shift;
1677         my $pc = shift;
1678
1679         my $call = $pc->[1];
1680
1681         # do some de-duping
1682         my $d = cltounix($call, sprintf("%02d18Z", $pc->[2]));
1683         if (($pcno == 23 && $d < $main::systime - $pc23_max_age) || $d > $main::systime + 1500 || $pc->[2] < 0 || $pc->[2] > 23) {
1684                 dbg("PCPROT: WCY Date ($call $pc->[2]) out of range") if isdbg('chanerr');
1685                 return;
1686         }
1687         $pc = [ map { unpad($_) } @$pc ];
1688         if (WCY::dup($d)) {
1689                 dbg("PCPROT: Dup WCY Spot ignored\n") if isdbg('chanerr');
1690                 return;
1691         }
1692
1693         my $wcy = WCY::update($d, @$pc[2..12]);
1694         dbg("WCY: <$pc->[2]> K=$pc->[5] expK=$pc->[6] A=$pc->[4] R=$pc->[7] SFI=$pc->[3] SA=$pc->[8] GMF=$pc->[9] Au=$pc->[10] $pc->[11]\@$pc->[12] route: $origin") if isdbg('progress');
1695
1696         if (defined &Local::wcy) {
1697                 my $rep;
1698                 eval {
1699                         $rep = Local::wcy($self, @$pc[1..12]);
1700                 };
1701                 return if $rep;
1702         }
1703
1704         # broadcast to the eager world
1705         send_wcy_spot($self, $line, $d, @$pc[2..12]);
1706 }
1707
1708 # remote commands (incoming)
1709 sub handle_84
1710 {
1711         my $self = shift;
1712         my $pcno = shift;
1713         my $line = shift;
1714         my $origin = shift;
1715         my $pc = shift;
1716
1717         $self->process_rcmd($pc->[1], $pc->[2], $pc->[3], $pc->[4]);
1718 }
1719
1720 # remote command replies
1721 sub handle_85
1722 {
1723         my $self = shift;
1724         my $pcno = shift;
1725         my $line = shift;
1726         my $origin = shift;
1727         my $pc = shift;
1728
1729         $self->process_rcmd_reply($pc->[1], $pc->[2], $pc->[3], $pc->[4]);
1730 }
1731
1732 # decode a pc92 call: flag call : version : build
1733 sub _decode_pc92_call
1734 {
1735         my $icall = shift;
1736         my @part = split /:/, $icall;
1737         my ($flag, $call) = unpack "A A*", $part[0];
1738         unless (defined $flag && $flag ge '0' && $flag le '7') {
1739                 dbg("PCPROT: $icall no flag byte (0-7) at front of call, ignored") if isdbg('chanerr');
1740                 return ();
1741         }
1742         unless ($call && is_callsign($call)) {
1743                 dbg("PCPROT: $icall no recognisable callsign, ignored") if isdbg('chanerr');
1744                 return ();
1745         }
1746         my $is_node = $flag & 4;
1747         my $is_extnode = $flag & 2;
1748         my $here = $flag & 1;
1749         my $version = $part[1] || 0;
1750         my $build = $part[2] || 0;
1751         my $ip = $part[3] || '';
1752
1753         # remember that, at this stage, IPV6 addresses have : replaced by ,
1754         if (length $version > 4 && $version =~ /[,\.][\da-f]{1,4}/i) {
1755                 $ip = $version;
1756                 $version = 0;
1757         }
1758         $version =~ s/\D//g;
1759         $version = 0 unless $version && $version =~ /^[0-9]+$/;
1760         $build =~ s/^0\.//;
1761         $build =~ s/\D//g;
1762         $build = 0 unless $build &&  $build =~ /^[0-9]+$/;
1763         if ($ip) {
1764         $ip =~ s/,/:/g;
1765         $ip =~ s/^::ffff://i;
1766                 $ip = '' unless is_ipaddr($ip);
1767     }
1768         dbg("'$icall' = '" . join("', '", $call, $is_node, $is_extnode, $here, $version, $build, $ip) . "'") if isdbg('pc92');
1769         return ($call, $is_node, $is_extnode, $here, $version+0, $build+0, $ip);
1770 }
1771
1772 # decode a pc92 call: flag call : version : build
1773 sub _encode_pc92_call
1774 {
1775         my $ref = shift;
1776
1777         # plain call or value
1778         return $ref unless ref $ref;
1779
1780         my $ext = shift || 0;
1781         my $flag = 0;
1782         my $call = $ref->call;
1783         my $extra = '';
1784         $flag |= $ref->here ? 1 : 0;
1785         if ($ref->isa('Route::Node') || $ref->isa('DXProt')) {
1786                 $flag |= 4;
1787                 my $dxchan = DXChannel::get($call);
1788                 $flag |= 2 if $call ne $main::mycall && $dxchan && !$dxchan->{do_pc9x};
1789                 if (($ext & 1) && $ref->version) {
1790                         my $version = $ref->version || 1.0;
1791                         $version =  $version * 100 + 5300 if $version < 50;
1792                         $extra .= ":" . $version;
1793                 }
1794         }
1795         if (($ext & 2) && $ref->ip) {
1796                 my $ip = $ref->ip;
1797                 $ip =~ s/:/,/g;
1798                 $extra .= ':' . $ip;
1799         }
1800
1801         return "$flag$call$extra";
1802 }
1803
1804 my %things_add;
1805 my %things_del;
1806
1807 sub _add_thingy
1808 {
1809         my $parent = shift;
1810         my $s = shift;
1811         my $dxchan = shift;
1812         my $hops = shift;
1813
1814         my ($call, $is_node, $is_extnode, $here, $version, $build, $ip) = @$s;
1815         my @rout;
1816
1817         # remove spurious IPV6 prefix on IPV4 addresses
1818         $build ||= 0;
1819         $version ||= 0;
1820
1821         if ($call) {
1822                 my $ncall = $parent->call;
1823                 if ($ncall ne $call) {
1824                         my $user;
1825                         my $r;
1826
1827                         # normalise call, delete any unnormalised calls in the users file.
1828                         # then ignore this thingy
1829                         my $normcall = normalise_call($call);
1830                         if ($normcall ne $call) {
1831                                 next if DXChannel::get($call);
1832                                 $user = DXUser::get($call);
1833                                 dbg("DXProt::_add_thingy call $call normalised to $normcall, deleting spurious user $call");
1834                                 $user->del if $user;
1835                             $call = $normcall; # this is safe because a route add will ignore duplicates
1836                         }
1837                         
1838                         if ($is_node) {
1839                                 dbg("ROUTE: added node $call to $ncall") if isdbg('routelow');
1840                                 $user = check_add_user($call, 'A');
1841                                 @rout = $parent->add($call, $version, Route::here($here), $ip);
1842                                 $r = Route::Node::get($call);
1843                                 $r->PC92C_dxchan($dxchan->call, $hops) if $r;
1844                                 if ($version && is_numeric($version) && !$r->K && !$user->K) {
1845                                         my $old = $user->sort;
1846                                         if ($user->is_ak1a && (($version >= 5455 &&  $build > 0) || ($version >= 3000 && $version <= 3500)) ) {
1847                                                 $user->sort('S');
1848                                                 dbg("PCPROT::_add_thingy node $call v: $version b: $build sort ($old) updated to " . $user->sort);
1849                                         } elsif ($user->is_spider && ($version < 3000 || ($version > 4000 && $version < 5455))) {
1850                                                 unless ($version > 0  && $build == 0) {
1851                                                         $user->sort('A');
1852                                                         $build ||= 0;
1853                                                         dbg("PCPROT::_add_thingy node $call v: $version b: $build sort ($old) downgraded to " . $user->sort);
1854                                                 }
1855                                         }
1856                                 }
1857                                 $r->version($user->version) if $user->version;
1858                                 $r->build($user->build) if $user->build;
1859                                 $r->K(1) if $user->K;
1860                         } else {
1861                                 dbg("ROUTE: added user $call to $ncall") if isdbg('routelow');
1862                                 $user = check_add_user($call, 'U', $parent->call);
1863                                 @rout = $parent->add_user($call, Route::here($here), $ip);
1864                                 $dxchan->tell_buddies('loginb', $call, $ncall) if $dxchan;
1865                                 $r = Route::User::get($call);
1866                         }
1867                         if ($ip) {
1868                                 $r->ip($ip);
1869                                 Log('DXProt', "PC92A $call -> $ip on $ncall");
1870                         }
1871                         if ($pc92_slug_changes && $parent == $main::routeroot) {
1872                                 $things_add{$call} = Route::get($call);
1873                                 delete $things_del{$call};
1874                         }
1875                         $user->close($main::systime, $ip) if $user;             # this just updates lastseen and the connlist list containing the IP address
1876                 } else {                                
1877                         dbgprintring(10) if isdbg('nologchan');
1878                         dbg("DXProt::add_thingy: Trying to add parent $call to itself $ncall, ignored");
1879                 }
1880         }
1881         
1882         return @rout;
1883 }
1884
1885 sub _del_thingy
1886 {
1887         my $parent = shift;
1888         my $s = shift;
1889         my $dxchan = shift;
1890         my ($call, $is_node, $is_extnode, $here, $version, $build) = @$s;
1891         my @rout;
1892         if ($call) {
1893                 my $ref;
1894                 if ($is_node) {
1895                         $ref = Route::Node::get($call);
1896                         dbg("ROUTE: deleting node $call from " . $parent->call) if isdbg('routelow');
1897                         @rout = $ref->del($parent) if $ref;
1898                 } else {
1899                         dbg("ROUTE: deleting user $call from " . $parent->call) if isdbg('routelow');
1900                         $ref = Route::User::get($call);
1901                         if ($ref) {
1902                                 $dxchan->tell_buddies('logoutb', $call, $parent->call) if $dxchan;
1903                                 @rout = $parent->del_user($ref);
1904                         }
1905                 }
1906                 if ($pc92_slug_changes && $parent == $main::routeroot) {
1907                         $things_del{$call} = $ref unless exists $things_add{$call};
1908                         delete $things_add{$call};
1909                 }
1910         }
1911         return @rout;
1912 }
1913
1914 # this will only happen if we are slugging changes and
1915 # there are some changes to be sent, it will create an add or a delete
1916 # or both
1917 sub gen_pc92_changes
1918 {
1919         my @add = values %things_add;
1920         my @del = values %things_del;
1921         return (\@add, \@del);
1922 }
1923
1924 sub clear_pc92_changes
1925 {
1926         %things_add = %things_del = ();
1927         $last_pc92_slug = $main::systime;
1928 }
1929
1930 my $_last_time;
1931 my $_last_occurs;
1932 my $_last_pc9x_id;
1933
1934 sub last_pc9x_id
1935 {
1936         return $_last_pc9x_id;
1937 }
1938
1939 sub gen_pc9x_t
1940 {
1941         if (!$_last_time || $_last_time != $main::systime) {
1942                 $_last_time = $main::systime;
1943                 $_last_occurs = 0;
1944                 return $_last_pc9x_id = $_last_time - $main::systime_daystart;
1945         } else {
1946                 $_last_occurs++;
1947                 return $_last_pc9x_id = sprintf "%d.%02d", $_last_time - $main::systime_daystart, $_last_occurs;
1948         }
1949 }
1950
1951 sub check_pc9x_t
1952 {
1953         my $call = shift;
1954         my $t = shift;
1955         my $pc = shift;
1956         my $create = shift;
1957
1958         # check that the time is between 0 >= $t < 86400
1959         unless ($t >= 0 && $t < 86400) {
1960                 dbg("PCPROT: time invalid t: $t, ignored") if isdbg('chanerr');
1961                 return undef;
1962         }
1963
1964         # check that the time of this pc9x is within tolerance (default 15 mins either way)
1965         my $now = $main::systime - $main::systime_daystart ;
1966         my $diff = abs($now - $t);
1967         unless ($diff < $pc9x_time_tolerance || 86400 - $diff < $pc9x_time_tolerance) {
1968                 my $c = ref $call ? $call->call : $call;
1969                 dbg("PC9XERR: $c time out of range t: $t now: $now diff: $diff > $pc9x_time_tolerance, ignored") if isdbg('chan');
1970                 return undef;
1971         }
1972
1973         my $parent = ref $call ? $call : Route::Node::get($call);
1974         if ($parent) {
1975                 # we only do this for external calls whose routing table
1976                 # record come and go. The reference for mycall is permanent
1977                 # and not that frequently used, it also never times out, so
1978                 # the id on it is completely unreliable. Besides, only commands
1979                 # originating on this box will go through this code...
1980                 if ($parent->call ne $main::mycall) {
1981                         my $lastid = $parent->lastid;
1982                         if (defined $lastid) {
1983                                 if ($t < $lastid) {
1984                                         # note that this is where we determine whether this pc9x has come in yesterday
1985                                         # but is still greater (modulo 86400) than the lastid or is simply an old
1986                                         # duplicate sentence. To determine this we need to do some module 86400
1987                                         # arithmetic. High numbers mean that this is an old duplicate sentence,
1988                                         # low numbers that it is a new sentence.
1989                                         #
1990                                         # Typically you will see yesterday being taken on $t = 84, $lastid = 86235
1991                                         # and old dupes with $t = 234, $lastid = 256 (which give answers 249 and
1992                                         # 86378 respectively in the calculation below).
1993                                         #
1994                                         if ($t+86400-$lastid > $pc9x_past_age) {
1995                                                 dbg("PCPROT: dup id on $t <= lastid $lastid, ignored") if isdbg('chanerr') || isdbg('pc92dedupe');
1996                                                 return undef;
1997                                         }
1998                                 } elsif ($t == $lastid) {
1999                                         dbg("PCPROT: dup id on $t == lastid $lastid, ignored") if isdbg('chanerr') || isdbg('pc92dedupe');
2000                                         return undef;
2001                                 } else {
2002                                         # check that if we have a low number in lastid that yesterday's numbers
2003                                         # (likely in the 85000+ area) don't override them, thus causing flip flopping
2004                                         if ($lastid+86400-$t < $pc9x_past_age) {
2005                                                 dbg("PCPROT: dup id on $t in yesterday, lastid $lastid, ignored") if isdbg('chanerr') || isdbg('pc92dedupe');
2006                                                 return undef;
2007                                         }
2008                                 }
2009                         }
2010                 }
2011         } elsif ($create) {
2012                 $parent = Route::Node->new($call);
2013         } else {
2014                 dbg("PCPROT: $call does not exist, ignored") if isdbg('pc92dedupe');
2015                 return undef;
2016         }
2017         if (isdbg('pc92dedupe')) {
2018                 my $exists = exists $parent->{lastid}; # naughty, naughty :-)
2019                 my $val = $parent->{lastid};
2020                 my $s = $exists ? (defined $val ? $val : 'exists/undef') : 'undef';
2021                 dbg("PCPROT: $call pc92 id lastid $s -> $t");
2022         }
2023         $parent->lastid($t);
2024
2025         return $parent;
2026 }
2027
2028 sub pc92_handle_first_slot
2029 {
2030         my $self = shift;
2031         my $slot = shift;
2032         my $parent = shift;
2033         my $t = shift;
2034         my $hops = shift;
2035         my $oparent = $parent;
2036
2037         my @radd;
2038
2039         my ($call, $is_node, $is_extnode, $here, $version, $build) = @$slot;
2040         if ($call && $is_node) {
2041                 if ($call eq $main::mycall) {
2042                         LogDbg('err', "PCPROT: $self->{call} : $call looped back onto \$main::mycall ($main::mycall), ignored");
2043                         return;
2044                 }
2045                 if ($call eq $main::myalias) {
2046                         LogDbg('err', "PCPROT: $self->{call} : $call looped back onto \$main::myalias ($main::myalias), ignored");
2047                         return;
2048                 }
2049                 # this is only accepted from my "self".
2050                 # this also kills configs from PC92 nodes with external PC19 nodes that are also
2051                 # locally connected. Local nodes always take precedence. But we remember the lastid
2052                 # to try to reduce the number of dupe PC92s for this external node.
2053                 if (DXChannel::get($call) && $call ne $self->{call}) {
2054                         $parent = check_pc9x_t($call, $t, 92); # this will update the lastid time
2055                         dbg("PCPROT: locally connected node $call from other another node $self->{call}, ignored") if isdbg('chanerr');
2056                         return;
2057                 }
2058                 if ($is_extnode) {
2059                         # reparent to external node (note that we must have received a 'C' or 'A' record
2060                         # from the true parent node for this external before we get one for the this node
2061                         unless ($parent = Route::Node::get($call)) {
2062                                 if ($is_extnode && $oparent) {
2063                                         @radd = _add_thingy($oparent, $slot, $self, $hops);
2064                                         $parent = $radd[0];
2065                                 } else {
2066                                         dbg("PCPROT: no previous C or A for this external node received, ignored") if isdbg('chanerr');
2067                                         return;
2068                                 }
2069                         }
2070                         $parent = check_pc9x_t($call, $t, 92) || return;
2071                         $parent->via_pc92(1);
2072                         $parent->PC92C_dxchan($self->{call}, $hops);
2073                 }
2074         } else {
2075                 dbg("PCPROT: must be \$mycall or external node as first entry, ignored") if isdbg('chanerr');
2076                 return;
2077         }
2078         $parent->here(Route::here($here));
2079         $parent->version($version || $pc19_version) if $version;
2080     $parent->build($build) if $build;
2081         $parent->PC92C_dxchan($self->{call}, $hops) unless $self->{call} eq $parent->call;
2082         return ($parent, @radd);
2083 }
2084
2085 # DXSpider routing entries
2086 sub handle_92
2087 {
2088         my $self = shift;
2089         my $pcno = shift;
2090         my $line = shift;
2091         my $origin = shift;
2092         my $pc = shift;
2093
2094         my (@radd, @rdel);
2095
2096         my $pcall = $pc->[1];
2097         my $t = $pc->[2];
2098         my $sort = $pc->[3];
2099         my $hops = $pc->[-1];
2100
2101         # this catches loops of A/Ds
2102 #       if (eph_dup($line, $pc9x_dupe_age)) {
2103 #               return;
2104 #       }
2105
2106         if ($pcall eq $main::mycall) {
2107                 LogDbg('err', "PCPROT: looped back, ignored");
2108                 return;
2109         }
2110
2111         if ($pcall eq $main::myalias) {
2112                 LogDbg('err', "PCPROT: looped back to \$myalias ($main::myalias), misconfiguration ignored");
2113                 return;
2114         }
2115
2116         if ($pcall eq $self->{call} && $self->{state} eq 'init') {
2117                 if ($self->{isolate}) {
2118                         dbg("DXPROT: PC9x received, but $pcall is isolated, ignored");
2119                         return;
2120                 } elsif (!$self->user->wantpc9x) {
2121                         dbg("DXPROT: PC9x explicitly switched off on $pcall, ignored");
2122                         return;
2123                 } else {
2124                         $self->state('init92');
2125                         $self->{do_pc9x} = 1;
2126                         dbg("DXPROT: Do pc9x set on $pcall");
2127                 }
2128         }
2129         unless ($self->{do_pc9x}) {
2130                 dbg("PCPROT: PC9x come in from non-PC9x node, ignored") if isdbg('chanerr');
2131                 return;
2132         }
2133
2134         # don't create routing entries for D records that don't already exist
2135         # this is what causes all those PC92 loops!
2136         my $parent = check_pc9x_t($pcall, $t, 92, $sort ne 'D') || return;
2137         my $oparent = $parent;
2138
2139         $parent->do_pc9x(1);
2140         $parent->via_pc92(1);
2141
2142         if ($sort eq 'F' || $sort eq 'R') {
2143
2144                 # this is the route finding section
2145                 # here is where the consequences of the 'find' command
2146                 # are dealt with
2147
2148                 my $from = $pc->[4];
2149                 my $target = $pc->[5];
2150
2151                 if ($sort eq 'F') {
2152                         my $flag;
2153                         my $ref;
2154                         my $dxchan;
2155                         if ($ref = DXChannel::get($target)) {
2156                                 $flag = 1;              # we are directly connected
2157                         } else {
2158                                 $ref = Route::get($target);
2159                                 $dxchan = $ref->dxchan;
2160                                 $flag = 2;
2161                         }
2162                         if ($ref && $flag && $dxchan) {
2163                                 $self->send(pc92r($from, $target, $flag, int($dxchan->{pingave}*1000)));
2164                                 return;
2165                         }
2166                 } elsif ($sort eq 'R') {
2167                         if (my $dxchan = DXChannel::get($from)) {
2168                                 handle_pc92_find_reply($dxchan, $pcall, $from, $target, @$pc[6,7]);
2169                         } else {
2170                                 my $ref = Route::get($from);
2171                                 if ($ref) {
2172                                         my @dxchan = grep {$_->do_pc9x} $ref->alldxchan;
2173                                         if (@dxchan) {
2174                                                 $_->send($line) for @dxchan;
2175                                         } else {
2176                                                 dbg("PCPROT: $self->{call} : type R no return route, ignored") if isdbg('chanerr') || isdbg('route');
2177                                         }
2178                                 } else {
2179                                         dbg("PCPROT: $self->{call} : type R no return route, ignored") if isdbg('chanerr') || isdbg('route');
2180                                 }
2181                         }
2182                         return;
2183                 }
2184
2185         } elsif ($sort eq 'K') {
2186                 $pc92Kin += length $line;
2187
2188                 # remember the last channel we arrived on
2189                 $parent->PC92C_dxchan($self->{call}, $hops) unless $self->{call} eq $parent->call;
2190
2191                 my @ent = _decode_pc92_call($pc->[4]);
2192
2193                 if (@ent) {
2194                         my $add;
2195
2196                         ($parent, $add) = $self->pc92_handle_first_slot(\@ent, $parent, $t, $hops);
2197                         return unless $parent; # dupe
2198                         
2199                         push @radd, $add if $add;
2200                         $parent->reset_obs;
2201                         my $call = $parent->call;
2202                         my $version = $ent[4] || 0;
2203                         my $build = $ent[5] ||  0;
2204                         $build =~ s/^0\.//;
2205                         my $oldbuild = $parent->build || 0;
2206                         my $oldversion = $parent->version || 0;
2207                         my $user = check_add_user($parent->call, 'S');
2208                         my $oldsort = $user->sort // '';
2209
2210                         dbg("PCPROT: PC92 K v: $version ov: $oldversion b: $build ob: $oldbuild pk: " . ($parent->K || '0') . " uk: " . ($user->K || 0)) if isdbg('pc92k');
2211                                 
2212                         if (is_numeric($version) || is_numeric($build)) {
2213                                 my $changed = 0;
2214                                 if (($oldversion ne $version || $build ne $oldbuild)) {
2215                                         dbg("PCPROT: PC92 K node $call updated version: $version (was $oldversion) build: $build (was $oldbuild)");
2216                                         $user->version($parent->version($version));
2217                                         $user->build($parent->build($build));
2218                                         ++$changed;
2219                                 }
2220                                 if ($oldsort ne 'S') {
2221                                         dbg("PCPROT: PC92 K node $call updated sort: $sort (was $oldsort)");
2222                                         $user->sort('S');
2223                                         ++$changed;
2224                                 }
2225                                 unless ($user->K) {
2226                                         dbg("PCPROT: PC92 K node $call updated - marked as PC92 K user");
2227                                         $user->K(1);
2228                                         ++$changed;
2229                                 }
2230                                 $user->put if $changed;
2231                                 $parent->K(1); # mark this as come in on a K
2232                         } else {
2233                                 dbg("DXProt PC92 K version call $call: invalid version: '$version' or build: '$version', ignored");
2234                         }
2235                         dbg("ROUTE: reset obscount on $call now " . $parent->obscount) if isdbg('obscount');
2236                 }
2237         } elsif ($sort eq 'A' || $sort eq 'D' || $sort eq 'C') {
2238
2239                 $pc92Ain += length $line if $sort eq 'A';
2240                 $pc92Cin += length $line if $sort eq 'C';
2241                 $pc92Din += length $line if $sort eq 'D';
2242
2243                 # remember the last channel we arrived on
2244                 $parent->PC92C_dxchan($self->{call}, $hops) unless $self->{call} eq $parent->call;
2245
2246                 # this is the main route section
2247                 # here is where all the routes are created and destroyed
2248
2249                 # cope with missing duplicate node calls in the first slot
2250                 my $me = $pc->[4] || '';
2251                 $me ||= _encode_pc92_call($parent) unless $me ;
2252
2253                 my @ent = map {my @a = _decode_pc92_call($_); @a ? \@a : ()} grep {$_ && /^[0-7]/} $me, @$pc[5 .. $#$pc];
2254
2255                 if (@ent) {
2256
2257                         # look at the first one which will always be a node of some sort
2258                         # except in the case of 'A' or 'D' in which the $pcall is used
2259                         # otherwise use the node call and update any information
2260                         # that needs to be done.
2261                         my $add;
2262
2263                         ($parent, $add) = $self->pc92_handle_first_slot($ent[0], $parent, $t, $hops);
2264                         return unless $parent; # dupe
2265
2266                         shift @ent;
2267                         push @radd, $add if $add;
2268                 }
2269
2270                 # do a pass through removing any references to either mycall
2271                 my @nent;
2272                 for (@ent) {
2273                         my $dxc;
2274                         next unless $_ && @$_;
2275                         if ($_->[0] eq $main::mycall) {
2276                                 dbg("PCPROT: $self->{call} : type $sort $_->[0] refers to me, ignored") if isdbg('route');
2277                                 next;
2278                         }
2279                         if ($_->[0] eq $main::myalias && $_->[1] || $_->[0] eq $main::mycall && $_->[1] == 0) {
2280                                 LogDbg('err',"PCPROT: $self->{call} : type $sort $_->[0] trying to change type to " . $_->[1]?"Node":"User" . ", ignored");
2281                                 next;
2282                         }
2283                         
2284                         push @nent, $_;
2285                 }
2286
2287                 if ($sort eq 'A') {
2288                         for (@nent) {
2289                                 push @radd, _add_thingy($parent, $_, $self, $hops);
2290                         }
2291                 } elsif ($sort eq 'D') {
2292                         for (@nent) {
2293                                 push @rdel, _del_thingy($parent, $_, $self);
2294                         }
2295                 } elsif ($sort eq 'C') {
2296                         my (@nodes, @users);
2297
2298                         # we reset obscounts on config records as well as K records
2299                         $parent->reset_obs;
2300                         dbg("ROUTE: reset obscount on $parent->{call} now " . $parent->obscount) if isdbg('obscount');
2301
2302                         #
2303                         foreach my $r (@nent) {
2304                                 #                       my ($call, $is_node, $is_extnode, $here, $version, $build) = _decode_pc92_call($_);
2305                                 if ($r->[0]) {
2306                                         if ($r->[1]) {
2307                                                 push @nodes, $r->[0];
2308                                         } else {
2309                                                 push @users, $r->[0];
2310                                         }
2311                                 } else {
2312                                         dbg("PCPROT: $self->{call} :  pc92 call entry '$_' not decoded, ignored") if isdbg('chanerr') || isdbg('route');
2313                                 }
2314                         }
2315
2316                         my ($dnodes, $dusers, $nnodes, $nusers) = $parent->calc_config_changes(\@nodes, \@users);
2317
2318                         # add users here
2319                         foreach my $r (@nent) {
2320                                 my $call = $r->[0];
2321                                 if ($call) {
2322                                         push @radd,_add_thingy($parent, $r, $self, $hops) if grep $call eq $_, (@$nnodes, @$nusers);
2323                                 }
2324                         }
2325                         # del users here
2326                         foreach my $r (@$dnodes) {
2327                                 push @rdel,_del_thingy($parent, [$r, 1], $self);
2328                         }
2329                         foreach my $r (@$dusers) {
2330                                 push @rdel,_del_thingy($parent, [$r, 0], $self);
2331                         }
2332
2333                         # remember this last PC92C for rebroadcast on demand
2334                         $parent->last_PC92C($line);
2335                 } else {
2336                         dbg("PCPROT: unknown action '$sort', ignored") if isdbg('chanerr');
2337                         return;
2338                 }
2339
2340                 foreach my $r (@rdel) {
2341                         next unless $r;
2342
2343                         $self->route_pc21($pcall, undef, $r) if $r->isa('Route::Node');
2344                         $self->route_pc17($pcall, undef, $parent, $r) if $r->isa('Route::User');
2345                 }
2346                 my @pc19 = grep { $_ && $_->isa('Route::Node') } @radd;
2347                 my @pc16 = grep { $_ && $_->isa('Route::User') } @radd;
2348                 unshift @pc19, $parent if $self->{state} eq 'init92' && $oparent == $parent;
2349                 $self->route_pc19($pcall, undef, @pc19) if @pc19;
2350                 $self->route_pc16($pcall, undef, $parent, @pc16) if @pc16;
2351         }
2352
2353         # broadcast it if we get here
2354         $self->broadcast_route_pc9x($pcall, undef, $line, 0);
2355 }
2356
2357 # get all the routes for a thing, bearing in mind that the thing (e.g. a user)
2358 # might be on two or more nodes at the same time or that there may be more than
2359 # one equal distance neighbour to a node.
2360 #
2361 # What this means that if sh/route g1tlh shows that he is on (say) two nodes, then
2362 # a Route::findroutes is done on each of those two nodes, the best route(s) taken from
2363 # each and then combined to give a set of dxchans to send the PC9x record down
2364 #
2365 sub find_pc9x_routes
2366 {
2367         my $to = shift;
2368         my $ref = Route::get($to);
2369         my @parent;
2370         my %cand;
2371
2372         if ($ref->isa('Route::User')) {
2373                 my $dxchan = DXChannel::get($to);
2374                 push @parent, $to if $dxchan;
2375                 push @parent, $ref->parents;
2376         } else {
2377                 @parent = $to;
2378         }
2379         foreach my $p (@parent) {
2380                 my $lasthops;
2381                 my @routes = Route::findroutes($p);
2382                 foreach my $r (@routes) {
2383                         $lasthops = $r->[0] unless defined $lasthops;
2384                         if ($r->[0] == $lasthops) {
2385                                 $cand{$r->[1]->call} = $r->[1];
2386                         } else {
2387                                 last;
2388                         }
2389                 }
2390         }
2391         return values %cand;
2392 }
2393
2394 sub handle_93
2395 {
2396         my $self = shift;
2397         my $pcno = shift;
2398         my $line = shift;
2399         my $origin = shift;
2400         my $pc = shift;
2401
2402 #       $self->{do_pc9x} ||= 1;
2403
2404         my $pcall = $pc->[1];                   # this is now checked earlier
2405
2406         # remember that we are converting PC10->PC93 and self will be $main::me if it
2407         # comes from us
2408         unless ($self->{do_pc9x}) {
2409                 dbg("PCPROT: PC9x come in from non-PC9x node, ignored") if isdbg('chanerr');
2410                 return;
2411         }
2412
2413         my $t = $pc->[2];
2414         my $parent = check_pc9x_t($pcall, $t, 93, 1) || return;
2415
2416         my $to = uc $pc->[3];
2417         my $from = uc $pc->[4];
2418         my $via = uc $pc->[5];
2419         my $text = $pc->[6];
2420         my $onode = uc $pc->[7];
2421         $onode = $pcall if @$pc <= 8;
2422
2423         # this is catch loops caused by bad software ...
2424         if (eph_dup("PC93|$from|$text|$onode", $pc10_dupe_age)) {
2425                 return;
2426         }
2427
2428         if (isdbg('progress')) {
2429                 my $vs = $via ne '*' ? " via $via" : ''; 
2430                 my $s = "ANNTALK: $from\@$onode$vs -> $to '$text' route: $origin";
2431                 dbg($s);
2432         }
2433
2434         # if this is a 'bad spotter' user then ignore it
2435         my $nossid = $from;
2436         $nossid =~ s/-\d+$//;
2437         if ($badspotter->in($nossid)) {
2438                 dbg($line) if isdbg('nologchan');
2439                 dbg("PCPROT: Bad Spotter, dropped");
2440                 return;
2441         }
2442
2443         # ignore PC93 coming in from outside this node with a target of local
2444         if ($to eq 'LOCAL' && $self != $main::me) {
2445                 dbg("PCPROT: incoming LOCAL chat not from local node, ignored") if isdbg('chanerr');
2446                 return;
2447         }
2448
2449         # will we allow it at all?
2450         if ($censorpc) {
2451                 my @bad;
2452                 if (@bad = BadWords::check($text)) {
2453                         my $bw = join ', ', @bad;
2454                         dbg($line) if isdbg('nologchan');
2455                         dbg("PCPROT: Badwords: '$bw', dropped");
2456                         return;
2457                 }
2458         }
2459
2460         # if it is routeable then then treat it like a talk
2461         my $ref = Route::get($to);
2462         if ($ref) {
2463                 my $dxchan;
2464
2465                 # convert to PC10 or local talks where appropriate
2466                 # PC93 capable nodes of the same hop count all get a copy
2467                 # if there is a PC10 node then it will get a copy and that
2468                 # will be it. Hopefully such a node will not figure highly
2469                 # in the route list, unless it is local, 'cos it don't issue PC92s!
2470                 # note that both local and PC93s at the same time are possible if the
2471                 # user on more than one node.
2472                 my @routes = find_pc9x_routes($to);
2473                 my $lasthops;
2474                 foreach $dxchan (@routes) {
2475                         if (ref $dxchan && $dxchan->isa('DXChannel')) {
2476                                 if ($dxchan->{do_pc9x}) {
2477                                         $dxchan->send($line);
2478                                 } else {
2479                                         $dxchan->talk($from, $to, $via, $text, $onode);
2480                                 }
2481                         } else {
2482                                 dbg("ERROR: $to -> $dxchan is not a DXChannel! (convert to pc10)");
2483                         }
2484                 }
2485                 return;
2486
2487         } elsif ($to eq '*' || $to eq 'SYSOP' || $to eq 'WX') {
2488                 # announces
2489                 my $sysop = $to eq 'SYSOP' ? '*' : ' ';
2490                 my $wx = $to eq 'WX' ? '1' : '0';
2491                 my $local = $via eq 'LOCAL' ? '*' : $via;
2492
2493                 $self->send_announce(1, pc12($from, $text, $local, $sysop, $wx, $pcall), $from, $local, $text, $sysop, $pcall, $wx, $via eq 'LOCAL' ? $via : undef);
2494                 return if $via eq 'LOCAL';
2495         } elsif (!is_callsign($to) && $text =~ /^#\d+ /) {
2496                 # chat messages really only locally connected users
2497                 $self->send_chat(1, $line, $from, '*', $text, $to, $pcall, '0');
2498         }
2499
2500         # broadcast this chat sentence everywhere unless it is targetted to 'LOCAL'
2501         $self->broadcast_route_pc9x($pcall, undef, $line, 0) unless $to eq 'LOCAL' || $via eq 'LOCAL';
2502 }
2503
2504 # if get here then rebroadcast the thing with its Hop count decremented (if
2505 # there is one). If it has a hop count and it decrements to zero then don't
2506 # rebroadcast it.
2507 #
2508 # NOTE - don't arrive here UNLESS YOU WANT this lump of protocol to be
2509 #        REBROADCAST!!!!
2510 #
2511
2512 sub handle_default
2513 {
2514         my $self = shift;
2515         my $pcno = shift;
2516         my $line = shift;
2517         my $origin = shift;
2518         my $pc = shift;
2519
2520         unless (eph_dup($line)) {
2521                 if ($pcno >= 90) {
2522                         my $pcall = $pc->[1];
2523                         unless (is_callsign($pcall)) {
2524                                 dbg("PCPROT: invalid callsign string '$pc->[1]', ignored") if isdbg('chanerr');
2525                                 return;
2526                         }
2527                         my $t = $pc->[2];
2528                         my $parent = check_pc9x_t($pcall, $t, $pcno, 1) || return;
2529                         $self->broadcast_route_pc9x($pcall, undef, $line, 0);
2530                 } else {
2531                         unless ($self->{isolate}) {
2532                                 DXChannel::broadcast_nodes($line, $self) if $line =~ /\^H\d+\^?~?$/; # send it to everyone but me
2533                         }
2534                 }
2535         }
2536 }
2537
2538 1;