9185badef4b184540637ba13f3028bf80ca5039f
[spider.git] / Changes
1 15Mar21=======================================================================
2 1. Fix DXUtil::localdata so that it does actually prefer the latest version 
3    of a file regardless of whether it is in /spider/data or /spider/localdata.
4 2. Add CTY-3105 prefixes.
5 05Mar21=======================================================================
6 1. Fix DXCron::spawn_cmd so that more than one spawn_cmd can be active at a 
7    time. This affects many nodes where lots of regular spawn_cmds happen at
8    a time and this prevented crucial things like 'start_connect' from working!
9 2. Sort user lockout issues to cope with all likely scenarios - including 
10    "phantom" SSID working.
11 3. Fix "close_gracefully" error messages which are useless, but benign. These 
12    happen (mainly) when outgoing connects timeout.
13 24Feb21=======================================================================
14 1. modify RBN timing arrangements
15     
16    There are two new twiddle pots:
17     
18    $limbotime (default 5*60 secs) which allows potential spots to
19    hang around longer to allow $minqual *different* skimmers to spot
20    them. At which point they are emitted. This is to catch the "slow
21    burning" spots where a call is spotted by different skimmers but
22    separated in time by more than $dwelltime - in fact maybe by
23    minutes.
24     
25    $maxqual (default 9 skimmers) which short circuits the normal
26    hard maximum $quality (9 skimmer spots) and $dwelltime (10secs)
27    to allow a spot that has $maxqual *different* skimmers (usually
28    as the result of a burst from the RBN) to defeat $dwelltime and
29    be emitted the moment that condition is satisfied. There maybe
30    a better name for this.
31 21Feb21=======================================================================
32 1. add data section on 160m in bands.pl.
33 07Sep20=======================================================================
34 1, Change interface to watchdbg & grepdbg slightly so that multiple search
35    regexes are ANDed rather than ORed together. ORing is easily achieved 
36    already by the usual regex pattern 'PATT..|PATT..|..' whereas ANDing could
37    not be done as easily without resorting lots of 'PATT.*PATH' things which
38    would not necessarily get what was wanted.
39 2. Make sure that the pc92 C record only contains nodes and users and not
40    other extranoeus things like skimmers...
41 15Aug20=======================================================================
42 1. Simplify the skimmer scoring mechanism.
43 13Aug20=======================================================================
44 1. Improve the (displayed) RBN frequency weighting the skimmers' frequencies
45    w.r.t majority view on each spot. Any skimmer that disagrees with a 
46    gets docked a 'point' from their 'good' score (if any) and have a 'point'
47    added to their 'bad' score. This score is then taked into account during
48    the 'choosing the real frequency' process. If a skimmer agrees with the
49    majority the process is reversed. To see this in action: set/deb rbnskim
50 06Aug20=======================================================================
51 1, Add CTY-3013 Prefixes
52 2. Make RBN more efficient. Start the process of skimmer node performance 
53    caching. Add minimum quality allowed (at 2), which will be overrideable.
54    The format of the rbn_cache has changed and so a full restart will occur.
55 3. Collect channel input/output stats. New command: show/data_stats to show
56    them. 
57 4. Add local::lib qw{/spider/perl5lib} to store cpanm loaded modules just for
58    DXSpider. This is done so that updates needed by future changes can be done
59    as the sysop user and doesn't have to be done as root. This paves the way
60    for UPDATE.pl which will pull down new modules that it needs automatically.
61    When it's written, which will be soon. 
62 29Jul20=======================================================================
63 1. Add show/rbn command that allows one to see who is online and configured
64    for RBN. See help sh/rbn for details.
65 2. Fixed issue with set/ve7cc mode adding unwanted newlines to output.
66 3. Attempted to make the QRG normalisation more "intelligent". This would be
67    sooooooooo much easier if skimmers were calibrated more accurately.
68 4. Added CTY-3012 prefixes.
69 23Jul20=======================================================================
70 1. fix Filtering so that it does less of what it was doing badly, thus 
71    the perl interpreter to do more of the work. Which means you *should* be
72    able to define  more or less any allowable operation for that type of 
73    filter. Which is a complicated way of saying: you can now use brackets.
74 2. Regex expressions now appear as readable text in sh/filter.
75 3. Make the RBN status file JSON, rather than DD format. In future versions
76    it will also be VERSIONed to enable more features to be added 
77    transparently.
78 4. Add show/rbn command to allow sysops to see who is using rbn.
79 11Jul20=======================================================================
80 1. Fix (embarrassing) gratuitous '#'s in bands.pl
81 2. IMPORTANT: certain PC92 strings can crash DXSpider if the nologchan debug
82    category is set (which reduces debug files to sizes that non-developers can
83    reasonably store (especially during big contests)),
84 10Jul20=======================================================================
85 1. Fix console.pl permissions problem when running as another user not in 
86    debug mode. Console.pl WILL NOT WORK in debug mode unless it is running
87    as the sysop user.
88 08Jul20=======================================================================
89 1. "Finish" the RBN system :-)
90 2. This includes enabling the coarse selection of spot modes using set/wantrbn
91    with arguments like 'set/wantrbn cw beacon'. This limits your output to
92    just CW, BCN and DXF modes.  
93 3. The RBN spot is now cached. With a following wind, this means that even a
94    node restart, done in a timely fashion (within a few minutes) will not
95    cause a "cache warmup" delay for users on a restart.
96 4. Added the "full fat" set/wantrbn command and aliased it to 'set/skimmer'. 
97    I use both terms (whenever I remembered) in the help text.
98 5. Help text has been written.
99 6. The UPGRADE.mojo file has been tweeked to point out the users file format
100    change.
101 7. Merge in users.v3j to the mojo branch.
102 8. Add CTY-3011 prefixes.
103 07Jul20=======================================================================
104 1. Fix show/node command.
105 2. Fix show/cluster command to take into account the presence of skimmer nodes
106    which are a new category of thing which is neither a node nor a user.
107 06Jul20=======================================================================
108 1. Add RBN.mojo with information of the RBN capabilities of DXSpider.
109 05Jul20=======================================================================
110 1. Fix show/dxcc.
111 2. Add HAPROXY "real ip" type 1 handling for incoming connections.
112 04Jul20=======================================================================
113 1. Give console.pl (or dx) a good going over with a bog brush to *finally*
114    (cough) make it work correctly with a full 80 column window (and not just
115    to a width of 79 really). Also fix scrolling.
116 28Jun20=======================================================================
117 1. Merge mojo with users.v3j to remove all vestages of Storable from DXSpider
118    in an effort to make the whole storage thing more reliable (and also a
119    bit faster). The user file will be auto-upgraded on restart. This may take
120    up to 20 seconds on slower hardware (and maybe a bit longer on huge user
121    files). On my 180,000 odd users, on my hardware, it takes 4 seconds.
122 2. The DXQSL system storage is also upgraded, Please run 
123    /spider/perl/create_dxqsl.pl in a spare shell. This will recreate the 
124    dxqsl.v1j file. Run 'load/dxqsl' in the console to activate it. 
125 17Jun20=======================================================================
126 1. Change the Spot file reading mechanism back to the default of using 'tac'.
127 08Jun20=======================================================================
128 1. Fix show/mydx (lack of) filtering bug.
129 2. Add qra locator to prefix_data.pl.
130 3. Add 4 digit qra square for spotted callsign if show/dxgrid is enabled.
131 4. Fix general filtering bug where erroneous input causes crashing.
132 03Jun20=======================================================================
133 1. Make sure that all possible regexes get passed across to the search engine.
134 2. Fix out of order logging on sh/log queries spanning more than one month.
135 3. Do not read backwards on sh/dx, reading forwards seems a 1/3 quicker. 
136 4. Add <ms>, <tr> and <es> shortcuts to sh/dx (e.g sh/dx <tr> on 2m).
137 02Jun20=======================================================================
138 1. Fix the small whoopsie in sh/dx.
139 01Jun20=======================================================================
140 1. Fix sh/dx iota and qra. This completes the conversion of sh/dx's limited
141    "old style" parsing to using Filter style parsing with something that 
142    allows expressions include brackets ( and ) as well as the 'not' keyword.
143    NOTE: the precedence rules are the same as perl's '!', '||' and '&&' 
144          operators.  
145 31May20=======================================================================
146 1. Improve links command layout slightly.
147 2. Issue an *accurate* UPGRADE.mojo with all the new packages included! 
148 3. Fix issue with sh/dx
149 30May20=======================================================================
150 1. Fix sh/dx! It appears that there is a long standing problem with sh/dx not
151    actually return all the answers it should. I have also had a request to
152    allow / enable the "not" keyword (just like the filtering system dones).
153
154    Now this was one of the earliest modules that I wrote and it took quite
155    a bit of work to tease out the important bits and then use the Filter 
156    module (as in acc/spot) to generate the sh/dx filtering expressions. This
157    seems to have been done. 
158  
159    NB This will likely not work if you are using a SQL backend to do sh/dx
160    commands. This was never actually an official feature. It is now 
161    deprecated.   
162 29May20=======================================================================
163 1. Please install Math::Round and Data::Structure::Util. Instructions are
164    available in UPGRADE.mojo.
165 2. ** Withdrawn ** user file format change to json not yet committed.
166 20May20=======================================================================
167 1. Backport convert-users-v3-to-v4.pl to allow creation of the new json 
168    formatted *text* based user file from the old v3 DB_File and Storable 
169    version. This can be done either online (with the node running) or offline
170    with the node stopped. This is in preparation for the next update of the
171    mojo branch. Running this program just *BEFORE* doing your next update of
172    the mojo branch *should* ensure a seemless transition to the Storable &
173    DB_File free version of the users file. 
174 2. Show git branch in show/version.
175 3. Add CTY-3010 changes.
176 17May20=======================================================================
177 1. Backport DXSubprocess to change serialisations.
178    Currently the internals of Mojo::IOLoop::Subprocess defaults to
179    using Storeable as its cross-process argument and data serialisaion
180    method. It can use others. This update reverts back to the
181    original ForkCall method of using JSON.
182 10May20=======================================================================
183 1. Added basic changes so that users *could* have multiple connections to the
184    same node if it is allowed. This is work in progress and is there to see 
185    if it deals with some networking problems encountered on very high volume
186    sites which can see more than 1000 users (although the problems can occur
187    with many hundreds or by the practices of certain ISPs). More information
188    will be forthcoming if I get to the bottom of what's REALLY going on and
189    whether this is (or maybe just one part of) the solution. It won't be 
190    ready for general use until then.
191 2. Fixed the script import error reported by Joaquin (EA3CV?), by the simple
192    expedient of restoring the version from the master branch. 
193 09May20=======================================================================
194 1. Show the route by which this PCxx came in progress debugging reports. In
195    some other words: the spot/wwv/wcy/ann message arrived first from this 
196    connection. 
197 2. Improve progress WWV & WCY messages.
198 3. Stop random node isolations (at least in one place)
199 08May20=======================================================================
200 1. Tidy up routing table
201 2. Add new argument to show/version (ALL or list of regexes) that allow you
202    to see the version and build nos of all nodes on the system. 
203 07May20=======================================================================
204 1. Revert changes made since 25Apr concerning IP address reconciliation.
205 25Apr20=======================================================================
206 1. Add maximum no of users on node to show/cluster.
207 2. Add ability to show last n lines of debugging ring buffer.
208 3. Remove redundant wpxloc.dat file.
209 24Apr20=======================================================================
210 1. Add 'progress' debugging for showing that stuff is happening in nologchan
211    a.k.a ringbuffer only mode. 
212 2. Fix grepdbg so that no regex argument simply lists the file. 
213 3. Add CTY-3008 prefixes.
214 22Apr20=======================================================================
215 1. Fix the module search path in update_sysop.pl
216 2. Add latest prefixes CTY-3007
217 3. Fix unset/startup command. This will only work for users' start up scripts
218    things like user_default or startup must be edited or removed by hand. 
219 21Apr20=======================================================================
220 1. Finally fix the "actually tranmit" any output (like from 'logout' files)
221    to users before disconnecting. This also means that disconnecting nodes
222    now receive the (totally redundant, but hey) PC39 reason for disconnection.
223 20Apr20=======================================================================
224 1. Speed up sh/log (including chat, rcmd, ann etc) that search the system
225    log files, by removing a completely redundant subsystem and also leveraging
226    the core operating system utility 'tac', if it's available. 
227 19Apr20=======================================================================
228 1. The long haul that is the mojo branch has started up again. It's something
229    to do during this lockdown.
230 2. The problems and instabilities around running commands that worked in 
231    forked processes, when used other than by normally logged in users (e.g. 
232    in the local crontab), have been fixed.  
233 3. If a /spider/local_data/logout file is present then its contents will be
234    sent to the user on logout.
235 4. Add the ability to sh/dx origin or ip (address).
236 5. Retire the use of the deprecated Mojo::IOLoop::ForkCall in favour of using
237    the supported equivalent in Mojolicious 7.26 and above. Which means you
238    will need to upgrade Mojo to at least the version. The current version is
239    8.36 and is known to work.
240 10Sep19=======================================================================
241 1. Improve DXSql database filtering to exclude most via <locator> type 
242    reports.
243 2. Add CTY-2913 prefixes + wpxloc.raw
244 14Jul18=======================================================================
245 1. Add CTY-2808 prefixes + wpxloc.raw
246 16Jun18=======================================================================
247 1. add more modes to rbn.pl
248 23Jan18=======================================================================
249 1. Add CTY-2802 prefixes
250 27Oct17=======================================================================
251 1. Get correct hostname support and privilege levels on web connects.
252 26Oct17=======================================================================
253 1. Start (serious) work on web interface. Make the necessary changes to allow
254    a local webserver to connect and get its own style of messages.
255 11Aug17=======================================================================
256 1. Add default systemd service file file
257 10Aug17=======================================================================
258 1. check for disconnecting flag in more places
259 31Jul17=======================================================================
260 1. Fixed create_usdb.pl path specifications
261 2. add CTY-2708 prefixes
262 12May17=======================================================================
263 1. Fix sh/425 (mostly)
264 2. Add CTY-2706 prefixes
265 05May17=======================================================================
266 1. Add CTY-2705 prefixes
267 04Apr17=======================================================================
268 1. Add CTY-2704 prefixes
269 17Mar17=======================================================================
270 1. Add latest cty.dat & wpxloc.raw
271 21Feb17=======================================================================
272 1. Fix sh/dx on 14050 so that it does what one expects.
273 2. Add CTY-2702 prefixes
274 15Feb17=======================================================================
275 1. Update UPGRADE.mojo a bit
276 2. Add local::lib so that it can be used for non-root installations.
277 09Jan17=======================================================================
278 1. Fix mojo branch clean install issues (failing to find $main::data et al)
279 02Jan17=======================================================================
280 1. Add CTY-2615 prefixes
281 2. Add rbn.pl - an experimental rbn deduplicating spot filter. 
282 26Dec16=======================================================================
283 1. Fix some possible routes to $myalias callsigns becoming nodes.
284 22Nov16=======================================================================
285 1. Add CTY-2614 prefixes
286 21Nov16=======================================================================
287 1. Add CTY-2613 prefixes
288 17Nov16=======================================================================
289 1. Change method (again) of get processor seconds in cmd/mrtg.pl. Split out
290    main process from children and display each separately.
291 16Nov16=======================================================================
292 1. Change method of get processor seconds in cmd/mrtg.pl
293 18Aug16=======================================================================
294 1. Add CTY-2610
295 2. put back msg total in & total out for mrtg and background mrtg
296 3. add dxcc == ADIF country code.
297 16Aug16=======================================================================
298 1. Mega change to push all local data in $root/local_data and where there
299    is duplication with system data (still in $root/data) then use whichever
300    is newer. This will move stuff (permanently) like spots and other DXLog
301    files to local_data as well as the userfile, DX QSL file and usdb stuff.
302 25Jul16=======================================================================
303 1. Add some timing stats to cmd spawn_cmd.
304 08Jul16=======================================================================
305 1. Add latest wpxloc.raw
306 2. Add CTY-2609
307 28Mar16=======================================================================
308 1. Fix get/keps.pl so that it does the right fetch
309 25Mar16=======================================================================
310 1. Rework DXCron::spawn command to use Mojo::IOLoop::ForkCall
311 04Jan16=======================================================================
312 1. Add CTY-2601 prefix file
313 02Jan16=======================================================================
314 1. fix new URL for sh/425 command
315 30Dec15=======================================================================
316 1. Add CTY-2516 prefix file
317 2. Try to stop and also reset node call user records back to 'S'
318 3. Fix multiple on_disc events in AsyncMsg.pm
319 02Jun15=======================================================================
320 1. Extend regex for quit to allow other commands starting in 'q'.
321 2. Add CTY-2506 prefix file
322 26May15=======================================================================
323 1. Add CTY-2506 prefix file
324 01Mar15=======================================================================
325 1. Add CTY-2503 prefix file
326 13Feb15=======================================================================
327 1. Fix problem with sh/dx <call> if people are logging spots to a SQL database
328 3. Added CTY-2502 prefixes. 
329 3. My late father would have been 102 today.
330 27Nov14=======================================================================
331 1. Add CTY-2415 prefix list
332 25Nov14=======================================================================
333 1. Add CTY-2414 prefix list
334 21Nov14=======================================================================
335 1. Add CTY-2413 prefix list
336 21Oct14=======================================================================
337 1. Add CTY-2011 prefixes
338 16Sep14=======================================================================
339 1. Add CTY2410 wpxloc.raw + cty.dat
340 2. remove autoflush from logs
341 16Sep14=======================================================================
342 1. Fix (now) missing error_handler
343 30Aug14=======================================================================
344 1. add CTY-2409 prefixes
345 2. add new wpxloc.raw
346 19Jul14=======================================================================
347 1. Use JSON::XS for ForkCall serialisation in DXCommandmode.pm
348 19Jun14=======================================================================
349 1. Fix EOF detection of incoming nodes.
350 2. Attempt to autogenerate Version.pm with *correct* values (instead of the
351    the git id of the previous commit). Oh, and do it on  every commit or pull.
352 17Jun14=======================================================================
353 1. Add CTY2405 prefix changes
354 2. Arrange for all file searching routines based on sh/dx or sh/log to be
355    non-blocking. This should allow incoming and outgoing protocol to 
356    continue flowing when such a command is run. 
357 3. Added some usable code to show/wx (finally).
358 4. Make stats cmds (sh/v?hfstats, sh/v?hftable) non-blocking.
359 5. Make sh/isolate, sh/registered, sh/lockout non-blocking.
360 6. Fix shutdown command.
361 16Jun14=======================================================================
362 1. Get AsyncMsg working for HTTP type ephemeral connections
363 21Apr14=======================================================================
364 1. Add CTY-2405 prefix list
365 08Mar14=======================================================================
366 1. Add newer version of wpxloc.raw with some missing prefixes added.
367 07Mar14=======================================================================
368 1. Add new version of wpxloc.raw 
369 2. Fix a small crash with Spot::dup
370 12Jan14=======================================================================
371 1. Fix minor issue with dx command when used in a script, as found by
372    Christian Furst.
373 2. Fix (rather serious) error in import_cmd that did not reset callsigns
374    correctly in $main::me.
375 30Dec13=======================================================================
376 1. Add CTY2312 prefix changes
377 19Nov13=======================================================================
378 1. Add CTY2311 Prefix changes - needed for CQWW 2013
379 09Oct13=======================================================================
380 1. Add CTY2310 prefix changes
381 13Sep13=======================================================================
382 1. Added CTY2309 prefix data, together with its associated wpxloc.raw file.
383 10Sep13=======================================================================
384 1. Add the get/keps command, which allows a sysop to get the latest AMSAT
385    keplarian elements either on demand or periodically in the crontab.
386 10Sep13=======================================================================
387 1. Fix sh/time such that no arguments print details for the caller.
388 09Sep13=======================================================================
389 1. Make all the Net::Telnet based commands (sh/425, sh/contest, sh/db0sdx,
390    sh/wm7d, sh/ik3qar) asynchronous, so that they no longer pause the node
391    while they go off and query the internet for results.
392 06Sep13=======================================================================
393 1. Fixed sh/contest so that it works again. How it ever worked at all is
394    a bit of a mystery. Now possible to type sh/cont dec or sh/cont dec 2013
395    (with month and year in any order). Please comment out any $contest_host
396    or $contest_url variables you may have in /spider/local/Internet.pm (if
397    you have one, that is). It will not work with the previous values.
398 2. Added CTY2308 prefix changes.
399 3. Added (back) internal function support inside commands. This allows
400    commands to create functions inside the <cmd_name>.pl files. There are
401    now also standard function names that can do special things.
402 24Jul13=======================================================================
403 1. Alter default node address in client.c from "localhost" to "127.0.0.1".
404 21Jul13=======================================================================
405 1. Fix Msg.pm to allow IPV6 addresses again (how did it ever work?).
406 2. Add latest CTY2307 prefix changes.
407 3. Other changes including (some) more prefix files, 4mm band data and 
408    DXSql/Pg.pm
409 4. Add ip address in links.pl
410 31May12=======================================================================
411 1. Added CTY2210 prefix changes
412 29May12=======================================================================
413 1. Added CTY2209 prefix changes
414 10Apr12=======================================================================
415 1. Added DXSql/Pg postgres Spot collection interface from Wijnand PD0MZ. 
416 2. Add CTY2206 prefix changes
417 13Mar12=======================================================================
418 1. add CTY2204 prefix changes + new wpxloc.raw
419 12Mar12=======================================================================
420 1. Check database operations on MySQL/SQlite3.
421 2. Add ipaddr field to spot table if not present.
422 3. Add ipaddr field from PC61 to database stored spots.
423 09Mar12=======================================================================
424 1. Try to trap unblessed references on receipt of PC34s
425 15Feb12=======================================================================
426 1. Add CTY2202 changes
427 25Jan12=======================================================================
428 1. Add CTY2201 changes
429 21Dec11=======================================================================
430 1. Add CTY2118 changes
431 20Dec11=======================================================================
432 1. fix strange startup repeating lockfile issue where (somehow) there is an
433 empty (but existing) lockfile, from GB7YDX.
434 29Nov11=======================================================================
435 1. fix shutdown() in Msg.pm
436 2. Add CTY2117 changes
437 05Nov11=======================================================================
438 1. Add CTY2116 changes
439 04Nov11=======================================================================
440 1. Add CTY2115 changes
441 20Oct11=======================================================================
442 1. Add CTY2113 Changes
443 02Oct11=======================================================================
444 1. change 40m bandplan after some input from Martin, ik2rmz
445 2. Add CTY2112 changes
446 25Jul11=======================================================================
447 1. add CTY2109 changes + wpxloc.raw for ST0
448 2. add CTY2110 changes
449 24May11=======================================================================
450 1. Add CTY-2108 prefixes
451 04Apr11=======================================================================
452 1. After being poked by Brendan EI6IZ, add outgoing IPV6 connect() handling
453 29Mar11=======================================================================
454 1. Add CTY-2106 prefixes
455 16Mar11=======================================================================
456 1. Add CTY-2105 prefixes
457 10Mar11=======================================================================
458 1. Add CTY-2104 prefixes
459 01Mar11=======================================================================
460 1. Add CTY-2103 prefixes
461 31Oct10=======================================================================
462 1. Increase PC92 A/D "slug" time to 5 minutes.
463 29Oct10=======================================================================
464 1. Allow Jim AD1C to track the changes to the cluster in realtime using the
465 debug system (set/debug cluster).
466 27Oct10=======================================================================
467 1. fix chat problem introduced in the last update
468 25Oct10=======================================================================
469 1. Drop PC12s purporting to originate at nodes that do PC9x (suggestion from
470 Lee VE1CC).
471 2. Increase default dup age for announces from 5 -> 18 hours.
472 3. add CTY 2009 cty.dat data.
473 4. Stop downgrading and sending CHAT messages on PC12 groups as it appears
474 that this is yet another "standard" that isn't universally understood.
475 23Oct10=======================================================================
476 1. add dbexport command to allow the export of ak1a style databases to a
477 file.
478 2. add dxqsl_import and dxqsl_export commands to allow the import and export
479 of sh/dxsql qsl manager data extracted from spots as they pass through.
480 04Oct10=======================================================================
481 1. add CTY-2007 prefix list
482 04Oct10=======================================================================
483 1. incorporated the major prefix release CTY-2006 from Jim AD1C
484 17Jun10=======================================================================
485 1. Add ip address to dxspots and default to PC61 output to dxspider nodes.
486 2. Allow 4 letter callsign portions again.
487 16Jun10=======================================================================
488 1. Increase default ephemeral dupe time for PC41 and such like lines.
489 2. Include CTY-2004 updates.
490 08Apr10=======================================================================
491 1. Modify console.pl so that it works in a Windows Cmd window. Get a Windows
492 Curses ppd from: http://cpan.uwinnipeg.ca/dist/Curses.
493 18Mar10=======================================================================
494 1. Make privilege 0 "stick" if set on nodes
495 13Mar10=======================================================================
496 1. try to fix AGW crashes caused by peerhost looking at the wrong thing.
497 2. Add more ax25 fixes for peerhost
498 03Mar10=======================================================================
499 1. add IP addresses to connecting PC92 A addresses and log them
500 2. add CTY-2002 prefixes
501 27Nov09=======================================================================
502 1. Add 500khz band as suggested by Béla, HA5DI.
503 2. Add CTY-1923 prefixes
504 26Nov09=======================================================================
505 1. add ip address to PC92 A records
506 25Nov09=======================================================================
507 1. Change sh/qrz to use the xml interface. You will have to subscribe to
508 the xml interface - see http://www.qrz.com/XML/index.html for more info.
509 2. Remove (bodged) forced encoding to iso-8859 on incoming text. More
510 subtle handling will be required.
511 3. Add CTY-1922 prefixes
512 14Nov09=======================================================================
513 1. Add CTY-1921 prefixes
514 2. allow -SSID values on set/badnode
515 27Aug09=======================================================================
516 1. Add CTY-1913 prefixes
517 2. Limit Route::config to 10 levels (as default)
518 08Jul09=======================================================================
519 1. Add CTY-1912 prefixes
520 26Jun09=======================================================================
521 1. Add CTY-1911 prefixes
522 14Jun09=======================================================================
523 1. Add CTY-1910 prefixes
524 04Jun09=======================================================================
525 1. removed warnings from debug.c from the C Client.
526 2. Add CTY-1909 prefixes
527 02Jun09=======================================================================
528 1. Add CTY-1908 prefixes
529 29May09=======================================================================
530 1. Add CTY-1907 prefixes
531 19May09=======================================================================
532 1. Add CTY-1905 prefixes
533 15May09=======================================================================
534 1. Add CTY-1904 prefixes
535 2. Accommodate "official" git command syntax in issue.pl
536 29Dec08=======================================================================
537 1. Add show/motd command as requested by Ian G0VGS.
538 2. add CTY-1817 prefixes
539 17Nov08=======================================================================
540 1. Fix sh/425 to work with new server
541 2. add CTY-1814 prefixes
542 21Oct08=======================================================================
543 1. Add CTY-1811 prefixes
544 04Oct08=======================================================================
545 1. set $main::maxconnect_node = 0 as default. It's causing too much aggro..
546 02Oct08=======================================================================
547 1. Add set/maxconnect command to allow the defaults to be overridden for
548 individual users/nodes.
549 2. Make sure that the check really is for incoming connections only...
550 01Oct08=======================================================================
551 1. added CTY-1809 prefix data
552 2. added new config variables to allow an incoming users to have (as default)
553 up to 2 other connections to other nodes and incoming nodes up to 8 other
554 parents. Note that you can switch off this behaviour by setting
555 $main::maxconnect_user or $main::maxconnect_node = 0 (or set them to whatever
556 you need).
557 28Jun08=======================================================================
558 1. Made buddies work again on PC92.
559 26Jun08=======================================================================
560 1. added show/ik3qar command by Leo IZ5FSA. See comments in perl/Internet.pm
561 for setup instructions (note that you will have to copy these lines to
562 local/Internet.pm before it will work).
563 2. Send talks to every node a user is logged onto.
564 24Jun08=======================================================================
565 1. Change the route finding algorithm completely. No more recursion. No more
566 tree searching. It now gives you answers even on a partial cluster map. Oh
567 and the answers are correct, instead on completely random.
568 2. Put back (maybe some of) US State handling.
569 3. Add CTY-1806 prefix data
570 28May08=======================================================================
571 1. remove "recursion limit" message from Route.pm
572 28May08=======================================================================
573 1. Improve the detection of short exact callsigns that are out of prefix area
574 (eg K7A) (thank you FCC).
575 2. Improve long line handling on console.pl
576 3. Add CTY-1805 cty.dat
577 26May08=======================================================================
578 1. Put a hard limit on the depth of searching for routes
579 2. Add CTY-1804 prefix changes
580 13May08=======================================================================
581 1. add disc users|nodes|all so that each of these classes can be disconnected
582 in one command. From a request by Luigi IK5ZUK.
583 12May08=======================================================================
584 1. add 'exact' keyword on sh/dx to allow for an exact match to a callsign.
585 From a request by Robert HB9DZA.
586 10May08=======================================================================
587 1. add some privileges to (un)set/bad* and show/bad* commands. Thanks to
588 Mauro IV3SCP for pointing this out to me.
589 06May08=======================================================================
590 1. Finally made the incompatible change of changing DXUser->get* to
591 DXUser::get*. This will break any third party addons or commands use these
592 commands.
593 2. Change version to 1.55
594 3. Drop the lower limit of 60m to 5100 after Dave G7RAU pointed out usage.
595 (see http://www.bandplans.com/index.php?band=60)
596 22Apr08=======================================================================
597 1. Added two Xmas Is calls.
598 15Apr08=======================================================================
599 1. added CTY-1803 changes
600 25Mar08=======================================================================
601 1. Include some cty.day changes
602 19Mar08=======================================================================
603 1. Include CTY-1802 cty.dat changes from Jim AD1C
604 29Feb08=======================================================================
605 1. Fix crash on rcmd of an invalid command.
606 25Feb08=======================================================================
607 1. Arrange for AGWMsg to retry connection either if the AGW engine isn't
608 loaded on startup or it disappears for some reason and restarts.
609 19Feb08=======================================================================
610 1. Added CTY-1801 cty.dat data.
611 2. Fix problem with entering non-ascii data and then executing commands that
612 are guessed from the "cleaned up" version of the string. Now if you enter
613 commands with invalid characters, it will error immediately.
614 3. fix a problem detecting IPV4 localhost on IPV6 enabled systems.
615 10Feb08=======================================================================
616 1. sort sh/node output. Also show more information.
617 05Feb08=======================================================================
618 1. Added a Windows only BPQ interface from the man himself: John G8BPQ.
619 See some instructions in /spider/txt/spiderBPQ_en.txt for how to use it.
620 07Jan08=======================================================================
621 1. more changes to cty.dat
622 07Jan08=======================================================================
623 1. added TO5FJ to cty.dat (under orders from Jim AD1C :-)
624 05Jan08=======================================================================
625 1. Made necessary change to get DXSpider to (seem to) work in perl 5.10
626 27Dec07=======================================================================
627 1, added CTY-1711 prefix changes (and new wpxloc.raw) from Jim AD1C.
628 25Nov07=======================================================================
629 1. Fix a crash on receiving an rcmd from an new node.
630 21Nov07=======================================================================
631 1. Added CTY-1710 prefix changes
632 19Nov07=======================================================================
633 1. change MRTG graphs to be based on GMT, not localtime. This allows one to
634 more easily compare debug data with traffic graphs.
635 2. Add a create/user command to just add a plain user.
636 17Nov07=======================================================================
637 1. Add Local::ann() as requested by Felipe PY1NB.
638 16Nov07=======================================================================
639 1. add CTY-1709 prefix changes
640 2. added extra checking for the time stamp on PC9x sentences. These must now
641 be within 15 minutes (configurable) of this node's time to be accepted.
642 3. made show/newc terminal width aware.
643 24Oct07=======================================================================
644 1. Added CTY-1708 prefix changes
645 23Oct07=======================================================================
646 1. Added CTY-1707 prefix changes
647 15Oct07=======================================================================
648 1. prevent PC61 from propagating outside spider boxes.
649 2. simplify the regex for sh/contest to allow it to work on perl < 5.8.x.
650 09Oct07=======================================================================
651 1. Added *VERY* important change to prevent loops on PC9x sentences.
652 06Oct07=======================================================================
653 1. added the possibility of having a motd_ax25 especially for sending to
654 radio connections after a suggestion by Paolo YV1DIG.
655 05Oct07=======================================================================
656 1. Handle PC61 from VE1CC clusters as PC11.
657 01Oct07=======================================================================
658 1. fix .gtkconsole_data creation bug.
659 27Sep07=======================================================================
660 1. Fixed gtkconsole to split out all the windows. See
661 /spider/gtkconsole/README for installation and usage instructions. This
662 program will work on both Windows and Linux provided the extra Gtk2 perl
663 libraries + dependencies are installed. Instructions for getting them are in
664 the README file.
665 25Sep07=======================================================================
666 1. Fix mrtg command so that it does not require /var/lock (which anyway gets
667 removed and recreated on boot - and the debianised mrtg does not recognise
668 that) nor /var/lib/mrtg for the confcache (whatever that is).
669 24Sep07=======================================================================
670 1. fix error message on disconnect and, BTW, fix the cause of premature
671 disconnections in the new PC92 code.
672 22Sep07=======================================================================
673 1. fix mrtg script so that it sets LANG='C', in addition, it appears that you 
674 will need to create a /var/lock/mrtg and /var/lib/mrtg directory, both with
675 chmod 01777 /var/lock/mrtg /var/lib/mrtg. They may already exist but without
676 the correct permissions.
677 15Sep07=======================================================================
678 1. Add *optional* INET6 connectivity. In order to use this you must load
679 IO::Socket::INET6 and its dependencies from CPAN or get the distro's packaged
680 versions. I used 'sudo aptitude install libio-socket-inet6-perl' for ubuntu
681 (which should work for debian as well), for fedora/rpm based systems
682 'sudo yum install perl-IO-Socket-INET6' or near equiv should work. This has
683 been done quite simplistically, but it seems to work.
684 10Sep07=======================================================================
685 1. Remove warnings for EINPROGRESS etc for Windows perl 5.8.
686 2. Try to see if using just one lastid is viable in all situations. If it is
687 then this will cure the talk problem.
688 20Aug07=======================================================================
689 1. add cty.dat + wpxloc.raw changes for CTY-1706.
690 31Jul07=======================================================================
691 1. extend 60m band slighty and add ssb section.
692 2. add a new cty.dat (CTY-1705) from Jim AD1C.
693 27Jul07=======================================================================
694 1. Added Angel's changes to Messages for Spanish (finally).
695 25Jul07=======================================================================
696 1. don't clear out routing tables on shutdown. This should speed that up.
697 24Jul07=======================================================================
698 1. Try to target PC93 (the combined talk/ann/chat sentence) better. Prevent
699 PC12 chat going to non-dxspider and non-ak1a nodes. None of the others seem to
700 handle it correctly (Lee VE7CC: do you?).
701 2. a few other tidyups,
702 see: http://www.dxcluster.org/cgi-bin/gitweb.cgi?p=spider.git
703 for details.
704 18Jul07=======================================================================
705 1. Change the meaning of set/isolate. Set/isolate now works in both directions
706 in that an isolated node will only have its local config remembered and will
707 only be sent this nodes local config. This is exactly equivalent to both
708 ends setting set/isolate. If that is already the case then there should be
709 no noticeable change. Any extra that the far node sends, over and above its
710 local config will now be ignored.
711 17Jul07=======================================================================
712 1. remove dupefile on startup and on ending the node. Add clear/dupefile
713 command to allow people to do it at runtime as well.
714 12Jul07=======================================================================
715 1. Change disconnection code so that nodes that are no longer routable are
716 (all) cleared out.
717 2. Add help for sh/band and also allow query of individual band or regions.
718 11Jul07=======================================================================
719 1. improve speed of sh/c/n
720 2. remove all $Id$ strings from cmd tree
721 09Jul07=======================================================================
722 1. remove check for PC93 from legacy nodes. This will allow PC10s to be
723 propagated correctly. Probably.
724 08Jul07=======================================================================
725 1. put in a temporary fix to the crashing on incoming PC10 talks, whilst I
726 try to work out how it is happening.
727 06Jul07=======================================================================
728 1. re-arrange id checking so that it is more logical and check that config
729 records, that can be an hour coming, are not thoughtlessly ignored, thus
730 causing nodes to time out.
731 2. Make sure that the 'over midnight' distance calculation actually does what
732 is required!
733 3. Tart up version number reporting in sh/node.
734 4. Pass the correct number of parameters in pc93 -> pc12 conversions which
735 should stop returning PC12s coming out as SYSOP announces.
736 05Jul07=======================================================================
737 1. Try to make sure that the node config broadcasts are actually sent...
738 03Jul07=======================================================================
739 1. fix unwanted dupe notifications if a PC12 comes back in on a loop.
740 02Jul07=======================================================================
741 1. Add a new command to show the contents of the cmd_cache. This allows those
742 people whom develop their own commands to see which version they are using.
743 It is called show/cmd_cache (or sh/cmd for short).
744 2. Add some extra info to the links command. Show whether a link is isolated
745 and also whether it has filters (if applicable) and whether these are
746 personalised ('Y') or the default node_filter ('D').
747 29Jun07=======================================================================
748 1. If a node is set/isolated then make sure that a) pc9x is not advertised
749 and b) pc9x is ignored.
750 2. Add (un)set/wantpc9x command (but please don't use them without talking
751 to me first), here be dragons!!
752 25Jun07=======================================================================
753 1. make sure that a C record is sent for node call every update period.
754 2. make announces work again (probably).
755 3. Fix long standing possibility of a crash with a new user.
756 4. Add continuous chatting (like talk with no message eg 'chat #9000' just on
757 its own with no message).
758 24Jun07=======================================================================
759 1. Fix the routing algorithms to allow route selection in the face of
760 incomplete trees of nodes (trees as produced by sh/newc).
761 2. Fix the obscount issues which mean that many nodes get timed out after 3hrs.
762 3. Extend 4m to 70631 to cover CT.
763 23Jun07=======================================================================
764 1. fix basic deduping algorithm
765 2. rearrange node startup protocol to avoid issuing unnecessary PC92 and also
766 to spread the PC92Cs out for dependent nodes.
767 3. increase the PC92C update time to 1 hour.
768 4. fix sh/route, with a view toward replacing Route::alldxchan.
769 5. downgrade a link advertising pc9x if no PC92C forthcoming from it back to
770 old style protocol and carry on, rather than disconnecting (protocol facist
771 that I was).
772 6. Fix isolated pc9x nodes so that they remain in oldstyle protocol.
773 22Jun07=======================================================================
774 1. Fix Alias for sh/mydx (so it isn't the same as sh/myfdx).
775 2. Fix sh/c/n uninitialised variable message
776 3. Fix (and improve) sh/newc gb7 problem
777 4. Fix broken set/sys_qra command
778 21Jun07=======================================================================
779 1. merge back SIMPLEROUTE branch to issue as official 1.54.
780 18Jun07=======================================================================
781 1. add a optional dependency on Encode (included in 5.8.x) to encode strings
782 to latin1 for deduping purposes, hopefully getting rid of some dupes.
783 2. add a default INPUT filter for a node (by_dxcc <node's country>) if no
784 specific or default INPUT node exists.
785 14Jun07=======================================================================
786 1. prepare for git repository and moving of anon cvs repository to
787 scm.tobit.co.uk.
788 13Jun07=======================================================================
789 1. start using git.
790 2. change all the version / build numbering.
791 11Jun07=======================================================================
792 1. Change the frequency normalisation for DX Spot dupe checks so that any
793 decimal part is thrown away (in other words: truncate the freq to integer khz)
794 20May07=======================================================================
795 1. add 1704 cty.dat
796 08Apr07=======================================================================
797 1. add CTY-1703 cty.dat
798 2. alter the way the dupefile deletion is done.
799 18Mar07=======================================================================
800 1. change URL in show/425.
801 04Mar07=======================================================================
802 1. add CTY 1702 prefix data files
803 22Feb07=======================================================================
804 1. add show/myfdx to Aliases.
805 15Feb07=======================================================================
806 1. allow convkeps.pl to parse NORAD keps files.
807 22Jan07=======================================================================
808 1. disable default propagation of PC9x sentences
809 2. simplify PC17 handling
810 16Jan07=======================================================================
811 1. back ported a change to PC16 handling so that a locally connected node's
812 info clears out and generally overrides any residual PC16 info gathered from
813 elsewhere.
814 15Jan07=======================================================================
815 1. added CTY-1701
816 07Jan07=======================================================================
817 1. use IO::Socket blocking where available and switch off or ignore all
818 attempts to block.
819 05Jan07=======================================================================
820 1. increase default ephemeral deduping on PC15 to 6 minutes (from 2).
821 23Nov06=======================================================================
822 1. added wrapping to over length lines in console.pl.
823 03Nov06=======================================================================
824 1. add CTY-1609 changes
825 2. add back Geo::Taf code with submitted mods
826 3. add new version of the sh/425 code using the new database location.
827 09Oct06=======================================================================
828 1. fix problems with bad filters pointed by Thomas DL3SBB.
829 27Jul06=======================================================================
830 1. merge in official issue version of wpxloc.raw (with one change: 4U1V).
831 26Jul06=======================================================================
832 1. incorporated Jim AD1C's spiffy new, unified, wpxloc.raw and version 
833 1605 of cty.dat.
834 21Jul06=======================================================================
835 1. Added the (now) all new gtkconsole program, with all the changes needed in
836 dxspider to run it (yet another cmd interface (sigh)). You will need gtk2-perl
837 installed (most modern linux distros do this automatically). The big news is
838 that this will work on Windows boxes as well if you install the Gtk libraries
839 as per: http://gtk2-perl.sf.net.
840 03Jun06=======================================================================
841 1. Added changes to wpxloc.raw (prefixes) suggested by Jim AD1C. 
842 2. Made a change to prevent xml data being interpreted unless we are
843 configured for it.
844 3. Change the buddy messages after a suggestion from Angel EA7WA.
845 02Apr06=======================================================================
846 1. incorporated cty-1604 data.
847 29Mar06=======================================================================
848 1. fix sh/muf that I broke in the previous change
849 26Mar06=======================================================================
850 1. Arrange for any online buddies to be displayed when a user logs on.
851 2. Try to reduce the amount of POSIX stuff that is loaded to just that which
852 is required.
853 23Mar06=======================================================================
854 1. Added cty-1603 data.
855 2. On the advice of Jim AD1C I have changed around some things in wpxloc.raw
856 that affect 8J,CT2,KC4,KG4,KG6,ZK1 and ZS2. These should now show the more 
857 likely canonical prefix.
858 3. On the advice of Tom WB8ZRL, I have made BW an alias for BV (Taiwan) and 
859 made some other changes to affect the selection between the mainland and the
860 island more reliable. 
861 10Mar06=======================================================================
862 1. fix sh/c/n.
863 2. Add new Spanish translations by Angel EA7WA.
864 07Mar06=======================================================================
865 1. Add the node call to remote tell_login and tell_buddie calls.
866 06Mar06=======================================================================
867 1. Fix warning on empty PC19s.
868 2. Add new command set/local_node to allow people to see logins/outs on other
869 related nodes.
870 3. Add new command set/buddy to allow people to see when their favorite 
871 chum(s) logins/out.
872 4. Arrange filter reading so that the following order is followed for users: 
873 callsign, callsign less ssid, user_default. Nodes are unchanged. 
874 14Feb06=======================================================================
875 1. Turn R and SFI around in mrtg.pl.
876 13Feb06=======================================================================
877 1. Updated prefixes with cty-1601 data.
878 2. Fixed qth in show/muf so that it shows the correct qth (if known).
879 3. Try to make the state machine in convkeps.pl deal with more variations
880 of the 2 line keps sets that are available on line. Also give a sensible
881 error message if no keps were actually decoded.
882 4. Update the base keps to the latest set of AMSAT keps 06033.
883 04Feb06=======================================================================
884 1. Explicitly ignore spots with lower case characters in the spotted call
885 01Feb06=======================================================================
886 1. Explicitly ignore spots with blank spotted callsigns
887 26Jan06=======================================================================
888 1. Fix divide by 0 error in DXBearing (how come this has taken so long to
889 appear?).
890 22Jan06=======================================================================
891 1. Remove +<prefix> from the fronts of comments to fix LoTW dupes.
892 18Jan06=======================================================================
893 1. Fix spurious announce from previous year appearing in sh/ann.
894 15Jan06=======================================================================
895 1. Fix some obviously long standing problems with create_sysop.pl and also
896 with initialising the User file.
897 2. Fixed the problem with certain things not being shown in sh/log (because of
898 a regex that rejected too many things).
899 3. Speeded up sh/log quite a bit at the same time.
900 4. Add a default limit of the last 36 months for sh/log querys. 
901 14Jan06=======================================================================
902 1. undo frequency rounding change, it causes more problems than it solves.
903 11Jan06=======================================================================
904 1. Fixed problem with badspotters doing ann/full as pointed out by Luigi 
905 IK5ZUK.
906 07Jan06=======================================================================
907 1. Fixed problem with the standalone 'showdx' program pointed out by Leo,
908 IZ5FSA.
909 2. Fixed rounding problem on entering spots as pointed out by Ron N5IN.
910 3. Fixed problem with badspotters sending DX as pointed out by Luigi IK5ZUK.
911 4. Added some extra logging for swearing so that we can see what lines used
912 which swear words. Hopefully this will allow sysops to refine their swearing 
913 filters more easily. 
914 06Jan06=======================================================================
915 1. Fix problem with rcmd <call> sh/fdx
916 27Dec05=======================================================================
917 1. put some more flesh on the SQL stuff (which may turn out to be a bit of a
918 red herring as it doesn't appear to be significantly faster (for spots) than
919 the existing code).
920 21Dec05=======================================================================
921 1. Add start of optional SQL working.
922 2. Fix BadWords so that the simple word check splits words on word boundaries.
923 13Dec05=======================================================================
924 1. upissue version no to 1.52
925 07Nov05=======================================================================
926 1. Fix warnings on filtering spots where the filter was looking at US states
927 and there is no US state in the spot. 
928 2. Fix the dupes caused by having a prefix in the last characters of the 
929 comment.
930 01Nov05=======================================================================
931 1. add log2csv.pl for printing out logfiles
932 25Oct05=======================================================================
933 1. Incorporated the cty.dat from Jim dated today (25Oct05).
934 08Oct05=======================================================================
935 1. Reject PC11s with blank spot callsigns
936 01Sep05=======================================================================
937 1. Change the logic of propagating WWV broadcasts. Now all non-input filtered
938 PC23s will be sent on. Previously only the first successful new WWV was 
939 rebroadcast.
940 2. fix the problem with by_dxcc and origin_dxcc not working on WWV.
941 29Aug05=======================================================================
942 1. try something else to resolve/prevent more of these spot dupes. It appears
943 that there is software out there chopping off variable amounts from the ends
944 of comment fields. This makes the task of detecting dupes that much harder.
945 10Aug05=======================================================================
946 1. trim dx spot duplicate length after normalisation
947 2. Do the same for announces
948 08Jul05=======================================================================
949 1. new CTY.DAT encorporated
950 27May05=======================================================================
951 1. change copyright in dbg message at startup.
952 25May05=======================================================================
953 1. Added a means to import a script of arbitrary commands to allow external
954 programs to do stuff.
955 23Mar05=======================================================================
956 1. fix (un)set/badspotter so that it only stores non-ssid calls.
957 2. mention action on talk and ann/full in help.
958 22Mar05=======================================================================
959 1. Fix ? so it works again.
960 2. Fix Aliases for sh/c so they are correct
961 3. Fix sh/connect for AGW ports and other niffnaffs.
962 22Mar05=======================================================================
963 1. fixed sh/c/node sh/c/a and sh/newc/n.
964 21Mar05=======================================================================
965 1. log AGW port on connection
966 2. merge in latest (2Mar2005) cty.dat 
967 3. fix command searching so it does not pick up false positives for commands
968 with / in them in directories that don't have that.
969 4. Important security change.
970 5. add missing input filter for WWV
971 16Mar05=======================================================================
972 1. make the correct correction to the DL entry in wpxloc.raw (left out the
973 'N' of 'North' in the latitude).
974 2. Severely reduce the dupes caused by some of the badly configured / written
975 spot suckers out there. 
976 13Mar05=======================================================================
977 1. There has been a mix up in the Aranea1 branch. I have managed to merge a
978 change that I have been meaning to do for ages. I have now made that change
979 here.
980 27Feb05=======================================================================
981 1. fix duping on bad spot suckers that copy the prefix that is put at the end
982 of the comment section by AR-C nodes becoming the whole comment. 
983 26Feb05=======================================================================
984 1. Added show/grayline command from Steve K9AN. This is also aliased to
985 show/greyline :-)
986 2. fix spot dupe ambiguity on spotter having an SSID (remove it).
987 25Feb05=======================================================================
988 1. Changed the way spot deduping is done. This is likely to make deduping much
989 stricter. In essence a person cannot spot the same call on the same frequency
990 more than once an hour (configurable) unless he makes a (non-duped) comment
991 as well. 
992 2. Added Swains Island
993 3. Added TO4G for Glorioso 
994 19Feb05=======================================================================
995 1. changed ssb allocation on 40m to add missing 5Khz.
996 2. Change sh/425 to Leo, IZ5FSA's requirements.
997 08Feb05=======================================================================
998 1. possibly fixed the multiple condition problems on sh/dx
999 2. added some FAQs.
1000 05Feb05=======================================================================
1001 1. Fix a long standing (ie since the first bulletin was sent) bug with old
1002 mail not being deleted until a restart was done.
1003 2. As well as a duplicate check on existing bulletins, I have added a check 
1004 the message is not (already) too old. 
1005 3. fix problem for perl < 5.6 in Thingy.pm 
1006 03Feb05=======================================================================
1007 1. Added latest Spanish translations courtesy of Angel EA7WA.
1008 2. Force all languages to use pr in en in Messages, as the prompt is
1009 the same for all.
1010 19Jan05=======================================================================
1011 1. More Spanish changes by Angel, EA7WA.
1012 2. add language dependant motd files. You can now have motd_{lang} and 
1013 motd_nor_{lang} (eg for Spanish: motd_es and motd_nor_es) for normal and
1014 non-registered (if you use registration) users respectively. Based on an idea
1015 from Angel, EA7WA.
1016 18Jan05=======================================================================
1017 1. Added missing Spanish translation courtesy of Angel EA7WA.
1018 2. Really incorporate latest cty.dat (11Dec04) as opposed to merely thinking 
1019 I had (and still add 3X0Y as well).
1020 3. fix ? all in non english language
1021 4. Alias sh/st and sh/sta back to show/station from show/startup.
1022 17Jan05=======================================================================
1023 1. Added 3Y0X to Peter Island 3Y in cty.dat.
1024 16Jan05=======================================================================
1025 1. Added the changes to Canadian Prefixes so that usdbraw.gz from Charlie
1026 K1XX's website (http://dxc.k1xx.com/download) dated after 1Jan05 will include
1027 Canadian city and province data as well the existing US data.
1028 2. Improve the apropos command to take better account of language and do
1029 a better job of only showing english stuff for commands where there really is
1030 no local language version.
1031 15Jan05=======================================================================
1032 1. knocked over a few possible ways of people annoying other people thru
1033 the use of scripts
1034 2. Fixed problem in DXCommandmode with an indirect call that did not work
1035 in perl < 5.8.0.
1036 3. Add Spanish translations of new scripting commands in help, from Angel 
1037 EA7WA. 
1038 13Jan05=======================================================================
1039 1. Fixed prompting in languages other than English.
1040 2. Fixed language problem with spoof, but that simply hides a whole can of
1041 worms that I shall have to address later.
1042 3. Added make clean to src Makefile (!!!)
1043 12Jan05=======================================================================
1044 1. Add $main::bumpexisting variable which allows a new connection for a user
1045 call to disconnect an existing connection with the same call. The default for
1046 this variable is 'true' (1). This means that existing behaviour has changed.
1047 set/var $main::bumpexisting = 0 to return to original behaviour.
1048 2. Remind a user every hour (as default) that they have new messages.
1049 set/var $DXCommandmode::msgpolltime = 3*3600 to set it to 3 hours.
1050 3. Allow some substitutions in set/prompt (call, date, time and
1051 cluster call) and add dxspider just before the > as standard. 
1052 4. Add $main::allowdxby variable so that sysops can switch off the 
1053 'DX BY <othercall' command. It is set to 0 (ie disabled) by default. This
1054 is for sysops who don't want to bump privilege to allow it. That still works
1055 as before.
1056 5. Fix the bug in 'dx by <call>' that causes only the first word of the 
1057 comment to be recorded.
1058 6. Fix bug counting backwards over a leap year in Julian.pm which meant that
1059 sh/dxstats doesn't start at 'yesterday' anymore.
1060 7. Added set/startup and show/startup commands to allow users and sysops
1061 to create and display startup scripts. There is also an unset/startup to
1062 remove a script.
1063 27Dec04=======================================================================
1064 1. add improved VE data from Charlie K1XX. You should update usdb as well.
1065 22Dec04=======================================================================
1066 1. Changed all the names of US prefixes to be prepended with their State code.
1067 thus "Alaska-KL7" becomes "AK-Alaska-KL7". 
1068 21Dec04=======================================================================
1069 1. added AGW port no after an example by IW5DEZ.
1070 2. modified links command to suggestions by Charlie K1XX.
1071 3. added show/groups command to show recently used chat groups by Tommy 
1072 SM3OSM.
1073 4. fixed T8 / V6 ambiguity (at least basically).
1074 20Dec04=======================================================================
1075 1. updated create_prefix.pl to only use (supplied) wpxloc.raw and cty.dat
1076 2. Added IG9, GM/S, 4U1V and some other detail changes to make it compatible
1077 with cty.dat.
1078 3. regenerated prefix_data.pl with updated wpxloc.raw and cty.dat 11Dec04.
1079 17Dec04=======================================================================
1080 1. add undocumented special command for VE7CC.
1081 10Dec04=======================================================================
1082 1. Included fixes sent in by David, N9KT for the new DB0SDX site.
1083 2. removed redundant "rm *bys" and "rm *cys" from Spot::init().
1084 09Dec04=======================================================================
1085 1. fix show/mydx properly this time (and test the fix!)
1086 2. fix the default in show/qrz
1087 06Dec04=======================================================================
1088 1. fix show/mydx if there is no defined spotfilter
1089 07Oct04=======================================================================
1090 1. added the ability for people to import chat from external programs.
1091 create a directory called /spider/chat_import, make sure it is writable
1092 by any applications that might dump stuff in there (chmod 1777 
1093 /spider/chat_import on *nux). Put a file with a sensible name in there;
1094 the first part of the name will be the chat group to whom the message will
1095 be sent. So solar.txt.12325 = SOLAR. Announces can also be sent to local, all
1096 and sysop (ie files whose name begins with those names). Each line in the
1097 file becomes a chat line or an announce. See importwwv.pl for an example.
1098 DO NOT USE importwwv.pl, I am already using it and if you do as well, people
1099 will get duplicates which will ANNOY THEM!!! It is just an example.
1100 23Aug04=======================================================================
1101 1. add the start of an alternative routing engine (RouteDB)
1102 20Aug04=======================================================================
1103 1. Added new protocol specification to techdoc
1104 17Aug04=======================================================================
1105 1. change 'fo' alias in Aliases 
1106 31Jul04=======================================================================
1107 1. add a load of .cvsignore lines to reduce the updating noise
1108 30Jul04=======================================================================
1109 1. make sure that // is not converted to / in command lines.
1110 28Jul04=======================================================================
1111 1. backported 'Investigate' from NP branch so that only pingable nodes
1112 are 'believed'.
1113 2. added missing entries in Internet.pm for sh/contest
1114 26Jul04=======================================================================
1115 1. added extra variables to Internet.pm to allow the various internet query
1116 commands to alter the url that they use. 
1117 2. Added show/425 command from Leo, IZ5FSA.
1118 05Jul04=======================================================================
1119 1. fix rspfcheck on pc27
1120 23Jun04=======================================================================
1121 1. Add zone, by_zone, itu, by_itu, state and by_state searches to sh/dx
1122 2. Update manuals for CVS and new commands
1123 22Jun04=======================================================================
1124 1. Add the show/mydx command which *may* filter your spots using your
1125 spot filter.
1126 17Jun04=======================================================================
1127 1. alter processing of PC17 to see if they get distributed more than now.
1128 14Jun04=======================================================================
1129 1. fix previous fix of sh/dx
1130 09Jan04=======================================================================
1131 1. removed PC90 which was breaking various filtering things.
1132 2. added realtime spot formats to sh/dx (at least in basic form), this is
1133 activated by using either of the keywords 'real' of 'rt' on the command
1134 line. Also added sh/fdx as an alias.
1135 01Jan04=======================================================================
1136 1. move position of USDB init to get rid of an obscure bug pointed out by
1137 Charlie K1XX.
1138 2. Remove redundant documentation.
1139 31Dec03=======================================================================
1140 1. alter remote database handling to 'new standard'.
1141 30Dec03=======================================================================
1142 1. updated website to make it clear(er) that it all works under Windows (like
1143 wot Charlie said...).
1144 2. made the changes to the German Messages that Thomas DL3SBB sent me a 
1145 loooong time ago.
1146 3. made 'dx by' require at least privilege 1.
1147 29Dec03=======================================================================
1148 1. updated dxoldtonew.pl so that it takes an AK1A DX.DAT file (argument on
1149 command line or a default of /spider/data/DX.DAT and outputs the standard
1150 DXSpider format spot files. Please be warned that if any of these files 
1151 already exist, the data will be appended onto the end of the file. Please
1152 make sure you have backups or at least be aware that this may give strange
1153 results which may be 'out of order'.
1154 24May03=======================================================================
1155 1. Added more french translations from Robert (HB9BZA) and we now have some
1156 french help as well (also from Robert). A splendid effort. Thank you.
1157 16May03=======================================================================
1158 1. Correct Windows section of the Addendum file! (g0vgs)
1159 06May03=======================================================================
1160 1. Add Portuguese language courtesy of David CT1DRB (set/lang pt)
1161 2. Add French language courtesy of Robert HB9BZA (set/lang fr)
1162 02Apr03=======================================================================
1163 1. Fix some minor problems with the manuals (g0vgs)
1164 01Apr03=======================================================================
1165 1. Update filtering primer, changes by N3RD (g0vgs)
1166 28Mar03=======================================================================
1167 1. Added an excellent document on filtering to the manuals from Jim, W3BG
1168 2. started to remove old documents (g0vgs)
1169 27Mar03=======================================================================
1170 1. play around with sh/reg, sh/iso, sh/node and sh/lock to make them work
1171 slightly better with the new user format.
1172 2. update manuals (g0vgs)
1173 26Mar03=======================================================================
1174 1. add some ak1a compatibility changes to chat
1175 2. added help text for chat, join, leave and sh/chat.
1176 18Mar03=======================================================================
1177 1. minor corrections to manuals (g0vgs)
1178 17Mar03=======================================================================
1179 1. changed the regex determining what is a callsign to be more comprehensive.
1180 I would suggest re-running create_qsl.pl and then restarting.
1181 2. Fix chat so that output appears to users again and PC sentence conforms
1182 to standard. Add kludge to remove rewritten chats if I see them.
1183 3. Only send chat PCs to spider or AK1A boxes
1184 12Mar03=======================================================================
1185 1. added HC and QRZ.com to possible QSL locations, if you want to pick up
1186 historical info (ie start again), run create_qsl.pl after update and restart
1187 the node (which you will need to do anyway).
1188 2. changed the dbcreate command so that you can say: 
1189    dbcreate dxqsl cmd show/dxqsl
1190 which will allow local and remote users to execute commands as though they
1191 are Databases. You can also include these databases in chains. What you do
1192 with this, is ofcourse a moot question.   
1193 3. Update manuals (g0vgs)
1194 11Mar03=======================================================================
1195 1. Changed the name of show/qsl to show/dxqsl.
1196 2. Alter Commands_en.hlp to match new name and issue manual updates (g0vgs)
1197 10Mar03=======================================================================
1198 1. added show/qsl command. This command basically takes the normal output of
1199 sh/dx qsl and stores it in a database. In order to enable this command you 
1200 will require the Storable module to be loaded (you will already have done
1201 this with a bit of luck for the new DXUser interface). The suggested 
1202 procedure is (after the update) to run /spider/perl/create_qsl.pl (this may
1203 take a long time), then immediately it finishes, restart the node. The node 
1204 will then keep the database up to date automatically. If you are not 
1205 interested in historical data then you can leave this step out.
1206 2. added show/contest command from Tommy SM3OSM via Rene OZ1LQH.
1207 08Mar03=======================================================================
1208 1. Added chat, join, leave commands to allow general purpose conferencing
1209 on arbitrary subjects. [Translators: added e34,e35,join,leave]. There is
1210 currently no help. There is also sh/chat.
1211 28Feb03=======================================================================
1212 1. Charlie K1XX fixed the sh/iso, sh/reg and sh/node commands
1213 25Feb03=======================================================================
1214 1. backported switch processing for PC sentences
1215 24Feb03=======================================================================
1216 1. add the 'run' command and the 'privilege' command to allow sysops to 
1217 create scripts for people.
1218 2. fix show/user so that it doesn't moan about uninitialised variables
1219 23Feb03=======================================================================
1220 1. Added show/wm7d command (a US only callbook server) [by K1XX].
1221 2. Added a prototype show/db0sdx command (w.i.p).
1222 3. Added set/dxcq and set/dxitu zone commands [Translators: I have added
1223 dxcqu, dxcqs, dxitus and dxituu to Messages].
1224 4. Add new Commands to manuals (g0vgs)
1225 5. make sure that none of the above set/dx... commands are defaulted on
1226 22Feb03=======================================================================
1227 1. changed qrz.com address 
1228 2. added Charlie's [K1XX] new wpxloc.raw data stuff to get WA1, KC3 type 
1229 callsigns to work better.
1230 3. added in set/usstate command which prints any US state information 
1231 available on both the spotted (LHS of time) and spotter (RHS of time).
1232 [Translators: I have added usstates and usstateu to Messages].
1233 4. Merged in the new (faster) DXUser.pm.
1234
1235 [NOTE] this version will require Storable to be installed. On the
1236 other hand the code may work without, in a compatible way. This bit hasn't 
1237 been very well tested (the 'no Storable' condition that is). 
1238
1239 [*** NOTE ***] make sure that you do an 'export_user' BEFORE restarting
1240 you node. (Yes I know this is like a shrinkwrap licence, but I can't
1241 help it).
1242
1243 It will take several minutes for the node to restart when it does the 
1244 conversion from .v2 to .v3 user file. Please go and have a good strong cup
1245 of tea whilst this is happening.
1246
1247 If it fails then you will need to edit your latest user_asc file on (or about)
1248 line 25 it says: $ref = decode($f[1]); you will need to change that to 
1249 $ref = asc_decode($f[1]); and then do: perl user_asc
1250  
1251 DO MAKE SURE THAT you include subdirectories in your CVS update 
1252
1253 21Feb03=======================================================================
1254 1. moved the export of the users file to Wednesday night (GMT) to avoid 
1255 possible crashes and/or delays during a contest weekend.
1256 14Feb03=======================================================================
1257 1. some major changes to the structure of the manual documentation.  To bring
1258 the manuals into line, they now have the language tag (like 
1259 installation_en.html).  Hopefully someone will translate the manuals 
1260 eventually :-) I have left the old files in CVS for now to allow
1261 everyone to change any symlinks etc to the new filenames.  I will remove the
1262 old files shortly, please update your links! (g0vgs)
1263 2. docs makefile updated and commands2sgml.pl added from M0AZM.  This script
1264 inserts the helpfiles automagically from Commands_en.hlp into the relevant
1265 manuals. (g0vgs)
1266 3. Commands_en.hlp adjusted slightly to ensure at least one space before
1267 examples for the purposes of the above script. (g0vgs)
1268 4. Amend index.html to the right document names. (g0vgs)
1269 09Feb03=======================================================================
1270 1. Correct some typos in the manuals and update perl modules etc.  Also
1271 amend some help files to show correct syntax, around the 'clear' commands
1272 swapping [input] and <callsign> in each case, translators please take note.
1273 Thanks to Dave N3RD for info. (g0vgs)
1274 2. update the addendum for latest build and include information on additional
1275 modules required. (g0vgs)
1276 20Jan03=======================================================================
1277 1. changed sh/c so that, by default, it only shows the caller's country nodes
1278 sh/c all will show the old style full list. "sh/c sk gb" will show the config
1279 of all the GB and SK nodes.
1280 2. changed sh/stat and sh/route for nodes
1281 19Jan03=======================================================================
1282 1. I have made a fundemental change to the way PC19s are dealt with as a 
1283 result of the discussions on the mailing list. From now on, only nodes that
1284 issue PC16s will have PC19s propagated. If they *ever* issue a PC16 then from
1285 then on they are considered as being 'connected' and thus routable. No PC16
1286 and you have no route. This should stop all passive links being routed. For
1287 the few cases where you know that that is a very small node and it rarely has
1288 users, then you can do a set/routepc19 <node> to enable PC19 propagation. In
1289 the even more rare case of you wanting to prevent PC19s being routed thru 
1290 your node, you can use unset/routepc19. THIS IS NOT A SUBSTITUTE FOR ROUTE
1291 FILTERING!!!!! [translators: I have added wpc16s, wpc16u, wpc19s, wpc19u]
1292
1293 BTW the first time you connect again you will notice a separate PC19 go out
1294 for each 'new' PC16 that the node sees. This is normal and will go away the
1295 second time the system needs to issue a PC19.
1296 2. Alter the export_user command to remove users that have no useful info
1297 and have not been seen for more than (default) 1 year.
1298 3. fix the problem of users on more than one node not being propagated
1299 4. remove spaces and all non-US ascii characters from PC41 for the dup check.
1300 5. put in check to see if the parent of a newly allowed PC19 is still there
1301 (this needs further investigation).
1302 17Jan03=======================================================================
1303 1. Fix problem with lines being left in the main input queue for a 
1304 disconnected/ing node.
1305 14Jan03=======================================================================
1306 1. Tidy up AUTOLOAD functions
1307 2. Make sure that empty PC16s are not sent on startup to a node.
1308 12Jan03=======================================================================
1309 1. add Czech language courtesy of Milan OK1XH
1310 06Jan03=======================================================================
1311 1. add the latest changes to the spider-web java interface from Rene, OZ1LQH.
1312 Please note that there is a change to the spider.cgi file this time so that
1313 the client show 'Connected to Node_Call' instead of the hostname.  You will
1314 need to update your cgi file when you update the changes.  Please make sure
1315 that you back up your old files first! (g0vgs)
1316 2. yet more changes to the java client from Rene :-)  Also added a makefile
1317 and a Changes file for the client in the spider-web directory.
1318 05Jan03=======================================================================
1319 1. fix some irritating messages caused by protocol loops in sh/c
1320 2. update copyright
1321 3. move GN from GJ to GI
1322 31Dec02=======================================================================
1323 1. Update files in the java client with fixes and additions from Rene, OZ1LQH
1324 05Dec02=======================================================================
1325 1. Fix SSID issues with AGWMsg.
1326 2. updated show/hftable, vhftable, hfstats, vhfstats and dxstats after K1XX
1327 sent in some sample code indicated new functionality he requires. Translators
1328 please note that the stat* messages have been changed and e33 added. I have 
1329 also added quite a bit of extra examples and things to the relevant HELP
1330 texts. It is now possible to search from any date for up to 365 days of data.
1331 You can get the information by prefix or by callsign or for ALL spots. 
1332 04Dec02=======================================================================
1333 1. updated sh/log to allow searching for more arbitrary strings such as IP
1334 addresses
1335 08Nov02=======================================================================
1336 1. update Keps.pm to reflect which satellites now come round in the weekly
1337 updates. I suggest that you copy this file to /spider/local and do a load/kep
1338 and you should lose all the 'old' satellites (eg MIR).
1339 08Nov02=======================================================================
1340 1. made some small mods to grepdbg and spot2csv.pl
1341 2. fix a possible DOS in dx command
1342 07Nov02=======================================================================
1343 1. allow three digit longitudes
1344 2. make a small change to see if messages now stay in place.
1345 3. make keep actually stick over a reboot and take it fully into account for
1346 deletions (translators: I added m18).
1347 4. try not to delete new messages (even if this is an update that reads 'old'
1348 messages with missing fields).
1349 29Oct02=======================================================================
1350 1. make sh/log et al a bit more efficient.
1351 2. fix dupe message in dx.
1352 3. update cty.dat to the latest, add k8T, K8O to KH8 and TX5BTY to FO/A
1353 4. clear cache on reload of prefixes
1354 25Oct02=======================================================================
1355 1. remove the dupefile automatically if it becomes corrupted
1356 2. instrument the startup slightly more
1357 21Oct02=======================================================================
1358 1. Fix msg aging.
1359 2. make the default pinginterval and obscount variable (set/var 
1360 $DXProt::pingint and $DXProt::obscount) 
1361 20Oct02=======================================================================
1362 1. remove dupe check on local sysop announces
1363 2. fix format errors on sh/muf for 5.8.0
1364 3. add new version of the administration manual that includes WinCVS with
1365 thanks to K1XX (g0vgs).
1366 17Oct02=======================================================================
1367 1. added new Spanish files for help and Messages from Angel, EA7WA.
1368 16Oct02=======================================================================
1369 1. decrease the default max length of PC16/19 to around 180 characters to be
1370 slightly friendlier to ARC, which seems to have a difficulty reconstructing
1371 lines from multiple packets. Also make the value settable via set/var.
1372 2. strip off blank spaces from the ends of lines of  command output.
1373 15Oct02=======================================================================
1374 1. made some detail changes to the raw USDB data and the routines that 
1375 generate and operate on them. There were some bugs involving a few 'missing'
1376 callsigns which been fixed. Also there were some, for our purposes, invalid
1377 callsigns in the database which have been removed (down to about 820,000 
1378 entries now). You should really update your database. 
1379
1380 The latest code now (conditionally; ie if you have it loaded it will use it)
1381 support Compress::Zlib on both *nux and Windows. The suggested procedure 
1382 is this:-
1383
1384 1. Download the corrected database from
1385    http://www.dxcluster.org/download/usdbraw.gz to somewhere like /tmp.
1386 2. update from CVS.
1387 3. Restart (on linux, just stop the node and *don't* restart on Windows).
1388 4. remove /spider/data/usdb.v1
1389 5. cd /spider/perl
1390 6. (perl) create_usdb.pl /tmp/usdbraw.gz (or wherever you put it)
1391 6a. If you don't have Compress::Zlib loaded then you will need to gunzip
1392     it manually and do: create_usdb.pl /tmp/usdbraw (not Windows :-)
1393 7. on linux, in a console window do: load/usdb, on windows: restart the node. 
1394 --
1395 2. Added set/usdb command to add adding or changing of a callsign in the USDB
1396 3. Stop dupe spots from the same spotter (with or without comment corruption)
1397 14Oct02=======================================================================
1398 1. added show/usdb command as a simple, direct interface to the information
1399 available in the USDB stuff.
1400 13Oct02=======================================================================
1401 1. A large change has occurred. There is now some (optional) US state recog-
1402 nition. This is in its early stages but appears to work for me. You will need
1403 to :-
1404
1405 1. download the database at http://www.dxcluster.org/download/usdbraw.gz 
1406 2. save it somewhere (/tmp, anywhere).
1407 3. Decompress it using your favorite program (gunzip / winzip) [call it
1408    usdbraw if winzip]{BE WARNED, some browsers may decompress it on the
1409    fly for you, you can tell; if it is 5Mb it is compressed - 16Mb not}.
1410 4. remove any /spider/data/user.v1 files lying around (at least for this
1411    first time.
1412 5. cd /spider/perl
1413 6. perl create_usdb.pl /tmp/usdbraw  (ie the UNCOMPRESSED file)
1414 7. Wait, I suggest some cups of tea are in order.
1415 8. Wait a bit more.
1416
1417 You don't need Compress::Zlib anymore, I assumed it was universal.
1418
1419 You will be able do this while the node is running somewhen. There is a 
1420 planned method of keeping the US DB up to date with smaller (ie < 15Mb) patch
1421 files once a week but you will have to wait a bit for the code to bed down 
1422 first. You can filter on routes, spots and announces using 'call_state' or
1423 'by_state' and a comma separated list of state codes. The HELP has been 
1424 updated (which may help...). 
1425
1426 Once you have run the create_usdb.pl you will need to restart.
1427
1428 If you don't need this, then don't run create_usdb.pl it will simply be
1429 a waste of time. The run-time version is 30Mb and has 840,000 odd entries
1430 in it. This does not replace or supplant sh/qrz (sorry Charlie [who put me
1431 up to this]). 
1432
1433 2. There are a number of other niff-naff changes which I hope will improve
1434 rather than hinder your user experience (including check forward as well as
1435 back for those speedy clocked dupes mentioned below).  
1436 12Oct02=======================================================================
1437 1. attempt to improve the "check back for 5 minutes to see if this spot is 
1438 the same as a previous one but for the time spotted" dupe check.
1439 2. improve the sh/vhftable and sh/hftable commands to allow you to enquire
1440 by dxcc country (using the relevant prefixes or dxcc country numbers).
1441 [note to translators, I have changed the help text and Messages tags for
1442 stat*].
1443 07Oct02=======================================================================
1444 1. fix problem with (invalid) callsigns starting with '0' (zero) eg 0f6ira.
1445 03Oct02=======================================================================
1446 1. only sysop (priv=5+) can now send to distro SYSOP, ordinary users will have 
1447 their message routed to the $main::myalias callsign as a private message. 
1448 29Sep02=======================================================================
1449 1. Added LRU caching to DXUsers and Prefix.
1450 2. make Timer::handler only search its chain once a second seeing as that
1451 is the minimum granularity available.
1452 3. add some separation between cfg file making, data generation and mrtg 
1453 running. See /spider/cmd/mrtg.pl for some instructions...
1454 4. Added data in and out to the MRTG stats, you need to do an indexmaker
1455 to get them onto the index page, I have also added some colour to the
1456 legend to make what is being displayed a bit more obvious.
1457
1458 See http://gb7djk.dxcluster.org/mrtg/stats.html for an example of the
1459 default screen.
1460
1461 28Sep02=======================================================================
1462 1. Put some transparent caching into Prefix.pm to see if this has a 
1463 performance impact.
1464 2. Fix doing a new log open for every log file write.
1465 26Sep02=======================================================================
1466 1. added WWV and WCY to the Mrtg stats. Don't forget to do an indexmaker!
1467 25Sep02=======================================================================
1468 1. added mrtg stuff to the system as a template. In order to use this you
1469 must install mrtg onto your system and copy all the mrtg files (or at least
1470 all the images) to new directory /spider/html/mrtg. The system generates the
1471 config file for you as part of its workings. To get it to update add a line
1472 to your spider crontab like: 
1473
1474 00,05,10,15,20,25,30,35,40,45,50,55 * * * * run_cmd('mrtg all')
1475
1476 You will also need to do an indexmaker once in the html directory. I put the 
1477 index page into /spider/html/mrtg/stats.html YMMV. I do:
1478
1479 indexmaker --output stats.html --columns=1 --title "MRTG statistics for 
1480 GB7DJK" ../../mrtg/mrtg.cfg
1481
1482 But all on one line.
1483 2. I have made a technical change to the way ax25 connects outward on unix 
1484 boxes are done. I currently have no way of testing this. I think it still 
1485 works.
1486 22Sep02=======================================================================
1487 1. Add changes to the installation manual for Windows users from K1XX
1488 21Sep02=======================================================================
1489 1. make some detail changes for connects out in Msg.pm
1490 17Sep02=======================================================================
1491 1. Added shu command for Charlie's (K1XX) benefit (together with the rest of
1492 our butterfingered sysops) who miss the '/' out of sh/u frequently enough 
1493 to curse. 'shu' simply types out a message saying 'type SHUT' to shutdown the
1494 node. Added 'shu' to /spider/perl/Messages. No need to restart, just 
1495 load/mess and load/alias after doing a CVS.
1496 21Aug02=======================================================================
1497 1. added 'warc' and 'contesthf' to the regions in bands.pl (K1XX).
1498 20Aug02=======================================================================
1499 1. fix lines containing just the character '0' in messages (and console.pl)
1500 (K1XX).
1501 2. remove all newline characters from AGW data, thus treating it like a 
1502 'normal' ax25 connection where the 'newline' convention is just carriage
1503 return (K1XX)
1504 06Aug02=======================================================================
1505 1. added 5.5Mhz band as '60m'.
1506 29Jul02=======================================================================
1507 1. Changed max R value in wcy to 500 from 300.
1508 2. Got rid of warnings on startup using 5.8.0 
1509 28Jul02=======================================================================
1510 1. stick the invalid key deletes in an eval loop in export_user
1511 18Jul02=======================================================================
1512 1. Make additions and changes to manuals. (g0vgs)
1513 16Jul02=======================================================================
1514 1. Add changes to the spider-web java web client.  Thanks to Rene, OZ1LQH.  It
1515 should now be easier to install and run for all systems. (g0vgs)
1516 11Jul02=======================================================================
1517 1. NP work has now started in ernest ([ed]who he?). You will need to download
1518 Digest::SHA1 and any dependant packages to run this release. HOWEVER tempted
1519 you are, please don't set/newprotocol on any nodes. It won't work.
1520 http://www.cpan.org/modules/by-module/Digest/Digest-SHA1-2.01.tar.gz
1521 2. Make the cluster node registered on from startup (from Mark HB9DBM).
1522 3. Make the 'export_users' process *MUCH* more robust. It should now accept
1523 funny characters and not rely on an absolutely 'perfect' user file to work.
1524 Errors are displayed (and logged if done from the cluster) and then ignored.
1525 Invalid callsigns are removed. 
1526 09Jul02=======================================================================
1527 1. make the is_qra more accurate (from Mark HB9DBM).
1528 04Jul02=======================================================================
1529 1. added another fix to Prefix.pm so that it resolves Japan callsigns again
1530 also you can 'set/debug prefix' to see what it is trying to do.
1531 03Jul02=======================================================================
1532 1. Added the DEMONSTRATE command which allows a sysop to demonstrate a 
1533 command to a user (from a request by Charlie K1XX). 
1534 2. added message e31 (xxxx is not a user)
1535 02Jul02=======================================================================
1536 1. Fixed the problem with badspotter or badnode being set to baddx if either
1537 of the data files are missing. 
1538 25Jun02=======================================================================
1539 1. as predicted there was an error in the Prefix routine, I have improved it.
1540 24Jun02=======================================================================
1541 1. make set/badspotter non SSID sensitive. Set/badnode is left to be SSID
1542 sensitive. 
1543 2. added 3XA(=3X) and K1B(=KH1) also changed the logic of sh/prefix. This
1544 may break things, please test it. 
1545 19Jun02=======================================================================
1546 1. make set/badspotter and set/badnode apply to announces and talks as well
1547 as spots. 
1548 12Jun02=======================================================================
1549 1. fixed (un)set/wwv and (un)set/wcy so they don't issue spurious messages.
1550 Thanks Rene (oz1lqh)
1551 07Jun02=======================================================================
1552 1. fix messages in DXDb.pm to point to the correct ones. Thanks Rene (oz1lqh)
1553 2. add missing wcys and wcyu messages to Messages. Thanks Rene (again)
1554 3. upissue version number to 1.50 (finally)
1555 16Apr02=======================================================================
1556 1. allow the rest of PC19 to continue if it contains a reference to a locally
1557 connected node. Thank you Tommy SM3OSM.
1558 19Mar02=======================================================================
1559 1. fix problems with ephemeral dup checking on PC16,17,19,21
1560 2. perturb the problem with national character sets.
1561 15Mar02=======================================================================
1562 1. add help for 'accept' and 'reject'. (g0vgs)
1563 2. adjustments to the manuals (g0vgs)
1564 3. make changes to reflect the correct output of sh/sun and sh/moon based
1565 on information from Steve, K9AN. (g0vgs)
1566 23Feb02=======================================================================
1567 1. remove old satellites from keps.
1568 2. Add information on setting up the ax25 utils to the installation manual
1569 (g0vgs)
1570 19Feb02=======================================================================
1571 1. move the PC11 dup check after the input filter
1572 06Feb02=======================================================================
1573 1. changes to manuals to (hopefully) improve documentation and alter my email
1574 address (g0vgs)
1575 02Feb02=======================================================================
1576 1. changed sh/qrz to the latest incarnation of the command at qrz.com.
1577 29Jan02=======================================================================
1578 1. add VP8GEO to South Georgia
1579 27Jan02=======================================================================
1580 1. make save work in cron context
1581 2. try to get the C client to handle closes on its standard input better
1582 3. put some validation in cluster.pl to check that people have set it up 
1583 handled.
1584 4. fix the long callsign checking
1585 22Jan02=======================================================================
1586 1. limit spot dupe checking to first 12 characters
1587 13Jan02=======================================================================
1588 1. changed the backstop termination alarm routing in the C client so that
1589 it flushes the input and output buffer and then commits suicide.
1590 12Jan02=======================================================================
1591 1. put setsockopts into eval block to allow some of them to fail
1592 11Jan02=======================================================================
1593 1. Make M$ TCP connx blocking again, sigh...
1594 2. backed out ALL the M$ speedup and make nicer changes :-(
1595 3. cope with data coming in during the disconnection process. Don't worry
1596 Earth people, this will take no longer than 15 of your Earth seconds...
1597 10Jan02=======================================================================
1598 1. set SO_LINGER = 0 to try to prevent the system sending data on a closing
1599 socket. This MAY help some of the hanging problems (but I am now beginning
1600 to doubt this).
1601 2. do the same on the C client (which means DON'T FORGET to make it).
1602 3. set no nagling on the output from the node.
1603 4. set KEEPALIVE on TCP connections for both the node and C Client (you will
1604 have to make the C client again) and you will need to restart.
1605 5. It appears that it IS possible to set non blocking on M$ you just need to
1606 know how.
1607 6. Fix problem with load/cmd_cache core dumping the system
1608 08Jan02=======================================================================
1609 1. altered sh/qrz to point to the new server
1610 2. alter the character set handling a bit to make it better for spanish
1611 06Jan02=======================================================================
1612 1. fix leading space removal from messages input from the keyboard
1613 2. make some mods to allow perl 5.7.2 to run
1614 3. create $DXProt::eph_restime to allow variable slugging of ephemeral dups
1615 4. create $DXProt::eph_info_restime to allow a long dupe time for these
1616 5. create $DXProt::eph_pc34 to allow a short anti dupe slug for rcmd loops
1617 6. Add a new sysop cmd 'save' which will save the output of any command (or
1618 list of commands in "<cmd>") to a file.
1619 7. Add a new command "echo" which echos its argument to the screen (useful
1620 for titling in the save command above.
1621 8. Increase interval between logins causing for/opernam to 60 days (from 30)
1622 + a random factor between 0 and 9.
1623 9. Added Italian translation of Messages from Luca IT9ROT (thank you 
1624 very much).
1625 10. Added the /<cmd> feature (as in talk) to execute a cmd whilst typing a 
1626 message, then enhanced it so that if you do //sh/dx (for instance) it will
1627 put the result into the message (as well as show it to you).
1628 11. Added the // feature to talk as well. 
1629 02Jan02=======================================================================
1630 1. updated the copyright dates
1631 2. modernised and extended the Windows instructions a bit.
1632 3. added a TODO file which is the list of things that I need to do. Please
1633 badger me to put YOUR enhancement on this list. It will then get done.
1634 31Dec01=======================================================================
1635 1. Make a couple of changes to the Installation Manual and add a FAQ on msg
1636 deletion. (g0vgs)
1637 2. Fix unset/register so it works (g0vgs)
1638 30Dec01=======================================================================
1639 1. make PC21 coming from the channel's node call then treat it as a PC39 and
1640 disconnect it.
1641 2. Send the client a 'Z' command (shutdown) to see if this has any effect on
1642 the hangs.
1643 26Dec01=======================================================================
1644 1. make some detail changes to help texts
1645 2. Added 'all' to the Band's region table to allow 'acc/spot on all/cw'
1646 23Dec01=======================================================================
1647 1. allow sh/dx on 1000/4000 (or 1000-4000).
1648 2. merge sh/dx and sh/dxcc commands (Alias sh/dxcc to sh/dx dxcc). You can
1649 now do things like 'sh/dxcc oq2 by w dxcc'. 
1650 20Dec01=======================================================================
1651 1. Fix 'not' in filtering
1652 2. alter default max spots to 100 and the no of WWV to 5
1653 17Dec01=======================================================================
1654 1. added new satellite stuff from Steve K9AN. Fixed upper/lower problem
1655 in convkeps.pl.
1656 2. enhanced load/keps to accept a message no. This will create a new keps
1657 file from a msg (hopefully containing 2 Line Nasa keps) and then load - all
1658 in one step. Added load/keps to the help files
1659 3. Updated spanish Messages
1660 4. Improve wcy command from Stephan DK8LV's input
1661 5. Added set/prompt (and unset/prompt) command so that Stephan can fool some
1662 external programs into thinking it is talking to clx.
1663 15Dec01=======================================================================
1664 1. added superfluous spaces back into PC73 for the benefit of clx
1665 14Dec01=======================================================================
1666 1. make Spanish in set/lang & Messages 'es' instead of 'sp'
1667 2. added prototype WCY and WWV commands (for qualified users only)
1668 3. Added Commands_es.hlp contributed by Angel EA7WA
1669 12Dec01=======================================================================
1670 1. added Commands_de.hlp contributed (in record time) by Stephan DK8LV.
1671 2. fixed help command so it uses it!
1672 11Dec01=======================================================================
1673 1. make PC17 generation more unconditional
1674 08Dec01=======================================================================
1675 1. added unset/hops command
1676 02Dec01=======================================================================
1677 1. Fix spurious 'new message for you' messages if things are deleted but 
1678 unread.
1679 2. stop remote passive nodes (those with version numbers of 0000) from
1680 poluting the nodes table. Maybe this will make things slightly more stable.
1681 3. Take off rspf checks on announces and spots and allow the dupe filters
1682 to take the strain.
1683 4. Move the dupe checking AFTER the input filtering for announces and spots.
1684 5. Changed the checking of PC19/21 that it doesn't alter the wrong node
1685 6. Alter the storage of messages so that illegal characters are stored as '.' 
1686 in an attempt to stop such messages from hanging.
1687 26Nov01=======================================================================
1688 1. Make changes to the installation manual to show making the client before
1689 actually trying to use it!  Thanks to oz1lqh.  Also add a line for SuSE
1690 distros on useradd.
1691 22Nov01=======================================================================
1692 1. finally fix DELETE = ^H = Backspace in console.pl
1693 21Nov01=======================================================================
1694 1. altered the PC16/17 generation slightly to see whether this cures Roland's
1695 problem.
1696 19Nov01=======================================================================
1697 1. added Ducie Island to prefixes
1698 17Nov01=======================================================================
1699 1. updated the Java Web Interface from Ian, m0azm to allow passwords.  If
1700 a user with no password enters anything, including null, it is happily
1701 accepted and ignored.
1702 2. added the German language to the Messages file from Stephan, dk8lv
1703 14Nov01=======================================================================
1704 1. make the number of characters of the dx comment dependant on the type of
1705 connection. This should mean that 'legacy' user programs can cope.
1706 2. move the handling of unprintable characters out of IntMsg
1707 07Nov01=======================================================================
1708 1. fix is_pctext so that it actually catches corrupt spots and announces.
1709 2. fix console.pl so that you can type in '0' again
1710 3. Fix problem with reply disappearing up its own bottom.
1711 4. Added Steve's latest sh/moon stuff
1712 06Nov01=======================================================================
1713 1. fix read so that sysop reading doesn't increment the read counter for 
1714 private mail not addressed to them.
1715 2. fix console.pl to show blank lines more reliably.
1716 3. fix msgs so that 2 R: lines are only stored on initial entry (not just
1717 after forwarding).
1718 04Nov01=======================================================================
1719 1. Allow the user to equal the node in RSPF checks (this allows spots and 
1720 stuff with the origin and spotter to be the same (although it is STRONGLY 
1721 recommended that they are NOT!!! [hint hint]).
1722 2. make the send command rather more sensitive to what is allowed. Basically
1723 it will only allow TO addresses that are bull addresses (if not private) or
1724 vaild callsigns (if private). Bull addresses are the ones in 
1725 /spider/msg/forward.pl with a 'T' flag on them. If there is no forward 
1726 file it will only allow 'ALL' and 'DX' as valid Bull TO addresses. You may
1727 use commas as callsign separators if you like.  
1728 02Nov01=======================================================================
1729 1. fixed some Aliasing problems, but this whole area will have to be addressed
1730 more comprehensively.
1731 2. Changed talk logging so that it hopefully is more consistant and maybe even
1732 useful.
1733 3. Altered the mechanism of the personal emailing so that it uses lower level
1734 components and should be therefore available on M$ platforms. You will need
1735 to install a version of libnet (perl -MCPAN -eshell, then install Net::SMTP).
1736 I believe all 5.6.x perls have this built in (ie M$ should have this). If you
1737 are on M$ or you want to use an MTA via SMTP in linux then you need to declare
1738 the dns name of the MTA by: set/var $DXMsg::email_server = 'post.fred.net' 
1739 (or whatever the MTA is called). You can also use local programs other than
1740 sendmail by: set/var $DXMsg::email_prog = '/usr/bin/postfix ..' or whatever.
1741 Finally you can alter the 'from' address using: set/var $DXMsg::email_from
1742 = 'FBloggs@msn.com' (\@ if you use " and ") - bewarned that you may be 
1743 prevented from using just any old address. You can place these commands in
1744 /spider/scripts/startup for permanent use.
1745 01Nov01=======================================================================
1746 1. added information on registration, login scripts and passwords to the
1747 26Oct01=======================================================================
1748 1. If $main::reqreg = 1 then set/register will allow 'registered' users 
1749 full access, if $main::reqreg = 2 then registered users will be 'read-only'
1750 (ie the opposite). If $main::reqreg = 0 then registration and its effects
1751 are disabled.
1752 25Oct01=======================================================================
1753 1. added unset/password command to allow sysops (only) to completely delete
1754 and remove a user's password.
1755 2. make 'read' increment the 'no of times read' for all messages.
1756 3. give a read receipt for everybody that reads a message so marked.
1757 4. enhance set/email so that if you set email address(es) with this command
1758 it will send any messages to your callsign as they come in. unset/email
1759 will disable forwarding. 
1760 24Oct01=======================================================================
1761 1. added (un)set/register, show/registered commands which when a 'set/var
1762 $main::reqreg = 1' is done in the startup script will require users to 
1763 be 'registered' in order for them to have 'write' access to the node. Non-
1764 registered users will only be allowed to TALK or SEND PRIVATE to the cluster
1765 sysop callsign.
1766 2. Added password interrogation to the ExtMsg connections. If a user comes
1767 in via telnet and this is being done with the internal listener and a pass-
1768 word has been set for that user - he will be asked for it. You can force 
1769 a password interrogation (for ALL users) with a 'set/var $main::passwdreq = 1'
1770 in the node's startup script. It is anticipated that if you are using
1771 registration you will also issue passwords to those registered users.
1772 3. set/password has been changed so that users already with passwords can 
1773 change them.   
1774 4. A non-registered user will get the /spider/data/motd_nor file instead of
1775 the motd on login.
1776 5. made the BadWord regexes slightly less aggressive WARNING this may let
1777 some constructions thru, but hopefully will also allow more legitimate 
1778 foreign (mainly) things thru as well. 
1779 19Oct01=======================================================================
1780 1. Allow DELETE (0x7f) for backspace in console.pl
1781 2. redo prefix table using latest cty.dat
1782 14Oct01=======================================================================
1783 1. Add the shortform SH/ST like display to sh/user <call> to make it more
1784 AK1A compatible (G0RDI+G4PDQ pace).
1785 12Oct01=======================================================================
1786 1. make del nnn delete messages again (fix system Aliases file)
1787 2. substr the subject so that the dup works for stuff coming back via AK1A
1788 09Oct01=======================================================================
1789 1. change Aliases to allow shutdown as a command again. If you have changed
1790 /spider/cmd/Aliases and you update from CVS you may find it better to remove
1791 this file and then do another 'cvs update'. Otherwise you may get conflicts
1792 and the Aliase file will not load properly. The cvs update will recreate 
1793 the (now) missing file.
1794 2. Remove the 'please don't use XXXX on here' messages to prevent people
1795 from exploring the 'bad words space'. Three bad words will still disconnect
1796 without warning. 
1797 3. Sending dx spots/announces with bad words will succeed - but only back to
1798 the sender. These two mods are designed to annoy the perpitrators of the
1799 sort of filth as much as possible whilst not inconveniencing 'normal' users.
1800 4. Add expunge feature to kill. Deleting messages now marks a msg for 
1801 deletion two days hence. To have the old behaviour, do a 'kill exp' or use
1802 the standard alias "expunge". This will cause the message to be deleted at
1803 the next queue message cycle.
1804 5. Put in prototype echo handling for direct connections using ExtMsg and
1805 Listeners.pm.
1806 6. fix msgs to g1tlh-2 (as opposed to g1tlh)
1807 04Oct01=======================================================================
1808 1. allow a residence time of (default) 2 days before actually deleting a msg.
1809 2. reduce the number R: lines on a bull from a bbs to 2 (the origin and the
1810 last port of call).
1811 3. ignore deleted messages for queuing purposes
1812 4. store deleted status across restarts!
1813 5. make callsign checking more rigorous
1814 6. dup check PC49 (kill full)
1815 7. improved the regex matching of badwords (more efficient, better coverage)
1816 8. added default badword and badw_regex tables (as .issue files) which will
1817 activate unless there is one there already. It will NOT overwrite an existing
1818 file - so if you change it your changes will remain intact.
1819 03Oct01=======================================================================
1820 1. don't allow @WWW to become a 'TO' field...
1821 2. handle @gb7tlh.#35.eu type addresses as well
1822 02Oct01=======================================================================
1823 1. fixed the 'ever lengthening msg' syndrome and probably made the whole
1824 thing more reliable at the same time.
1825 2. do some restructuring of the msg system and upissue the version no.
1826 3. fix @xxxx syntax for bbs input
1827 01Oct01=======================================================================
1828 1. made login info not the default
1829 2. change the looping protoection for PC16/17/19/21 and also be more rigorous
1830 in who we accept which PC16/17/21's from.
1831 3. fix MAJOR disconnect bug introduced accidentally in the NP work.
1832 4. Try each badword with an S on the end as well and also check for 'f.u   c'
1833 type things as well (this only works for a few wellknown english ones).
1834 5. Go back to the old way of caching commands (but without the silly warnings
1835 because I know better what I am doing now). This allows symbolic debugging
1836 of commands again without coredumps. Hurrah!
1837 6. Add badword handling for messages. Users will get rude messages back if
1838 they try to send naughty words in msgs. Incoming messages with badwords will
1839 be dropped on receipt and their contents logged.
1840 7. and if you swear 3 or more times you are unceremoniously logged out.
1841 30Sep01=======================================================================
1842 1. made some small bug fixes in rspf checking and also messages. 
1843 23Sep01=======================================================================
1844 1. I have incorporated Steve's (K9AN) lastest sh/sun and sh/moon stuff which
1845 copes much better with some of the end effects that occur in these calc-
1846 ulations. You can now also see up to a year into the past or future. The 
1847 results compare favourably with the US Naval Obs (unlike certain other
1848 software's output which "I would not want to use their results to aim my 
1849 moon rocket..."). It also fixes some ambiguity about which day the results
1850 are actually for.
1851 21Sep01=======================================================================
1852 1. fix set/lockout so that it is possible to lock out all SSIDs except those
1853 specifically unlocked and so that you don't need to lock the non-SSID call in
1854 order to lock an SSID call. So set/lock g1tlh will lock out all instances of
1855 g1tlh, g1tlh-1, g1tlh-15 etc except (for instance) unset/lock g1tlh-9.
1856 2. show/lock allows partial callsign matching so sh/lock gb7 will only show
1857 GB7* calls that are locked.
1858 3. Had a grand shift around for the start of NP.
1859 19Sep01=======================================================================
1860 1. put in some rudimentory rsfp checking for various things
1861 2. tried to do some fixes on console.pl - YOU WILL REQUIRE Curses 1.06 from
1862 CPAN (perl -MCPAN -eshell, then at cpan> install Curses). 
1863 17Sep01=======================================================================
1864 1. Fixed help and apropos commands so that they default to english if
1865 the language is not english and help in the 'not english' language isn't
1866 available.
1867 2. added some help text for sh/newc.
1868 15Sep01=======================================================================
1869 1. released 1.48
1870 2. found 1st bug, fixed unset/logininfo reseting itself after logout 
1871 14Sep01=======================================================================
1872 1. added the start of script files on login/startup. You can now add 
1873 commands (for example to set variables) to a file called 
1874 /spider/scripts/startup. You can also put in scripts for a callsign which
1875 will be executed when that callsign logs on. A sample script is in the
1876 directory (you did remember to do cvs update -d?). User settable versions
1877 of this will happen when the general mechanism for doing that is available.
1878 2. Added set/unset/anntalk commands. If you unset/anntalk then you will
1879 no longer see many of the of talk like announces. Unfortunately you may
1880 miss the odd useful one as well (but since everything is repeated many times
1881 you probably won't :-)
1882 3. centralise the invalid callsign check so that g1tlh1 and similar calls
1883 will not be allowed to login anymore.
1884 4. Fiddle with the lockout mechanism so that set/login g1tlh also locks out
1885 g1tlh-1 -> g1tlh-15 UNLESS one of these is specifically unlocked.
1886 5. Make sh/log only show stuff that sh/ann, sh/talk, sh/rcmd doesn't.
1887 6. Make the scripts look for user and node_default files if there isn't a 
1888 more specific one.
1889 7. add the blank command which prints nn blank lines (default 1), this cmd
1890 can also print lines of characters: see help for examples.
1891 13Sep01=======================================================================
1892 1. did some work on making talk more intelligent and fixed a>b problem.
1893 2. fixed a nasty problem on input when being hit with full buffers of 
1894 data (eg at init time with large lists of node/users on fast links).
1895 3. fixed realtime input filter changing.
1896 4. added announce->talk conversion for routable calls when announces of the
1897 form 'to g1tlh hello', 't g1tlh hello'  or 'g1tlh hello' appear. 
1898 This also suppresses similar announces for users whose callsign is not the 
1899 one in the announce.
1900 5. Change the badwords interface to be the same as baddx, badspotter et al.
1901 added set/badword, unset/badword and show/badword. This routine will auto
1902 convert (and delete afterwards) the old badwords file. 
1903 6. fix intermittant bullitin mail forwarding?
1904 11Sep01=======================================================================
1905 1. added IP address logging of connections
1906 10Sep01=======================================================================
1907 1. clear/* node_default and user_default now work.
1908 2. in acc or rej/* you can now use (comma separated) prefixes as well as lists
1909 of numbers for things like *_dxcc, *_itu and *_cq (eg: by_dxcc ve,w); just
1910 remember that countries like ve and w have lots of zones and itus!
1911 3. Added all the clear/* commands to help and added some comments about 2.
1912 4. All filters (including *_default ones) are now reinstalled on channels in
1913 realtime, so changing a filter does NOT require a disconnect and reconnect
1914 cycle anymore. 
1915 09Sep01=======================================================================
1916 1. Add show/dxstats command
1917 2. Add show/hfstats command
1918 3. Add show/vhfstats command
1919 4. Add show/hftable command
1920 5. Add show/vhftable command (BE WARNED, the first time you run one of these
1921 commands it will take some considerable time to complete, thereafter it will
1922 be a lot faster).
1923 08Sep01=======================================================================
1924 1. Update the sgml docs on filtering a bit.
1925 06Sep01=======================================================================
1926 1. prevent nodes appearing as users from incoming PC16s
1927 2. Change ping averaging to be like TCP and become a smoothed RTT.
1928 3. Make all the Prompts in stat/* like output appear in alphebetical order
1929 4. Fix problem with 17m spots not appearing in sh/dx
1930 5. pump up eph dups everytime they re-occur and increase life to 180 secs
1931 04Sep01=======================================================================
1932 1. add delete/user command
1933 03Sep01=======================================================================
1934 1. make spot dups look back 5 mins.
1935 2. strip the top off each character in any text field of a Spot for duping.
1936 3. Try to make the routing tables more accurate for users that login to
1937 more than one node.
1938 4. Make PC50s come out in one heap on all channels every 14 mins, instead of
1939 on the 14th minute in the connection time for each channel. This should 
1940 reduce (slightly) the dups that are dumped.
1941 5. Speed up input queue processing (a lot).
1942 6. make set/isolate and acc/route mutually exclusive (and issue appropriate
1943 error messages) and fix set/iso on PC18 input.
1944 7. Improve stat/route_node and stat/route_user for diagnostics.
1945 8. strip top bit of comments in ann/spots.
1946 9. fix the announce filtering problem.
1947 10. Fix the double announcement of node disconnections?
1948 01Sep01=======================================================================
1949 1. Change build number calc (hopefully for the last time)
1950 27Aug01=======================================================================
1951 1. make rej/wwv and rej/wcy work
1952 26Aug01=======================================================================
1953 1. make all newly learned nodes locked out by default.
1954 2. add lock_nodes.pl which locks out all the nodes in the user file whose
1955 privilege is 1 or less and which isn't mentioned as an argument to the 
1956 command on the command line.
1957 3. make set/node, set/spider and their friends unlock a node as well as make
1958 them one. 
1959 4. Make sh/log et al more efficient / less memory hungry (and the display
1960 the correct way round!)
1961 24Aug01=======================================================================
1962 1. Allow badmsg to reject on interface callsign ('I')
1963 20Aug01=======================================================================
1964 1. protect against PC41s with field[3] == field[2]
1965 2. Redo Julian stuff as proper objects
1966 3. Make the various Log display come out forwards instead of backwards
1967 4. Add the dbgclean routine to system cron to clear out all debug files 
1968 more then 10 days old.
1969 19Aug01=======================================================================
1970 1. Fix rcmds
1971 2. make isolation when there are no filters present work again?
1972 3. dup check PC16/17/19/21 !
1973 17Aug01=======================================================================
1974 1. Sort out PC41 handling to include type 5 records for QRA locators and also
1975 remove all filtering (but retain ephemeral dup checking).
1976 2. Improve format checking in latlong and qra locators.
1977 3. Sort sh/st so that sh/st by itself displays only the local call not the
1978 whole lot (all 17000+ users records in my case). SH/ST ALL does this.
1979 16Aug01=======================================================================
1980 1. send a forward/opernam for a logged in user once a month (when they next
1981 login).
1982 2. rearrange rcmd stuff to be more maintainable and also be certain that 
1983 they are translated in both directions correctly for clx and ak1a style.
1984 3. Allow PC41s to be propagated and hope that the ephemeral dup filters 
1985 do their job!
1986 15Aug01=======================================================================
1987 1. fix problem with talks not coming out anymore
1988 13Aug01=======================================================================
1989 1. fixed problem of dxspots not being echoed back to spotter (announces too)
1990 02Aug01=======================================================================
1991 1. correct manual and help references on accept/route and reject/route. Thanks
1992 to ea1dav for pointing out the errors
1993 2. make sure that the actual line is printed in grepdbg & watchdbg esp. with
1994 ALL the '^' and leading space characters as they really are
1995 30Jul01=======================================================================
1996 1. changes to manuals to add links etc. (g0vgs)
1997 23Jul01=======================================================================
1998 1. made ann,dx spots,wwv,wcy,wx more 'object oriented'.
1999 2. allow for 'enhanced clients' and tell them what sort of thing is being 
2000 sent.
2001 3. Allow debug info to be sent via interface to an enhanced client.
2002 21Jul01=======================================================================
2003 1. started a gtkconsole program. It appears to sort of work. Requires Gtk-
2004 Perl-0.7007.
2005 2. start doing some spot statistical stuff. 
2006 19Jul01=======================================================================
2007 1. changes to Admin Manual to reflect route filtering.  Some alterations to
2008 the help files (g0vgs)
2009 09Jul01=======================================================================
2010 1. fix cron so that it allows stuff to be executed on the hour (ie min=0)
2011 06Jul01=======================================================================
2012 1. fix talk and routing problems to mycall
2013 2. add unset/privilege command to relinquish any sysop privileges you might 
2014 have for the current session.
2015 05Jul01=======================================================================
2016 1. disconnect channels whose route node has disappeared
2017 29Jun01=======================================================================
2018 1. fix merge command
2019 28Jun01=======================================================================
2020 1. fix problems with users on more than one node
2021 27Jun01=======================================================================
2022 1. try adding an ARC mail hack
2023 2. slug the not here messages so they can't loopback
2024 25Jun01=======================================================================
2025 1. added automatic 'not here' message
2026 21Jun01=======================================================================
2027 1. fix (some) problems with 'init'
2028 2. fix stat/msg a bit more
2029 3. small change to PC28 generation to make sure that the subject always 
2030 contains at least a blank
2031 16Jun01=======================================================================
2032 1. fix talk
2033 2. fix stat/msg 
2034 14Jun01=======================================================================
2035 1. changed debug api to (potentially) use less cpu time
2036 2. changed the spider.cgi in Arnold's borrowed java client to Ian's perl 
2037 script
2038 3. Added input route filtering
2039 4. put back the set/isolate logic into routing which is now overridable with
2040 filters whcih means a default filter is no longer generated. If you want the
2041 OLD behaviour, do rm /spider/filter/route/*.pl*, restart and try again. 
2042 5. Add http_proxy to Internet.pm and allow sh/qrz to use an HTTP Proxy
2043 13Jun01=======================================================================
2044 1. fix init cnd rinit cmds
2045 2. add missing clear/route cmd
2046 10Jun01=======================================================================
2047 1. fix set/here and unset/here
2048 2. fix indirect routing to users two hops away
2049 09Jun01=======================================================================
2050 1. more fixes
2051 2. add set/debug filter so that you can see why your filters aren't working
2052 (for sysops only)
2053 3. add ephemera deduping for all those PC41,24,50 etc etc broadcasts 
2054 4. Fix a problem with the connect text being sent on outgoing connections
2055 (this confuses db0fhf amongst other things)
2056 5. catch deep recursion bugs before you run out of memory.
2057 6. Make sure that PC16|17|19|21 update as well as add and delete
2058 7. local announces by the sysop will always be displayed
2059 08Jun01=======================================================================
2060 1. first cut with new routing code. Created NEW_ROUTE branch
2061 2. added acc/route and rej/route commands
2062 3. added stat/route_node and stat/route_user commands to look at the routing
2063 table entities
2064 07Jun01=======================================================================
2065 1. move userconfig.pl and nodeconfig.pl to stat/
2066 2. fix problem with locally connected users not being removed from the 
2067 routing tables
2068 3. Fix the build calc to take into account subdirectories
2069 06Jun01=======================================================================
2070 1. add stat/route_node and stat/route_user commands
2071 2. add sh/userconfig command (to show backward links to nodes)
2072 3. add sh/nodeconfig command
2073 05Jun01=======================================================================
2074 1. add set/bbs command
2075 2. more work on Routing code.
2076 3. status/msg on its own will print the status of the msg system.
2077 4. add sh/newconfig command
2078 03Jun01=======================================================================
2079 1. Fix the problem with ExtMsg and unresolvable IP addresses, hopefully
2080 properly this time.
2081 15May01=======================================================================
2082 1. set/lockout now prevents any outgoing connection taking place.
2083 2. Started the new routing stuff which will run in parallel for a while.
2084 3. changed the msg timeout arrangements so that it might not get stuck so
2085 easily.
2086 4. add $DXMsg::bulltopriv global to make msgs to known callsigns private 
2087 14May01=======================================================================
2088 1. fix problem with re-reading in db definitions for remote databases.
2089 2. try to prevent situations where two can (semi) successfully login, probably
2090 under load, and get a 'tried to connect whilst already connected' abort.
2091 3. change the max number of days to search for spots to 100
2092 11May01=======================================================================
2093 1. allow stat/msg on priv 1
2094 07May01=======================================================================
2095 1. set/page 0 switches off paging
2096 03May01=======================================================================
2097 1. It appears that for ages now, not enough PC19 and PC16s are being sent
2098 if you have more than one of them. Sigh..
2099 02May01=======================================================================
2100 1. put an upper limit on the number of concurrent errors allowed in command
2101 mode (20). This should disconnect runaway spot suckers....
2102 28Apr01=======================================================================
2103 1. fix an occasional problem with 'sorry connected to' messages
2104 23Apr01=======================================================================
2105 1. fix very long standing bug in storing and transmitting spots. The decimal
2106 point was left off :-(
2107 22Apr01=======================================================================
2108 1. Sysops can now have full privileges if there is a ExtMsg listener on 
2109 localhost (or everything) and they telnet to localhost and login with their
2110 callsign. This means that they don't need a client anymore (for local access)
2111 2. added input spot filtering. 
2112 3. Added run_cmd to DXCron which allows you to run any command on the system
2113 from the crontab. (Dunno why I didn't do this before). 
2114 18Apr01=======================================================================
2115 1. added Ian M0AZM's Java Client (SpiderConsole)
2116 17Apr01=======================================================================
2117 1. made a slight speedup on write in Msg.pm (about doubled it)
2118 16Apr01=======================================================================
2119 1. make the correct error messages come out on reject/accept when people
2120 leave out keywords like 'on'.
2121 2. Fairly major changes to the documentation tree.  Split the admin manual
2122 into 2 sections, Installation and Admin and merge the Windows stuff.
2123 15Apr01=======================================================================
2124 1. made some mods to the sgml documentation for 1.47
2125 2. added show/connect command
2126 11Apr01=======================================================================
2127 1. fixed more of the "xxx disappeared from yyy" messages
2128 2. altered the build no logic so that it always checksums the same files
2129 regardless of whatever else you might have in the directory.
2130 3. made shortcut at shutdown so that you don't get a storm of PC21s on busy
2131 nodes as each connection goes down. Just send a pc39 to each interface and
2132 nothing else.
2133 4. changed action of SIG{INT} and SIG{TERM} so that they now work on MSWin32
2134 10Apr01=======================================================================
2135 1. altered PC21 logic somewhat to eliminate dup PC21s
2136 2. disconnect should remove dangling local users in the routing table.
2137 3. fixed nasty recursive timer bug
2138 4. added some extra info to make connect tracking a bit easier.
2139 5. improved docs on connect scripts a bit (to include agw connects)
2140 09Apr01=======================================================================
2141 1. changed lockfile name to cluster.lck (from .lock) for MSWin's benefit
2142 08Apr01=======================================================================
2143 1. added a quick installation guide to the admin manual and removed references
2144 to client.pl (g0vgs)
2145 01Apr01=======================================================================
2146 1. changed agwrestart semantics. You need to use main::agwrestart() in your
2147 crontabs rather than AGWMsg::init();
2148 2. try to thread winclient.pl for MSWin32.
2149 31Mar01=======================================================================
2150 1. added agwrestart command
2151 2. add Iains Windoze installation manual (g0vgs)
2152 3. various alterations to adminmanual and initial version of the CVS changes
2153 file (g0vgs)
2154 30Mar01=======================================================================
2155 1. fix errors on accept in ExtMsg and in Msg
2156 2. fix the non-blocking problems of connects (and other things in general).
2157 non-blocking only works for unix implementations at the moment.
2158 3. add rinit command (sends a PC20)
2159 4. improve debuging so that stuff is always escaped and a new 'raw' debug 
2160 mode that shows everything sent and received in glorious hex and characters
2161 29Mar01=======================================================================
2162 1. add better tracking of AGW circuits (possibly)
2163 2. add set and unset/agwmonitor (ing) [for all the notice it seems to take]
2164 28Mar01=======================================================================
2165 1. AGW engine stuff now accepts incoming calls and at least attempts to do
2166 outgoing ones. YMMV.
2167 2. fixed 'always' telnet on a client line in a connect script
2168 27Mar01=======================================================================
2169 1. add first cut at an AGW Engine. Copy /spider/perl/AGWConnect.pm to 
2170 /spider/local and edit it appropriately. You shouldn't need a login and passwd
2171 if you are using the default setup. It may allow incoming connects (and then
2172 again it may not - I don't have a reliable infrostructure to test with at the
2173 moment). The AGW Engine is a M$ thingy, but that don't preclude you connecting
2174 to it from a unix box. 
2175 22Mar01=======================================================================
2176 1. edit the helpfile for set/debug and add help for show/debug
2177 2. Allow ^Z again on messages
2178 3. Added back onboard support for ax25 OUTBOUND connections. You will need
2179 exactly the same facilities as before (ie netrom_call, ax25_call suid root 
2180 etc) but it is called direct from the cluster.pl - client.pl is DEAD!
2181 19Mar01=======================================================================
2182 1. Add 'not allowed' messages into sh/filter with callsign and reduce priv
2183 2. decode %xx characters in winclient.pl
2184 necessary to 1.
2185 18Mar01=======================================================================
2186 1. minor changes to user and admin manuals.  Added revsion numbers
2187 17Mar01=======================================================================
2188 1. put block check back in, try a work around for EWOULDBLOCK/EINPROGRESS
2189 for M$. 
2190 16Mar01=======================================================================
2191 1. integrate build number into main cluster and change the PC18 to show 
2192 version and build in the text portion
2193 14Mar01=======================================================================
2194 1. first cut at outgoing ax25 /external program connects
2195 2. slight change of interface to connect
2196 3. added a build number to sh/version
2197 13Mar01=======================================================================
2198 1. implemented first cut at non blocking connect
2199 2. removed memory leakage in connects
2200 3. add link IP address if available on who
2201 4. made the \r\n work correctly on External connections
2202 5. removed client.pl
2203 6. fixed memory leakages in DXMsg
2204 7. fixed pc39/21 handling
2205 8. fixed routing table issues and general disconnection tidy up
2206 10Mar01=======================================================================
2207 1. minor changes to the admin manual to reflect differences in distibutions
2208 thanks to pa3ezl (g0vgs)
2209 2. add (finally) the first draft of the usermanual (g0vgs)
2210 05Mar01=======================================================================
2211 1. do some major surgery on the connect logic to shorten the possibility of 
2212 duplicate connects happening
2213 2. fix stupid error on sh/qrz queries that don't work
2214 04Mar01=======================================================================
2215 1. allow fallback to english for help
2216 03Mar01=======================================================================
2217 1. allow incoming and outgoing IP connects direct to cluster.pl
2218 2. fixed (long standing)a hole in PC17 handling
2219 3. added winclient.pl (actually just a very basic client) from Iain G0RDI
2220 4. Added Spanish as a language (thanks ea1dav) (g0vgs) 
2221 5. ignore BUST(ED) spots
2222 28Feb01=======================================================================
2223 1. allow sh/c gb7 (ie show the config of all gb7 nodes)(for example)
2224 2. get rid of spurious DXHash 'uninitialised' messages if no corresponding 
2225 file is present.
2226 3. changed policy of $censorpc in DXProt.pm so that badwords are looked for
2227 in all text announces etc.
2228 4. Unpad (remove excess spaces from) spotted callsigns in PC11. 
2229 5. test for opertaing system in various places and do different if M$
2230 27Feb01=======================================================================
2231 1. allow partial node callsigns on sh/c (eg sh/c gb7)
2232 2. Changed Msg.pm to allow a more generalised interface with more than one
2233 listener.
2234 3. Added IntMsg.pm to implement the internal connection management that is
2235 currently scattered about the cluster code.
2236 25Feb01=======================================================================
2237 1. Fixed watchdbg so that simple arguments work again
2238 22Feb01=======================================================================
2239 1. Added platform name to sh/version
2240 2. changed client.pl so that it send \r\n instead of \n on telnet connects
2241 3. added lineend '\r\n' command to connect scripts so you can override 
2242 defaults
2243 03Feb01=======================================================================
2244 1. Changes and additions to the manual and added a help file for sh/log (g0vgs)
2245 13Jan01=======================================================================
2246 1. Documentation alterations to match new commands etc (g0vgs)
2247 08Jan01=======================================================================
2248 1. Changed the way that badnodes, baddx etc work. There is a new general way
2249 implemented (dunno why I didn't do this before - hey ho...) as a consequence
2250 there are set/unset/show baddx (for bad dx callsigns) badnode (for dx from
2251 bad nodes) badspotter (for bad spotters of dx eg VE2STN). Expect more of 
2252 this sort of thing...
2253 2. Added one to the copyright dates...
2254 06Jan01=======================================================================
2255 1. Fix set/obscount so it actually works.
2256 2. Allow different number formats for set/pingint eg: 5m for 5 minutes and
2257 120s for 120 seconds (and 1h for 1 hour).
2258 03Jan01=======================================================================
2259 1. Added a txt directory for txt versions of manuals (g0vgs)
2260 2. Various documentation changes
2261 02Jan01=======================================================================
2262 1. added a help file for forward/latlong and updated the admin manual to
2263 match. (g0vgs)
2264 2. Add spot2csv.pl to convert spot files into tab delimited .csv format.
2265 3. Add show/route to see which interface a station is connected on.
2266 31Dec00=======================================================================
2267 1. add lat/long info to show/prefix
2268 30Dec00=======================================================================
2269 1. added latest version of the admin manual from Ian G0VGS.
2270 23Dec00=======================================================================
2271 1. don't route anything back down the channel it came from.
2272 2. and, in the process, fix some silly errors in routing converted rcmd PCs
2273 3. changed all occurrances of 'freq' in filter help to 'on' and corrected
2274 some errors (eg freq/ssb).
2275 4. added latest admin manual.
2276 18Dec00=======================================================================
2277 1. fix double printing of DB results
2278 2. add new style filtering for WWV and WCY to complete the set
2279 3. got the field nos right (hopefully) on Announces for filters
2280 05Dec00=======================================================================
2281 1. fix frequency hinting routine so it correctly handles things like 'on 23cm'
2282 where digits are the 'wrong' way round.
2283 2. made default max days to search for spots 3 months.
2284 3. added hex decodes for those pesky 'national' characters that aren't really
2285 in grepdbg and watchdbg.
2286 4. decide that we are using Latin-1 and therefore characters 0x80-0x9f are
2287 not allowed.
2288 5. fix the announces so that they are all UPPER CASE for poor old DXTelnet.
2289 03Dec00=======================================================================
2290 1. change grepdbg and watchdbg so that you can see a number of lines before
2291 the condx that you are looking for so:-
2292   grepdbg 3 LOOP
2293   watchdbg 3 LOOP 
2294 will show both the LOOP line and the preceeding 2 lines.
2295 2. add PCPROT to all error condx lines in DXProt.pm so that you can watch
2296 for them more easily.
2297 30Nov00=======================================================================
2298 1. remove %nn strings from dups of announces and spots
2299 2. remove check for ssids on PC41s 
2300 29Nov00=======================================================================
2301 1. make some small changes to DXmsg to try to track delete problems?
2302 2. fix ann/full so it doesn't dup
2303 27Nov00=======================================================================
2304 1. alter sh/wcy output slightly
2305 26Nov00=======================================================================
2306 1. made it possible for sysop calls to be used on other nodes and still have
2307 anti loop checking on PC16/17.
2308 25Nov00=======================================================================
2309 1. -l <nnn> now works on C client
2310 2. -e toggles echo cancelling (normally on) on C client
2311 20Nov00=======================================================================
2312 1. added even more checking to PC16,17 and 39
2313 19Nov00=======================================================================
2314 1. improve reaping code a bit more.
2315 2. put some extra checking in the PC16,17,19,21 code.
2316 3. fix problem with the aliased user disappearing and loads of 'unitialised'
2317 messages coming out.
2318 16Nov00=======================================================================
2319 1. Alter the process reaping code in cluster.pl to use waitpid
2320 12Nov00=======================================================================
2321 1. Fix lack 't' action in Filter.pm
2322 08Nov00=======================================================================
2323 1. fix cosmetic errors in for/oper for 'users'.
2324 07Nov00=======================================================================
2325 1. removed sh/call because the owner isn't happy about us using it. 
2326 2. change sh/qrz to the new interface. MUCH QUICKER! you will need a user id
2327 and password from qrz.com to use it and you will have to copy the 
2328 /spider/perl/Internet.pm to /spider/local and alter it accordingly. Do 
2329 remember to set $allow=1 as well! The new interface comes courtesy of Fred
2330 LLoyd, the proprietor of http://www.qrz.com
2331 06Nov00=======================================================================
2332 1. Added sh/qrz to the list of callbook services
2333 05Nov00=======================================================================
2334 1. 75% speed up on sh/dx !, lower memory usage as well!
2335 2. Fixed problem with clear/spot 0 (how did this one last so long!!!)
2336 3. add 'on' in accept/reject spots as synonym for 'freq'
2337 4. add the same speed up to general log printing
2338 5. fixed help \ 
2339 04Nov00=======================================================================
2340 1. fix sh/filter so ity now works for any callsign (and not just connected
2341 ones).
2342 2. Have only one is_callsign and not an iscallsign as well.
2343 3. Add set/hops and show/hops commands.
2344 4. Add unset/badnode command and put some help in for these commands
2345 03Nov00=======================================================================
2346 1. allow - in filter strings
2347 2. store only the filter expression NOTE BENE: you will need to clear all 
2348 your existing filters and re-enter them!!!!!!
2349 3. Added announce filtering
2350 4. Fixed problem with announce filtering on output to the node
2351 02Nov00=======================================================================
2352 1. updated filtering logic. You will need to RECREATE your filters (clear/spot
2353 all, then start again) for testing.
2354 2. allow PC73 for DXNet
2355 3. added some help text for filtering and filtering spots in particular.
2356 01Nov00=======================================================================
2357 1. put PC11 field 2 check back to m for pc text.
2358 2. improve 'simple' callsign checking
2359 3. Added the first cut of the new user/sysop filtering code. This cut works 
2360 for spots and the syntax is:-
2361
2362 accept/spots [<call>] [input] [<filterno>] things ..
2363 reject/spots [<call>] [input] [<filterno>] things ..
2364
2365 where things are: 
2366   freq 0/30000 | hf | hf/cw | 6m,4m,2m
2367   call G,PA,HB9
2368   info iota
2369   by G,PA,HB9
2370   call_dxcc 61,62
2371   call_itu 31
2372   call_zone 14,15,16
2373   by_dxcc 61,62
2374   by_itu 31
2375   by_zone 14,15,16
2376   origin GB7,MB7
2377   channel GB7DJK,GB7BAA
2378       
2379 You can simply string these together on one line one after the other and 
2380 there is an implied 'and', you can also string together with 'or' 'not' (or
2381 '!') and '(' and ')' - in otherwords an arbitrary expression.
2382               
2383 You can see what you have done with:
2384
2385 show/filter [<call>]
2386
2387 You can clear your work with:
2388
2389 clear/spots [<call>] [input] [<filterno>|all]
2390
2391 Have fun and someone please write the documentation.
2392 4. Added show/msg_status.pl sysop command (shows some info on what is busy in 
2393 the message system)
2394 31Oct00=======================================================================
2395 1. add 0x8e to the list of characters we clobber (make xterm go into graphics
2396 mode).
2397 30Oct00=======================================================================
2398 1. put in new Filter::it code and tested it. Now all we have to do is write
2399 the user access routines (oh and the help files!).
2400 29Oct00=======================================================================
2401 1. put in echo cancelling measures into the clients. This doesn't mean you
2402 shouldn't take steps to prevent echoing on node links, but it may help where
2403 (whatever you do) it still bloody echos! This is experimental.
2404 2. store dxchan and mynode as callsigns (and not references) in the routing 
2405 tables and do some checking in accessors to see if we can capture some errors.
2406 3. tart up the stat/chan etc display to give more useful debugging info 
2407 28Oct00=======================================================================
2408 1. updated show/sun and show/moon from stuff sent by Steve Franke K9AN
2409 2. added show/call which queries jeifer.pineknot.com for any call in the 
2410 world (as opposed to UALR which only does US calls). Inspired by a bit of 
2411 perl sent to me by Steve Franke (again!) and also Angel EA7WA who gave me the
2412 pineknot ip address.
2413 3. fixed clients so that they accept -0 as a valid SSID and then strip it off
2414 as though they had come in without (why has this taken so long to appear? How
2415 long have we been running this code ??????). 
2416 27Oct00=======================================================================
2417 1. alter the code in clean_old of DXMsg system to see if we get some different
2418 behaviour with random crashing
2419 26Oct00=======================================================================
2420 1. if there is a 'connected' file in /spider/data then the client will send
2421 it out to the user after connection.
2422 25Oct00=======================================================================
2423 1. fix catchup and uncatchup commands so that they accept ranges
2424 24Oct00=======================================================================
2425 1. added cty.dat from http://www.k1ea.com/cty/index.htm to the prefix_data.pl
2426 data file and modified create_prefix.pl accordingly.
2427 2. the 'no text line' messages should now propagate correctly
2428 3. added the dxcc, itu and cq zone numbers for announcer and origining node 
2429 on announce filters - see the /spider/filter/ann/*.issue files for more info.
2430 4. you can now specify a 'user_default.pl', 'node_default.pl' and 
2431 'in_node_default.pl' in each of the filter directories
2432 23Oct00=======================================================================
2433 1. Added K5K as Kingman Reef
2434 1. Added K7K as Kure
2435 17Oct00=======================================================================
2436 1. force frames to go down the local interface when doing a route. This is 
2437 particularly important for pings!
2438 16Oct00=======================================================================
2439 1. add a ':' after 'G7BRN de G1TLH' in a talk message.
2440 2. added /J to the list of things to ignore (as in G1TLH/J) in prefix 
2441 processing (ie /J mean Jota not /JA [Japan]).
2442 3. change all INCOMING 00-08 0A-1F and 9B characters that make it past the
2443 intermediate client->server protocol to '.'.
2444 04Sep00=======================================================================
2445 1. made PC10,11,12 badword checking dependant on a flag variable ($censorpc)
2446 default = 0 (off).
2447 02Sep00=======================================================================
2448 1. fix a long standing talk bug to do with routing to specific nodes (t xxx >
2449 yyy .....)
2450 2. Add badwords checking in various places. You put a list of words into
2451 /spider/data/badwords one or several per line. Lines starting with # are
2452 ignored. PC10, PC11, PC12 with words contained in this file will not be
2453 sent on. Also ann, talk and dx commands have badword checking added. Words
2454 are NOT case sensitive, but you will need to put all the endings in (eg 
2455 ...k, ...ker, ...king).
2456 3. Added new version of admin manual from G0VGS.
2457 01Sep00=======================================================================
2458 1. allow blank on field 4 of PC10 (even though it's "illegal").
2459 28Aug00=======================================================================
2460 1. changes DXChannel::get_all_ak1a to get_all_nodes.
2461 2. ignore PC21s coming in on the interface with that callsign (ie nodes 
2462 trying to disconnect themselves).
2463 3. output correct PC29 on blank lines and escape ^ characters differently 
2464 (and transparently for spider nodes).
2465 26Aug00=======================================================================
2466 1. make blank origins on messages the node call.
2467 2. added new version of FAQ from Ian G0VGS
2468 3. added a dummy PC75 command (WCY merge?)
2469 4. Don't allow mail routing for clx nodes
2470 5. Log isolates
2471 25Aug00=======================================================================
2472 1. moan about and then delete empty message files
2473 24Aug00=======================================================================
2474 1. Removed WWV command so that users can't interfere (read mess up) the
2475 automatic feeds which come from various places on the net.
2476 23Aug00=======================================================================
2477 1. Added persistant dupe file so that all dupes are stored here (including
2478 announces) - announces are now kept for 5 days (as default).
2479 2. limit the characters stored in a dupe for spots and announces
2480 20Aug00=======================================================================
2481 1. Added system Alias for set/nodxgrid => unset/dxgrid
2482 2. Add full individual checking for all PC protocol fields in all messages
2483 and removed any language dependant stuff (hopefully).
2484 3. console.pl is now a bit more international (client.c/pl already are)
2485 19Aug00=======================================================================
2486 1. Added an efficiency thing for AUTOLOADed accessors from OO Perl by Conway.
2487 2. Fiddled with the rtty and digital bandplan frequencies.
2488 18Aug00=======================================================================
2489 1. added a couple of changes for perl 5.6.0
2490 2. removed del_dup from DXUser for earlier versions of DB '1.85' (ie real ones
2491 not 2.x versions in 1.85 compatibility mode).
2492 3. Started the OOing of the PC protocol stuff.
2493 15Aug00=======================================================================
2494 1. added 1.25 of the admin manual html
2495 14Aug00=======================================================================
2496 1. Added regex support to sh/dup_*.pl commands
2497 2. fixed rcmd in crontab so that will work again
2498 13Aug00=======================================================================
2499 1. removed extra /60 in AnnTalk to make deduping of announces work a bit
2500 better for longer...
2501 05Aug00=======================================================================
2502 1. Fixed hex character problem put in somewhen in the C Client
2503 03Aug00=======================================================================
2504 1. caught some more signals (are any of these causing the random stopping
2505 of the code?
2506 2. the Console now requires 1.05 of the Curses module ^R REFRESHES THE SCREEN
2507 (as does ^L) AT LAST!!!!!
2508 02Aug00=======================================================================
2509 1. put back hex check exception for PC29
2510 01Aug00=======================================================================
2511 1. made the export and import ascii system work finally. The user_asc file
2512 generated (automatically and 0000Z Sunday morning) is autoloading. Just 
2513 execute it and it will automatically reload your user database.
2514 2. remove import_users.pl no longer necessary
2515 31Jul00=======================================================================
2516 1. try to fix paging problem.
2517 2. added help for spoof and set/forward
2518 3. fixed bogus callsign check for field 2 of a PC12
2519 4. Add DB_File to DXCommandmode to make it available for commands
2520 30Jul00=======================================================================
2521 1. Added talk mode so that I don't have to keep typing T <call> all the time.
2522 2. fiddled around with storing of Debug messages a bit more.
2523 3. bomb proofed the type command.
2524 4. started the objectifying for talk, dx and announcements.
2525 5. fix talkmode so that it only does 'via' PC10s when it really needs to.
2526 6. SEND now displays a message if you try to do it in not prompt mode.
2527 7. stopped a few more things being done by rcmd (eg send, talk, ann, dx)
2528 8. tidied up the talking a bit more.
2529 9. Increase default hop counts all round.
2530 10. Adjust hex encoding so that 8 bit characters should now go thru
2531 11. check more of the essential protocol fields for 8 bit characters.
2532 29Jul00=======================================================================
2533 1. added forward/latlong which will forward ALL the users that have a latitude
2534 and longitude set on them to one or more locally connected nodes - with a hop
2535 count of 1.
2536 2. speeded up the show/node command by using the DB_File interface and 
2537 sequentially reading the data directly and only 'get'ting the ones that are
2538 nodes.
2539 3. did the same for show/isolate and show/lockout.
2540 28Jul00=======================================================================
2541 1. fixed watchdbg midnight rollover loop and removed the date part of the 
2542 date/time translation to leave just the time.
2543 27Jul00=======================================================================
2544 1. made sure that 'en' is the default language on new users.
2545 2. issue error message if shutdown is attempted by a low privileged user.
2546 3. Make sure a privilege is defined for all users (even if it is 0).
2547 4. Try to fix some more dups (and the time on them).
2548 5. make the time stored on dups generated locally on spots an integer no of 
2549 minutes * 60 
2550 6. send unsolicited PC[38]5s to the sysop if online.
2551 7. merged current html from www.dxcluster.org with Ian's stuff
2552 8. Added sgml files into the source tree
2553 9. changed default paclen in client.c to 236
2554 26Jul00=======================================================================
2555 1. added wantgrid (to control display of grid square info on DX Broadcasts)
2556 2. added lastoper for controlling periodic demands for user info from other
2557 nodes.
2558 3. added spiderFAQ stuff from Ian G0VGS and latest update of the admin manual
2559 4. changed updating and deleting from user file in an attempt to keep down
2560 duplicates and possibly corruptions.
2561 5. added a DXUser::export routine to allow the cluster to automatically 
2562 export the user data in ascii from cron.
2563 6. added a line in the ISSUED crontab to do the export once a week
2564 7. delete annok and dxok if set to 1 in user records.
2565 8. added export_users command to allow arbitary exporting of user files
2566 9. added set and unset/dxgrid command to allow control over the grid squares 
2567 on DX announcements
2568 10. Removed export_user.pl (no longer needed)
2569 11. made import_users.pl accept a non related input filename and always
2570 update the current user file.
2571 12. added an 'auto rcmd <node> for/oper <call>' for people I can see on the
2572 cluster that issue spots and for whom I have no qra info (no more than once
2573 a month). This isn't the default - set $send_opernam in
2574 /spider/local/DXProtVars.pm (copied from /spider/perl). Good for gateways.
2575 13. Despace spot texts properly again for deduping purposes.
2576 14. Corrected Pc84/85 handling a bit.
2577 15. Sync the user database every 15 secs to see whether we can reduce the 
2578 corruptions and duplicates.
2579 25Jul00=======================================================================
2580 1. ignore \n in ax25 mode for C client.
2581 2. remove extra space at the end of a DX spot announce when no grid square
2582 is output.
2583 3. added new admin manual from Ian G0VGS
2584 20Jul00=======================================================================
2585 1. Finally managed to update my source with the sourceforge one
2586 2. added user->qra cleaning in various places
2587 3. added four digit locator strings to broadcast DX spots (for users).
2588 4. PC11 with blank callsigns should now be ignored.
2589 5. put back the unpadding to the PC11 dup checking to catch spots with added
2590 blanks at the end of lines.
2591 25Jun00=======================================================================
2592 1. added 0 to the regex that checks for valid data on the cluster.pl->client
2593 channel - this will allow G0VGS and G0RDI to connect....
2594 2. removed technically unnecessary /= 60 from the dup routines to see if 
2595 Arnold's Sparcs don't then crash.
2596 19Jun00=======================================================================
2597 1. move ann_dup, spot_dup etc to dup_ann, dup_spots etc
2598 2. made mode 3 the default line ending convention for all out going connects
2599 via telnet in client.pl
2600 18Jun00=======================================================================
2601 1. fixed line ending ambiguities (I think) for telnet connections. Well 
2602 actually only really band aided it. It works but isn't how I want it. 
2603 Client.pl has got to go....
2604 2. Added 1.21 of Ian G0VGS's admin manual
2605 17Jun00=======================================================================
2606 1. I believe I have fixed all the login/logout 'broken pipe' errors
2607 2. Added G0RDI's 'links' command.
2608 3. added update_sysop.pl which cleans out all previous versions of the sysops
2609 information from the user database and recreates it with that in DXVars.pm
2610 4. Added node type to links and who
2611 5. Hardened up the cluster->client link in the cluster software so that 
2612 rubbish on port 27754 doesn't (usually) crash the cluster.
2613 14Jun00=======================================================================
2614 1. fixed sh/node crash
2615 2. fixed RTT in who.pl
2616 13Jun00=======================================================================
2617 1. fixed looping bug in C client on ending.
2618 12Jun00=======================================================================
2619 1. Added RCMD for clx
2620 2. Added WCY processing
2621 3. Added new node types (clx, spider, dxnet, arcluster)
2622 4. Store echo settings
2623 5. Store pagelth settings
2624 6. sort out source of DXVars for callbot.pl
2625 7. added sh/isolate
2626 8. added sh/lockout 
2627 11Jun00=======================================================================
2628 1. removed extraneous DXDebug from DXUtil
2629 2. added help for set/echo
2630 3. Centralised all spot, wwv and ann dup handling into respective packages.
2631 4. Created new AnnTalk package (for above and OOing announce and talk 
2632 handling).
2633 5. Fixed problem with outputting lines with | in them to console.pl.
2634 10Jun00=======================================================================
2635 1. got rid of some more nasty bugs in sh/qra.
2636 2. fixed 9A3xx to always be Croatia (and not Haiti!).
2637 09Jun00=======================================================================
2638 1. change some print commands in DXMsg to dbg('err'...
2639 2. overloaded confess, croak et al into DXDebug and removed Carp from 
2640 everywhere and checked that the necessary debugging really does go into
2641 the debug files now.
2642 3. changed print statements in cluster.pl to dbg('err',... so they go into
2643 the debug files as well.
2644 4. Altered the logic around duplicate spots, reduced the length of comment
2645 checked to 20 characters (this should solve some problems including those
2646 people sucking ar-cluster spots with prefixes in the extreme rh end). 
2647 08Jun00=======================================================================
2648 1. fixed problem with binary characters from cluster->client
2649 2. added set/echo and unset/echo commands
2650 3. echo login characters on login: prompt for C client
2651 4. Send \r\n on telnet connections for C Client
2652 5. Make echoing the default option (for M$ telnet clients :-()
2653 11May00=======================================================================
2654 1. fixed looping in Msg.pm (at last)
2655 10May00=======================================================================
2656 1. wrote a cross between 'tail -f' and grepdbg so that you can watch the
2657 debug files for particular strings and only have them print out. 
2658 05May00=======================================================================
2659 1. rewrote parts of Msg.pm and client.c so that the messages no longer use
2660 a length word at the front of each one. They are simply strings of characters
2661 separated by a \n. No binary characters are allowed (they are encoded as %nn)
2662 a la HTTP. This hopefully cures Arnold's problem and also make it more
2663 secure anyway. It also paves the way for the ax25/ip multicast client.
2664 30Apr00=======================================================================
2665 1. put some extra checks and balances in to message send routine in Msg.pm to
2666 see if I can prevent the error seen by Arnold (which I think is only likely to
2667 appear in heavily loaded sites).
2668 25Apr00=======================================================================
2669 1. Changed reply so that you can reply to more than one address privately
2670 31Mar00=======================================================================
2671 1. fixed nnn-mmm in kill (erase/delete) msgs so that mmm is also deleted and
2672 not just nnn -> mmm-1.
2673 2. Added an autosplit to message importing so that messages are split
2674 automagically into bits if the filename used in the import directory starts
2675 with "split". This will add a [1/5] type string on the the end of the subject. 
2676 3. dedupe more aggressively on the text of Spots so that only the 1st 27 chars
2677 of text are considered (as opposed to the whole lot).
2678 30Mar00=======================================================================
2679 1. altered client.pl connect code so that it doesn't falsely recognise 
2680 /spider/src/client as a 'client' instruction.
2681 28Mar00=======================================================================
2682 1. Added buffering to client 
2683 2. Fixed LOGIN so that you can login with an arbitrary callsign
2684 27Mar00=======================================================================
2685 1. updated wpxloc.raw and rsgb.cty for 4W and TX0.
2686 2. display 'start time' rather than 'last start time in' in who.
2687 3. Allow local users to see their own sh/talk or sh/log stuff.
2688 4. A more robust version of the C client.
2689 5. Added a message exporting command 'export'.
2690 6. allow swopping on all messages, including imported and manually sent ones
2691 7. S A < B @ C $BID now works from the command line and thus bbses ought to
2692 be able to send messages into the cluster. Bids are (currently) ignored.
2693 26Mar00=======================================================================
2694 1. first cut of C client
2695 18Mar00=======================================================================
2696 1. fixed convkeps.pl so that it accepts more formats for floating point.
2697 08Mar00=======================================================================
2698 1. tidied up Sun.pm and sh/sat
2699 2. fixed sh/qra so that the correct lat/long is displayed if only one locator
2700 is given.
2701 10Jan00=======================================================================
2702 1. added Steve Franke's new Sun.pm and show/satellite command
2703 08Jan00=======================================================================
2704 1. really removed the restriction on 0 length messages.
2705 2. added a periodic msg file import system a la FBB. Stick one or more files
2706 into /spider/msg/import with a suitable SEND line, subject and the text and 
2707 it will import it. The importer will accept some BBS syntax (eg < GB7TLH) to
2708 allow you to customise the 'from' callsign.
2709 03Jan00=======================================================================
2710 1. changed the copyright statement in sh/version!
2711 2. added sh/date with special "be compatible with ak1a" syntax for the output
2712 of sh/date with no arguments, otherwise the same as sh/time. A special favour
2713 to G4PDQ...
2714 3. and another one, added show/node especially for G4PDQ.
2715 01Jan00=======================================================================
2716 1. Fixed Julian routines to get rid of the millenium bug! (do as I say, not
2717 as I do!).
2718 2. updated gdx.pl so that external programs can do a sh/dx just as a normal
2719 user can. On reflection this could be used as a model for all sorts of 
2720 "external" interface routines.
2721 3. renamed gdx.pl as showdx.
2722 11Dec99=======================================================================
2723 1. added missing pc48 so that it calls the DXDb::process routine 
2724 10Dec99=======================================================================
2725 1. allow msgs to marked as read or unread
2726 02Dec99=======================================================================
2727 1. DX command doesn't recognise '6M' as '6m' in SH/DX ON 6M.
2728 2. set/node now sets the homenode as the callsign.
2729 3. changed the label for the 18Mhz band from '18m' to '17m' in the bands 
2730 table. 
2731 01Dec99=======================================================================
2732 1. started the callbot which lives at n2tly.dxcluster.net 9000.
2733 2. added www.qrz.com
2734 3. added www.buck.com
2735 4. added k4ute at no4j.com
2736 28Nov99=======================================================================
2737 1. fixed all the stupid errors introduced in 1.36 confusing DXUser->get with
2738 DXCluster->get_exact.
2739 24Nov99=======================================================================
2740 1. extended badmsg.pl stuff so that it works like the forward file and allows
2741 one to reject on to, from, origin and subject fields.
2742 2. added a swop.pl again in a forward.pl like format that allows simple swop
2743 for a field or test on a field and set another.
2744 3. Fixed the problem that read private mail follows you around as well as
2745 unread private mail does.
2746 4. Change the logic of connections so that the node will accept callsigns with
2747 SSIDs to -8 as different entities from each other. SSIDs > 8 are subtracted 
2748 from 15 and are assumed to be coming in via netrom diddled connections. This
2749 affects lots of the commands as well. I may not have got them all.
2750 5. Hangup clients on HUP signals. I originally ignored them, for reasons that
2751 are now lost in the mists of time. HUP signals now cause clients to die 
2752 (cleanly) and disconnect everything correctly.
2753 6. Added show/time command
2754 21Nov99=======================================================================
2755 1. lose extraneous rubbish after the callsign as sent by BBSes.
2756 2. Change end label on sh/moon to RGain dB rather than Loss dB.
2757 3. Remove spurious call to DXCluster->get_exact in pc50.
2758 4. Allow rcmd to locally connected nodes that are not (for some reason) in the
2759 nodes table.
2760 5. Try and send a PC39 in more cases to a cluster that I want to disconnect
2761 from in the hope that it notices and disconnects its end.
2762 20Nov99=======================================================================
2763 1. Added set/unset logininfo which will tell anybody that has this set when
2764 someone has either logged in or out of this node.
2765 2. Added set/pinginterval command which alters the length of time between
2766 pings sent to nodes, the value is minutes < 120 and seconds above that, 0
2767 means disable pinging (not recommended).
2768 3. If someone does a sysop whilst connected via ax25, don't show privilege
2769 level or passwd in stat/user.
2770 4. Fixed the problem with the dx command where if the callsign ended in a ?
2771 then the call and the freq would be replicated in the remarks.
2772 5. Set/unset ann, dx, talk, beep, wx, wwv all are now permanent (ie stored in
2773 the user file)
2774 19Nov99=======================================================================
2775 1. Added new version of sh/sun and also sh/moon from Steve K9AN
2776 2. Added rtt to who.
2777 3. added Aliase for show/tnc_sta to who.
2778 4. added Alias for show/uptime to sh/cl 
2779 18Nov99=======================================================================
2780 1. Added ping obs counter together with Time::HiRes timers. This will dis-
2781 connect nodes that fail to respond to 3 ping requests (on the 4th attempt). 
2782 The default time is a ping every 3 mins, therefore a link will be struck out
2783 after 12 minutes of nil response.
2784 2. Maintain a table of outstanding connects to other nodes and prevent over-
2785 laps (special favour to G0RDI).
2786 17Nov99=======================================================================
2787 1. Started using Data::Dumper for things again
2788 2. 'Fixed' DXUser file corruption?
2789 3. Allow multiline (ie lines with \n in them) output in $DXChannel::send 
2790 4. Added Andrew K9CW's updated wpxloc.raw, regenerated prefix_data.pl
2791 5. Put in callsign matching and stuff into sh/sun.
2792 14Nov99=======================================================================
2793 1. added BBS.pm to start BBS input of mail
2794 2. fixed eval in DXUser to log errors rather than banging out
2795 12Nov99=======================================================================
2796 1. added sh/sun command kindly supplied by Steve K9AN.
2797 2. allow ^Z on its own on a line to terminate a message
2798 08Nov99=======================================================================
2799 1. added spoofing (mk1 version) for sysops, useful for those little jobs like
2800 reseting a user's qra locator and such like "spoof g7brn set/qra jo02lq".
2801 2. fixed set/location so it stores the qra locator in the qra locator slot, 
2802 NOT the lat/long (who wrote this stuff...?).
2803 07Nov99=======================================================================
2804 1. reduced the amount of stuff compared against for dup announces.
2805 2. Check the regex for DK0WCY announces produces results before storing it as
2806 a WWV.
2807 3. Added some logging for set/priv (un)set/lockout.
2808 4. Added test long path calc to sh/muf
2809 5. Only wonder down the msg queue every minute
2810 6. Put in the initial DB code (at last), you can create and remove local and
2811 standard remote dbs, you can import AK1A style .FUL ascii databases, you can
2812 enquire on a local or remote database.
2813 7. A return ping to a node will clear down all outstanding pings to
2814 that node (which might cause some confusion if more then one ping is
2815 outstanding for a node, but then - shit happens).
2816 04Nov99=======================================================================
2817 1. Removed ~ from the end of the PC18.
2818 2. Removed a hangover from duff character checking in cluster.pl
2819 3. Stop PC frames that are to be routed, being routed back to themselves.
2820 03Nov99=======================================================================
2821 1. Simplified command caching so it uses anonymous subroutines, you should
2822 also get error messages back on the console now when developing.
2823 2. Allow locally connected AK1A clusters that for some obscure reason don't
2824 issue PC19s to still appear as connected and allow them to acquire users.
2825 31Oct99=======================================================================
2826 1. updated Minimuf.pm and show/muf.pl to the fixed versions sent to me by
2827 Steve Franke K9AN. 
2828 2. Made set/badnodes work, added show/badnodes. This is an interim fix until
2829 input spot filtering works.
2830 24Oct99=======================================================================
2831 1. fixed announces so that nodes only get one of them (not two).
2832 2. Altered the select timeouts to prevent apparent excessive CPU usage on
2833 multiprocessor machines (or at least that is what seems to be the trouble
2834 here). 
2835 22Oct99=======================================================================
2836 1. allow filter CALLSIGNS to be in upper or lower case.
2837 2. create the concept of input and output filters, input filters are of the 
2838 form "in_$call.pl" eg: "in_g1tlh.pl" (or "in_G1TLH.pl"), output filters are 
2839 "g1tlh.pl" (or "G1TLH.pl").
2840 3. all users can now filter on spots, ann and wwv (assuming the sysop has set
2841 the filters up - still no user creatable filters. Nodes can filter on both
2842 input for announces and output for all of these. I would recommend setting 
2843 up a few filters that are likely to be wanted and then symlinking callsigns
2844 to them as you get requests.
2845 4. added callsign and length of history/position of screen stats to console.
2846 If you want to change the colour of the callsign you will need to copy the
2847 Console.pm to your /spider/local directory and change the $mycallcolor equate.
2848 21Oct99=======================================================================
2849 1. fixed reply so that reply b or reply nop generate a bulletin with the 
2850 correct address.
2851 2. implemented sh/muf command.
2852 3. reduced privilege of catchup and uncatchup to 5. This so that, suitably
2853 privileged, nodes that occasionally link can rcmd a "catchup <nodecall> all"
2854 to the node they are connecting to and thus prevent a large tranche of, 
2855 potentially duplicate, mail. This isn't an issue for DXSpider, but may be
2856 an issue for any AK1A clusters you are connected to.
2857 20Oct99=======================================================================
2858 1. Translated all the subroutines of minimuf into perl as Minimuf.pm
2859 2. Limited the length of an ANN that is saved for de-duping to $pc12_dup_lth
2860 (def 72)
2861 3. help command should now return stuff that you expect.
2862 4. reduced necessary privilege to use 'MSG' command to 6.
2863 5. Correct the count of spots and wwv for a merge.
2864 6. Allow decodes of DK0WCY-3 WWV data beacon announces
2865 7. rewrote send so that an SB doesn't send a buckshee bull to NOPRIVATE!
2866 8. Changed default colouration on console so that all spots >= 50Mhz are red
2867 9. Fixed init command so that PC21s are sent down non-initted channels
2868 10. Allow forwarding of unknown private mail. This means that you can set up
2869 forwarding of 'foreign' mail across to and by gateways using the same 
2870 mechanism as bulletins (/spider/msg/forward.pl).
2871 11. Allow line wrapping on the console (G0RDI, G0VGS et al).
2872 18Oct99=======================================================================
2873 1. changed help command so that it works correctly with multiple title lines.
2874 2. added to address to the list of things a message checks to see whether it
2875 is a duplicate (how on earth did it take _this_ long to find this one?).
2876 3. Changes S CC so that the callsign it says it has sent to is the real one
2877 (request from G8TIC)
2878 21Sep99=======================================================================
2879 1. allow zero messages to be stored (request from G4PDQ)
2880 2. make DX more flexible and change spotter syntax to be consistant with
2881 sh/dx (request from K9AN)
2882 30Aug99=======================================================================
2883 1. remove -@ as well as \d from SSIDs for spots
2884 2. remove WEB and/or NET from the front or rear of callsigns in Prefix.pm
2885 29Aug99=======================================================================
2886 1. Added msg command to allow the changing of To, From, Subject and so on the
2887 messages. This seems particularly important just now as a whole raft of G3's
2888 seem to be putting out non private bulls to callsigns.
2889 2. While I am at set messages to TO fields that appear to be users to private
2890 if they have been sent as bulls.
2891 3. Add DISTROs, if a callsign field appears in /spider/msg/distro in upper
2892 use that as a list of callsigns to send further. Note this is potentially
2893 recursive as callsigns in a distro can be distros.
2894 25Aug99=======================================================================
2895 1. check the date of a WWV much more carefully.
2896 24Aug99=======================================================================
2897 1. Prevented spots with lowercase callsigns being forwarded. This opens a
2898 much bigger can of worms which I shall have to address later.
2899 17Aug99=======================================================================
2900 1. all protocol except PC29 containing %XX characters will be dumped.
2901 2. Changed console.pl so that if you start typing it moves the top window
2902 back to the bottom.
2903 19Jul99=======================================================================
2904 1. Added iota and qra clauses to sh/dx as well, these take optional arguments
2905 and will look for the appropriate strings.
2906 17Jul99=======================================================================
2907 1. Started database integration.
2908 2. added qsl clause to sh/dx that searches for qsl or via in the dx info
2909 16Jul99=======================================================================
2910 1. drop frames with 'illegal' characters in them (but pass frames with 
2911 embedded %XX characters).
2912 15Jul99=======================================================================
2913 1. Changed grepdbg to accept a regexp. More useful (to me anyway).
2914 2. Altered init command so that it doesn't send PC21s down the initted 
2915 channel.
2916 10Jul99=======================================================================
2917 1. added an explicit disconnect from my side for already connected calls. This
2918 appears to have fixed a problem where if two consoles connect at the same time
2919 with the same (sysop?) callsign the cluster would stop.
2920 2. added some debugging in the Message handler to allow more state to be seen.
2921 3. Message handler now seems to work better for longer and doesn't spew out
2922 PC42 aborts with quite such gay abandon.
2923 05Jul99=======================================================================
2924 1. added stat/msg and stat/cluster commands to allow me to poke about inside
2925 the msg and cluster node tables.
2926 04Jul99=======================================================================
2927 1. removed silly 'new message has arrived' to connected nodes 
2928 2. added a ! command to the console.pl program; works like the bash shell.
2929 01Jul99=======================================================================
2930 1. Altered priv to 5 for connect.pl to match disconnect for nodes
2931 29Jun99=======================================================================
2932 1. fixed merge command that I broke.
2933 2. added some randomness in waittimes for aborted outgoing messages 
2934 3. Message Queuing now only occurs every 5 minutes (configurable if anyone 
2935 wants to write the command for doing it) and on receipt of a PC16. This is
2936 a further attempt at sorting the crossing of messages!
2937 4. a PC33 will cause another attempt at queuing. If you are on a roll, keep
2938 going!
2939 28Jun99=======================================================================
2940 1. console.pl now works with history and editting.
2941 2. added scrolling to stuff sent by the cluster.
2942 3. added colours to things.
2943 27Jun99=======================================================================
2944 1. added WWV filtering
2945 2. added timeouts to for forwarding Messages, also added a waiting time for
2946 failed (stalled) outgoing messages.
2947 3. Incoming messages will now have priority over outgoing messages to the
2948 same node.
2949 4. Added 'catchup' command which will 'catchup' messages to date for a node. 
2950 This means that when you start forwarding to a node, it doesn't get all the
2951 messages queued up that are probably old.
2952 5. added 'uncatchup' which does the opposite of the above.
2953 6. fixed kill full and PC49 handling so that it actually works.
2954 7. Fixed local aliases so they add to the front of the standard ones. This
2955 means you only need to add your specials or override the system ones you need
2956 to.
2957 21Jun99=======================================================================
2958 1. changed regex for cluster->client msgs so that strings like |---| are no
2959 longer ignored.
2960 20Jun99=======================================================================
2961 1. prevented a merge to myself (causes a loop)
2962 18Jun99=======================================================================
2963 1. fixed a problem with DXLogPrint repeating log entries.
2964 2. altered the permissions on disconnnect so that priv 5 users can disconnect
2965 clusters, but still require priv 8 to disconnect users.
2966 3. made sure that an incoming PC18 clears out all the cluster info for
2967 that channel before re-initialising.
2968 4. add init command.
2969 5. disconnect users before nodess on shutdown
2970 15Jun99=======================================================================
2971 1. added grepdbg program (so you can search your debug files and get times
2972 and dates of incidents).
2973 2. Moved DXVars.pm to DXVars.pm.issue to force new users to cp it to their
2974 local directory.
2975 3. added $allowzero to DXProt to allow thru PC19s with zero protocol versions.
2976 14Jun99=======================================================================
2977 1. changed IO::File in help and apropos to IO::File
2978 2. added a check for isa('DXNode') for PC50s
2979 08Jun99=======================================================================
2980 1. Started work on the curses based operator console.
2981 03Jun99=======================================================================
2982 1. cluster seems to have a memory leak, put DESTROY functions in where 
2983 appropriate.
2984 2. try to make sure that PC21 commands are not issued inappropriately and
2985 also reformat PC19 for onward broadcast so that nodes coming in on loops are
2986 dropped from those broadcasts.
2987 3. make sure PC16,17,19,21 doen't affect locally connected nodes.
2988 4. Changed all instances of FileHandle to IO::File.
2989 01Jun99=======================================================================
2990 1. removed a output of an unwanted pc21 for isolated nodes
2991 31May99=======================================================================
2992 1. Added checking for PC16,17,19 and 21 to make sure that they come in from
2993 the channels that they are supposed to.
2994 2. Pass the RCMDing node's priv level to the command (rather than the 
2995 connecting node's privilege level).
2996 3. Pass thru merge requests for other nodes.
2997 4. Removed a warning from client.pl
2998 5. routed external DB commands and drop them (for now) locally
2999 6. routed external mail commands (ie those addressed elsewhere)
3000 7. routed external PC26/27 lines 
3001 25May99=======================================================================
3002 1. try to make the lastin value correct even for local users
3003 2. got rid of the stupid bug that failed to print out the offline message
3004 but put a "*main::STDOUTmain" for every line of that message instead.
3005 3. Ported to 5.00503 (well actually just installed it and it just runs). 
3006 4. Added who command
3007 23May99=======================================================================
3008 1. Got rid of some of the useless error messages on global destruction when
3009 quiting a program.
3010 2. Stuck -w back on client.pl
3011 23May99=======================================================================
3012 1. tried to change connection to raw mode for cluster connections
3013 2. sh/c and sh/u are now sorted in alphabetical order
3014 3. Limited the number of queued dx spots when composing messages to 20 (the 
3015 oldest one is lost for every one added above 20).
3016 4. Added generalised shell globbing everywhere I think it is useful, including
3017 sh/dx, dir, sh/files etc
3018 5. Made dir more compatible with ak1a and added 'to' and 'from' call searching
3019 it should now do everything that ak1a does except counts.
3020 6. added similar functionality to kill command so that you can kill ranges, to
3021 and from callsigns etc.
3022 22May99=======================================================================
3023 1. added check for -1 from Date::Parse and return undef for out of range dates
3024 2. added show/files and type commands
3025 21May99=======================================================================
3026 1. made set/nodx work again.
3027 2. made dx stuff queue nicely again when sending messages.
3028 18May99=======================================================================
3029 1. Added announce dup checking.
3030 2. Added system announce filtering.
3031 08May99=======================================================================
3032 1. Added a bit more checking to the rcmd thing to make more sure that this
3033 rcmd isn't coming from an imposter. Not possible to prevent everything 
3034 ofcourse, just make it a bit harder.
3035 2. altered set/lockout and set/privilege so that they can't executed remotely.
3036 3. Added some code to reject rubbish (with invalid binary characters) protocol
3037 or user lines as input.
3038 4. prevented PC command being executed remotely :-)
3039 05May99=======================================================================
3040 1. change the connection overlap from an abort to a disconnect.
3041 02May99=======================================================================
3042 1. Added the mechanism for doing user spot filtering for spots in the cluster 
3043 (no user control just yet - but sysops can do it).
3044 2. Fixed problem with nodes sending out the node lists of isolated nodes.
3045 30Apr99=======================================================================
3046 1. Try to make it even more AK1A friendly by putting the node list out in the
3047 'correct' order.
3048 2. added code so that local users and commands go to all connected nodes 
3049 INCLUDING the isolated ones.
3050 26Apr99=======================================================================
3051 1. added set/user command as a hack, please use this with care, there is
3052 very little checking.
3053 2. added export_opernam.pl which is a basic reader of AK1A opernam.dat files
3054 to stdout
3055 25Apr99=======================================================================
3056 1. Fixed problem with filtered spots not coming out.
3057 2. Added the possibility of filtering on channel callsign
3058 20Apr99=======================================================================
3059 1. altered order of undefing and closing of user file in an attempt to make 
3060 corruptions/missing users less likely.
3061 2. made messages that are addressed to the node call appear to the alias call
3062 3. check dates much more rigourously.
3063 4. ignore SIGTERM and SIGINT during shutdown of the cluster
3064 15Mar99=======================================================================
3065 1. added $actiondata to filter line to allow per action data such as no of hops
3066 2. fixed a silly problem in talk for non-existant callsigns
3067 3. Added sysop command
3068 02Mar99========================================================================
3069 1. Changed DXUser so that it uses a homemade import/export hash routine 
3070 2. DXUser now uses a DB_BTREE file
3071 3. Added export_users.pl, import_users.pl and convert_users.pl
3072 25Feb99========================================================================
3073 1. added NL language stuff.
3074 2. added set/language
3075 21Feb99========================================================================
3076 1. Allowed multiple 'on <freq>' for show/dx
3077 2. Made sure the 'on 20m/ssb' thing worked (also 'on hf/cw').
3078 3. first cut of the Filtering code, no user commands yet but the file
3079 format is defined and manually added filters should work for spots
3080 17Feb99========================================================================
3081 1. added export_user.pl to export user files (for interest and safety)
3082 2. changed DXUser::init to allow O_RDONLY access which may limit the number
3083 of coredumps G0RDI seems to get.
3084 15Feb99========================================================================
3085 1. Added msg forwarding code which uses $main::root/msg/forward.pl.
3086 14Feb99========================================================================
3087 1. Changed A & K in WWV to be the other way around (I am told by G3IOR that
3088 this will mean that we won't have pole to pole aurora nor all the power lines
3089 overloading everywhere as well as a result of having values of K > 10).
3090 2. allow the '~' character in message bodies.
3091 3. Moved $main::data/badmsg.pl to $main::root/msg/badmsg.pl.
3092 11Feb99========================================================================
3093 1. Fixed a problem with isolated nodes' configurations being sent on sending 
3094 local configs to new connections.
3095 08Feb99========================================================================
3096 1. added a $SIG{ALRM} in the client to actually catch the alarm when it goes 
3097 off which means that the netrom/ax25 call programs terminate properly (and not
3098 loop as fast as their little legs can paddle, soaking up CPU time).
3099 2. Implemented read receipts as an especial request from G4PDQ.
3100 3. Fiddled with DXUser a bit to see whether I can stop it core dumping on new
3101 users in PC16s on G0RDI's machine.
3102 4. Added E4 (Palestine) to Prefix data.
3103 30Jan99========================================================================
3104 1. Some of the dates we get can cause crashes, tried to make it more robust (oh
3105 and Y2K compliant)
3106 2. PC16 seem to come in with missing callsigns from somewhere
3107 3. added $main::data/baddx.pl which prevents callsigns that are in the list being
3108 a) forwarded b) stored and c) (except for the originator, if local) being
3109 displayed locally.
3110 4. added $main::data/badmsg.pl which deletes any messages whose TO address is
3111 in this list (this is largely for european sensibilities). 
3112 18Jan99========================================================================
3113 1. added present(),presentish() and disconnect() to DXCron so that you can see 
3114 (easily) if a station is on the cluster anywhere and also disconnect them
3115 locally. 
3116 2. added rcmd() to DXCron so you can send an rcmd to someone else from crontab.
3117 3. <embarrassment>Fixed create_sysop.pl so that longitude is spelt correctly
3118 there as well</embarrassment> made the update work properly. NOTE create_sysop
3119 will only do what you expect if all cluster.pl and client.pl programs are 
3120 stopped.
3121 4. DXCron wasn't reading in reliably on startup, this is now (hopefully) fixed.
3122 the -M semantics are rather strange!
3123 5. The -w switch is now standard on cluster.pl
3124 6. Added last_connect() which gives the last connect time of a user (or now
3125 if connected).
3126 7. Added present_on(call, node) and presentish_on(ditto) which returns true if 
3127 the call is connected to the node.
3128 8. incoming messages for users will now send a 'new message' message (instead
3129 of merely generating the message)[who wrote this rubbish?].
3130 9. Hooked $SIG{__WARN__} and $SIG{__DIE__} so we store these nasty error 
3131 messages.
3132 10. Print the no of users on restricted protocol links if we have had PC50
3133 11. Had a go at making the sh/cl stats more accurate.
3134 12. PC11 was trying to call Local::spot1 instead of Local::spot, no warning 
3135 previously.
3136 13. Added a simple lockfile to prevent more than one cluster running at a time
3137 17Jan99========================================================================
3138 1. fixed some permission problems on DXLog.
3139 2. There is a circumstance in DXMsg which caused the cluster to stop on an 
3140 null ref pointer which I can't get to the bottom of but have bandaided out 
3141 for now.
3142 3. Started filter and Database code.
3143 4. Upper cased all the TO callsigns for sending to more than one station in
3144 messages.
3145 07Jan99========================================================================
3146 1. Fixed Geomag after emacs reformatted it wrong so sh/wwv works again.
3147 2. Added more range checking in WWV spots (they really are a heap of ...)
3148 3. Changed create_sysop.pl so that you can update as well as create the user 
3149 file
3150 4. Remove spotter's SSID from WWV spots
3151 06Jan99========================================================================
3152 1. Do some range checking for spots and WWV in the future (got a WWV for Oct 
3153 2034 whhich caused a bit of confusion!)
3154 2. Make WWV spots broadcast them to the users! (as opposed to merely storing 
3155 them)(thank you G0RDI).
3156 3. Allow users to do show/announce (thank you JE1SGH).
3157 4. Delay broadcasts to users if they are not in a 'prompt' state (means you can
3158 add messages and see what you are doing on a busy system)
3159 5. Made set/unset dx,ann,wx,talk,wwv do what is expected
3160 6. added set/sys_location and set/set_qra to set the cluster lat/long and qra
3161 7. New messages will now be announced on logon (if there are any)
3162 03Jan99========================================================================
3163 1. Upped the version no !!!!
3164 2. made the DXProtocol routines much less sensitive to '~' characters (JE1SGH)
3165 3. added '^' -> ':' conversions on ann, talk and dx commands
3166 4. You can now send messages containing blank lines.
3167 5. Fixed merge command problem reported by G0RDI
3168 28Dec98========================================================================
3169 1. Crossed fingers, got rid of the instabilities caused by execing programs
3170 at vast speed (reduced it significantly anyway).
3171 2. Personals will now move if homenode is known.
3172 3. Added Local.pm for doing local specials
3173 27Dec98========================================================================
3174 1. Various detail changes to remove some more warning with -w on
3175 2. Added DXCron handling - you can do crontabs now.
3176 3. Added show/program command so you can see where it is loading your .pm files
3177 from.
3178 4. Added pc26/27 replies to locally connected cluster's merge (pc25) requests
3179 5. Added spotters DXCC and original cluster to Spot data files.
3180 23Dec98========================================================================
3181 1. Reindented various things
3182 2. Added missing $main::mycall on the end of outgoing PC11s (!)
3183 3. Check that PC16/17 node calls really are nodes (AFAIAC).
3184 22Dec98========================================================================
3185 1. Added brackets round callsign if not here for prompt
3186 2. Added Iain's set/password routine
3187 3. Fixed sh/dx problems (the xemacs indent region messed Spot.pm up!)
3188 4. Issued 1.15
3189 21Dec98============= late! ====================================================
3190 1. fixed problem with missing DXDebug in DXProt.
3191 2. Fixed DXDebug so that it actually works as advertised with and without 
3192 trailing \n. 
3193 3. Added deduping of WWV spots as well (at for date,time,sfi,k and i) dups
3194 4. Replaced the 0 in "02-Dec-1998" with ' ' so it reads " 2-Dec-1998", it seems
3195 hard to credit it but some 'programs' out there that connect to clusters have
3196 problems with the leading '0'!
3197 5. In the same vain, included a strictly AK1A compatible sh/heading, apparently
3198 this is necessary for the same reason as 4.
3199 6. Started contrib tree stored the old show/heading in contrib/g0rdi/show.
3200 7. Because I now correctly dedupe spots and wwv (there's a hostage to fortune..)
3201 I have added a merge command. 
3202 21Dec98========================================================================
3203 1. Added "issue" to the client program for 'login' connections
3204 2. Added more docs for client program.
3205 3. Fixed problem introduced in 1.12 where a connect locally with a callsign of
3206 someone connected remotely would stop the cluster.
3207 4. issue release 1.13
3208 20Dec98========================================================================
3209 1. Removed all the warnings I get with perl -w (at least for just starting the
3210 cluster and running a few commands).
3211 2. Added per node hop control.
3212 3. Added some docs on how to use it and isolation
3213 4. Made talk command more intelligent in that if the user isn't seen and the
3214 user's last node is visible it tries the talk anyway.
3215 19Dec98========================================================================
3216 1. Fixed problems with sh/rcmd (talk/ann/log) with a callsign as argument and
3217 also made what G0RDI wanted work as well!
3218 2. Added isolate flag to allow isolation of different networks at a gateway.
3219 3. Changed make Makefile.PL to perl Makefile.PL in instructions
3220 4. Copied latest instructions to html directory
3221 5. Had another attempt at making clients disconnect without hanging everytime.
3222 6. Changed msg queuing semantics so that the system routes on exact callsign.
3223 7. Changed the protocol version so that it increments with the DXSpider version.
3224 14Dec98========================================================================
3225 1. Made the telnet thing work a bit better. It still will not work reliably to
3226 a real telnetd on port 23.
3227 2. Allowed network logins on client by specifying login instead of call.
3228 3. made msg handling more robust (PC30 with unknown streams cause PC42), queueing
3229 is only done on channels that are in state 'normal'.
3230 4. Added pc command which takes a callsign and some text and sends it without
3231 mods to the callsign, useful for sending manual PC protocol to unstick things.
3232 Also for sending anonymous messages to online users.
3233 5. Stopped duplicate messages being stored (it receives them and then bins them)
3234 6. Implemented PC49 delete/full from outside (kill full on the inside)
3235 7. Implemented the client command in connect scripts so that you can have 
3236 different scripts for the same callsign.
3237 8. Added sh/wwv command
3238 13Dec98========================================================================
3239 1. Fixed VS6 lat/long in prefix_data and wpxloc.raw
3240 2. Sorted out last in times for remote users
3241 3. editted and substitued G0RDI's version of the install instructions over
3242 mine in spider/html
3243 4. fixed telnet connections
3244 5. added connect instructions to html tree.
3245 6. Added some more help
3246 7. Upissued version
3247 12Dec98========================================================================
3248 1. Incorporated sh/st, (un)set/lockout, forward/opername from Iain G0RDI
3249 2. Added group handling with (un)set/group, show/group. This allows arbitrary
3250 groups to be formed (for ann/<group> for example) and is also used to 'filter' 
3251 spots, announces, wwvs etc into groups of cluster nodes (useful for creating 
3252 disjoint cluster networks)
3253 3. **** CHANGE mylongtitude to mylongitude in DXVars.pm ****
3254 4. Altered QRA locator routines so they work correctly!
3255 5. Fixed all commands that had the wrong mylat(itude) and mylong(itude) names
3256 in.
3257 07Dec98========================================================================
3258 1. Added set/name, set/qra, set/location, set/qth, set/homenode, set/bbs, 
3259 set/email
3260 2. changed the Msg socket close to a shutdown (hopefully more reliable), this 
3261 should stop clients hanging on exit.
3262 3. Added Alias support for help
3263 4. Added lltos and stoll routines to DXBearing
3264 5. Added auto prompting for name, qth, location and homenode if any of these
3265 aren't known.
3266 06Dec98========================================================================
3267 1. Fixed DXBearing::is_qra so that it correctly detects full QRA locators
3268 2. Added sh/qra for doing locator distances and bearings
3269 3. Added some stuff to Notes.txt on hints for command writers
3270 4. Changed help system to use just one file per language
3271 5. Started adding more help
3272 6. Fixed 24Mhz band limits
3273 7. Added apropos command and lots of new help text
3274 05Dec98========================================================================
3275 1. Added sh/heading and QRA locator calculation stuff
3276 04Dec98========================================================================
3277 1. Started Changes file
3278 2. Added load/cmd_cache.pl to clear cmd cache shortcuts (use this if cluster.pl
3279 get confused about where it is getting its commands from eg if you have
3280 removed a file from local_cmd 'cos you want to go back to standard one)
3281 3. Fixed bull handling at least to the extent that it stores them and
3282 doesn't mess up the normal directory handling.
3283 4. Fixed the unset/debug command so that it actually does the job!
3284 5. Removed the middle line 'written in perl for unix' from show/version.pl