home *** CD-ROM | disk | FTP | other *** search
/ Beijing Paradise BBS Backup / PARADISE.ISO / software / BBSDOORW / FDLA101E.ZIP / FDLA.DOC next >
Encoding:
Text File  |  1995-01-17  |  23.3 KB  |  517 lines

  1.  
  2.  
  3.                   FrontDoor Log Analyzer - FDLA Version 1.01e
  4.            Copyright 1991-94 by R.J. (Bob) Ross - ALL RIGHTS RESERVED
  5.                  SysOp - RJ's Byteline BBS - FidoNet 1:134/75
  6.  
  7.                                  03 June, 1994
  8.  
  9.  
  10.     Short Preamble
  11.     --------------
  12.  
  13.     FDLA is a filter program to extract information contained in the
  14.     FrontDoor logfile generated by the FrontDoor program.  It provides a
  15.     summary of the incoming/outgoing calls, mail/file transfers, session
  16.     costs undialable nodes and BBS caller activity over the period covered
  17.     by the FrontDoor log file.  FDLA needs a "all events processed log
  18.     level except for remote system info and AKA's" to generate a log with
  19.     sufficient detail.  I believe this is an option in setting up FrontDoor
  20.     using FDSETUP.
  21.  
  22.     I claim no credit for any portion of FrontDoor or QSort programs.  All
  23.     Advanced Engineering sarl and Joaquim H. Homrighausen products are
  24.     trademarks or registered trademarks of Advanced Engineering sarl or
  25.     Joaquim H. Homrighausen.  QSort Text Sort program is copyright by Ben
  26.     Baker.
  27.  
  28.     FDLA is free for use in a non commercial environment and may be copied
  29.     and distributed freely and publicly for this purpose.  I do request
  30.     that you register your copy of FDLA though.  This is primarily to feed
  31.     my ego and satisfy my curiosity on where my programs are being used. I
  32.     have a world map on my wall and stick map pins in at the geographical
  33.     location of known users of my programs.  Please see Register.txt
  34.     included with this documentation.  If you use FDLA I ask that you take
  35.     a few moments to complete it and send it off to me.
  36.  
  37.     Commercial establishments who wish to use FDLA, please contact me.  We
  38.     can work something out.
  39.  
  40.     FDLA is distributed "as is" and is guaranteed to do nothing except take
  41.     up space on your disk.  I do hope that you will find it more useful
  42.     though.  It does run on my IBM clone machine and the IBM compatible
  43.     machines that it has been beta tested on.
  44.  
  45.     Kick Start
  46.     ----------
  47.  
  48.     For a "kick start" just place FDLA.EXE in any convenient directory on
  49.     your hard disk but preferably in the same directory that FrontDoor
  50.     creates it's log file in.  At the DOS prompt, type FDLA -H to display
  51.     the help screen.
  52.  
  53.     Command Line Switches
  54.     ---------------------
  55.  
  56.     FDLA [<-switch>] [LOG=logfilename]
  57.  
  58.     All switches are optional as is the log filename and may be given in
  59.     any order. Parsing of switches -H, -LL and -SN, are in -SN, -H and -LL
  60.     order and are exclusive for obvious reasons.  If no command line
  61.     arguments are given, FDLA defaults to creating FDLARpt.Txt and uses the
  62.     FrontDoor log (FD.LOG) in the default directory.
  63.  
  64.  
  65.  
  66.  
  67.  
  68.                                      - 2 -
  69.  
  70.         Switches
  71.         -------
  72.                  No switch on the command line will produce FDLARpt.Txt
  73.                  providing that FDLA resides in the same directory as the
  74.                  FrontDoor log file and a log file exists in the name of
  75.                  FD.LOG.
  76.  
  77.         -D       Will make a data file FDLARpt.Dat containing the data,
  78.                  plus some additional data, displayed in Part I of the
  79.                  output report (FDLARpt.Txt) file.  FDLARpt.Dat is a comma
  80.                  delimited text file which may be useful for other
  81.                  applications.  A record field description of FDLARpt.Dat
  82.                  file is outlined in Annex B to this document file.
  83.  
  84.         -EXN     This is a very powerful cloaking feature which will allow
  85.                  you to exclude whole Zones, Networks, and/or Nodes etc
  86.                  from FDLARpt.Txt. Example: -EXN,Net:Node (ie -EXN,1:134)
  87.                  will exclude a whole Network. -EXN,1:,2: would exclude all
  88.                  Zone 1 and Zone 2 Network Nodes. -EXN,1:134/75 would
  89.                  exclude only Node 75 in Zone 1 Net 134. Note: -EXN
  90.                  parameters are delimited by a comma (,). A maximum of 10
  91.                  parameters may be used. If this feature is used, FDLA will
  92.                  behave as though no log entry occurred for the stated -EXN
  93.                  parameter(s).
  94.  
  95.         -H       A brief help screen which describes the switches used to
  96.                  determine the program options or behaviour.
  97.  
  98.         -KTF     Will cause the temporary work files created by FDLA to be
  99.                  retained.  Temporary files created are:
  100.  
  101.                        FDLATmp.$$$  - created to hold data extracted from
  102.                                       the log file file to produce Part I
  103.                                       of the FDLA output report file to
  104.                                       summarize mail transfers and
  105.                                       incoming/outgoing calls.
  106.  
  107.                        FDLATmp.$$S  - Sorted output from FDLATmp.$$$ input.
  108.  
  109.                        FDLATmpF.$$$ - created to hold data extracted from
  110.                                       the log file to produce Part II of
  111.                                       the FDLA output report file to
  112.                                       itemize file transfers.
  113.  
  114.                        FDLATmpF.$$S - Sorted output from FDLATmpF.$$$
  115.                                       input.
  116.  
  117.                        FDLATmpC.$$$ - A picture image of Session Cost Part
  118.                                       III portions of the output report
  119.                                       minus the closing last line.
  120.  
  121.                        FDLATmpU.$$$ - created to hold data extracted from
  122.                                       the log file to produce Part IV -
  123.                                       Undialable Nodes.
  124.  
  125.                        FDLATmpU.$$S - Sorted output from FDLATmpU.$$$
  126.  
  127.         -L       List FDLARpt.Txt to the screen after it has been produced
  128.                  by FDLA.  The list procedure supports PgUp, PgDn, left,
  129.                  right, up down arrow keys, Esc and X to exit.
  130.  
  131.  
  132.  
  133.  
  134.                                      - 3 -
  135.  
  136.         -LL      Will list that last created FDLARpt.Txt residing in FDLA's
  137.                  home directory if it exists.
  138.  
  139.         -NHA     By default, FDLA will use high Ascii characters to draw
  140.                  the boxes for the FDLARpt.Txt file output report.  Using
  141.                  the -NHA switch will make FDLA use only low Ascii
  142.                  characters (-+|) to draw borders and boxes for the report.
  143.  
  144.         -SN      System Name.  Allows you to modify the FDLA.EXE program to
  145.                  include your System Name.  If this switch is selected you
  146.                  will be prompted to enter your System Name.  Upon
  147.                  completion, FDLA will modify itself and exit to DOS.
  148.                  Subsequent runs that generate FDLARpt.Txt will then print
  149.                  your System Name at the top of the output report.
  150.  
  151.                  NOTE: This option will not work if you compress FDLA.EXE
  152.                  using an execute file compressor (LZEXE, PKLITE, etc)
  153.                  prior to modifying the FDLA execute file to include your
  154.                  system name.  If you do, I can almost guarantee that you
  155.                  will lock up your system if you try to run FDLA after
  156.                  compression.  You should be able to use the -SN option to
  157.                  add your System Name and then compress the execute file
  158.                  though.
  159.  
  160.         -SUP     A powerful cloaking feature that will allow you to
  161.                  suppress the display of selected file names in Part II of
  162.                  FDLARpt.Txt.  Example -SUP,.LZH,.ZIP will suppress display
  163.                  of all files with an extension of LZH and ZIP.
  164.                  -SUP,Nodediff will suppress display of all files that
  165.                  match "NODEDIFF".  Note:  Filename parameters are
  166.                  delimited by a comma (,).  A maximum of 10 parameters may
  167.                  be used.
  168.  
  169.         LOG=     LOG=drive:\path\log filename.  Allows FDLA to run using
  170.                  log file names other than FD.LOG in the default directory
  171.                  or to run on a drive or in a directory other than where
  172.                  the log file is maintained by FrontDoor.
  173.  
  174.  
  175.     Pitfalls
  176.     --------
  177.  
  178.     Some resident virus detectors may complain about FDLA.EXE being
  179.     modified when you use the -SN switch.  Also see NOTE under -SN
  180.     regarding compressing FDLA.EXE.
  181.  
  182.     I have one example of a cost record in a FD.LOG that exceeds 32767
  183.     which would indicate that a single sessionn long distance call would be
  184.     $327.67.  I have ignored such records where the cost exceeds $300.00 in
  185.     Part III as I now assume that this is a bug in the FD.LOG output.  FDLA
  186.     Version 1.00 would crash when numbers exceeded 32,767 while running the
  187.     cost algorithm.  This and subsequent versions should work OK by
  188.     ignoring these entries.  Those who frequently make long distance calls
  189.     in excess of $300.00 per session can send me equivalent cash and I'll
  190.     provide a custom copy of FDLA to record the cost of these calls. :-)
  191.  
  192.  
  193.  
  194.  
  195.  
  196.    As mentioned earlier, FDLA creates some temporary work files. If you
  197.  
  198.                                      - 4 -
  199.  
  200.     As mentioned earlier, FDLA creates some temporary work files. If you
  201.     run out of disk space while FDLA is executing, this is probably the
  202.     reason why.  The solution; more disk space or smaller log files. Unless
  203.     you use the -KTF switch, the work files will be deleted from your disk
  204.     when FDLA has completed it's final output report.  The used disk space
  205.     consumed by the temporary files will then be returned to your system.
  206.  
  207.     FDLA needs to go out to DOS to externally sort some of it's work files
  208.     (FDLATmp?.$$$).  The default sort program used is QSort by Ben Baker. If
  209.     DOS fails to find QSORT an error is returned to FDLA and it then looks
  210.     for the DOS SORT program on your path and re-starts the sort process.
  211.     If neither program can be found, FDLA exists with a file not found
  212.     error.
  213.  
  214.     I highly recommend the use QSORT because it's much faster than SORT,
  215.     uses less memory and will sort a file of any size subject to disk space
  216.     limitations.  If the sort is unsuccessful then the FDLA will terminate
  217.     with a DOS error level of 1. If the program ends with an Out of Data
  218.     error and indicates that file FDLATmp.$$S is nul, chances are you
  219.     either ran out of memory or disk space.  If you use the regular DOS
  220.     SORT utility on LARGE log files, your chances of FDLA failing are VERY
  221.     GOOD.  The best solution is to use QSort.  Those who don't have QSort
  222.     can save some IO activity by placing a copy of the DOS Sort program in
  223.     the same directory as FDLA and renaming it to QSort.
  224.  
  225.     If you run FDLA from a batch file the program will exit with an error
  226.     level of 0 on successful completion.  An error level of 1 will be
  227.     returned to DOS if FDLA fails for any reason.
  228.  
  229.     Conclusion
  230.     ----------
  231.  
  232.     This is the last official version of FDLA.  I don't plan on any further
  233.     development of this program.
  234.  
  235.  
  236.  
  237.  
  238.  
  239.                                      - 5 -
  240.  
  241.  
  242.     Strings in FD.LOG that are very important to FDLA are:
  243.  
  244.     ---
  245.     BUSY
  246.     Calling
  247.     Carrier lost
  248.     CONNECT
  249.     From
  250.     Incoming call at
  251.     Mail received
  252.     Mail transfer completed
  253.     NO CARRIER
  254.     NO DIAL
  255.     No response from remote system
  256.     Rcvd
  257.     Rejecting human caller
  258.     RING
  259.     Sending text in
  260.     Sent
  261.     Session handshake failure
  262.     Timeout waiting for hello packet
  263.     To
  264.     Unable to complete mail transfer
  265.     Unable to initiate transfer
  266.     Undialable node
  267.     Unexpected password
  268.     Using: Fido
  269.  
  270.     If you merge logfiles from other applications which contain any of the
  271.     foregoing strings, the output of FDLA could be unpredictable at best.
  272.     Unfortunately the FrontDoor log does not contain a unique
  273.     identification entry in the logfile such as is the case with MAX,
  274.     BINK, TICK, etc, so the strings cannot be isolated from other log
  275.     entries.
  276.  
  277.  
  278.  
  279.  
  280.  
  281.                                      - 6 -
  282.  
  283.     Please realize that although, to a non commercial user, FDLA is
  284.     freeware, it costs real out of pocket money to develop and distribute
  285.     FDLA both by myself and the SysOps who are gracious enough to
  286.     distribute FDLA over the FidoNet Software Distribution Networks
  287.     and other networks.
  288.  
  289.     The output of FDLA is not cast in stone.  I'm always open to
  290.     suggestions to improve the report or this documentation but please
  291.     don't expect me to dedicate my life work to this task as I have many
  292.     other interests that consume a lot of my time and energy.  Some users
  293.     may notice that FDLA looks a lot like BinkLA, the BinkleyTerm Log
  294.     Analyzer. That's because I wrote BinkLA. I incorporated many of
  295.     BinkLA's features in FDLA. BinkLA Versions 2.00+ use the same data file
  296.     output format as FDLA so other application programs will be able to use
  297.     data output from either FDLA or BinkLA to generate statistics unique to
  298.     a Network or individual SysOp.  If someone comes up with creative
  299.     applications that use FDLA or BinkLA data files, I'd appreciate
  300.     receiving a copy.
  301.  
  302.     I normally release source code with my programs but I'd like to
  303.     re-write the FDLA code before doing this.  FDLA is written using
  304.     QuickBASIC 4.5 and some Crescent QuickPak Pro library functions.  If
  305.     you really want the current code then contact me and we can probably
  306.     work something out.
  307.  
  308.     The latest version of FDLA (Beta or otherwise) will always be available
  309.     at RJ's Byteline BBS, FidoNet 1:134/75, using magic file name FDLA or
  310.     may be downloaded from File Area 1 without prior registration.  My
  311.     system presently uses a Courier HST DS V32b V42b modem for high speed
  312.     V32 and HST connections.
  313.  
  314.     A sample output of FDLA FDLARpt.Txt file is included as Annex A to this
  315.     document file.  Field and record descriptions for the files created by
  316.     FDLA are included as Annex B.
  317.  
  318.     Enjoy.....
  319.  
  320.                                  Yours truly,
  321.  
  322.  
  323.                                 R.J. (Bob) Ross
  324.  
  325.  
  326.                                                            Annex A
  327.  
  328.     Sample output of FDLARpt.Txt.
  329.  
  330. RJ.LOG                                                    FDLA Version 1.01e
  331.  
  332.                     RJ's Byteline BBS - FidoNet 1:134/75
  333.                   FrontDoor Log Statistics for the period
  334.             From Fri 27 Nov 92 21:35:53  to  Fri 27 Nov 92 21:39:58
  335. ┌──────────────────┬────────────────────────────────────┬──────────────────┐
  336. │░░░░░░░░░░░░░░░░░░│ Part I - Message Transfers & Calls │░░░░░░░░░░░░░░░░░░│
  337. ╞══════════════╤═══╧════════════════╤═══════════════════╧═════╤══════╤═════╡
  338. │Zone:Net/Node │   Telephone Calls  │       Message Bytes     │  CPS │ Tran│
  339. │    Number    │ Out │ Connect │ In │ Outgoing   │  Incoming  │  Avg │  Min│
  340. ╞══════════════╧═════╧═════════╧════╧════════════╧════════════╧══════╧═════╡
  341. │1:140/1            1      1      0       2,001             0   1000    0.0│
  342. │1:140/301          1      1      0       1,148             0    574    0.0│
  343. │1:140/401          1      1      0       2,001             0    500    0.1│
  344. │1:140/51           1      1      0       1,148             0    574    0.0│
  345. ├──────────────────────────────────────────────────────────────────────────┤
  346. │ TOTALS           4       4      0       6,298             0    629    0.2│
  347. ╘══════════════════════════════════════════════════════════════════════════╛
  348.  
  349. ┌───────────────────┬──────────────────────────────────┬───────────────────┐
  350. │░░░░░░░░░░░░░░░░░░░│ PART II - Network File Transfers │░░░░░░░░░░░░░░░░░░░│
  351. ╞══════════════╤════╧═══════════════╤══════════════════╧══════╤══════╤═════╡
  352. │Zone:Net/Node │                    │       File Bytes        │  CPS │ Tran│
  353. │    Number    │     File Names     │ Outgoing   │  Incoming  │ Rate │  Min│
  354. ╞══════════════╧════════════════════╧════════════╧════════════╧══════╧═════╡
  355. │                  No records to process for this report.                  │
  356. ╘══════════════════════════════════════════════════════════════════════════╛
  357. ┌───────────────────┬──────────────────────────────────┬───────────────────┐
  358. │░░░░░░░░░░░░░░░░░░░│ PART III - Network Session Costs │░░░░░░░░░░░░░░░░░░░│
  359. ╞══════════════╤════╧═══════════════╤══════════════════╧══════╤════════════╡
  360. │Zone:Net/Node │     Logged At      │       Session Time      │    Cost    │
  361. │    Number    │  Date   │   Time   │     Hrs │ Mins │ Secs   │            │
  362. ╞══════════════╧═════════╧══════════╧═════════╧══════╧════════╧════════════╡
  363. │          No Network Session Costs recorded for the period covered.       │
  364. ╘══════════════════════════════════════════════════════════════════════════╛
  365.  
  366. ┌───────────────────┬──────────────────────────────────┬───────────────────┐
  367. │░░░░░░░░░░░░░░░░░░░│    PART IV - Undialable Nodes    │░░░░░░░░░░░░░░░░░░░│
  368. ╞═══════════════════╧══════════════════════════════════╧═══════════════════╡
  369. │                  No records to process for this report.                  │
  370. ╘══════════════════════════════════════════════════════════════════════════╛
  371.  
  372.  
  373.  
  374.                                                            Annex A
  375.                                                            Page 2
  376.  
  377.  
  378. ┌──────────────────────────┬────────────────────┬──────────────────────────┐
  379. │░░░░░░░░░░░░░░░░░░░░░░░░░░│ PART  V - SUMMARY  │░░░░░░░░░░░░░░░░░░░░░░░░░░│
  380. ╞══════════════════════════╧════╤═══════════════╧══════════════════════════╡
  381. │ BBS Callers at 28800   =    0 ├──────────────────────────────────────────┤
  382. │                26400   =    0 ├──────────────────────────────────────────┤
  383. │                24000   =    0 ├──────────────────────────────────────────┤
  384. │                21600   =    0 │                                          │
  385. │                19200   =    0 │                                          │
  386. │                16800   =    0 │ Message Bytes Transferred    =  2,919,146│
  387. │                14400   =    0 │ File Bytes Transferred       =          0│
  388. │                12000   =    0 │                                          │
  389. │                 9600   =    0 │ TOTAL Bytes Transferred      =  2,919,146│
  390. │                 7200   =    0 │                                          │
  391. │                 4800   =    0 ├──────────────────────────────────────────┤
  392. │                 2400   =    0 ├──────────────────────────────────────────┤
  393. │                 1200   =    0 ├──────────────────────────────────────────┤
  394. │                 Other  =    0 ├──────────────────────────────────────────┤
  395. │                               │ Message Connect Time         =        0.5│
  396. │ TOTAL BBS Callers      =    0 │ File Transfer Connect Time   =        0.0│
  397. │                               │ TOTAL Connect Time (Hours)   =        0.5│
  398. │ Rejected BBS Calls     =    0 │ TOTAL Network Session Costs  =   $   0.00│
  399. │                               ├──────────────────────────────────────────┤
  400. │                               │ Unsuccessful Connect Attempts=        104│
  401. └───────────────────────────────┴──────────────────────────────────────────┘
  402.  
  403.  
  404.  
  405.                                                            Annex B
  406.  
  407.     Record description for file FDLARpt.Dat
  408.  
  409.        Field       Data Type                   Remarks
  410.     -----------------------------------------------------------------------
  411.     ZoneNetNode     STRING         A fixed length string of 15 characters
  412.                                    containing the Zone:Net/Node number.
  413.  
  414.     CallsOut        INTEGER        Positive numbers up to 32,767 which
  415.                                    contains a count of the number of
  416.                                    outgoing telephone calls.
  417.  
  418.     Connect         INTEGER        A count of the number of successful
  419.                                    telephone connects which includes both
  420.                                    outgoing and incoming connects.
  421.  
  422.     CallsIn         INTEGER        A count of the number of incoming
  423.                                    telephone calls.
  424.  
  425.     MByteOut        LONG           Positive numbers up to 2,147,483,647
  426.                                    which contains the total number of
  427.                                    message bytes transmitted to a
  428.                                    ZoneNetNode.
  429.  
  430.     MByteIn         LONG           Total number of message bytes received
  431.                                    from a ZoneNetNode.
  432.  
  433.     MTimeOut        INTEGER        Total transmission time (in seconds) to
  434.                                    transmit the total bytes in MByteOut.
  435.  
  436.     MTimeIn         INTEGER        Total transmission time (in seconds) to
  437.                                    receive the total bytes in MByteIn.
  438.  
  439.     MByteOutIn      LONG           MByteOut + MByteIn
  440.  
  441.     MTimeOutIn      LONG           MTimeOut + MTimeIn
  442.  
  443.     MAvgCPS         INTEGER        MByteOutIn \ MTimeOutIn
  444.  
  445.     MTimeMinute     SINGLE         precision floating point decimal.  Total
  446.                                    transfer time (MTimeOut + MTimeIn) / 60.
  447.  
  448.  
  449.  
  450.  
  451.                                      - 2 -
  452.  
  453.     Record description for temporary work files FDLATmp.$$$ & FDLATmp.$$S
  454.  
  455.        Field       Data Type                   Remarks
  456.     -----------------------------------------------------------------------
  457.  
  458.     ZoneNetNode     STRING         Fixed Length 15 characters contains
  459.                                    Zone:Net/Node number.
  460.  
  461.     MCallsOut       INTEGER        Number of telephone calls out.  Always 1
  462.                                    or 0.
  463.  
  464.     MConnect        INTEGER        Number of successful telephone connects.
  465.                                    Always 1 or 0.
  466.  
  467.     MCallsIn        INTEGER        Number of telephone calls in.  Always 1
  468.                                    or 0.
  469.  
  470.     MByteOut        LONG           Number of mail bytes transmitted during
  471.                                    a mail session.
  472.  
  473.     MByteIn         LONG           Number of mail bytes received during a
  474.                                    mail session.
  475.  
  476.     MTimeOut        INTEGER        Number of seconds to transmit MByteOut.
  477.  
  478.     MTimeIn         INTEGER        Number of seconds to receive MByteIn.
  479.  
  480.  
  481.  
  482.  
  483.  
  484.  
  485.                                      - 3 -
  486.  
  487.     Record description for FDLATmpF.$$$ & FDLATmpF.$$S
  488.  
  489.        Field       Data Type                   Remarks
  490.     -----------------------------------------------------------------------
  491.     ZoneNetNode     STRING         Fixed length string of 15 characters
  492.                                    containing the Zone:Net/Node number.
  493.  
  494.     FileNm          STRING         Fixed length string of 12 characters
  495.                                    containing the outgoing/incoming DOS
  496.                                    filename.
  497.  
  498.     FileByteOut     LONG           Size in bytes of transmitted file.
  499.  
  500.     FileByteIn      LONG           Size in bytes of received file.
  501.  
  502.     FileCPS         INTEGER        Transmission CPS of outgoing/incoming
  503.                                    file.
  504.  
  505.  
  506.     Record description for FDLATmpU.$$$ & FDLATmpU.$$S
  507.  
  508.        Field       Data Type                   Remarks
  509.     -----------------------------------------------------------------------
  510.  
  511.     ZoneNetNode     STRING         Fixed length string of 15 characters
  512.                                    containing the Zone:Net/Node number.
  513.  
  514.  
  515.  
  516.  
  517.