/ Garbo
/ Garbo.cdr / mac / util / neural.sit / NetLib.c.bin ![]() | < prev | next > |
MacBinary | 1989-09-14 | 6.8 KB | [TEXT/MACA] |
Confidence | Program | Detection | Match Type | Support |
---|---|---|---|---|
66% | dexvert | AMOS Picture Packer (image/amosPicturePacker) | ext | Supported |
1% | dexvert | Debian floppy split (archive/debianFloppySplit) | ext | Unsupported |
1% | dexvert | Sound Images sound sample (audio/soundImagesSoundSample) | ext | Unsupported |
1% | dexvert | DESI-III drawing (image/desiIIIDrawing) | ext | Unsupported |
1% | dexvert | MS-DOS PMODE extender executable (executable/msdosPMODEExtenderExecutable) | ext | Unsupported |
1% | dexvert | Alien Trilogytextures (other/alienTrilogyTextures) | ext | Unsupported |
1% | dexvert | APT cache data (other/aptCacheData) | ext | Unsupported |
1% | dexvert | CorelTRACE configuration (other/corelTRACEConfiguration) | ext | Unsupported |
1% | dexvert | Dreamcast Disc (other/dreamcastDisc) | ext | Unsupported |
1% | dexvert | EST flat binary (other/estFlatBinary) | ext | Unsupported |
1% | dexvert | Finale Enigma Binary Format (other/finaleEnigmaBinaryFormat) | ext | Unsupported |
1% | dexvert | Sega Genesis/Megadrive/32x ROM (other/genesisROM) | ext | Unsupported |
1% | dexvert | Myth: The Fallen Lords game archive (other/mythTheFallenLordsGameArchive) | ext | Unsupported |
1% | dexvert | Sound Images Sound Driver (other/soundImagesSoundDriver) | ext | Unsupported |
1% | dexvert | Symantec/Norton Config (other/symantecNortonConfig) | ext | Unsupported |
1% | dexvert | Vectrex ROM (other/vectrexROM) | ext | Unsupported |
1% | dexvert | BIS raP encoded format (other/bisraPEncoded) | ext | Unsupported |
1% | dexvert | Pascal Script binary (other/pascalScriptBinary) | ext | Unsupported |
1% | dexvert | 7th Level game data archive (other/seventhLevelGameDataArchive) | ext | Unsupported |
1% | dexvert | MacBinary (archive/macBinary) | fallback | Supported |
1% | dexvert | Binary Text (image/binaryText) | fallback | Supported |
1% | dexvert | Text File (text/txt) | fallback | Supported |
100% | file | MacBinary, Mon Feb 27 09:14:41 1989, modified Thu Mar 9 18:43:19 1989, creator MacWrite, type ASCII, 6703 bytes "NetLib.c" | default (weak) | |
99% | file | data | default | |
74% | TrID | Macintosh plain text (MacBinary) | default | |
25% | TrID | MacBinary 1 | default (weak) | |
100% | lsar | MacBinary | default | |
100% | gt2 | MAC Bilddatei | default (weak) |
id metadata | |
---|---|
key | value |
macFileType | [TEXT] |
macFileCreator | [MACA] |
+--------+-------------------------+-------------------------+--------+--------+
|00000000| 00 08 4e 65 74 4c 69 62 | 2e 63 00 00 00 00 00 00 |..NetLib|.c......|
|00000010| 00 00 00 00 00 00 00 00 | 00 00 00 00 00 00 00 00 |........|........|
|00000020| 00 00 00 00 00 00 00 00 | 00 00 00 00 00 00 00 00 |........|........|
|00000030| 00 00 00 00 00 00 00 00 | 00 00 00 00 00 00 00 00 |........|........|
|00000040| 00 54 45 58 54 4d 41 43 | 41 00 00 00 00 00 00 00 |.TEXTMAC|A.......|
|00000050| 00 00 00 00 00 1a 2f 00 | 00 00 00 a0 2f 08 51 a0 |....../.|..../.Q.|
|00000060| 3c bc 97 00 00 00 00 00 | 00 00 00 00 00 00 00 00 |<.......|........|
|00000070| 00 00 00 00 00 00 00 00 | 00 00 00 00 00 00 00 00 |........|........|
|00000080| 2f 2a 4e 65 74 4c 69 62 | 2e 63 20 20 20 20 43 6f |/*NetLib|.c Co|
|00000090| 72 65 20 72 6f 75 74 69 | 6e 65 73 20 66 6f 72 20 |re routi|nes for |
|000000a0| 6e 65 75 72 61 6c 20 4e | 65 74 77 6f 72 6b 2e 0d |neural N|etwork..|
|000000b0| 0d 20 20 20 20 20 54 68 | 69 73 20 66 69 6c 65 20 |. Th|is file |
|000000c0| 69 73 20 43 6f 70 79 72 | 69 67 68 74 20 31 39 38 |is Copyr|ight 198|
|000000d0| 39 20 62 79 20 50 69 65 | 72 63 65 20 54 2e 20 57 |9 by Pie|rce T. W|
|000000e0| 65 74 74 65 72 20 49 49 | 49 0d 09 20 0d 09 20 50 |etter II|I.. .. P|
|000000f0| 65 72 6d 69 73 73 69 6f | 6e 20 67 72 61 6e 74 65 |ermissio|n grante|
|00000100| 64 20 66 6f 72 20 61 6c | 6c 20 6e 6f 6e 2d 63 6f |d for al|l non-co|
|00000110| 6d 6d 65 72 63 69 61 6c | 20 75 73 65 73 20 6f 66 |mmercial| uses of|
|00000120| 20 74 68 69 73 20 63 6f | 64 65 2e 20 46 6f 72 20 | this co|de. For |
|00000130| 63 6f 6d 6d 65 72 63 69 | 61 6c 20 75 73 65 73 20 |commerci|al uses |
|00000140| 6f 66 20 74 68 69 73 20 | 63 6f 64 65 0d 09 20 63 |of this |code.. c|
|00000150| 6f 6e 74 61 63 74 20 6d | 65 20 61 74 20 0d 09 20 |ontact m|e at .. |
|00000160| 0d 09 20 20 20 20 20 50 | 69 65 72 63 65 20 54 2e |.. P|ierce T.|
|00000170| 20 57 65 74 74 65 72 20 | 49 49 49 0d 09 09 20 34 | Wetter |III... 4|
|00000180| 35 20 56 69 73 74 61 20 | 4c 61 67 6f 20 44 72 2e |5 Vista |Lago Dr.|
|00000190| 0d 09 09 20 53 69 6d 69 | 20 56 61 6c 6c 65 79 2c |... Simi| Valley,|
|000001a0| 20 43 41 20 39 33 30 36 | 35 0d 09 09 20 0d 09 09 | CA 9306|5... ...|
|000001b0| 20 6f 72 0d 09 09 20 0d | 09 09 20 77 65 74 74 65 | or... .|.. wette|
|000001c0| 72 40 63 73 76 61 78 2e | 63 61 6c 74 65 63 68 2e |r@csvax.|caltech.|
|000001d0| 65 64 75 09 09 6f 72 20 | 70 77 65 74 74 65 72 40 |edu..or |pwetter@|
|000001e0| 63 61 6c 74 65 63 68 2e | 62 69 74 6e 65 74 0d 09 |caltech.|bitnet..|
|000001f0| 09 20 0d 2a 2f 0d 0d 0d | 0d 0d 23 69 6e 63 6c 75 |. .*/...|..#inclu|
|00000200| 64 65 20 22 4e 65 74 4c | 69 62 2e 68 22 0d 23 69 |de "NetL|ib.h".#i|
|00000210| 6e 63 6c 75 64 65 20 22 | 73 74 6f 72 61 67 65 2e |nclude "|storage.|
|00000220| 68 22 0d 23 69 6e 63 6c | 75 64 65 20 22 4d 61 74 |h".#incl|ude "Mat|
|00000230| 68 2e 68 22 0d 65 78 74 | 65 72 6e 20 63 68 61 72 |h.h".ext|ern char|
|00000240| 20 62 75 66 66 65 72 5b | 32 35 36 5d 3b 0d 0d 2f | buffer[|256];../|
|00000250| 2a 69 73 69 67 6d 61 20 | 64 65 74 65 72 6d 69 6e |*isigma |determin|
|00000260| 65 73 20 77 68 65 74 68 | 65 72 20 74 6f 20 74 61 |es wheth|er to ta|
|00000270| 6b 65 20 73 69 67 6d 61 | 20 6f 66 20 74 68 65 20 |ke sigma| of the |
|00000280| 69 6e 70 75 74 73 2e 20 | 4e 6f 20 73 69 67 6d 61 |inputs. |No sigma|
|00000290| 20 73 65 65 6d 73 20 74 | 6f 20 74 72 61 69 6e 20 | seems t|o train |
|000002a0| 66 61 73 74 65 72 2a 2f | 0d 0d 2f 2a 23 64 65 66 |faster*/|../*#def|
|000002b0| 69 6e 65 20 69 73 69 67 | 6d 61 09 2a 2f 0d 0d 61 |ine isig|ma.*/..a|
|000002c0| 6d 6e 65 73 69 61 28 74 | 68 65 6d 69 6e 64 29 0d |mnesia(t|hemind).|
|000002d0| 6d 69 6e 64 09 2a 74 68 | 65 6d 69 6e 64 3b 0d 7b |mind.*th|emind;.{|
|000002e0| 0d 69 6e 74 20 69 3b 0d | 69 6e 74 20 6a 3b 0d 0d |.int i;.|int j;..|
|000002f0| 23 64 65 66 69 6e 65 20 | 4d 52 41 4e 44 20 28 28 |#define |MRAND ((|
|00000300| 28 64 6f 75 62 6c 65 29 | 20 52 61 6e 64 6f 6d 28 |(double)| Random(|
|00000310| 29 29 2f 20 33 32 37 36 | 37 2e 30 29 0d 0d 09 66 |))/ 3276|7.0)...f|
|00000320| 6f 72 20 28 69 3d 30 3b | 69 3c 74 68 65 6d 69 6e |or (i=0;|i<themin|
|00000330| 64 2d 3e 6e 68 69 64 64 | 65 6e 3b 69 2b 2b 29 0d |d->nhidd|en;i++).|
|00000340| 09 7b 0d 09 09 66 6f 72 | 20 28 6a 3d 30 3b 6a 3c |.{...for| (j=0;j<|
|00000350| 74 68 65 6d 69 6e 64 2d | 3e 6e 69 6e 3b 6a 2b 2b |themind-|>nin;j++|
|00000360| 29 0d 09 09 7b 0d 09 09 | 09 74 68 65 6d 69 6e 64 |)...{...|.themind|
|00000370| 2d 3e 69 6e 77 65 69 67 | 68 74 73 5b 69 5d 5b 6a |->inweig|hts[i][j|
|00000380| 5d 3d 4d 52 41 4e 44 3b | 0d 09 09 09 74 68 65 6d |]=MRAND;|....them|
|00000390| 69 6e 64 2d 3e 69 6e 77 | 65 69 67 68 74 64 65 6c |ind->inw|eightdel|
|000003a0| 74 61 73 5b 69 5d 5b 6a | 5d 3d 30 2e 30 3b 0d 09 |tas[i][j|]=0.0;..|
|000003b0| 09 7d 0d 09 09 74 68 65 | 6d 69 6e 64 2d 3e 68 69 |.}...the|mind->hi|
|000003c0| 64 64 65 6e 75 6e 69 74 | 73 5b 69 5d 3d 2e 35 3b |ddenunit|s[i]=.5;|
|000003d0| 0d 09 09 74 68 65 6d 69 | 6e 64 2d 3e 68 69 64 64 |...themi|nd->hidd|
|000003e0| 65 6e 64 65 6c 74 61 73 | 5b 69 5d 3d 30 2e 30 3b |endeltas|[i]=0.0;|
|000003f0| 0d 09 09 74 68 65 6d 69 | 6e 64 2d 3e 68 69 64 64 |...themi|nd->hidd|
|00000400| 65 6e 62 69 61 73 5b 69 | 5d 3d 4d 52 41 4e 44 3b |enbias[i|]=MRAND;|
|00000410| 0d 09 09 74 68 65 6d 69 | 6e 64 2d 3e 68 69 64 64 |...themi|nd->hidd|
|00000420| 65 6e 62 69 61 73 64 65 | 6c 74 61 73 5b 69 5d 3d |enbiasde|ltas[i]=|
|00000430| 30 2e 30 3b 0d 09 7d 0d | 09 66 6f 72 20 28 69 3d |0.0;..}.|.for (i=|
|00000440| 30 3b 69 3c 74 68 65 6d | 69 6e 64 2d 3e 6e 6f 75 |0;i<them|ind->nou|
|00000450| 74 3b 69 2b 2b 29 0d 09 | 7b 0d 09 09 66 6f 72 20 |t;i++)..|{...for |
|00000460| 28 6a 3d 30 3b 6a 3c 74 | 68 65 6d 69 6e 64 2d 3e |(j=0;j<t|hemind->|
|00000470| 6e 68 69 64 64 65 6e 3b | 6a 2b 2b 29 0d 09 09 7b |nhidden;|j++)...{|
|00000480| 0d 09 09 09 74 68 65 6d | 69 6e 64 2d 3e 68 69 64 |....them|ind->hid|
|00000490| 64 65 6e 77 65 69 67 68 | 74 73 5b 69 5d 5b 6a 5d |denweigh|ts[i][j]|
|000004a0| 3d 4d 52 41 4e 44 3b 0d | 09 09 09 74 68 65 6d 69 |=MRAND;.|...themi|
|000004b0| 6e 64 2d 3e 68 69 64 64 | 65 6e 77 65 69 67 68 74 |nd->hidd|enweight|
|000004c0| 64 65 6c 74 61 73 5b 69 | 5d 5b 6a 5d 3d 30 2e 30 |deltas[i|][j]=0.0|
|000004d0| 3b 0d 09 09 7d 0d 09 09 | 74 68 65 6d 69 6e 64 2d |;...}...|themind-|
|000004e0| 3e 6f 75 74 75 6e 69 74 | 73 5b 69 5d 3d 2e 35 3b |>outunit|s[i]=.5;|
|000004f0| 0d 09 09 74 68 65 6d 69 | 6e 64 2d 3e 6f 75 74 64 |...themi|nd->outd|
|00000500| 65 6c 74 61 73 5b 69 5d | 3d 30 2e 30 3b 0d 09 09 |eltas[i]|=0.0;...|
|00000510| 74 68 65 6d 69 6e 64 2d | 3e 6f 75 74 62 69 61 73 |themind-|>outbias|
|00000520| 5b 69 5d 3d 4d 52 41 4e | 44 3b 0d 09 09 74 68 65 |[i]=MRAN|D;...the|
|00000530| 6d 69 6e 64 2d 3e 6f 75 | 74 62 69 61 73 64 65 6c |mind->ou|tbiasdel|
|00000540| 74 61 73 5b 69 5d 3d 30 | 2e 30 3b 0d 09 7d 0d 09 |tas[i]=0|.0;..}..|
|00000550| 66 6f 72 20 28 6a 3d 30 | 3b 6a 3c 74 68 65 6d 69 |for (j=0|;j<themi|
|00000560| 6e 64 2d 3e 6e 69 6e 3b | 6a 2b 2b 29 0d 09 7b 0d |nd->nin;|j++)..{.|
|00000570| 09 09 74 68 65 6d 69 6e | 64 2d 3e 69 6e 75 6e 69 |..themin|d->inuni|
|00000580| 74 73 5b 6a 5d 3d 2e 35 | 3b 0d 09 09 74 68 65 6d |ts[j]=.5|;...them|
|00000590| 69 6e 64 2d 3e 69 6e 64 | 65 6c 74 61 73 5b 6a 5d |ind->ind|eltas[j]|
|000005a0| 3d 30 2e 30 3b 0d 09 09 | 74 68 65 6d 69 6e 64 2d |=0.0;...|themind-|
|000005b0| 3e 69 6e 62 69 61 73 5b | 6a 5d 3d 4d 52 41 4e 44 |>inbias[|j]=MRAND|
|000005c0| 3b 0d 09 09 74 68 65 6d | 69 6e 64 2d 3e 69 6e 62 |;...them|ind->inb|
|000005d0| 69 61 73 64 65 6c 74 61 | 73 5b 6a 5d 3d 30 2e 30 |iasdelta|s[j]=0.0|
|000005e0| 3b 0d 09 7d 0d 09 0d 09 | 0d 7d 0d 0d 64 6f 75 62 |;..}....|.}..doub|
|000005f0| 6c 65 20 73 69 67 6d 61 | 28 20 78 20 29 0d 64 6f |le sigma|( x ).do|
|00000600| 75 62 6c 65 20 78 3b 0d | 7b 0d 09 72 65 74 75 72 |uble x;.|{..retur|
|00000610| 6e 20 28 31 2e 30 2f 28 | 31 2e 30 2b 65 78 70 28 |n (1.0/(|1.0+exp(|
|00000620| 2d 78 29 29 29 3b 0d 7d | 0d 0d 0d 0d 69 6e 69 74 |-x)));.}|....init|
|00000630| 6d 69 6e 64 28 6e 69 2c | 6e 68 2c 6e 6f 75 74 2c |mind(ni,|nh,nout,|
|00000640| 6c 72 61 74 65 2c 6d 6f | 6d 65 6e 74 2c 6d 79 6d |lrate,mo|ment,mym|
|00000650| 69 6e 64 29 0d 69 6e 74 | 20 6e 69 2c 6e 68 2c 6e |ind).int| ni,nh,n|
|00000660| 6f 75 74 3b 0d 64 6f 75 | 62 6c 65 20 6c 72 61 74 |out;.dou|ble lrat|
|00000670| 65 2c 6d 6f 6d 65 6e 74 | 3b 0d 6d 69 6e 64 20 2a |e,moment|;.mind *|
|00000680| 2a 6d 79 6d 69 6e 64 3b | 0d 7b 0d 6d 69 6e 64 20 |*mymind;|.{.mind |
|00000690| 2a 74 68 65 6d 69 6e 64 | 3b 0d 69 6e 74 20 69 3b |*themind|;.int i;|
|000006a0| 0d 0d 09 74 68 65 6d 69 | 6e 64 3d 20 28 6d 69 6e |...themi|nd= (min|
|000006b0| 64 20 2a 29 20 6d 6c 61 | 6c 6c 6f 63 28 28 6c 6f |d *) mla|lloc((lo|
|000006c0| 6e 67 29 20 73 69 7a 65 | 6f 66 28 6d 69 6e 64 29 |ng) size|of(mind)|
|000006d0| 29 3b 0d 09 74 68 65 6d | 69 6e 64 2d 3e 6e 69 6e |);..them|ind->nin|
|000006e0| 3d 6e 69 3b 0d 09 74 68 | 65 6d 69 6e 64 2d 3e 6e |=ni;..th|emind->n|
|000006f0| 68 69 64 64 65 6e 3d 6e | 68 3b 0d 09 74 68 65 6d |hidden=n|h;..them|
|00000700| 69 6e 64 2d 3e 6e 6f 75 | 74 3d 6e 6f 75 74 3b 0d |ind->nou|t=nout;.|
|00000710| 09 74 68 65 6d 69 6e 64 | 2d 3e 6c 65 61 72 6e 72 |.themind|->learnr|
|00000720| 61 74 65 3d 6c 72 61 74 | 65 3b 0d 09 74 68 65 6d |ate=lrat|e;..them|
|00000730| 69 6e 64 2d 3e 6d 6f 6d | 65 6e 74 75 6d 3d 6d 6f |ind->mom|entum=mo|
|00000740| 6d 65 6e 74 3b 0d 09 74 | 68 65 6d 69 6e 64 2d 3e |ment;..t|hemind->|
|00000750| 69 6e 75 6e 69 74 73 3d | 20 28 64 6f 75 62 6c 65 |inunits=| (double|
|00000760| 20 2a 29 20 6d 6c 61 6c | 6c 6f 63 28 28 6c 6f 6e | *) mlal|loc((lon|
|00000770| 67 29 20 28 6e 69 2a 73 | 69 7a 65 6f 66 28 64 6f |g) (ni*s|izeof(do|
|00000780| 75 62 6c 65 29 29 29 3b | 0d 09 74 68 65 6d 69 6e |uble)));|..themin|
|00000790| 64 2d 3e 68 69 64 64 65 | 6e 75 6e 69 74 73 3d 20 |d->hidde|nunits= |
|000007a0| 28 64 6f 75 62 6c 65 20 | 2a 29 20 6d 6c 61 6c 6c |(double |*) mlall|
|000007b0| 6f 63 28 28 6c 6f 6e 67 | 29 20 28 6e 68 20 2a 73 |oc((long|) (nh *s|
|000007c0| 69 7a 65 6f 66 28 64 6f | 75 62 6c 65 29 29 29 3b |izeof(do|uble)));|
|000007d0| 0d 09 74 68 65 6d 69 6e | 64 2d 3e 6f 75 74 75 6e |..themin|d->outun|
|000007e0| 69 74 73 3d 20 28 64 6f | 75 62 6c 65 20 2a 29 20 |its= (do|uble *) |
|000007f0| 6d 6c 61 6c 6c 6f 63 28 | 28 6c 6f 6e 67 29 20 28 |mlalloc(|(long) (|
|00000800| 6e 6f 75 74 20 2a 20 73 | 69 7a 65 6f 66 28 64 6f |nout * s|izeof(do|
|00000810| 75 62 6c 65 29 29 29 3b | 0d 09 74 68 65 6d 69 6e |uble)));|..themin|
|00000820| 64 2d 3e 69 6e 62 69 61 | 73 3d 20 28 64 6f 75 62 |d->inbia|s= (doub|
|00000830| 6c 65 20 2a 29 20 6d 6c | 61 6c 6c 6f 63 28 28 6c |le *) ml|alloc((l|
|00000840| 6f 6e 67 29 20 28 6e 69 | 2a 73 69 7a 65 6f 66 28 |ong) (ni|*sizeof(|
|00000850| 64 6f 75 62 6c 65 29 29 | 29 3b 0d 09 74 68 65 6d |double))|);..them|
|00000860| 69 6e 64 2d 3e 69 6e 62 | 69 61 73 64 65 6c 74 61 |ind->inb|iasdelta|
|00000870| 73 3d 20 28 64 6f 75 62 | 6c 65 20 2a 29 20 6d 6c |s= (doub|le *) ml|
|00000880| 61 6c 6c 6f 63 28 28 6c | 6f 6e 67 29 20 28 6e 69 |alloc((l|ong) (ni|
|00000890| 2a 73 69 7a 65 6f 66 28 | 64 6f 75 62 6c 65 29 29 |*sizeof(|double))|
|000008a0| 29 3b 0d 09 74 68 65 6d | 69 6e 64 2d 3e 68 69 64 |);..them|ind->hid|
|000008b0| 64 65 6e 62 69 61 73 3d | 20 28 64 6f 75 62 6c 65 |denbias=| (double|
|000008c0| 20 2a 29 20 6d 6c 61 6c | 6c 6f 63 28 28 6c 6f 6e | *) mlal|loc((lon|
|000008d0| 67 29 20 28 6e 68 20 2a | 73 69 7a 65 6f 66 28 64 |g) (nh *|sizeof(d|
|000008e0| 6f 75 62 6c 65 29 29 29 | 3b 0d 09 74 68 65 6d 69 |ouble)))|;..themi|
|000008f0| 6e 64 2d 3e 68 69 64 64 | 65 6e 62 69 61 73 64 65 |nd->hidd|enbiasde|
|00000900| 6c 74 61 73 3d 20 28 64 | 6f 75 62 6c 65 20 2a 29 |ltas= (d|ouble *)|
|00000910| 20 6d 6c 61 6c 6c 6f 63 | 28 28 6c 6f 6e 67 29 20 | mlalloc|((long) |
|00000920| 28 6e 68 20 2a 73 69 7a | 65 6f 66 28 64 6f 75 62 |(nh *siz|eof(doub|
|00000930| 6c 65 29 29 29 3b 0d 09 | 74 68 65 6d 69 6e 64 2d |le)));..|themind-|
|00000940| 3e 6f 75 74 62 69 61 73 | 3d 20 28 64 6f 75 62 6c |>outbias|= (doubl|
|00000950| 65 20 2a 29 20 6d 6c 61 | 6c 6c 6f 63 28 28 6c 6f |e *) mla|lloc((lo|
|00000960| 6e 67 29 20 28 6e 6f 75 | 74 20 2a 20 73 69 7a 65 |ng) (nou|t * size|
|00000970| 6f 66 28 64 6f 75 62 6c | 65 29 29 29 3b 0d 09 74 |of(doubl|e)));..t|
|00000980| 68 65 6d 69 6e 64 2d 3e | 6f 75 74 62 69 61 73 64 |hemind->|outbiasd|
|00000990| 65 6c 74 61 73 3d 20 28 | 64 6f 75 62 6c 65 20 2a |eltas= (|double *|
|000009a0| 29 20 6d 6c 61 6c 6c 6f | 63 28 28 6c 6f 6e 67 29 |) mlallo|c((long)|
|000009b0| 20 28 6e 6f 75 74 20 2a | 20 73 69 7a 65 6f 66 28 | (nout *| sizeof(|
|000009c0| 64 6f 75 62 6c 65 29 29 | 29 3b 0d 09 74 68 65 6d |double))|);..them|
|000009d0| 69 6e 64 2d 3e 69 6e 77 | 65 69 67 68 74 73 3d 20 |ind->inw|eights= |
|000009e0| 28 64 6f 75 62 6c 65 20 | 2a 2a 29 20 6d 6c 61 6c |(double |**) mlal|
|000009f0| 6c 6f 63 28 28 6c 6f 6e | 67 29 20 28 6e 68 20 2a |loc((lon|g) (nh *|
|00000a00| 20 73 69 7a 65 6f 66 28 | 64 6f 75 62 6c 65 20 2a | sizeof(|double *|
|00000a10| 29 29 29 3b 0d 09 66 6f | 72 20 28 69 3d 30 3b 69 |)));..fo|r (i=0;i|
|00000a20| 3c 6e 68 3b 69 2b 2b 29 | 20 74 68 65 6d 69 6e 64 |<nh;i++)| themind|
|00000a30| 2d 3e 69 6e 77 65 69 67 | 68 74 73 5b 69 5d 3d 28 |->inweig|hts[i]=(|
|00000a40| 64 6f 75 62 6c 65 20 2a | 29 20 6d 6c 61 6c 6c 6f |double *|) mlallo|
|00000a50| 63 28 28 6c 6f 6e 67 29 | 20 28 6e 69 20 2a 73 69 |c((long)| (ni *si|
|00000a60| 7a 65 6f 66 28 64 6f 75 | 62 6c 65 29 29 29 3b 0d |zeof(dou|ble)));.|
|00000a70| 09 74 68 65 6d 69 6e 64 | 2d 3e 69 6e 77 65 69 67 |.themind|->inweig|
|00000a80| 68 74 64 65 6c 74 61 73 | 3d 20 28 64 6f 75 62 6c |htdeltas|= (doubl|
|00000a90| 65 20 2a 2a 29 20 6d 6c | 61 6c 6c 6f 63 28 28 6c |e **) ml|alloc((l|
|00000aa0| 6f 6e 67 29 20 28 6e 68 | 20 2a 20 73 69 7a 65 6f |ong) (nh| * sizeo|
|00000ab0| 66 28 64 6f 75 62 6c 65 | 20 2a 29 29 29 3b 0d 09 |f(double| *)));..|
|00000ac0| 66 6f 72 20 28 69 3d 30 | 3b 69 3c 6e 68 3b 69 2b |for (i=0|;i<nh;i+|
|00000ad0| 2b 29 20 74 68 65 6d 69 | 6e 64 2d 3e 69 6e 77 65 |+) themi|nd->inwe|
|00000ae0| 69 67 68 74 64 65 6c 74 | 61 73 5b 69 5d 3d 28 64 |ightdelt|as[i]=(d|
|00000af0| 6f 75 62 6c 65 20 2a 29 | 20 6d 6c 61 6c 6c 6f 63 |ouble *)| mlalloc|
|00000b00| 28 28 6c 6f 6e 67 29 20 | 28 6e 69 20 2a 73 69 7a |((long) |(ni *siz|
|00000b10| 65 6f 66 28 64 6f 75 62 | 6c 65 29 29 29 3b 0d 09 |eof(doub|le)));..|
|00000b20| 74 68 65 6d 69 6e 64 2d | 3e 68 69 64 64 65 6e 77 |themind-|>hiddenw|
|00000b30| 65 69 67 68 74 73 3d 20 | 28 64 6f 75 62 6c 65 20 |eights= |(double |
|00000b40| 2a 2a 29 20 6d 6c 61 6c | 6c 6f 63 28 28 6c 6f 6e |**) mlal|loc((lon|
|00000b50| 67 29 20 28 6e 6f 75 74 | 20 2a 20 73 69 7a 65 6f |g) (nout| * sizeo|
|00000b60| 66 28 64 6f 75 62 6c 65 | 20 2a 29 29 29 3b 0d 09 |f(double| *)));..|
|00000b70| 66 6f 72 20 28 69 3d 30 | 3b 69 3c 6e 6f 75 74 3b |for (i=0|;i<nout;|
|00000b80| 69 2b 2b 29 20 74 68 65 | 6d 69 6e 64 2d 3e 68 69 |i++) the|mind->hi|
|00000b90| 64 64 65 6e 77 65 69 67 | 68 74 73 5b 69 5d 3d 28 |ddenweig|hts[i]=(|
|00000ba0| 64 6f 75 62 6c 65 20 2a | 29 20 6d 6c 61 6c 6c 6f |double *|) mlallo|
|00000bb0| 63 28 28 6c 6f 6e 67 29 | 20 28 6e 68 20 2a 73 69 |c((long)| (nh *si|
|00000bc0| 7a 65 6f 66 28 64 6f 75 | 62 6c 65 29 29 29 3b 0d |zeof(dou|ble)));.|
|00000bd0| 09 74 68 65 6d 69 6e 64 | 2d 3e 68 69 64 64 65 6e |.themind|->hidden|
|00000be0| 77 65 69 67 68 74 64 65 | 6c 74 61 73 3d 20 28 64 |weightde|ltas= (d|
|00000bf0| 6f 75 62 6c 65 20 2a 2a | 29 20 6d 6c 61 6c 6c 6f |ouble **|) mlallo|
|00000c00| 63 28 28 6c 6f 6e 67 29 | 20 28 6e 6f 75 74 20 2a |c((long)| (nout *|
|00000c10| 20 73 69 7a 65 6f 66 28 | 64 6f 75 62 6c 65 20 2a | sizeof(|double *|
|00000c20| 29 29 29 3b 0d 09 66 6f | 72 20 28 69 3d 30 3b 69 |)));..fo|r (i=0;i|
|00000c30| 3c 6e 6f 75 74 3b 69 2b | 2b 29 20 74 68 65 6d 69 |<nout;i+|+) themi|
|00000c40| 6e 64 2d 3e 68 69 64 64 | 65 6e 77 65 69 67 68 74 |nd->hidd|enweight|
|00000c50| 64 65 6c 74 61 73 5b 69 | 5d 3d 28 64 6f 75 62 6c |deltas[i|]=(doubl|
|00000c60| 65 20 2a 29 20 6d 6c 61 | 6c 6c 6f 63 28 28 6c 6f |e *) mla|lloc((lo|
|00000c70| 6e 67 29 20 28 6e 68 20 | 2a 73 69 7a 65 6f 66 28 |ng) (nh |*sizeof(|
|00000c80| 64 6f 75 62 6c 65 29 29 | 29 3b 0d 09 74 68 65 6d |double))|);..them|
|00000c90| 69 6e 64 2d 3e 69 6e 64 | 65 6c 74 61 73 3d 20 28 |ind->ind|eltas= (|
|00000ca0| 64 6f 75 62 6c 65 20 2a | 29 20 6d 6c 61 6c 6c 6f |double *|) mlallo|
|00000cb0| 63 28 28 6c 6f 6e 67 29 | 20 28 6e 69 2a 73 69 7a |c((long)| (ni*siz|
|00000cc0| 65 6f 66 28 64 6f 75 62 | 6c 65 29 29 29 3b 0d 09 |eof(doub|le)));..|
|00000cd0| 74 68 65 6d 69 6e 64 2d | 3e 68 69 64 64 65 6e 64 |themind-|>hiddend|
|00000ce0| 65 6c 74 61 73 3d 20 28 | 64 6f 75 62 6c 65 20 2a |eltas= (|double *|
|00000cf0| 29 20 6d 6c 61 6c 6c 6f | 63 28 28 6c 6f 6e 67 29 |) mlallo|c((long)|
|00000d00| 20 28 6e 68 20 2a 73 69 | 7a 65 6f 66 28 64 6f 75 | (nh *si|zeof(dou|
|00000d10| 62 6c 65 29 29 29 3b 0d | 09 74 68 65 6d 69 6e 64 |ble)));.|.themind|
|00000d20| 2d 3e 6f 75 74 64 65 6c | 74 61 73 3d 20 28 64 6f |->outdel|tas= (do|
|00000d30| 75 62 6c 65 20 2a 29 20 | 6d 6c 61 6c 6c 6f 63 28 |uble *) |mlalloc(|
|00000d40| 28 6c 6f 6e 67 29 20 28 | 6e 6f 75 74 20 2a 20 73 |(long) (|nout * s|
|00000d50| 69 7a 65 6f 66 28 64 6f | 75 62 6c 65 29 29 29 3b |izeof(do|uble)));|
|00000d60| 0d 0d 09 61 6d 6e 65 73 | 69 61 28 74 68 65 6d 69 |...amnes|ia(themi|
|00000d70| 6e 64 29 3b 0d 09 74 68 | 65 6d 69 6e 64 2d 3e 63 |nd);..th|emind->c|
|00000d80| 65 72 74 66 6e 3d 30 4c | 3b 0d 09 2a 6d 79 6d 69 |ertfn=0L|;..*mymi|
|00000d90| 6e 64 3d 74 68 65 6d 69 | 6e 64 3b 0d 7d 0d 0d 64 |nd=themi|nd;.}..d|
|00000da0| 6f 75 62 6c 65 20 6c 65 | 61 72 6e 28 74 68 65 6d |ouble le|arn(them|
|00000db0| 69 6e 64 2c 69 6e 70 75 | 74 73 2c 6f 75 74 70 75 |ind,inpu|ts,outpu|
|00000dc0| 74 73 29 0d 6d 69 6e 64 | 20 2a 74 68 65 6d 69 6e |ts).mind| *themin|
|00000dd0| 64 3b 0d 64 6f 75 62 6c | 65 20 2a 69 6e 70 75 74 |d;.doubl|e *input|
|00000de0| 73 2c 2a 6f 75 74 70 75 | 74 73 3b 0d 7b 0d 69 6e |s,*outpu|ts;.{.in|
|00000df0| 74 20 69 2c 6a 2c 6b 3b | 0d 64 6f 75 62 6c 65 20 |t i,j,k;|.double |
|00000e00| 61 2c 74 73 73 3d 30 2e | 30 2c 74 65 72 72 6f 72 |a,tss=0.|0,terror|
|00000e10| 3b 0d 0d 09 74 68 69 6e | 6b 28 74 68 65 6d 69 6e |;...thin|k(themin|
|00000e20| 64 2c 69 6e 70 75 74 73 | 29 3b 0d 09 66 6f 72 28 |d,inputs|);..for(|
|00000e30| 69 3d 30 3b 69 3c 74 68 | 65 6d 69 6e 64 2d 3e 6e |i=0;i<th|emind->n|
|00000e40| 6f 75 74 3b 69 2b 2b 29 | 0d 09 7b 0d 09 09 61 3d |out;i++)|..{...a=|
|00000e50| 74 68 65 6d 69 6e 64 2d | 3e 6f 75 74 75 6e 69 74 |themind-|>outunit|
|00000e60| 73 5b 69 5d 3b 0d 09 09 | 74 65 72 72 6f 72 3d 6f |s[i];...|terror=o|
|00000e70| 75 74 70 75 74 73 5b 69 | 5d 2d 61 3b 0d 09 09 74 |utputs[i|]-a;...t|
|00000e80| 73 73 20 2b 3d 20 74 65 | 72 72 6f 72 2a 74 65 72 |ss += te|rror*ter|
|00000e90| 72 6f 72 3b 0d 09 09 74 | 68 65 6d 69 6e 64 2d 3e |ror;...t|hemind->|
|00000ea0| 6f 75 74 64 65 6c 74 61 | 73 5b 69 5d 3d 28 74 65 |outdelta|s[i]=(te|
|00000eb0| 72 72 6f 72 29 2a 61 2a | 28 31 2e 30 2d 61 29 3b |rror)*a*|(1.0-a);|
|00000ec0| 0d 09 7d 0d 09 66 6f 72 | 20 28 69 3d 30 3b 20 69 |..}..for| (i=0; i|
|00000ed0| 3c 74 68 65 6d 69 6e 64 | 2d 3e 6e 68 69 64 64 65 |<themind|->nhidde|
|00000ee0| 6e 3b 69 2b 2b 29 0d 09 | 7b 0d 09 09 61 3d 74 68 |n;i++)..|{...a=th|
|00000ef0| 65 6d 69 6e 64 2d 3e 68 | 69 64 64 65 6e 75 6e 69 |emind->h|iddenuni|
|00000f00| 74 73 5b 69 5d 3b 0d 09 | 09 74 68 65 6d 69 6e 64 |ts[i];..|.themind|
|00000f10| 2d 3e 68 69 64 64 65 6e | 64 65 6c 74 61 73 5b 69 |->hidden|deltas[i|
|00000f20| 5d 3d 20 30 2e 30 3b 0d | 09 09 66 6f 72 20 28 6b |]= 0.0;.|..for (k|
|00000f30| 3d 30 3b 20 6b 3c 20 74 | 68 65 6d 69 6e 64 2d 3e |=0; k< t|hemind->|
|00000f40| 6e 6f 75 74 3b 20 6b 2b | 2b 29 0d 09 09 7b 0d 09 |nout; k+|+)...{..|
|00000f50| 09 09 74 68 65 6d 69 6e | 64 2d 3e 68 69 64 64 65 |..themin|d->hidde|
|00000f60| 6e 64 65 6c 74 61 73 5b | 69 5d 20 2b 3d 20 74 68 |ndeltas[|i] += th|
|00000f70| 65 6d 69 6e 64 2d 3e 6f | 75 74 64 65 6c 74 61 73 |emind->o|utdeltas|
|00000f80| 5b 6b 5d 2a 74 68 65 6d | 69 6e 64 2d 3e 68 69 64 |[k]*them|ind->hid|
|00000f90| 64 65 6e 77 65 69 67 68 | 74 73 5b 6b 5d 5b 69 5d |denweigh|ts[k][i]|
|00000fa0| 3b 0d 09 09 7d 0d 09 09 | 74 68 65 6d 69 6e 64 2d |;...}...|themind-|
|00000fb0| 3e 68 69 64 64 65 6e 64 | 65 6c 74 61 73 5b 69 5d |>hiddend|eltas[i]|
|00000fc0| 20 2a 3d 20 61 2a 28 31 | 2e 30 2d 61 29 3b 0d 09 | *= a*(1|.0-a);..|
|00000fd0| 7d 0d 2f 2a 09 73 70 72 | 69 6e 74 66 28 62 75 66 |}./*.spr|intf(buf|
|00000fe0| 66 65 72 2c 22 25 67 20 | 25 67 5c 72 22 2c 74 68 |fer,"%g |%g\r",th|
|00000ff0| 65 6d 69 6e 64 2d 3e 68 | 69 64 64 65 6e 64 65 6c |emind->h|iddendel|
|00001000| 74 61 73 5b 30 5d 2c 74 | 68 65 6d 69 6e 64 2d 3e |tas[0],t|hemind->|
|00001010| 68 69 64 64 65 6e 77 65 | 69 67 68 74 73 5b 30 5d |hiddenwe|ights[0]|
|00001020| 5b 30 5d 29 3b 0d 09 43 | 74 6f 50 73 74 72 28 62 |[0]);..C|toPstr(b|
|00001030| 75 66 66 65 72 29 3b 0d | 09 44 69 73 70 6c 61 79 |uffer);.|.Display|
|00001040| 53 74 72 69 6e 67 28 62 | 75 66 66 65 72 29 3b 2a |String(b|uffer);*|
|00001050| 2f 0d 09 66 6f 72 20 28 | 69 3d 30 3b 20 69 3c 20 |/..for (|i=0; i< |
|00001060| 74 68 65 6d 69 6e 64 2d | 3e 6e 69 6e 3b 20 69 2b |themind-|>nin; i+|
|00001070| 2b 29 0d 09 7b 0d 09 09 | 61 3d 74 68 65 6d 69 6e |+)..{...|a=themin|
|00001080| 64 2d 3e 69 6e 75 6e 69 | 74 73 5b 69 5d 3b 0d 09 |d->inuni|ts[i];..|
|00001090| 09 74 68 65 6d 69 6e 64 | 2d 3e 69 6e 64 65 6c 74 |.themind|->indelt|
|000010a0| 61 73 5b 69 5d 3d 30 2e | 30 3b 0d 09 09 66 6f 72 |as[i]=0.|0;...for|
|000010b0| 20 28 6b 3d 30 3b 6b 3c | 74 68 65 6d 69 6e 64 2d | (k=0;k<|themind-|
|000010c0| 3e 6e 68 69 64 64 65 6e | 3b 6b 2b 2b 29 0d 09 09 |>nhidden|;k++)...|
|000010d0| 7b 0d 09 09 09 74 68 65 | 6d 69 6e 64 2d 3e 69 6e |{....the|mind->in|
|000010e0| 64 65 6c 74 61 73 5b 69 | 5d 20 2b 3d 20 74 68 65 |deltas[i|] += the|
|000010f0| 6d 69 6e 64 2d 3e 68 69 | 64 64 65 6e 64 65 6c 74 |mind->hi|ddendelt|
|00001100| 61 73 5b 6b 5d 20 2a 20 | 74 68 65 6d 69 6e 64 20 |as[k] * |themind |
|00001110| 2d 3e 20 69 6e 77 65 69 | 67 68 74 73 5b 6b 5d 5b |-> inwei|ghts[k][|
|00001120| 69 5d 3b 0d 09 09 7d 0d | 09 09 74 68 65 6d 69 6e |i];...}.|..themin|
|00001130| 64 2d 3e 69 6e 64 65 6c | 74 61 73 5b 69 5d 20 2a |d->indel|tas[i] *|
|00001140| 3d 20 61 2a 28 31 2e 30 | 2d 61 29 3b 0d 09 7d 0d |= a*(1.0|-a);..}.|
|00001150| 09 0d 09 66 6f 72 20 28 | 69 3d 30 3b 20 69 3c 20 |...for (|i=0; i< |
|00001160| 74 68 65 6d 69 6e 64 2d | 3e 6e 68 69 64 64 65 6e |themind-|>nhidden|
|00001170| 3b 20 69 2b 2b 29 0d 09 | 7b 0d 09 09 66 6f 72 20 |; i++)..|{...for |
|00001180| 28 6a 3d 30 3b 20 6a 3c | 20 74 68 65 6d 69 6e 64 |(j=0; j<| themind|
|00001190| 2d 3e 6e 69 6e 3b 20 6a | 2b 2b 29 0d 09 09 7b 0d |->nin; j|++)...{.|
|000011a0| 09 09 09 74 68 65 6d 69 | 6e 64 2d 3e 69 6e 77 65 |...themi|nd->inwe|
|000011b0| 69 67 68 74 64 65 6c 74 | 61 73 5b 69 5d 5b 6a 5d |ightdelt|as[i][j]|
|000011c0| 3d 20 74 68 65 6d 69 6e | 64 2d 3e 6c 65 61 72 6e |= themin|d->learn|
|000011d0| 72 61 74 65 2a 20 74 68 | 65 6d 69 6e 64 2d 3e 68 |rate* th|emind->h|
|000011e0| 69 64 64 65 6e 64 65 6c | 74 61 73 5b 69 5d 2a 0d |iddendel|tas[i]*.|
|000011f0| 09 09 09 20 20 20 20 20 | 20 20 20 20 20 20 20 20 |... | |
|00001200| 20 20 74 68 65 6d 69 6e | 64 2d 3e 69 6e 75 6e 69 | themin|d->inuni|
|00001210| 74 73 5b 6a 5d 20 2b 20 | 74 68 65 6d 69 6e 64 2d |ts[j] + |themind-|
|00001220| 3e 6d 6f 6d 65 6e 74 75 | 6d 2a 74 68 65 6d 69 6e |>momentu|m*themin|
|00001230| 64 2d 3e 69 6e 77 65 69 | 67 68 74 64 65 6c 74 61 |d->inwei|ghtdelta|
|00001240| 73 5b 69 5d 5b 6a 5d 3b | 0d 09 20 20 20 20 7d 0d |s[i][j];|.. }.|
|00001250| 09 20 20 20 20 74 68 65 | 6d 69 6e 64 2d 3e 68 69 |. the|mind->hi|
|00001260| 64 64 65 6e 62 69 61 73 | 64 65 6c 74 61 73 5b 69 |ddenbias|deltas[i|
|00001270| 5d 20 3d 20 74 68 65 6d | 69 6e 64 2d 3e 6c 65 61 |] = them|ind->lea|
|00001280| 72 6e 72 61 74 65 20 2a | 20 74 68 65 6d 69 6e 64 |rnrate *| themind|
|00001290| 2d 3e 68 69 64 64 65 6e | 64 65 6c 74 61 73 5b 69 |->hidden|deltas[i|
|000012a0| 5d 20 2b 0d 09 20 20 20 | 20 09 74 68 65 6d 69 6e |] +.. | .themin|
|000012b0| 64 2d 3e 6d 6f 6d 65 6e | 74 75 6d 2a 74 68 65 6d |d->momen|tum*them|
|000012c0| 69 6e 64 2d 3e 68 69 64 | 64 65 6e 62 69 61 73 64 |ind->hid|denbiasd|
|000012d0| 65 6c 74 61 73 5b 69 5d | 3b 0d 09 7d 0d 09 66 6f |eltas[i]|;..}..fo|
|000012e0| 72 20 28 69 3d 30 3b 20 | 69 20 3c 20 74 68 65 6d |r (i=0; |i < them|
|000012f0| 69 6e 64 2d 3e 6e 6f 75 | 74 3b 20 69 2b 2b 29 0d |ind->nou|t; i++).|
|00001300| 09 7b 0d 09 09 66 6f 72 | 20 28 6a 3d 30 3b 6a 3c |.{...for| (j=0;j<|
|00001310| 20 74 68 65 6d 69 6e 64 | 2d 3e 6e 68 69 64 64 65 | themind|->nhidde|
|00001320| 6e 3b 6a 2b 2b 29 0d 09 | 09 7b 0d 09 09 09 74 68 |n;j++)..|.{....th|
|00001330| 65 6d 69 6e 64 2d 3e 68 | 69 64 64 65 6e 77 65 69 |emind->h|iddenwei|
|00001340| 67 68 74 64 65 6c 74 61 | 73 5b 69 5d 5b 6a 5d 3d |ghtdelta|s[i][j]=|
|00001350| 20 74 68 65 6d 69 6e 64 | 2d 3e 6c 65 61 72 6e 72 | themind|->learnr|
|00001360| 61 74 65 20 2a 20 74 68 | 65 6d 69 6e 64 2d 3e 6f |ate * th|emind->o|
|00001370| 75 74 64 65 6c 74 61 73 | 5b 69 5d 2a 0d 09 09 09 |utdeltas|[i]*....|
|00001380| 09 09 74 68 65 6d 69 6e | 64 2d 3e 68 69 64 64 65 |..themin|d->hidde|
|00001390| 6e 75 6e 69 74 73 5b 6a | 5d 20 2b 20 74 68 65 6d |nunits[j|] + them|
|000013a0| 69 6e 64 2d 3e 6d 6f 6d | 65 6e 74 75 6d 2a 20 74 |ind->mom|entum* t|
|000013b0| 68 65 6d 69 6e 64 2d 3e | 68 69 64 64 65 6e 77 65 |hemind->|hiddenwe|
|000013c0| 69 67 68 74 64 65 6c 74 | 61 73 5b 69 5d 5b 6a 5d |ightdelt|as[i][j]|
|000013d0| 3b 0d 09 09 7d 09 09 0d | 09 09 74 68 65 6d 69 6e |;...}...|..themin|
|000013e0| 64 2d 3e 6f 75 74 62 69 | 61 73 64 65 6c 74 61 73 |d->outbi|asdeltas|
|000013f0| 5b 69 5d 20 3d 20 74 68 | 65 6d 69 6e 64 2d 3e 6c |[i] = th|emind->l|
|00001400| 65 61 72 6e 72 61 74 65 | 20 2a 20 74 68 65 6d 69 |earnrate| * themi|
|00001410| 6e 64 2d 3e 6f 75 74 64 | 65 6c 74 61 73 5b 69 5d |nd->outd|eltas[i]|
|00001420| 20 2b 0d 09 09 09 74 68 | 65 6d 69 6e 64 2d 3e 6d | +....th|emind->m|
|00001430| 6f 6d 65 6e 74 75 6d 2a | 74 68 65 6d 69 6e 64 2d |omentum*|themind-|
|00001440| 3e 6f 75 74 62 69 61 73 | 64 65 6c 74 61 73 5b 69 |>outbias|deltas[i|
|00001450| 5d 3b 0d 09 7d 09 09 0d | 09 0d 09 66 6f 72 20 28 |];..}...|...for (|
|00001460| 69 3d 30 3b 20 69 20 3c | 20 74 68 65 6d 69 6e 64 |i=0; i <| themind|
|00001470| 2d 3e 6e 69 6e 3b 20 69 | 2b 2b 29 0d 09 7b 0d 09 |->nin; i|++)..{..|
|00001480| 09 74 68 65 6d 69 6e 64 | 2d 3e 69 6e 62 69 61 73 |.themind|->inbias|
|00001490| 64 65 6c 74 61 73 5b 69 | 5d 20 3d 20 74 68 65 6d |deltas[i|] = them|
|000014a0| 69 6e 64 2d 3e 6c 65 61 | 72 6e 72 61 74 65 20 2a |ind->lea|rnrate *|
|000014b0| 20 74 68 65 6d 69 6e 64 | 2d 3e 69 6e 64 65 6c 74 | themind|->indelt|
|000014c0| 61 73 5b 69 5d 20 2b 0d | 09 09 09 09 74 68 65 6d |as[i] +.|....them|
|000014d0| 69 6e 64 2d 3e 6d 6f 6d | 65 6e 74 75 6d 2a 74 68 |ind->mom|entum*th|
|000014e0| 65 6d 69 6e 64 2d 3e 69 | 6e 62 69 61 73 64 65 6c |emind->i|nbiasdel|
|000014f0| 74 61 73 5b 69 5d 3b 0d | 09 7d 0d 09 0d 09 72 65 |tas[i];.|.}....re|
|00001500| 66 6f 72 6d 6d 69 6e 64 | 28 74 68 65 6d 69 6e 64 |formmind|(themind|
|00001510| 29 3b 0d 09 72 65 74 75 | 72 6e 28 74 73 73 29 3b |);..retu|rn(tss);|
|00001520| 0d 09 0d 7d 0d 0d 74 68 | 69 6e 6b 28 74 68 65 6d |...}..th|ink(them|
|00001530| 69 6e 64 2c 69 6e 70 75 | 74 73 29 0d 6d 69 6e 64 |ind,inpu|ts).mind|
|00001540| 20 2a 74 68 65 6d 69 6e | 64 3b 0d 64 6f 75 62 6c | *themin|d;.doubl|
|00001550| 65 20 2a 69 6e 70 75 74 | 73 3b 0d 7b 0d 69 6e 74 |e *input|s;.{.int|
|00001560| 20 69 2c 6a 2c 6b 2c 6c | 3b 0d 0d 20 66 6f 72 20 | i,j,k,l|;.. for |
|00001570| 28 69 3d 30 3b 69 3c 74 | 68 65 6d 69 6e 64 2d 3e |(i=0;i<t|hemind->|
|00001580| 6e 6f 75 74 3b 69 2b 2b | 29 20 74 68 65 6d 69 6e |nout;i++|) themin|
|00001590| 64 2d 3e 6f 75 74 75 6e | 69 74 73 5b 69 5d 3d 74 |d->outun|its[i]=t|
|000015a0| 68 65 6d 69 6e 64 2d 3e | 6f 75 74 62 69 61 73 5b |hemind->|outbias[|
|000015b0| 69 5d 3b 0d 20 66 6f 72 | 20 28 69 3d 30 3b 69 3c |i];. for| (i=0;i<|
|000015c0| 74 68 65 6d 69 6e 64 2d | 3e 6e 68 69 64 64 65 6e |themind-|>nhidden|
|000015d0| 3b 69 2b 2b 29 20 74 68 | 65 6d 69 6e 64 2d 3e 68 |;i++) th|emind->h|
|000015e0| 69 64 64 65 6e 75 6e 69 | 74 73 5b 69 5d 3d 74 68 |iddenuni|ts[i]=th|
|000015f0| 65 6d 69 6e 64 2d 3e 68 | 69 64 64 65 6e 62 69 61 |emind->h|iddenbia|
|00001600| 73 5b 69 5d 3b 0d 20 66 | 6f 72 20 28 69 3d 30 3b |s[i];. f|or (i=0;|
|00001610| 69 3c 74 68 65 6d 69 6e | 64 2d 3e 6e 69 6e 3b 69 |i<themin|d->nin;i|
|00001620| 2b 2b 29 0d 20 7b 0d 23 | 69 66 64 65 66 20 69 73 |++). {.#|ifdef is|
|00001630| 69 67 6d 61 0d 20 09 74 | 68 65 6d 69 6e 64 2d 3e |igma. .t|hemind->|
|00001640| 69 6e 75 6e 69 74 73 5b | 69 5d 3d 20 73 69 67 6d |inunits[|i]= sigm|
|00001650| 61 28 20 20 69 6e 70 75 | 74 73 5b 69 5d 2b 74 68 |a( inpu|ts[i]+th|
|00001660| 65 6d 69 6e 64 2d 3e 69 | 6e 62 69 61 73 5b 69 5d |emind->i|nbias[i]|
|00001670| 20 29 20 20 3b 20 20 20 | 20 0d 23 65 6c 73 65 0d | ) ; | .#else.|
|00001680| 20 09 74 68 65 6d 69 6e | 64 2d 3e 69 6e 75 6e 69 | .themin|d->inuni|
|00001690| 74 73 5b 69 5d 3d 20 69 | 6e 70 75 74 73 5b 69 5d |ts[i]= i|nputs[i]|
|000016a0| 2b 74 68 65 6d 69 6e 64 | 2d 3e 69 6e 62 69 61 73 |+themind|->inbias|
|000016b0| 5b 69 5d 20 20 3b 20 20 | 20 20 0d 23 65 6e 64 69 |[i] ; | .#endi|
|000016c0| 66 0d 09 66 6f 72 20 28 | 6a 3d 30 3b 6a 3c 74 68 |f..for (|j=0;j<th|
|000016d0| 65 6d 69 6e 64 2d 3e 6e | 68 69 64 64 65 6e 3b 6a |emind->n|hidden;j|
|000016e0| 2b 2b 29 0d 09 7b 0d 09 | 09 74 68 65 6d 69 6e 64 |++)..{..|.themind|
|000016f0| 2d 3e 68 69 64 64 65 6e | 75 6e 69 74 73 5b 6a 5d |->hidden|units[j]|
|00001700| 20 2b 3d 74 68 65 6d 69 | 6e 64 2d 3e 69 6e 75 6e | +=themi|nd->inun|
|00001710| 69 74 73 5b 69 5d 2a 74 | 68 65 6d 69 6e 64 2d 3e |its[i]*t|hemind->|
|00001720| 69 6e 77 65 69 67 68 74 | 73 5b 6a 5d 5b 69 5d 3b |inweight|s[j][i];|
|00001730| 0d 09 7d 0d 20 20 7d 0d | 20 20 0d 20 20 20 0d 20 |..}. }.| . . |
|00001740| 66 6f 72 20 28 69 3d 30 | 3b 69 3c 74 68 65 6d 69 |for (i=0|;i<themi|
|00001750| 6e 64 2d 3e 6e 68 69 64 | 64 65 6e 3b 69 2b 2b 29 |nd->nhid|den;i++)|
|00001760| 0d 20 7b 0d 20 20 09 74 | 68 65 6d 69 6e 64 2d 3e |. {. .t|hemind->|
|00001770| 68 69 64 64 65 6e 75 6e | 69 74 73 5b 69 5d 20 3d |hiddenun|its[i] =|
|00001780| 20 73 69 67 6d 61 28 74 | 68 65 6d 69 6e 64 2d 3e | sigma(t|hemind->|
|00001790| 68 69 64 64 65 6e 75 6e | 69 74 73 5b 69 5d 29 3b |hiddenun|its[i]);|
|000017a0| 20 20 20 20 20 0d 09 66 | 6f 72 20 28 6a 3d 30 3b | ..f|or (j=0;|
|000017b0| 6a 3c 74 68 65 6d 69 6e | 64 2d 3e 6e 6f 75 74 3b |j<themin|d->nout;|
|000017c0| 6a 2b 2b 29 0d 09 7b 0d | 09 09 74 68 65 6d 69 6e |j++)..{.|..themin|
|000017d0| 64 2d 3e 6f 75 74 75 6e | 69 74 73 5b 6a 5d 20 2b |d->outun|its[j] +|
|000017e0| 3d 74 68 65 6d 69 6e 64 | 2d 3e 68 69 64 64 65 6e |=themind|->hidden|
|000017f0| 75 6e 69 74 73 5b 69 5d | 2a 74 68 65 6d 69 6e 64 |units[i]|*themind|
|00001800| 2d 3e 68 69 64 64 65 6e | 77 65 69 67 68 74 73 5b |->hidden|weights[|
|00001810| 6a 5d 5b 69 5d 3b 0d 09 | 7d 0d 20 7d 0d 20 20 20 |j][i];..|}. }. |
|00001820| 0d 20 20 66 6f 72 20 28 | 6a 3d 30 3b 6a 3c 20 74 |. for (|j=0;j< t|
|00001830| 68 65 6d 69 6e 64 2d 3e | 6e 6f 75 74 3b 6a 2b 2b |hemind->|nout;j++|
|00001840| 29 0d 20 20 7b 0d 20 20 | 0d 20 20 09 09 74 68 65 |). {. |. ..the|
|00001850| 6d 69 6e 64 2d 3e 6f 75 | 74 75 6e 69 74 73 5b 6a |mind->ou|tunits[j|
|00001860| 5d 20 3d 20 73 69 67 6d | 61 28 74 68 65 6d 69 6e |] = sigm|a(themin|
|00001870| 64 2d 3e 6f 75 74 75 6e | 69 74 73 5b 6a 5d 29 3b |d->outun|its[j]);|
|00001880| 0d 20 20 7d 0d 09 0d 7d | 0d 0d 72 65 66 6f 72 6d |. }...}|..reform|
|00001890| 6d 69 6e 64 28 74 68 65 | 6d 69 6e 64 29 0d 6d 69 |mind(the|mind).mi|
|000018a0| 6e 64 09 2a 74 68 65 6d | 69 6e 64 3b 0d 7b 0d 69 |nd.*them|ind;.{.i|
|000018b0| 6e 74 20 69 3b 0d 69 6e | 74 20 6a 3b 0d 0d 09 66 |nt i;.in|t j;...f|
|000018c0| 6f 72 20 28 69 3d 30 3b | 69 3c 74 68 65 6d 69 6e |or (i=0;|i<themin|
|000018d0| 64 2d 3e 6e 68 69 64 64 | 65 6e 3b 69 2b 2b 29 0d |d->nhidd|en;i++).|
|000018e0| 09 7b 0d 09 09 66 6f 72 | 20 28 6a 3d 30 3b 6a 3c |.{...for| (j=0;j<|
|000018f0| 74 68 65 6d 69 6e 64 2d | 3e 6e 69 6e 3b 6a 2b 2b |themind-|>nin;j++|
|00001900| 29 0d 09 09 7b 0d 09 09 | 09 74 68 65 6d 69 6e 64 |)...{...|.themind|
|00001910| 2d 3e 69 6e 77 65 69 67 | 68 74 73 5b 69 5d 5b 6a |->inweig|hts[i][j|
|00001920| 5d 20 2b 3d 20 74 68 65 | 6d 69 6e 64 2d 3e 69 6e |] += the|mind->in|
|00001930| 77 65 69 67 68 74 64 65 | 6c 74 61 73 5b 69 5d 5b |weightde|ltas[i][|
|00001940| 6a 5d 3b 0d 09 09 7d 0d | 09 09 74 68 65 6d 69 6e |j];...}.|..themin|
|00001950| 64 2d 3e 68 69 64 64 65 | 6e 62 69 61 73 5b 69 5d |d->hidde|nbias[i]|
|00001960| 20 2b 3d 20 74 68 65 6d | 69 6e 64 2d 3e 68 69 64 | += them|ind->hid|
|00001970| 64 65 6e 62 69 61 73 64 | 65 6c 74 61 73 5b 69 5d |denbiasd|eltas[i]|
|00001980| 3b 0d 09 7d 0d 09 0d 09 | 66 6f 72 20 28 69 3d 30 |;..}....|for (i=0|
|00001990| 3b 69 3c 74 68 65 6d 69 | 6e 64 2d 3e 6e 6f 75 74 |;i<themi|nd->nout|
|000019a0| 3b 69 2b 2b 29 0d 09 7b | 0d 09 09 66 6f 72 20 28 |;i++)..{|...for (|
|000019b0| 6a 3d 30 3b 6a 3c 74 68 | 65 6d 69 6e 64 2d 3e 6e |j=0;j<th|emind->n|
|000019c0| 68 69 64 64 65 6e 3b 6a | 2b 2b 29 0d 09 09 7b 0d |hidden;j|++)...{.|
|000019d0| 09 09 09 74 68 65 6d 69 | 6e 64 2d 3e 68 69 64 64 |...themi|nd->hidd|
|000019e0| 65 6e 77 65 69 67 68 74 | 73 5b 69 5d 5b 6a 5d 20 |enweight|s[i][j] |
|000019f0| 2b 3d 20 74 68 65 6d 69 | 6e 64 2d 3e 68 69 64 64 |+= themi|nd->hidd|
|00001a00| 65 6e 77 65 69 67 68 74 | 64 65 6c 74 61 73 5b 69 |enweight|deltas[i|
|00001a10| 5d 5b 6a 5d 3b 0d 09 09 | 7d 0d 09 09 74 68 65 6d |][j];...|}...them|
|00001a20| 69 6e 64 2d 3e 6f 75 74 | 62 69 61 73 5b 69 5d 20 |ind->out|bias[i] |
|00001a30| 2b 3d 20 74 68 65 6d 69 | 6e 64 2d 3e 6f 75 74 62 |+= themi|nd->outb|
|00001a40| 69 61 73 64 65 6c 74 61 | 73 5b 69 5d 3b 0d 09 7d |iasdelta|s[i];..}|
|00001a50| 0d 09 0d 09 66 6f 72 20 | 28 6a 3d 30 3b 6a 3c 74 |....for |(j=0;j<t|
|00001a60| 68 65 6d 69 6e 64 2d 3e | 6e 69 6e 3b 6a 2b 2b 29 |hemind->|nin;j++)|
|00001a70| 0d 09 7b 0d 09 09 74 68 | 65 6d 69 6e 64 2d 3e 69 |..{...th|emind->i|
|00001a80| 6e 62 69 61 73 5b 6a 5d | 20 2b 3d 20 74 68 65 6d |nbias[j]| += them|
|00001a90| 69 6e 64 2d 3e 69 6e 62 | 69 61 73 64 65 6c 74 61 |ind->inb|iasdelta|
|00001aa0| 73 5b 6a 5d 3b 0d 09 7d | 0d 09 0d 09 0d 7d 0d 00 |s[j];..}|.....}..|
|00001ab0| 00 00 00 00 00 00 00 00 | 00 00 00 00 00 00 00 00 |........|........|
|00001ac0| 00 00 00 00 00 00 00 00 | 00 00 00 00 00 00 00 00 |........|........|
|00001ad0| 00 00 00 00 00 00 00 00 | 00 00 00 00 00 00 00 00 |........|........|
|00001ae0| 00 00 00 00 00 00 00 00 | 00 00 00 00 00 00 00 00 |........|........|
|00001af0| 00 00 00 00 00 00 00 00 | 00 00 00 00 00 00 00 00 |........|........|
+--------+-------------------------+-------------------------+--------+--------+