Resultats TF sequentielles
After Width: | Height: | Size: 113 KiB |
After Width: | Height: | Size: 127 KiB |
After Width: | Height: | Size: 114 KiB |
After Width: | Height: | Size: 102 KiB |
After Width: | Height: | Size: 55 KiB |
After Width: | Height: | Size: 54 KiB |
After Width: | Height: | Size: 64 KiB |
|
@ -0,0 +1,567 @@
|
||||||
|
{
|
||||||
|
"Accuracy": 66.88,
|
||||||
|
"Time": [
|
||||||
|
42.26701769254347,
|
||||||
|
3.2095027194850507
|
||||||
|
],
|
||||||
|
"Device": "TITAN RTX",
|
||||||
|
"Param_names": [
|
||||||
|
"Identity",
|
||||||
|
"FlipUD",
|
||||||
|
"FlipLR"
|
||||||
|
],
|
||||||
|
"Log": [
|
||||||
|
{
|
||||||
|
"epoch": 1,
|
||||||
|
"train_loss": 2.2586863040924072,
|
||||||
|
"val_loss": 2.229949474334717,
|
||||||
|
"acc": 14.78,
|
||||||
|
"time": 35.27154581400001,
|
||||||
|
"param": [
|
||||||
|
0.3569081127643585,
|
||||||
|
0.2924368679523468,
|
||||||
|
0.3506549894809723
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 2,
|
||||||
|
"train_loss": 1.8682993650436401,
|
||||||
|
"val_loss": 1.9535006284713745,
|
||||||
|
"acc": 28.28,
|
||||||
|
"time": 34.125931699,
|
||||||
|
"param": [
|
||||||
|
0.36725008487701416,
|
||||||
|
0.26547476649284363,
|
||||||
|
0.3672751188278198
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 3,
|
||||||
|
"train_loss": 1.9641677141189575,
|
||||||
|
"val_loss": 1.6855865716934204,
|
||||||
|
"acc": 37.31,
|
||||||
|
"time": 36.12903867,
|
||||||
|
"param": [
|
||||||
|
0.37720489501953125,
|
||||||
|
0.242314413189888,
|
||||||
|
0.3804807662963867
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 4,
|
||||||
|
"train_loss": 1.7774184942245483,
|
||||||
|
"val_loss": 1.785918116569519,
|
||||||
|
"acc": 39.46,
|
||||||
|
"time": 37.72984706899999,
|
||||||
|
"param": [
|
||||||
|
0.39951837062835693,
|
||||||
|
0.2063944935798645,
|
||||||
|
0.39408713579177856
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 5,
|
||||||
|
"train_loss": 1.5776571035385132,
|
||||||
|
"val_loss": 1.504593849182129,
|
||||||
|
"acc": 43.55,
|
||||||
|
"time": 36.329188810999995,
|
||||||
|
"param": [
|
||||||
|
0.40679413080215454,
|
||||||
|
0.18330709636211395,
|
||||||
|
0.4098988175392151
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 6,
|
||||||
|
"train_loss": 1.4626541137695312,
|
||||||
|
"val_loss": 1.5177550315856934,
|
||||||
|
"acc": 47.58,
|
||||||
|
"time": 37.09478964600001,
|
||||||
|
"param": [
|
||||||
|
0.40836092829704285,
|
||||||
|
0.16867582499980927,
|
||||||
|
0.4229632019996643
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 7,
|
||||||
|
"train_loss": 1.5625808238983154,
|
||||||
|
"val_loss": 1.5155680179595947,
|
||||||
|
"acc": 46.77,
|
||||||
|
"time": 37.794030322,
|
||||||
|
"param": [
|
||||||
|
0.40731528401374817,
|
||||||
|
0.15188969671726227,
|
||||||
|
0.44079506397247314
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 8,
|
||||||
|
"train_loss": 1.6052792072296143,
|
||||||
|
"val_loss": 1.4055876731872559,
|
||||||
|
"acc": 50.1,
|
||||||
|
"time": 37.174165684,
|
||||||
|
"param": [
|
||||||
|
0.4031961262226105,
|
||||||
|
0.15106746554374695,
|
||||||
|
0.44573649764060974
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 9,
|
||||||
|
"train_loss": 1.4478679895401,
|
||||||
|
"val_loss": 1.438679814338684,
|
||||||
|
"acc": 49.25,
|
||||||
|
"time": 37.32403781900001,
|
||||||
|
"param": [
|
||||||
|
0.4083668291568756,
|
||||||
|
0.14481987059116364,
|
||||||
|
0.44681328535079956
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 10,
|
||||||
|
"train_loss": 1.3254565000534058,
|
||||||
|
"val_loss": 1.3467397689819336,
|
||||||
|
"acc": 52.769999999999996,
|
||||||
|
"time": 39.75345608800001,
|
||||||
|
"param": [
|
||||||
|
0.41974541544914246,
|
||||||
|
0.12304411083459854,
|
||||||
|
0.4572104811668396
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 11,
|
||||||
|
"train_loss": 1.3721425533294678,
|
||||||
|
"val_loss": 1.3951412439346313,
|
||||||
|
"acc": 53.47,
|
||||||
|
"time": 41.650647182,
|
||||||
|
"param": [
|
||||||
|
0.4319446086883545,
|
||||||
|
0.09881945699453354,
|
||||||
|
0.469235897064209
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 12,
|
||||||
|
"train_loss": 1.1457737684249878,
|
||||||
|
"val_loss": 1.4345290660858154,
|
||||||
|
"acc": 54.449999999999996,
|
||||||
|
"time": 41.617353776000016,
|
||||||
|
"param": [
|
||||||
|
0.44426319003105164,
|
||||||
|
0.06662937253713608,
|
||||||
|
0.48910748958587646
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 13,
|
||||||
|
"train_loss": 1.29494047164917,
|
||||||
|
"val_loss": 1.211569905281067,
|
||||||
|
"acc": 54.83,
|
||||||
|
"time": 39.160211182999944,
|
||||||
|
"param": [
|
||||||
|
0.45281338691711426,
|
||||||
|
0.040981173515319824,
|
||||||
|
0.5062054395675659
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 14,
|
||||||
|
"train_loss": 1.2569019794464111,
|
||||||
|
"val_loss": 1.202050805091858,
|
||||||
|
"acc": 56.87,
|
||||||
|
"time": 40.84753018599997,
|
||||||
|
"param": [
|
||||||
|
0.45568040013313293,
|
||||||
|
0.027288855984807014,
|
||||||
|
0.5170307755470276
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 15,
|
||||||
|
"train_loss": 1.2451014518737793,
|
||||||
|
"val_loss": 1.1795798540115356,
|
||||||
|
"acc": 56.61000000000001,
|
||||||
|
"time": 40.82151254199994,
|
||||||
|
"param": [
|
||||||
|
0.4496605694293976,
|
||||||
|
0.03048047050833702,
|
||||||
|
0.5198589563369751
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 16,
|
||||||
|
"train_loss": 1.2308098077774048,
|
||||||
|
"val_loss": 1.110080361366272,
|
||||||
|
"acc": 59.230000000000004,
|
||||||
|
"time": 41.493100658,
|
||||||
|
"param": [
|
||||||
|
0.46033838391304016,
|
||||||
|
0.013146541081368923,
|
||||||
|
0.5265150666236877
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 17,
|
||||||
|
"train_loss": 1.012961745262146,
|
||||||
|
"val_loss": 1.248935341835022,
|
||||||
|
"acc": 56.53,
|
||||||
|
"time": 44.144584925000004,
|
||||||
|
"param": [
|
||||||
|
0.4615994989871979,
|
||||||
|
0.01054893434047699,
|
||||||
|
0.5278514623641968
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 18,
|
||||||
|
"train_loss": 1.1665527820587158,
|
||||||
|
"val_loss": 1.2484368085861206,
|
||||||
|
"acc": 58.550000000000004,
|
||||||
|
"time": 46.182384603999935,
|
||||||
|
"param": [
|
||||||
|
0.4470806121826172,
|
||||||
|
0.04574175924062729,
|
||||||
|
0.5071776509284973
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 19,
|
||||||
|
"train_loss": 1.096998691558838,
|
||||||
|
"val_loss": 1.1408710479736328,
|
||||||
|
"acc": 61.08,
|
||||||
|
"time": 46.85773266199999,
|
||||||
|
"param": [
|
||||||
|
0.4376380741596222,
|
||||||
|
0.06828197091817856,
|
||||||
|
0.49407997727394104
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 20,
|
||||||
|
"train_loss": 1.2891809940338135,
|
||||||
|
"val_loss": 1.2101622819900513,
|
||||||
|
"acc": 60.56,
|
||||||
|
"time": 45.49155310100002,
|
||||||
|
"param": [
|
||||||
|
0.4369180202484131,
|
||||||
|
0.06939083337783813,
|
||||||
|
0.4936911165714264
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 21,
|
||||||
|
"train_loss": 0.987078845500946,
|
||||||
|
"val_loss": 1.1182962656021118,
|
||||||
|
"acc": 62.11,
|
||||||
|
"time": 44.33919514400009,
|
||||||
|
"param": [
|
||||||
|
0.43872907757759094,
|
||||||
|
0.07305636256933212,
|
||||||
|
0.48821452260017395
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 22,
|
||||||
|
"train_loss": 1.0163116455078125,
|
||||||
|
"val_loss": 1.1551297903060913,
|
||||||
|
"acc": 60.51,
|
||||||
|
"time": 45.01074287200004,
|
||||||
|
"param": [
|
||||||
|
0.43935197591781616,
|
||||||
|
0.07781679183244705,
|
||||||
|
0.48283126950263977
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 23,
|
||||||
|
"train_loss": 0.9056492447853088,
|
||||||
|
"val_loss": 1.0615127086639404,
|
||||||
|
"acc": 62.89,
|
||||||
|
"time": 44.34420145799993,
|
||||||
|
"param": [
|
||||||
|
0.43313512206077576,
|
||||||
|
0.08898729830980301,
|
||||||
|
0.47787758708000183
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 24,
|
||||||
|
"train_loss": 1.2792608737945557,
|
||||||
|
"val_loss": 1.0027081966400146,
|
||||||
|
"acc": 63.18,
|
||||||
|
"time": 43.69079710999995,
|
||||||
|
"param": [
|
||||||
|
0.4319283664226532,
|
||||||
|
0.09381513297557831,
|
||||||
|
0.4742564558982849
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 25,
|
||||||
|
"train_loss": 0.8459250926971436,
|
||||||
|
"val_loss": 1.0684174299240112,
|
||||||
|
"acc": 62.96000000000001,
|
||||||
|
"time": 44.55881189999991,
|
||||||
|
"param": [
|
||||||
|
0.44945499300956726,
|
||||||
|
0.06892076134681702,
|
||||||
|
0.4816242456436157
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 26,
|
||||||
|
"train_loss": 0.8931319713592529,
|
||||||
|
"val_loss": 1.1465357542037964,
|
||||||
|
"acc": 63.28,
|
||||||
|
"time": 45.75113101399984,
|
||||||
|
"param": [
|
||||||
|
0.4626123905181885,
|
||||||
|
0.05666631832718849,
|
||||||
|
0.48072129487991333
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 27,
|
||||||
|
"train_loss": 0.8509619235992432,
|
||||||
|
"val_loss": 0.9775013327598572,
|
||||||
|
"acc": 63.91,
|
||||||
|
"time": 43.64584844199999,
|
||||||
|
"param": [
|
||||||
|
0.4643380641937256,
|
||||||
|
0.060226861387491226,
|
||||||
|
0.4754350781440735
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 28,
|
||||||
|
"train_loss": 1.0486762523651123,
|
||||||
|
"val_loss": 0.9824637770652771,
|
||||||
|
"acc": 63.260000000000005,
|
||||||
|
"time": 43.78166149499998,
|
||||||
|
"param": [
|
||||||
|
0.4605104625225067,
|
||||||
|
0.05962243676185608,
|
||||||
|
0.4798670709133148
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 29,
|
||||||
|
"train_loss": 1.0211268663406372,
|
||||||
|
"val_loss": 1.0454564094543457,
|
||||||
|
"acc": 63.11,
|
||||||
|
"time": 44.35442912399981,
|
||||||
|
"param": [
|
||||||
|
0.4418427646160126,
|
||||||
|
0.07752558588981628,
|
||||||
|
0.4806317389011383
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 30,
|
||||||
|
"train_loss": 0.9525233507156372,
|
||||||
|
"val_loss": 1.2605206966400146,
|
||||||
|
"acc": 64.25,
|
||||||
|
"time": 43.74533260599992,
|
||||||
|
"param": [
|
||||||
|
0.43259933590888977,
|
||||||
|
0.10017886012792587,
|
||||||
|
0.46722185611724854
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 31,
|
||||||
|
"train_loss": 0.9760316014289856,
|
||||||
|
"val_loss": 1.0142147541046143,
|
||||||
|
"acc": 64.74,
|
||||||
|
"time": 43.5612526110001,
|
||||||
|
"param": [
|
||||||
|
0.42715027928352356,
|
||||||
|
0.11523038148880005,
|
||||||
|
0.4576193392276764
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 32,
|
||||||
|
"train_loss": 0.7399689555168152,
|
||||||
|
"val_loss": 0.9995627999305725,
|
||||||
|
"acc": 63.94,
|
||||||
|
"time": 43.51480428800005,
|
||||||
|
"param": [
|
||||||
|
0.4305989742279053,
|
||||||
|
0.1151185929775238,
|
||||||
|
0.4542824923992157
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 33,
|
||||||
|
"train_loss": 0.7913075685501099,
|
||||||
|
"val_loss": 1.057647466659546,
|
||||||
|
"acc": 65.07,
|
||||||
|
"time": 43.853585117999955,
|
||||||
|
"param": [
|
||||||
|
0.42892810702323914,
|
||||||
|
0.12268570065498352,
|
||||||
|
0.44838619232177734
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 34,
|
||||||
|
"train_loss": 0.8102763295173645,
|
||||||
|
"val_loss": 1.0586642026901245,
|
||||||
|
"acc": 64.85,
|
||||||
|
"time": 43.99178210900004,
|
||||||
|
"param": [
|
||||||
|
0.42897558212280273,
|
||||||
|
0.1191384419798851,
|
||||||
|
0.4518859386444092
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 35,
|
||||||
|
"train_loss": 0.7616747617721558,
|
||||||
|
"val_loss": 1.0033904314041138,
|
||||||
|
"acc": 64.7,
|
||||||
|
"time": 44.206484361999856,
|
||||||
|
"param": [
|
||||||
|
0.43020543456077576,
|
||||||
|
0.11314508318901062,
|
||||||
|
0.456649512052536
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 36,
|
||||||
|
"train_loss": 0.8215435743331909,
|
||||||
|
"val_loss": 0.9384769797325134,
|
||||||
|
"acc": 65.44,
|
||||||
|
"time": 44.347105060999866,
|
||||||
|
"param": [
|
||||||
|
0.4323142170906067,
|
||||||
|
0.09643037617206573,
|
||||||
|
0.47125542163848877
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 37,
|
||||||
|
"train_loss": 0.6993322372436523,
|
||||||
|
"val_loss": 1.0101381540298462,
|
||||||
|
"acc": 65.29,
|
||||||
|
"time": 44.05309231699994,
|
||||||
|
"param": [
|
||||||
|
0.4256291091442108,
|
||||||
|
0.10129605978727341,
|
||||||
|
0.4730748236179352
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 38,
|
||||||
|
"train_loss": 0.7556210160255432,
|
||||||
|
"val_loss": 1.0652647018432617,
|
||||||
|
"acc": 64.25999999999999,
|
||||||
|
"time": 44.12172071300006,
|
||||||
|
"param": [
|
||||||
|
0.42610031366348267,
|
||||||
|
0.10423226654529572,
|
||||||
|
0.4696674346923828
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 39,
|
||||||
|
"train_loss": 0.655925989151001,
|
||||||
|
"val_loss": 1.028014063835144,
|
||||||
|
"acc": 66.53999999999999,
|
||||||
|
"time": 44.1565310819999,
|
||||||
|
"param": [
|
||||||
|
0.4266500473022461,
|
||||||
|
0.10550680756568909,
|
||||||
|
0.4678431749343872
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 40,
|
||||||
|
"train_loss": 0.785202145576477,
|
||||||
|
"val_loss": 1.0654937028884888,
|
||||||
|
"acc": 65.32,
|
||||||
|
"time": 43.73130127500008,
|
||||||
|
"param": [
|
||||||
|
0.4235508441925049,
|
||||||
|
0.11477722227573395,
|
||||||
|
0.46167197823524475
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 41,
|
||||||
|
"train_loss": 0.7394008636474609,
|
||||||
|
"val_loss": 1.0027002096176147,
|
||||||
|
"acc": 66.88,
|
||||||
|
"time": 43.49772069000005,
|
||||||
|
"param": [
|
||||||
|
0.41884082555770874,
|
||||||
|
0.12805259227752686,
|
||||||
|
0.4531066417694092
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 42,
|
||||||
|
"train_loss": 0.6568392515182495,
|
||||||
|
"val_loss": 0.9595460295677185,
|
||||||
|
"acc": 66.19,
|
||||||
|
"time": 43.848339258000124,
|
||||||
|
"param": [
|
||||||
|
0.4242156147956848,
|
||||||
|
0.1308676153421402,
|
||||||
|
0.4449167549610138
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 43,
|
||||||
|
"train_loss": 0.8083595037460327,
|
||||||
|
"val_loss": 1.066747784614563,
|
||||||
|
"acc": 66.16,
|
||||||
|
"time": 44.20153860200003,
|
||||||
|
"param": [
|
||||||
|
0.4227754473686218,
|
||||||
|
0.13745594024658203,
|
||||||
|
0.43976864218711853
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 44,
|
||||||
|
"train_loss": 0.773591160774231,
|
||||||
|
"val_loss": 1.0745989084243774,
|
||||||
|
"acc": 66.06,
|
||||||
|
"time": 44.71679809600005,
|
||||||
|
"param": [
|
||||||
|
0.4226798117160797,
|
||||||
|
0.131498321890831,
|
||||||
|
0.4458218514919281
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 45,
|
||||||
|
"train_loss": 0.5961301922798157,
|
||||||
|
"val_loss": 0.9473645091056824,
|
||||||
|
"acc": 65.75999999999999,
|
||||||
|
"time": 44.08927124799993,
|
||||||
|
"param": [
|
||||||
|
0.42707282304763794,
|
||||||
|
0.11418028175830841,
|
||||||
|
0.45874685049057007
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 46,
|
||||||
|
"train_loss": 0.6665568351745605,
|
||||||
|
"val_loss": 1.0657373666763306,
|
||||||
|
"acc": 66.56,
|
||||||
|
"time": 44.17669342100021,
|
||||||
|
"param": [
|
||||||
|
0.42503389716148376,
|
||||||
|
0.115285225212574,
|
||||||
|
0.45968082547187805
|
||||||
|
]
|
||||||
|
}
|
||||||
|
]
|
||||||
|
}
|
|
@ -0,0 +1,531 @@
|
||||||
|
{
|
||||||
|
"Accuracy": 64.35,
|
||||||
|
"Time": [
|
||||||
|
40.990605775651176,
|
||||||
|
2.201207124066223
|
||||||
|
],
|
||||||
|
"Device": "TITAN RTX",
|
||||||
|
"Param_names": [
|
||||||
|
"Identity",
|
||||||
|
"FlipUD",
|
||||||
|
"FlipLR"
|
||||||
|
],
|
||||||
|
"Log": [
|
||||||
|
{
|
||||||
|
"epoch": 1,
|
||||||
|
"train_loss": 2.278228759765625,
|
||||||
|
"val_loss": 2.2778148651123047,
|
||||||
|
"acc": 13.8,
|
||||||
|
"time": 37.997480085,
|
||||||
|
"param": [
|
||||||
|
0.3344089686870575,
|
||||||
|
0.338102251291275,
|
||||||
|
0.3274887204170227
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 2,
|
||||||
|
"train_loss": 2.1612870693206787,
|
||||||
|
"val_loss": 2.0248405933380127,
|
||||||
|
"acc": 25.97,
|
||||||
|
"time": 38.392710281999996,
|
||||||
|
"param": [
|
||||||
|
0.3533671498298645,
|
||||||
|
0.32571688294410706,
|
||||||
|
0.32091599702835083
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 3,
|
||||||
|
"train_loss": 1.833618402481079,
|
||||||
|
"val_loss": 1.9612343311309814,
|
||||||
|
"acc": 31.91,
|
||||||
|
"time": 41.703342672999995,
|
||||||
|
"param": [
|
||||||
|
0.3735068738460541,
|
||||||
|
0.3124849498271942,
|
||||||
|
0.3140081763267517
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 4,
|
||||||
|
"train_loss": 1.726300597190857,
|
||||||
|
"val_loss": 1.7165435552597046,
|
||||||
|
"acc": 37.2,
|
||||||
|
"time": 44.75037925699999,
|
||||||
|
"param": [
|
||||||
|
0.3853832483291626,
|
||||||
|
0.3038611114025116,
|
||||||
|
0.3107556402683258
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 5,
|
||||||
|
"train_loss": 1.6343637704849243,
|
||||||
|
"val_loss": 1.579163670539856,
|
||||||
|
"acc": 39.81,
|
||||||
|
"time": 43.10778523600001,
|
||||||
|
"param": [
|
||||||
|
0.3893404006958008,
|
||||||
|
0.2969759404659271,
|
||||||
|
0.3136836886405945
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 6,
|
||||||
|
"train_loss": 1.4673463106155396,
|
||||||
|
"val_loss": 1.6380720138549805,
|
||||||
|
"acc": 42.63,
|
||||||
|
"time": 44.063416606000004,
|
||||||
|
"param": [
|
||||||
|
0.39290037751197815,
|
||||||
|
0.28871679306030273,
|
||||||
|
0.31838279962539673
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 7,
|
||||||
|
"train_loss": 1.596917748451233,
|
||||||
|
"val_loss": 1.5312635898590088,
|
||||||
|
"acc": 46.08,
|
||||||
|
"time": 43.02123729200002,
|
||||||
|
"param": [
|
||||||
|
0.3948565721511841,
|
||||||
|
0.28082096576690674,
|
||||||
|
0.3243224620819092
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 8,
|
||||||
|
"train_loss": 1.5576354265213013,
|
||||||
|
"val_loss": 1.4566819667816162,
|
||||||
|
"acc": 47.36,
|
||||||
|
"time": 40.34872003999999,
|
||||||
|
"param": [
|
||||||
|
0.40082064270973206,
|
||||||
|
0.2699856758117676,
|
||||||
|
0.32919374108314514
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 9,
|
||||||
|
"train_loss": 1.326658010482788,
|
||||||
|
"val_loss": 1.4151524305343628,
|
||||||
|
"acc": 48.06,
|
||||||
|
"time": 46.01754580199997,
|
||||||
|
"param": [
|
||||||
|
0.40330588817596436,
|
||||||
|
0.26015788316726685,
|
||||||
|
0.3365362584590912
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 10,
|
||||||
|
"train_loss": 1.358061671257019,
|
||||||
|
"val_loss": 1.4185919761657715,
|
||||||
|
"acc": 48.92,
|
||||||
|
"time": 45.323045114000024,
|
||||||
|
"param": [
|
||||||
|
0.4056788980960846,
|
||||||
|
0.24982662498950958,
|
||||||
|
0.344494491815567
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 11,
|
||||||
|
"train_loss": 1.3718796968460083,
|
||||||
|
"val_loss": 1.311767816543579,
|
||||||
|
"acc": 50.9,
|
||||||
|
"time": 45.92360492700004,
|
||||||
|
"param": [
|
||||||
|
0.404165655374527,
|
||||||
|
0.24351708590984344,
|
||||||
|
0.3523172438144684
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 12,
|
||||||
|
"train_loss": 1.300301194190979,
|
||||||
|
"val_loss": 1.3927823305130005,
|
||||||
|
"acc": 51.25999999999999,
|
||||||
|
"time": 43.915100293999956,
|
||||||
|
"param": [
|
||||||
|
0.4048520028591156,
|
||||||
|
0.2363101691007614,
|
||||||
|
0.3588378429412842
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 13,
|
||||||
|
"train_loss": 1.30615234375,
|
||||||
|
"val_loss": 1.4066590070724487,
|
||||||
|
"acc": 53.32,
|
||||||
|
"time": 44.40342277299999,
|
||||||
|
"param": [
|
||||||
|
0.4099874198436737,
|
||||||
|
0.2283688187599182,
|
||||||
|
0.3616437315940857
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 14,
|
||||||
|
"train_loss": 1.306626558303833,
|
||||||
|
"val_loss": 1.4467805624008179,
|
||||||
|
"acc": 51.83,
|
||||||
|
"time": 42.64702260800004,
|
||||||
|
"param": [
|
||||||
|
0.4199690520763397,
|
||||||
|
0.2164553850889206,
|
||||||
|
0.3635755777359009
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 15,
|
||||||
|
"train_loss": 1.1658439636230469,
|
||||||
|
"val_loss": 1.4342540502548218,
|
||||||
|
"acc": 52.0,
|
||||||
|
"time": 39.932540349999954,
|
||||||
|
"param": [
|
||||||
|
0.42933961749076843,
|
||||||
|
0.2017153948545456,
|
||||||
|
0.36894500255584717
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 16,
|
||||||
|
"train_loss": 1.4972563982009888,
|
||||||
|
"val_loss": 1.2763131856918335,
|
||||||
|
"acc": 54.2,
|
||||||
|
"time": 40.20015187499996,
|
||||||
|
"param": [
|
||||||
|
0.4305986762046814,
|
||||||
|
0.19472439587116241,
|
||||||
|
0.374676913022995
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 17,
|
||||||
|
"train_loss": 1.3150634765625,
|
||||||
|
"val_loss": 1.2545958757400513,
|
||||||
|
"acc": 55.589999999999996,
|
||||||
|
"time": 41.53157131299997,
|
||||||
|
"param": [
|
||||||
|
0.4325382709503174,
|
||||||
|
0.1898013949394226,
|
||||||
|
0.3776603639125824
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 18,
|
||||||
|
"train_loss": 1.2824161052703857,
|
||||||
|
"val_loss": 1.3558512926101685,
|
||||||
|
"acc": 56.68,
|
||||||
|
"time": 41.099335354000004,
|
||||||
|
"param": [
|
||||||
|
0.4361608624458313,
|
||||||
|
0.18364903330802917,
|
||||||
|
0.38019004464149475
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 19,
|
||||||
|
"train_loss": 1.1467565298080444,
|
||||||
|
"val_loss": 1.2409785985946655,
|
||||||
|
"acc": 57.37,
|
||||||
|
"time": 40.63199552500009,
|
||||||
|
"param": [
|
||||||
|
0.4431670308113098,
|
||||||
|
0.1748187094926834,
|
||||||
|
0.3820142447948456
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 20,
|
||||||
|
"train_loss": 1.326782464981079,
|
||||||
|
"val_loss": 1.215372085571289,
|
||||||
|
"acc": 58.03,
|
||||||
|
"time": 40.691840436999996,
|
||||||
|
"param": [
|
||||||
|
0.44145917892456055,
|
||||||
|
0.17384079098701477,
|
||||||
|
0.3847000002861023
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 21,
|
||||||
|
"train_loss": 1.192761778831482,
|
||||||
|
"val_loss": 1.115728497505188,
|
||||||
|
"acc": 57.699999999999996,
|
||||||
|
"time": 41.54397714000004,
|
||||||
|
"param": [
|
||||||
|
0.43708181381225586,
|
||||||
|
0.1703512966632843,
|
||||||
|
0.39256682991981506
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 22,
|
||||||
|
"train_loss": 1.0981574058532715,
|
||||||
|
"val_loss": 1.1920102834701538,
|
||||||
|
"acc": 58.26,
|
||||||
|
"time": 39.88385680800002,
|
||||||
|
"param": [
|
||||||
|
0.4495771825313568,
|
||||||
|
0.1519000381231308,
|
||||||
|
0.3985227346420288
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 23,
|
||||||
|
"train_loss": 1.1345897912979126,
|
||||||
|
"val_loss": 1.1450026035308838,
|
||||||
|
"acc": 57.809999999999995,
|
||||||
|
"time": 40.28833044700002,
|
||||||
|
"param": [
|
||||||
|
0.4599277079105377,
|
||||||
|
0.135568767786026,
|
||||||
|
0.40450355410575867
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 24,
|
||||||
|
"train_loss": 1.0847127437591553,
|
||||||
|
"val_loss": 1.1852198839187622,
|
||||||
|
"acc": 59.45,
|
||||||
|
"time": 39.65686893899988,
|
||||||
|
"param": [
|
||||||
|
0.47732576727867126,
|
||||||
|
0.11774387210607529,
|
||||||
|
0.40493035316467285
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 25,
|
||||||
|
"train_loss": 0.983763575553894,
|
||||||
|
"val_loss": 1.0889281034469604,
|
||||||
|
"acc": 57.8,
|
||||||
|
"time": 39.71690162499999,
|
||||||
|
"param": [
|
||||||
|
0.48628202080726624,
|
||||||
|
0.10912799835205078,
|
||||||
|
0.40459001064300537
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 26,
|
||||||
|
"train_loss": 1.0336600542068481,
|
||||||
|
"val_loss": 1.224578857421875,
|
||||||
|
"acc": 59.730000000000004,
|
||||||
|
"time": 39.36068606499998,
|
||||||
|
"param": [
|
||||||
|
0.4906076490879059,
|
||||||
|
0.10781385004520416,
|
||||||
|
0.40157848596572876
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 27,
|
||||||
|
"train_loss": 0.8346819877624512,
|
||||||
|
"val_loss": 1.1093025207519531,
|
||||||
|
"acc": 60.980000000000004,
|
||||||
|
"time": 40.70918413800018,
|
||||||
|
"param": [
|
||||||
|
0.4870028495788574,
|
||||||
|
0.11765504628419876,
|
||||||
|
0.395342081785202
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 28,
|
||||||
|
"train_loss": 0.9945499897003174,
|
||||||
|
"val_loss": 1.16829252243042,
|
||||||
|
"acc": 60.33,
|
||||||
|
"time": 37.0438629329999,
|
||||||
|
"param": [
|
||||||
|
0.4892021119594574,
|
||||||
|
0.10980972647666931,
|
||||||
|
0.4009881317615509
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 29,
|
||||||
|
"train_loss": 0.7488213777542114,
|
||||||
|
"val_loss": 1.0870869159698486,
|
||||||
|
"acc": 61.51,
|
||||||
|
"time": 39.53292706499997,
|
||||||
|
"param": [
|
||||||
|
0.4928421676158905,
|
||||||
|
0.09901689738035202,
|
||||||
|
0.4081409275531769
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 30,
|
||||||
|
"train_loss": 0.8734126091003418,
|
||||||
|
"val_loss": 1.078002691268921,
|
||||||
|
"acc": 60.4,
|
||||||
|
"time": 40.62936161099992,
|
||||||
|
"param": [
|
||||||
|
0.5015954375267029,
|
||||||
|
0.08447367697954178,
|
||||||
|
0.41393083333969116
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 31,
|
||||||
|
"train_loss": 0.8272988796234131,
|
||||||
|
"val_loss": 1.1785513162612915,
|
||||||
|
"acc": 60.92999999999999,
|
||||||
|
"time": 39.74444729900006,
|
||||||
|
"param": [
|
||||||
|
0.5174334049224854,
|
||||||
|
0.06128336116671562,
|
||||||
|
0.4212832450866699
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 32,
|
||||||
|
"train_loss": 0.9927399754524231,
|
||||||
|
"val_loss": 1.2753422260284424,
|
||||||
|
"acc": 61.970000000000006,
|
||||||
|
"time": 40.199914140000146,
|
||||||
|
"param": [
|
||||||
|
0.5226881504058838,
|
||||||
|
0.05178292095661163,
|
||||||
|
0.4255288243293762
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 33,
|
||||||
|
"train_loss": 0.9453901648521423,
|
||||||
|
"val_loss": 0.9513441920280457,
|
||||||
|
"acc": 62.419999999999995,
|
||||||
|
"time": 40.18138239899986,
|
||||||
|
"param": [
|
||||||
|
0.5117480754852295,
|
||||||
|
0.06644243746995926,
|
||||||
|
0.42180949449539185
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 34,
|
||||||
|
"train_loss": 1.1778556108474731,
|
||||||
|
"val_loss": 1.0860249996185303,
|
||||||
|
"acc": 62.9,
|
||||||
|
"time": 41.024424085999954,
|
||||||
|
"param": [
|
||||||
|
0.50794517993927,
|
||||||
|
0.07085854560136795,
|
||||||
|
0.421196311712265
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 35,
|
||||||
|
"train_loss": 1.3404030799865723,
|
||||||
|
"val_loss": 1.0372244119644165,
|
||||||
|
"acc": 62.41,
|
||||||
|
"time": 37.14542330199993,
|
||||||
|
"param": [
|
||||||
|
0.5026655793190002,
|
||||||
|
0.07952559739351273,
|
||||||
|
0.41780877113342285
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 36,
|
||||||
|
"train_loss": 0.9195565581321716,
|
||||||
|
"val_loss": 1.037743330001831,
|
||||||
|
"acc": 62.580000000000005,
|
||||||
|
"time": 39.24569857300003,
|
||||||
|
"param": [
|
||||||
|
0.48673850297927856,
|
||||||
|
0.09775619953870773,
|
||||||
|
0.4155052900314331
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 37,
|
||||||
|
"train_loss": 0.9384377002716064,
|
||||||
|
"val_loss": 1.0164541006088257,
|
||||||
|
"acc": 63.78,
|
||||||
|
"time": 38.112391905000095,
|
||||||
|
"param": [
|
||||||
|
0.47752949595451355,
|
||||||
|
0.10928603261709213,
|
||||||
|
0.4131844639778137
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 38,
|
||||||
|
"train_loss": 0.7941579818725586,
|
||||||
|
"val_loss": 1.0869412422180176,
|
||||||
|
"acc": 62.68,
|
||||||
|
"time": 39.52086171400015,
|
||||||
|
"param": [
|
||||||
|
0.48597458004951477,
|
||||||
|
0.0963597223162651,
|
||||||
|
0.4176657199859619
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 39,
|
||||||
|
"train_loss": 0.9142298698425293,
|
||||||
|
"val_loss": 1.0200858116149902,
|
||||||
|
"acc": 63.74999999999999,
|
||||||
|
"time": 39.81310896700006,
|
||||||
|
"param": [
|
||||||
|
0.49345141649246216,
|
||||||
|
0.08351463079452515,
|
||||||
|
0.42303401231765747
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 40,
|
||||||
|
"train_loss": 0.9275537133216858,
|
||||||
|
"val_loss": 1.0662047863006592,
|
||||||
|
"acc": 64.08,
|
||||||
|
"time": 39.50052672899983,
|
||||||
|
"param": [
|
||||||
|
0.49777042865753174,
|
||||||
|
0.07681939005851746,
|
||||||
|
0.4254101812839508
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 41,
|
||||||
|
"train_loss": 0.9915594458580017,
|
||||||
|
"val_loss": 1.0262912511825562,
|
||||||
|
"acc": 63.24999999999999,
|
||||||
|
"time": 39.55616431600015,
|
||||||
|
"param": [
|
||||||
|
0.504832923412323,
|
||||||
|
0.06725231558084488,
|
||||||
|
0.42791470885276794
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 42,
|
||||||
|
"train_loss": 0.9006707668304443,
|
||||||
|
"val_loss": 1.012023687362671,
|
||||||
|
"acc": 64.35,
|
||||||
|
"time": 42.406867334000026,
|
||||||
|
"param": [
|
||||||
|
0.5132732391357422,
|
||||||
|
0.05990780144929886,
|
||||||
|
0.42681893706321716
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 43,
|
||||||
|
"train_loss": 0.7009044289588928,
|
||||||
|
"val_loss": 0.9978980422019958,
|
||||||
|
"acc": 64.25999999999999,
|
||||||
|
"time": 42.076632975000166,
|
||||||
|
"param": [
|
||||||
|
0.516908586025238,
|
||||||
|
0.056108780205249786,
|
||||||
|
0.42698267102241516
|
||||||
|
]
|
||||||
|
}
|
||||||
|
]
|
||||||
|
}
|
|
@ -0,0 +1,549 @@
|
||||||
|
{
|
||||||
|
"Accuracy": 67.33,
|
||||||
|
"Time": [
|
||||||
|
35.26978351678048,
|
||||||
|
0.8899545916313278
|
||||||
|
],
|
||||||
|
"Device": "TITAN RTX",
|
||||||
|
"Param_names": [
|
||||||
|
"Identity",
|
||||||
|
"FlipUD",
|
||||||
|
"FlipLR",
|
||||||
|
"Brightness"
|
||||||
|
],
|
||||||
|
"Log": [
|
||||||
|
{
|
||||||
|
"epoch": 1,
|
||||||
|
"train_loss": 2.2246463298797607,
|
||||||
|
"val_loss": 2.242079257965088,
|
||||||
|
"acc": 18.63,
|
||||||
|
"time": 34.297079713,
|
||||||
|
"param": [
|
||||||
|
0.26534876227378845,
|
||||||
|
0.2314603477716446,
|
||||||
|
0.24988244473934174,
|
||||||
|
0.25330850481987
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 2,
|
||||||
|
"train_loss": 1.8756773471832275,
|
||||||
|
"val_loss": 1.9554815292358398,
|
||||||
|
"acc": 30.259999999999998,
|
||||||
|
"time": 33.696547372000005,
|
||||||
|
"param": [
|
||||||
|
0.2642684280872345,
|
||||||
|
0.20693299174308777,
|
||||||
|
0.24600288271903992,
|
||||||
|
0.2827956974506378
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 3,
|
||||||
|
"train_loss": 1.9634380340576172,
|
||||||
|
"val_loss": 1.8608665466308594,
|
||||||
|
"acc": 34.58,
|
||||||
|
"time": 33.596740689,
|
||||||
|
"param": [
|
||||||
|
0.2633800506591797,
|
||||||
|
0.1826913207769394,
|
||||||
|
0.25656014680862427,
|
||||||
|
0.29736846685409546
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 4,
|
||||||
|
"train_loss": 1.5534799098968506,
|
||||||
|
"val_loss": 1.560408353805542,
|
||||||
|
"acc": 41.32,
|
||||||
|
"time": 33.778012092,
|
||||||
|
"param": [
|
||||||
|
0.26548531651496887,
|
||||||
|
0.16100500524044037,
|
||||||
|
0.26891466975212097,
|
||||||
|
0.30459505319595337
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 5,
|
||||||
|
"train_loss": 1.4583710432052612,
|
||||||
|
"val_loss": 1.5297168493270874,
|
||||||
|
"acc": 39.4,
|
||||||
|
"time": 34.861264565,
|
||||||
|
"param": [
|
||||||
|
0.2703891694545746,
|
||||||
|
0.1288464516401291,
|
||||||
|
0.2787977457046509,
|
||||||
|
0.32196664810180664
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 6,
|
||||||
|
"train_loss": 1.5212011337280273,
|
||||||
|
"val_loss": 1.5239994525909424,
|
||||||
|
"acc": 46.11,
|
||||||
|
"time": 34.93492981599999,
|
||||||
|
"param": [
|
||||||
|
0.27072131633758545,
|
||||||
|
0.09034184366464615,
|
||||||
|
0.29677486419677734,
|
||||||
|
0.34216195344924927
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 7,
|
||||||
|
"train_loss": 1.3662339448928833,
|
||||||
|
"val_loss": 1.4775956869125366,
|
||||||
|
"acc": 47.14,
|
||||||
|
"time": 34.989117695999994,
|
||||||
|
"param": [
|
||||||
|
0.2689794600009918,
|
||||||
|
0.07269273698329926,
|
||||||
|
0.3115847408771515,
|
||||||
|
0.34674301743507385
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 8,
|
||||||
|
"train_loss": 1.7948461771011353,
|
||||||
|
"val_loss": 1.4464150667190552,
|
||||||
|
"acc": 50.260000000000005,
|
||||||
|
"time": 35.37331970700001,
|
||||||
|
"param": [
|
||||||
|
0.2708670496940613,
|
||||||
|
0.05510162562131882,
|
||||||
|
0.32383474707603455,
|
||||||
|
0.35019657015800476
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 9,
|
||||||
|
"train_loss": 1.1376208066940308,
|
||||||
|
"val_loss": 1.430459976196289,
|
||||||
|
"acc": 50.71,
|
||||||
|
"time": 35.004845069,
|
||||||
|
"param": [
|
||||||
|
0.2926396429538727,
|
||||||
|
0.009902913123369217,
|
||||||
|
0.33834975957870483,
|
||||||
|
0.35910770297050476
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 10,
|
||||||
|
"train_loss": 1.455891728401184,
|
||||||
|
"val_loss": 1.3224653005599976,
|
||||||
|
"acc": 52.61,
|
||||||
|
"time": 35.26769422699999,
|
||||||
|
"param": [
|
||||||
|
0.30017054080963135,
|
||||||
|
0.0,
|
||||||
|
0.34403231739997864,
|
||||||
|
0.3557971119880676
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 11,
|
||||||
|
"train_loss": 1.047844648361206,
|
||||||
|
"val_loss": 1.3296446800231934,
|
||||||
|
"acc": 53.37,
|
||||||
|
"time": 35.26994285899997,
|
||||||
|
"param": [
|
||||||
|
0.3006132245063782,
|
||||||
|
0.0,
|
||||||
|
0.35076233744621277,
|
||||||
|
0.3486243784427643
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 12,
|
||||||
|
"train_loss": 1.1387783288955688,
|
||||||
|
"val_loss": 1.270440697669983,
|
||||||
|
"acc": 55.71,
|
||||||
|
"time": 35.276322118999985,
|
||||||
|
"param": [
|
||||||
|
0.3025813698768616,
|
||||||
|
9.493112156633288e-05,
|
||||||
|
0.35371431708335876,
|
||||||
|
0.34360939264297485
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 13,
|
||||||
|
"train_loss": 1.235909104347229,
|
||||||
|
"val_loss": 1.264394760131836,
|
||||||
|
"acc": 56.14,
|
||||||
|
"time": 35.945771629000035,
|
||||||
|
"param": [
|
||||||
|
0.2958930432796478,
|
||||||
|
0.012944662012159824,
|
||||||
|
0.35241225361824036,
|
||||||
|
0.33875006437301636
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 14,
|
||||||
|
"train_loss": 1.2324076890945435,
|
||||||
|
"val_loss": 1.0868562459945679,
|
||||||
|
"acc": 58.36,
|
||||||
|
"time": 35.30482256000005,
|
||||||
|
"param": [
|
||||||
|
0.28525209426879883,
|
||||||
|
0.03375128284096718,
|
||||||
|
0.3446420729160309,
|
||||||
|
0.3363546133041382
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 15,
|
||||||
|
"train_loss": 1.1882888078689575,
|
||||||
|
"val_loss": 1.2556183338165283,
|
||||||
|
"acc": 58.940000000000005,
|
||||||
|
"time": 34.19679943899996,
|
||||||
|
"param": [
|
||||||
|
0.29482463002204895,
|
||||||
|
0.02803046628832817,
|
||||||
|
0.3424677550792694,
|
||||||
|
0.33467715978622437
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 16,
|
||||||
|
"train_loss": 0.9164041876792908,
|
||||||
|
"val_loss": 1.1618889570236206,
|
||||||
|
"acc": 58.709999999999994,
|
||||||
|
"time": 34.22660573799999,
|
||||||
|
"param": [
|
||||||
|
0.2955751419067383,
|
||||||
|
0.030105698853731155,
|
||||||
|
0.33919233083724976,
|
||||||
|
0.3351268172264099
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 17,
|
||||||
|
"train_loss": 0.9412023425102234,
|
||||||
|
"val_loss": 1.0543476343154907,
|
||||||
|
"acc": 59.17,
|
||||||
|
"time": 34.22300381399998,
|
||||||
|
"param": [
|
||||||
|
0.2967003285884857,
|
||||||
|
0.028294861316680908,
|
||||||
|
0.3455444574356079,
|
||||||
|
0.32946035265922546
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 18,
|
||||||
|
"train_loss": 1.1886039972305298,
|
||||||
|
"val_loss": 1.0445326566696167,
|
||||||
|
"acc": 60.86,
|
||||||
|
"time": 35.06268730299996,
|
||||||
|
"param": [
|
||||||
|
0.2941676676273346,
|
||||||
|
0.05120556429028511,
|
||||||
|
0.3395809233188629,
|
||||||
|
0.3150458335876465
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 19,
|
||||||
|
"train_loss": 1.102756381034851,
|
||||||
|
"val_loss": 1.228023648262024,
|
||||||
|
"acc": 61.150000000000006,
|
||||||
|
"time": 34.22308923500009,
|
||||||
|
"param": [
|
||||||
|
0.29623615741729736,
|
||||||
|
0.0587051659822464,
|
||||||
|
0.3372948169708252,
|
||||||
|
0.3077639043331146
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 20,
|
||||||
|
"train_loss": 1.1584587097167969,
|
||||||
|
"val_loss": 1.1567624807357788,
|
||||||
|
"acc": 59.589999999999996,
|
||||||
|
"time": 34.368089852000026,
|
||||||
|
"param": [
|
||||||
|
0.29966625571250916,
|
||||||
|
0.03984551131725311,
|
||||||
|
0.3475285470485687,
|
||||||
|
0.3129596412181854
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 21,
|
||||||
|
"train_loss": 0.9082171320915222,
|
||||||
|
"val_loss": 1.0320203304290771,
|
||||||
|
"acc": 62.77,
|
||||||
|
"time": 36.777285998000025,
|
||||||
|
"param": [
|
||||||
|
0.30189886689186096,
|
||||||
|
0.028817860409617424,
|
||||||
|
0.35152673721313477,
|
||||||
|
0.3177564740180969
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 22,
|
||||||
|
"train_loss": 0.7644132971763611,
|
||||||
|
"val_loss": 0.9883463382720947,
|
||||||
|
"acc": 62.96000000000001,
|
||||||
|
"time": 36.885311054,
|
||||||
|
"param": [
|
||||||
|
0.30462563037872314,
|
||||||
|
0.030701611191034317,
|
||||||
|
0.3473837673664093,
|
||||||
|
0.3172890245914459
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 23,
|
||||||
|
"train_loss": 1.1631056070327759,
|
||||||
|
"val_loss": 1.101344347000122,
|
||||||
|
"acc": 61.419999999999995,
|
||||||
|
"time": 36.882059658,
|
||||||
|
"param": [
|
||||||
|
0.3049171566963196,
|
||||||
|
0.043790481984615326,
|
||||||
|
0.33887913823127747,
|
||||||
|
0.3124132752418518
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 24,
|
||||||
|
"train_loss": 0.9794601202011108,
|
||||||
|
"val_loss": 1.1858162879943848,
|
||||||
|
"acc": 63.629999999999995,
|
||||||
|
"time": 35.91458065099994,
|
||||||
|
"param": [
|
||||||
|
0.2979162931442261,
|
||||||
|
0.0494430810213089,
|
||||||
|
0.3313966393470764,
|
||||||
|
0.3212440311908722
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 25,
|
||||||
|
"train_loss": 0.8819404244422913,
|
||||||
|
"val_loss": 1.0328747034072876,
|
||||||
|
"acc": 63.49,
|
||||||
|
"time": 35.30815424800005,
|
||||||
|
"param": [
|
||||||
|
0.29209181666374207,
|
||||||
|
0.06467921286821365,
|
||||||
|
0.3279561698436737,
|
||||||
|
0.3152727782726288
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 26,
|
||||||
|
"train_loss": 0.8782331943511963,
|
||||||
|
"val_loss": 0.9796215891838074,
|
||||||
|
"acc": 64.12,
|
||||||
|
"time": 35.32600915699993,
|
||||||
|
"param": [
|
||||||
|
0.2909238636493683,
|
||||||
|
0.06334474682807922,
|
||||||
|
0.3332240581512451,
|
||||||
|
0.3125073313713074
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 27,
|
||||||
|
"train_loss": 0.8584423661231995,
|
||||||
|
"val_loss": 1.084595799446106,
|
||||||
|
"acc": 64.75,
|
||||||
|
"time": 35.331178563999856,
|
||||||
|
"param": [
|
||||||
|
0.2961031496524811,
|
||||||
|
0.05563409626483917,
|
||||||
|
0.334177702665329,
|
||||||
|
0.3140850365161896
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 28,
|
||||||
|
"train_loss": 0.8284888863563538,
|
||||||
|
"val_loss": 1.0573976039886475,
|
||||||
|
"acc": 63.160000000000004,
|
||||||
|
"time": 35.458164546000035,
|
||||||
|
"param": [
|
||||||
|
0.3019412159919739,
|
||||||
|
0.036782123148441315,
|
||||||
|
0.3366500735282898,
|
||||||
|
0.32462653517723083
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 29,
|
||||||
|
"train_loss": 0.678330659866333,
|
||||||
|
"val_loss": 1.1263163089752197,
|
||||||
|
"acc": 64.14,
|
||||||
|
"time": 35.38298675200008,
|
||||||
|
"param": [
|
||||||
|
0.30647188425064087,
|
||||||
|
0.04212574660778046,
|
||||||
|
0.327140212059021,
|
||||||
|
0.3242621123790741
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 30,
|
||||||
|
"train_loss": 0.7077367901802063,
|
||||||
|
"val_loss": 1.2039250135421753,
|
||||||
|
"acc": 65.2,
|
||||||
|
"time": 35.38837307199992,
|
||||||
|
"param": [
|
||||||
|
0.3033866882324219,
|
||||||
|
0.05822666361927986,
|
||||||
|
0.3199182450771332,
|
||||||
|
0.3184684216976166
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 31,
|
||||||
|
"train_loss": 0.8331413269042969,
|
||||||
|
"val_loss": 0.8815664649009705,
|
||||||
|
"acc": 65.59,
|
||||||
|
"time": 35.49805182,
|
||||||
|
"param": [
|
||||||
|
0.2967567443847656,
|
||||||
|
0.08563034236431122,
|
||||||
|
0.30520352721214294,
|
||||||
|
0.312409371137619
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 32,
|
||||||
|
"train_loss": 0.7001742124557495,
|
||||||
|
"val_loss": 1.1127961874008179,
|
||||||
|
"acc": 65.01,
|
||||||
|
"time": 35.70593689499992,
|
||||||
|
"param": [
|
||||||
|
0.29659682512283325,
|
||||||
|
0.08615710586309433,
|
||||||
|
0.2980169951915741,
|
||||||
|
0.3192290663719177
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 33,
|
||||||
|
"train_loss": 0.7717993855476379,
|
||||||
|
"val_loss": 0.8902065753936768,
|
||||||
|
"acc": 66.18,
|
||||||
|
"time": 35.87219173800008,
|
||||||
|
"param": [
|
||||||
|
0.2803274393081665,
|
||||||
|
0.09326860308647156,
|
||||||
|
0.2960801124572754,
|
||||||
|
0.33032387495040894
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 34,
|
||||||
|
"train_loss": 0.7403655648231506,
|
||||||
|
"val_loss": 1.0418756008148193,
|
||||||
|
"acc": 66.5,
|
||||||
|
"time": 35.148800344000165,
|
||||||
|
"param": [
|
||||||
|
0.2808912396430969,
|
||||||
|
0.08679857105016708,
|
||||||
|
0.29341939091682434,
|
||||||
|
0.33889082074165344
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 35,
|
||||||
|
"train_loss": 0.7205129861831665,
|
||||||
|
"val_loss": 1.0016021728515625,
|
||||||
|
"acc": 66.0,
|
||||||
|
"time": 34.635871969999926,
|
||||||
|
"param": [
|
||||||
|
0.2944797873497009,
|
||||||
|
0.07891914248466492,
|
||||||
|
0.2847541570663452,
|
||||||
|
0.34184691309928894
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 36,
|
||||||
|
"train_loss": 0.5642893314361572,
|
||||||
|
"val_loss": 0.9788730144500732,
|
||||||
|
"acc": 65.88000000000001,
|
||||||
|
"time": 35.79879020999988,
|
||||||
|
"param": [
|
||||||
|
0.29841795563697815,
|
||||||
|
0.07301744818687439,
|
||||||
|
0.2835673689842224,
|
||||||
|
0.34499719738960266
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 37,
|
||||||
|
"train_loss": 0.6212753057479858,
|
||||||
|
"val_loss": 0.9334949851036072,
|
||||||
|
"acc": 65.94,
|
||||||
|
"time": 35.159522472999925,
|
||||||
|
"param": [
|
||||||
|
0.29686591029167175,
|
||||||
|
0.07427454739809036,
|
||||||
|
0.2895241975784302,
|
||||||
|
0.3393353521823883
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 38,
|
||||||
|
"train_loss": 0.5948202610015869,
|
||||||
|
"val_loss": 1.2714945077896118,
|
||||||
|
"acc": 66.43,
|
||||||
|
"time": 36.28376844499985,
|
||||||
|
"param": [
|
||||||
|
0.28879451751708984,
|
||||||
|
0.08727214485406876,
|
||||||
|
0.286702036857605,
|
||||||
|
0.33723127841949463
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 39,
|
||||||
|
"train_loss": 0.6537986397743225,
|
||||||
|
"val_loss": 0.9573734402656555,
|
||||||
|
"acc": 67.33,
|
||||||
|
"time": 35.01064654900006,
|
||||||
|
"param": [
|
||||||
|
0.2870996594429016,
|
||||||
|
0.07876010239124298,
|
||||||
|
0.29405638575553894,
|
||||||
|
0.3400838375091553
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 40,
|
||||||
|
"train_loss": 0.7367203831672668,
|
||||||
|
"val_loss": 0.9820258617401123,
|
||||||
|
"acc": 65.42999999999999,
|
||||||
|
"time": 37.31447572100001,
|
||||||
|
"param": [
|
||||||
|
0.28837651014328003,
|
||||||
|
0.08026732504367828,
|
||||||
|
0.29411906003952026,
|
||||||
|
0.3372371196746826
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"epoch": 41,
|
||||||
|
"train_loss": 0.5657103061676025,
|
||||||
|
"val_loss": 1.121062994003296,
|
||||||
|
"acc": 66.07,
|
||||||
|
"time": 37.08227882899996,
|
||||||
|
"param": [
|
||||||
|
0.30046236515045166,
|
||||||
|
0.07346618175506592,
|
||||||
|
0.28356873989105225,
|
||||||
|
0.34250277280807495
|
||||||
|
]
|
||||||
|
}
|
||||||
|
]
|
||||||
|
}
|
|
@ -671,7 +671,7 @@ def run_dist_dataugV2(model, epochs=1, inner_it=0, dataug_epoch_start=0, print_f
|
||||||
optim_copy(dopt=diffopt, opt=inner_opt)
|
optim_copy(dopt=diffopt, opt=inner_opt)
|
||||||
|
|
||||||
meta_opt.step()
|
meta_opt.step()
|
||||||
model['data_aug'].adjust_prob(soft=True) #Contrainte sum(proba)=1
|
model['data_aug'].adjust_prob(soft=False) #Contrainte sum(proba)=1
|
||||||
|
|
||||||
fmodel = higher.patch.monkeypatch(model, device=None, copy_initial_weights=True)
|
fmodel = higher.patch.monkeypatch(model, device=None, copy_initial_weights=True)
|
||||||
diffopt = higher.optim.get_diff_optim(inner_opt, model.parameters(),fmodel=fmodel, track_higher_grads=high_grad_track)
|
diffopt = higher.optim.get_diff_optim(inner_opt, model.parameters(),fmodel=fmodel, track_higher_grads=high_grad_track)
|
||||||
|
|