The following have been reloaded with a version change: 1) veros/07112019 => veros/02072019 Currently Loaded Modules: 1) libsigserv/2.12 10) mpi4py/3.0.2_mpich3.2.1_py3.7.3 2) nvtoolkit/10.1.168 11) openblas/0.3.6 3) clblas/2.12 12) mpich/3.2.1 4) gcc/8.3.0 13) petsc/3.11.2_real_mpich3.2.1 5) boost/1.70.0_mpich3.2.1 14) petsc4py/3.11.0_mpich3.2.1_py3.7.3 6) scipy/1.3.0_py3.7.3 15) python/3.7.3 7) hdf5-parallel/1.10.5_mpich3.2.1 16) bohrium/20062019 8) h5py/2.9.0_mpich3.2.1_py3.7.3 17) veros/02072019 9) numpy/1.16.4_py3.7.3 >>> srun --mpi=pmi2 -- python global_flexible_res_freshw.py -b numpy -v debug -n 6 2 -s identifier rtipSc002.0003 -s restart_output_filename {identifier}.restart.h5 -s runlen 3110400000.0 -s restart_input_filename rtipSc002.0002.restart.h5 Setting up everything Initializing streamfunction method Determining number of land masses Land mass and perimeter 0 5 10 15 20 25 30 35 40 45 50 55 60 65 70 75 80 85 90 43 1111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111 42 1111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111 41 11111111111111111111111111111111111111111111111111111111111111111*******1111111111111111111111 40 11111111111111111111111111111111111111111111111111111111111111****00000**111111111111111111111 39 111111111111111111111111*****1111111111111111111111111111111***00000****1111111111111111111111 38 11111111111111111**11****000**1******111111111111111111111***0000000*1*11111111111111111111111 37 1111111111111111******0000000***0000***111111111111111111**000000000*1111111111111111111111111 36 111111111111111**000000000000000000000**1111111111111111**000000000**1111111111111111111111111 35 111111111111111**000000000000000000000*11111111111111****0000000000*11111111111111111111111111 34 1111111111111**1*000000000000000000000**111111111111**0000000000000**1111111111111111111111111 33 111111111111*****0000000000000000000000**1111111111**0000000000000**11111111111111111111111111 32 11111111111**000000000000000000000000000***11111111**000000000000**111111111111111111111111111 31 1111111111**000000000000000000000000000000**11111111**00000000000*11111111111111111111**111111 30 11**111111**0000000000000000000000000000000*111111111*00000000000*1111111111111111111****111** 29 1****111111*0000000000000000000000000000000****11111**00000000000*111111111111111111**00*11*** 28 1*00**11**1*0000000000000000000000000000000000***1111***000000000*11111111111111111**000*11*00 27 1*000*******000000000000000000000000000000000000**11111**00000000**1111111111111111*0000**1*00 26 **000000**2*0000000000000000000000000000000000000**11111***0000000**111*11111111111*00000***00 25 0000*****22**000000000000000000000000000000000000**1111111*00000000******111111111**0000000000 24 0000*2**2222***0000000000000000000000000000000000*11111111**000000000000*11111111**00000000000 23 0000**22222222******00000000000000000000000000000*111111111***0000000000*11111111*000000000000 22 00000*22222222222*2*00000000000000000000000000000*11111111111**000000000*1111111**000000000000 21 00000**2*222222222**00000000000000000000000000000*111111111111*000000000**111111*0000000000000 20 000000****22222222*000000000000000000000000000000**11111111111*0000000000*111111**000000000000 19 000000000**222222**0000000***000000000000000000000*1111111111**0000000000*1111111***0000000000 18 0000000000**2222**00000000*3*000000000000000000000*1111111111*0000000000**111111111*0000000000 17 000000000**222222*00000000***000000000000000000000**111111111*0000000000*1111111111*0000000000 16 00000000**2222222**00000000000000000000000000000000**11111111*0000000000**111111111*0000000000 15 00000000*222222222**00000000000000000000000000000000*1111111**00000000000*111111*1**0000000000 14 00000000*2222222222*00000000000000000000000000000000*111111**000000000000*11111****00000000000 13 00000000*2222222222*00000000000000000000000000000000*11111**0000000000000**111**00000000000000 12 00000000*2****2222**000***0000000000000000000000000**1111**000000000000000*1***000000000000000 11 00000000***00***2**000**4*0000000000000000000000000*1111**0000000000000000***00000000000000000 10 000000000000000***000**4**0000000000000000000000000*111**0000000000000000000000000000000000000 9 000000000000000000000*4**00000000000000000000000000*111**0000000000000000000000000000000000000 8 000000000000000000000***000000000000000000000000000*1111*0000000000000000000000000000000000000 7 000000000000000000000000000000000000000000000000000**11**0000000000000000000000000000000000000 6 0****************00000000000000000000000000000000000****00000000000000000000000000****00000*** 5 **55555555*5*555********00000000000000000000***0000**55**000000000*****************55*******55 4 55555555555555555555555**00000***************5******5555****0******555555555555555555555555555 3 555555555555555555555555*******5*55555555555555555555555555***55555555555555555555555555555555 2 5555555555555555555555555555555555555555555555555555555555555555555555555555555555555555555555 1 5555555555555555555555555555555555555555555555555555555555555555555555555555555555555555555555 0 5555555555555555555555555555555555555555555555555555555555555555555555555555555555555555555555 0 5 10 15 20 25 30 35 40 45 50 55 60 65 70 75 80 85 90 Solving for boundary contribution by island 0 Solving for boundary contribution by island 1 Solving for boundary contribution by island 2 Solving for boundary contribution by island 3 Solving for boundary contribution by island 4 Running diagnostic "averages" every 1.0 days Writing output for diagnostic "averages" every 5.0 years Writing output for diagnostic "cfl_monitor" every 25.0 days Running diagnostic "energy" every 1.0 days Writing output for diagnostic "energy" every 5.0 years Sigma ranges for overturning diagnostic: Start sigma0 = 5.8 End sigma0 = 13.5 Delta sigma0 = 4.8e-02 Also calculating overturning by eddy-driven velocities Running diagnostic "overturning" every 1.0 days Writing output for diagnostic "overturning" every 5.0 years Writing output for diagnostic "snapshot" every 5.0 years Writing output for diagnostic "tracer_monitor" every 1.0 days Reading restarts Reading restart data for diagnostic averages from rtipSc002.0002.restart.h5 Reading restart data for diagnostic energy from rtipSc002.0002.restart.h5 Reading restart data for diagnostic overturning from rtipSc002.0002.restart.h5 Reading restart data for diagnostic snapshot from rtipSc002.0002.restart.h5 Reading restart data for diagnostic tracer_monitor from rtipSc002.0002.restart.h5 0.0 1 4.5e-07 0.0 1 4.5e-07 0.0 1 4.5e-07 0.0 1 4.5e-07 0.0 1 4.5e-07 0.0 1 4.5e-07 0.0 1 4.5e-07 0.0 1 4.5e-07 0.0 1 4.5e-07 0.0 1 4.5e-07 0.0 1 4.5e-07 0.0 1 4.5e-07 Diffusion grid factor delta_iso1 = 0.007143141494416265 Starting integration for 100.0 years 0.0 1 4.5e-07 0.0 1 4.5e-07 0.0 1 4.5e-07 Current iteration: 13536000 (9400.00/9500.00y | 0.0% | 0.00s/(model year) | 0.0s left) 0.0 1 4.5e-07 0.0 1 4.5e-07 0.0 1 4.5e-07 0.0 1 4.5e-07 0.0 1 4.5e-07 0.0 1 4.5e-07 0.0 1 4.5e-07 0.0 1 4.5e-07 0.0 1 4.5e-07 Current iteration: 13536001 (9400.00/9500.00y | 0.0% | 6.13m/(model year) | 10.2h left) Time step took 0.25s 0.0006944444448890863 1 4.5000208333333464e-07 0.0006944444448890863 1 4.5000208333333464e-07 0.0006944444448890863 1 4.5000208333333464e-07 0.0006944444448890863 1 4.5000208333333464e-07 0.0006944444448890863 1 4.5000208333333464e-07 0.0006944444448890863 1 4.5000208333333464e-07 0.0006944444448890863 1 4.5000208333333464e-07 0.0006944444448890863 1 4.5000208333333464e-07 0.0006944444448890863 1 4.5000208333333464e-07 0.0006944444448890863 1 4.5000208333333464e-07 0.0006944444448890863 1 4.5000208333333464e-07 0.0006944444448890863 1 4.5000208333333464e-07 Current iteration: 13536002 (9400.00/9500.00y | 0.0% | 5.49m/(model year) | 9.1h left) Time step took 0.20s 0.0013888888897781726 1 4.500041666666693e-07 0.0013888888897781726 1 4.500041666666693e-07 0.0013888888897781726 1 4.500041666666693e-07 0.0013888888897781726 1 4.500041666666693e-07 0.0013888888897781726 1 4.500041666666693e-07 0.0013888888897781726 1 4.500041666666693e-07 0.0013888888897781726 1 4.500041666666693e-07 0.0013888888897781726 1 4.500041666666693e-07 0.0013888888897781726 1 4.500041666666693e-07 0.0013888888897781726 1 4.500041666666693e-07 0.0013888888897781726 1 4.500041666666693e-07 0.0013888888897781726 1 4.500041666666693e-07 Current iteration: 13536003 (9400.00/9500.00y | 0.0% | 5.12m/(model year) | 8.5h left) Time step took 0.18s 0.0020833333328482695 1 4.500062499999985e-07 0.0020833333328482695 1 4.500062499999985e-07 0.0020833333328482695 1 4.500062499999985e-07 0.0020833333328482695 1 4.500062499999985e-07 0.0020833333328482695 1 4.500062499999985e-07 0.0020833333328482695 1 4.500062499999985e-07 0.0020833333328482695 1 4.500062499999985e-07 0.0020833333328482695 1 4.500062499999985e-07 0.0020833333328482695 1 4.500062499999985e-07 0.0020833333328482695 1 4.500062499999985e-07 0.0020833333328482695 1 4.500062499999985e-07 0.0020833333328482695 1 4.500062499999985e-07 Current iteration: 13536004 (9400.00/9500.00y | 0.0% | 4.73m/(model year) | 7.9h left) Mean temperature 1.3859696855142842 change to last 7.188907934581975e-05 Mean salinity 34.59038219893225 change to last -2.041318999039318e-07 Temperature var. 23.351403270467095 change to last 0.0008872330167880911 Salinity var. 1196.524568976364 change to last -1.389605249555303e-05 Time step took 0.15s 0.002777777777737356 1 4.5000833333333317e-07 0.002777777777737356 1 4.5000833333333317e-07 0.002777777777737356 1 4.5000833333333317e-07 0.002777777777737356 1 4.5000833333333317e-07 0.002777777777737356 1 4.5000833333333317e-07 0.002777777777737356 1 4.5000833333333317e-07 0.002777777777737356 1 4.5000833333333317e-07 0.002777777777737356 1 4.5000833333333317e-07 0.002777777777737356 1 4.5000833333333317e-07 0.002777777777737356 1 4.5000833333333317e-07 0.002777777777737356 1 4.5000833333333317e-07 0.002777777777737356 1 4.5000833333333317e-07 Current iteration: 13536005 (9400.00/9500.00y | 0.0% | 5.07m/(model year) | 8.5h left) Time step took 0.13s 0.003472222222626442 1 4.5001041666666783e-07 0.003472222222626442 1 4.5001041666666783e-07 0.003472222222626442 1 4.5001041666666783e-07 0.003472222222626442 1 4.5001041666666783e-07 0.003472222222626442 1 4.5001041666666783e-07 0.003472222222626442 1 4.5001041666666783e-07 0.003472222222626442 1 4.5001041666666783e-07 0.003472222222626442 1 4.5001041666666783e-07 0.003472222222626442 1 4.5001041666666783e-07 0.003472222222626442 1 4.5001041666666783e-07 0.003472222222626442 1 4.5001041666666783e-07 0.003472222222626442 1 4.5001041666666783e-07 Current iteration: 13536006 (9400.00/9500.00y | 0.0% | 4.80m/(model year) | 8.0h left) 0.004166666667515528 1 4.5001250000000255e-07 0.004166666667515528 1 4.5001250000000255e-07 0.004166666667515528 1 4.5001250000000255e-07 0.004166666667515528 1 4.5001250000000255e-07 0.004166666667515528 1 4.5001250000000255e-07 0.004166666667515528 1 4.5001250000000255e-07 0.004166666667515528 1 4.5001250000000255e-07 0.004166666667515528 1 4.5001250000000255e-07 Time step took 0.14s 0.004166666667515528 1 4.5001250000000255e-07 0.004166666667515528 1 4.5001250000000255e-07 0.004166666667515528 1 4.5001250000000255e-07 0.004166666667515528 1 4.5001250000000255e-07 Current iteration: 13536007 (9400.00/9500.00y | 0.0% | 4.57m/(model year) | 7.6h left) Time step took 0.13s 0.004861111110585625 1 4.5001458333333176e-07 0.004861111110585625 1 4.5001458333333176e-07 0.004861111110585625 1 4.5001458333333176e-07 0.004861111110585625 1 4.5001458333333176e-07 0.004861111110585625 1 4.5001458333333176e-07 0.004861111110585625 1 4.5001458333333176e-07 0.004861111110585625 1 4.5001458333333176e-07 0.004861111110585625 1 4.5001458333333176e-07 0.004861111110585625 1 4.5001458333333176e-07 0.004861111110585625 1 4.5001458333333176e-07 0.004861111110585625 1 4.5001458333333176e-07 0.004861111110585625 1 4.5001458333333176e-07 Current iteration: 13536008 (9400.01/9500.00y | 0.0% | 4.38m/(model year) | 7.3h left) Mean temperature 1.3860409828457605 change to last 7.129733147621511e-05 Mean salinity 34.59038200308505 change to last -1.958471992193295e-07 Temperature var. 23.35231085630941 change to last 0.0009075858423117896 Salinity var. 1196.5245556355876 change to last -1.3340776220279153e-05 Time step took 0.13s 0.005555555555474712 1 4.500166666666664e-07 0.005555555555474712 1 4.500166666666664e-07 0.005555555555474712 1 4.500166666666664e-07 0.005555555555474712 1 4.500166666666664e-07 0.005555555555474712 1 4.500166666666664e-07 0.005555555555474712 1 4.500166666666664e-07 0.005555555555474712 1 4.500166666666664e-07 0.005555555555474712 1 4.500166666666664e-07 0.005555555555474712 1 4.500166666666664e-07 0.005555555555474712 1 4.500166666666664e-07 0.005555555555474712 1 4.500166666666664e-07 0.005555555555474712 1 4.500166666666664e-07 Current iteration: 13536009 (9400.01/9500.00y | 0.0% | 4.62m/(model year) | 7.7h left) Time step took 0.13s 0.006250000000363798 1 4.500187500000011e-07 0.006250000000363798 1 4.500187500000011e-07 0.006250000000363798 1 4.500187500000011e-07 0.006250000000363798 1 4.500187500000011e-07 0.006250000000363798 1 4.500187500000011e-07 0.006250000000363798 1 4.500187500000011e-07 0.006250000000363798 1 4.500187500000011e-07 0.006250000000363798 1 4.500187500000011e-07 0.006250000000363798 1 4.500187500000011e-07 0.006250000000363798 1 4.500187500000011e-07 0.006250000000363798 1 4.500187500000011e-07 0.006250000000363798 1 4.500187500000011e-07 Current iteration: 13536010 (9400.01/9500.00y | 0.0% | 4.46m/(model year) | 7.4h left) Time step took 0.12s 0.006944444445252884 1 4.5002083333333574e-07 0.006944444445252884 1 4.5002083333333574e-07 0.006944444445252884 1 4.5002083333333574e-07 0.006944444445252884 1 4.5002083333333574e-07 0.006944444445252884 1 4.5002083333333574e-07 0.006944444445252884 1 4.5002083333333574e-07 0.006944444445252884 1 4.5002083333333574e-07 0.006944444445252884 1 4.5002083333333574e-07 0.006944444445252884 1 4.5002083333333574e-07 0.006944444445252884 1 4.5002083333333574e-07 0.006944444445252884 1 4.5002083333333574e-07 0.006944444445252884 1 4.5002083333333574e-07 Current iteration: 13536011 (9400.01/9500.00y | 0.0% | 4.34m/(model year) | 7.2h left) Time step took 0.13s 0.007638888888322981 1 4.5002291666666495e-07 0.007638888888322981 1 4.5002291666666495e-07 0.007638888888322981 1 4.5002291666666495e-07 0.007638888888322981 1 4.5002291666666495e-07 0.007638888888322981 1 4.5002291666666495e-07 0.007638888888322981 1 4.5002291666666495e-07 0.007638888888322981 1 4.5002291666666495e-07 0.007638888888322981 1 4.5002291666666495e-07 0.007638888888322981 1 4.5002291666666495e-07 0.007638888888322981 1 4.5002291666666495e-07 0.007638888888322981 1 4.5002291666666495e-07 0.007638888888322981 1 4.5002291666666495e-07 Current iteration: 13536012 (9400.01/9500.00y | 0.0% | 4.22m/(model year) | 7.0h left) Mean temperature 1.3861118842787132 change to last 7.090143295262631e-05 Mean salinity 34.59038180815421 change to last -1.9493083889775594e-07 Temperature var. 23.353246711113254 change to last 0.0009358548038440005 Salinity var. 1196.5245423327226 change to last -1.3302864956774432e-05 Time step took 0.12s 0.008333333333212067 1 4.500249999999996e-07 0.008333333333212067 1 4.500249999999996e-07 0.008333333333212067 1 4.500249999999996e-07 0.008333333333212067 1 4.500249999999996e-07 0.008333333333212067 1 4.500249999999996e-07 0.008333333333212067 1 4.500249999999996e-07 0.008333333333212067 1 4.500249999999996e-07 0.008333333333212067 1 4.500249999999996e-07 0.008333333333212067 1 4.500249999999996e-07 0.008333333333212067 1 4.500249999999996e-07 0.008333333333212067 1 4.500249999999996e-07 0.008333333333212067 1 4.500249999999996e-07 Current iteration: 13536013 (9400.01/9500.00y | 0.0% | 4.40m/(model year) | 7.3h left) Time step took 0.13s 0.009027777778101154 1 4.5002708333333427e-07 0.009027777778101154 1 4.5002708333333427e-07 0.009027777778101154 1 4.5002708333333427e-07 0.009027777778101154 1 4.5002708333333427e-07 0.009027777778101154 1 4.5002708333333427e-07 0.009027777778101154 1 4.5002708333333427e-07 0.009027777778101154 1 4.5002708333333427e-07 0.009027777778101154 1 4.5002708333333427e-07 0.009027777778101154 1 4.5002708333333427e-07 0.009027777778101154 1 4.5002708333333427e-07 0.009027777778101154 1 4.5002708333333427e-07 0.009027777778101154 1 4.5002708333333427e-07 Current iteration: 13536014 (9400.01/9500.00y | 0.0% | 4.30m/(model year) | 7.2h left) Time step took 0.13s 0.00972222222299024 1 4.5002916666666893e-07 0.00972222222299024 1 4.5002916666666893e-07 0.00972222222299024 1 4.5002916666666893e-07 0.00972222222299024 1 4.5002916666666893e-07 0.00972222222299024 1 4.5002916666666893e-07 0.00972222222299024 1 4.5002916666666893e-07 0.00972222222299024 1 4.5002916666666893e-07 0.00972222222299024 1 4.5002916666666893e-07 0.00972222222299024 1 4.5002916666666893e-07 0.00972222222299024 1 4.5002916666666893e-07 0.00972222222299024 1 4.5002916666666893e-07 0.00972222222299024 1 4.5002916666666893e-07 Current iteration: 13536015 (9400.01/9500.00y | 0.0% | 4.23m/(model year) | 7.0h left) Time step took 0.13s 0.010416666666060337 1 4.5003124999999814e-07 0.010416666666060337 1 4.5003124999999814e-07 0.010416666666060337 1 4.5003124999999814e-07 0.010416666666060337 1 4.5003124999999814e-07 0.010416666666060337 1 4.5003124999999814e-07 0.010416666666060337 1 4.5003124999999814e-07 0.010416666666060337 1 4.5003124999999814e-07 0.010416666666060337 1 4.5003124999999814e-07 0.010416666666060337 1 4.5003124999999814e-07 0.010416666666060337 1 4.5003124999999814e-07 0.010416666666060337 1 4.5003124999999814e-07 0.010416666666060337 1 4.5003124999999814e-07 Current iteration: 13536016 (9400.01/9500.00y | 0.0% | 4.14m/(model year) | 6.9h left) Mean temperature 1.3861831379508622 change to last 7.12536721491329e-05 Mean salinity 34.590381621003715 change to last -1.871504939303495e-07 Temperature var. 23.35421182218559 change to last 0.0009651110723384923 Salinity var. 1196.5245295655507 change to last -1.2767171992402682e-05 Time step took 0.12s 0.011111111110949423 1 4.500333333333328e-07 0.011111111110949423 1 4.500333333333328e-07 0.011111111110949423 1 4.500333333333328e-07 0.011111111110949423 1 4.500333333333328e-07 0.011111111110949423 1 4.500333333333328e-07 0.011111111110949423 1 4.500333333333328e-07 0.011111111110949423 1 4.500333333333328e-07 0.011111111110949423 1 4.500333333333328e-07 0.011111111110949423 1 4.500333333333328e-07 0.011111111110949423 1 4.500333333333328e-07 0.011111111110949423 1 4.500333333333328e-07 0.011111111110949423 1 4.500333333333328e-07 Current iteration: 13536017 (9400.01/9500.00y | 0.0% | 4.27m/(model year) | 7.1h left) Time step took 0.12s 0.01180555555583851 1 4.500354166666675e-07 0.01180555555583851 1 4.500354166666675e-07 0.01180555555583851 1 4.500354166666675e-07 0.01180555555583851 1 4.500354166666675e-07 0.01180555555583851 1 4.500354166666675e-07 0.01180555555583851 1 4.500354166666675e-07 0.01180555555583851 1 4.500354166666675e-07 0.01180555555583851 1 4.500354166666675e-07 0.01180555555583851 1 4.500354166666675e-07 0.01180555555583851 1 4.500354166666675e-07 0.01180555555583851 1 4.500354166666675e-07 0.01180555555583851 1 4.500354166666675e-07 Current iteration: 13536018 (9400.01/9500.00y | 0.0% | 4.19m/(model year) | 7.0h left) Time step took 0.12s 0.012500000000727596 1 4.500375000000022e-07 0.012500000000727596 1 4.500375000000022e-07 0.012500000000727596 1 4.500375000000022e-07 0.012500000000727596 1 4.500375000000022e-07 0.012500000000727596 1 4.500375000000022e-07 0.012500000000727596 1 4.500375000000022e-07 0.012500000000727596 1 4.500375000000022e-07 0.012500000000727596 1 4.500375000000022e-07 0.012500000000727596 1 4.500375000000022e-07 0.012500000000727596 1 4.500375000000022e-07 0.012500000000727596 1 4.500375000000022e-07 0.012500000000727596 1 4.500375000000022e-07 Current iteration: 13536019 (9400.01/9500.00y | 0.0% | 4.14m/(model year) | 6.9h left) Time step took 0.13s 0.013194444443797693 1 4.500395833333314e-07 0.013194444443797693 1 4.500395833333314e-07 0.013194444443797693 1 4.500395833333314e-07 0.013194444443797693 1 4.500395833333314e-07 0.013194444443797693 1 4.500395833333314e-07 0.013194444443797693 1 4.500395833333314e-07 0.013194444443797693 1 4.500395833333314e-07 0.013194444443797693 1 4.500395833333314e-07 0.013194444443797693 1 4.500395833333314e-07 0.013194444443797693 1 4.500395833333314e-07 0.013194444443797693 1 4.500395833333314e-07 0.013194444443797693 1 4.500395833333314e-07 Current iteration: 13536020 (9400.01/9500.00y | 0.0% | 4.08m/(model year) | 6.8h left) Mean temperature 1.386254075091566 change to last 7.093714070362467e-05 Mean salinity 34.590381435412624 change to last -1.8559108955194257e-07 Temperature var. 23.355190826256706 change to last 0.000979004071116283 Salinity var. 1196.5245168679996 change to last -1.269755104284156e-05 Time step took 0.12s 0.013888888888686779 1 4.5004166666666605e-07 0.013888888888686779 1 4.5004166666666605e-07 0.013888888888686779 1 4.5004166666666605e-07 0.013888888888686779 1 4.5004166666666605e-07 0.013888888888686779 1 4.5004166666666605e-07 0.013888888888686779 1 4.5004166666666605e-07 0.013888888888686779 1 4.5004166666666605e-07 0.013888888888686779 1 4.5004166666666605e-07 0.013888888888686779 1 4.5004166666666605e-07 0.013888888888686779 1 4.5004166666666605e-07 0.013888888888686779 1 4.5004166666666605e-07 0.013888888888686779 1 4.5004166666666605e-07 Current iteration: 13536021 (9400.01/9500.00y | 0.0% | 4.18m/(model year) | 7.0h left) Time step took 0.12s 0.014583333333575865 1 4.500437500000007e-07 0.014583333333575865 1 4.500437500000007e-07 0.014583333333575865 1 4.500437500000007e-07 0.014583333333575865 1 4.500437500000007e-07 0.014583333333575865 1 4.500437500000007e-07 0.014583333333575865 1 4.500437500000007e-07 0.014583333333575865 1 4.500437500000007e-07 0.014583333333575865 1 4.500437500000007e-07 0.014583333333575865 1 4.500437500000007e-07 0.014583333333575865 1 4.500437500000007e-07 0.014583333333575865 1 4.500437500000007e-07 0.014583333333575865 1 4.500437500000007e-07 Current iteration: 13536022 (9400.02/9500.00y | 0.0% | 4.12m/(model year) | 6.9h left) Time step took 0.12s 0.015277777778464952 1 4.5004583333333537e-07 0.015277777778464952 1 4.5004583333333537e-07 0.015277777778464952 1 4.5004583333333537e-07 0.015277777778464952 1 4.5004583333333537e-07 0.015277777778464952 1 4.5004583333333537e-07 0.015277777778464952 1 4.5004583333333537e-07 0.015277777778464952 1 4.5004583333333537e-07 0.015277777778464952 1 4.5004583333333537e-07 0.015277777778464952 1 4.5004583333333537e-07 0.015277777778464952 1 4.5004583333333537e-07 0.015277777778464952 1 4.5004583333333537e-07 0.015277777778464952 1 4.5004583333333537e-07 Current iteration: 13536023 (9400.02/9500.00y | 0.0% | 4.07m/(model year) | 6.8h left) Time step took 0.12s 0.01597222222153505 1 4.500479166666646e-07 0.01597222222153505 1 4.500479166666646e-07 0.01597222222153505 1 4.500479166666646e-07 0.01597222222153505 1 4.500479166666646e-07 0.01597222222153505 1 4.500479166666646e-07 0.01597222222153505 1 4.500479166666646e-07 0.01597222222153505 1 4.500479166666646e-07 0.01597222222153505 1 4.500479166666646e-07 0.01597222222153505 1 4.500479166666646e-07 0.01597222222153505 1 4.500479166666646e-07 0.01597222222153505 1 4.500479166666646e-07 0.01597222222153505 1 4.500479166666646e-07 Current iteration: 13536024 (9400.02/9500.00y | 0.0% | 4.03m/(model year) | 6.7h left) Mean temperature 1.3863250706502839 change to last 7.099555871804027e-05 Mean salinity 34.590381254187704 change to last -1.8122492518090615e-07 Temperature var. 23.356199323448813 change to last 0.0010084971921062653 Salinity var. 1196.5245044870178 change to last -1.2380981874496683e-05 Time step took 0.13s 0.016666666666424135 1 4.5004999999999924e-07 0.016666666666424135 1 4.5004999999999924e-07 0.016666666666424135 1 4.5004999999999924e-07 0.016666666666424135 1 4.5004999999999924e-07 0.016666666666424135 1 4.5004999999999924e-07 0.016666666666424135 1 4.5004999999999924e-07 0.016666666666424135 1 4.5004999999999924e-07 0.016666666666424135 1 4.5004999999999924e-07 0.016666666666424135 1 4.5004999999999924e-07 0.016666666666424135 1 4.5004999999999924e-07 0.016666666666424135 1 4.5004999999999924e-07 0.016666666666424135 1 4.5004999999999924e-07 Current iteration: 13536025 (9400.02/9500.00y | 0.0% | 4.12m/(model year) | 6.9h left) Time step took 0.13s 0.01736111111131322 1 4.500520833333339e-07 0.01736111111131322 1 4.500520833333339e-07 0.01736111111131322 1 4.500520833333339e-07 0.01736111111131322 1 4.500520833333339e-07 0.01736111111131322 1 4.500520833333339e-07 0.01736111111131322 1 4.500520833333339e-07 0.01736111111131322 1 4.500520833333339e-07 0.01736111111131322 1 4.500520833333339e-07 0.01736111111131322 1 4.500520833333339e-07 0.01736111111131322 1 4.500520833333339e-07 0.01736111111131322 1 4.500520833333339e-07 0.01736111111131322 1 4.500520833333339e-07 Current iteration: 13536026 (9400.02/9500.00y | 0.0% | 4.08m/(model year) | 6.8h left) Time step took 0.13s 0.018055555556202307 1 4.5005416666666857e-07 0.018055555556202307 1 4.5005416666666857e-07 0.018055555556202307 1 4.5005416666666857e-07 0.018055555556202307 1 4.5005416666666857e-07 0.018055555556202307 1 4.5005416666666857e-07 0.018055555556202307 1 4.5005416666666857e-07 0.018055555556202307 1 4.5005416666666857e-07 0.018055555556202307 1 4.5005416666666857e-07 0.018055555556202307 1 4.5005416666666857e-07 0.018055555556202307 1 4.5005416666666857e-07 0.018055555556202307 1 4.5005416666666857e-07 0.018055555556202307 1 4.5005416666666857e-07 Current iteration: 13536027 (9400.02/9500.00y | 0.0% | 4.05m/(model year) | 6.7h left) Time step took 0.13s 0.018749999999272404 1 4.500562499999978e-07 0.018749999999272404 1 4.500562499999978e-07 0.018749999999272404 1 4.500562499999978e-07 0.018749999999272404 1 4.500562499999978e-07 0.018749999999272404 1 4.500562499999978e-07 0.018749999999272404 1 4.500562499999978e-07 0.018749999999272404 1 4.500562499999978e-07 0.018749999999272404 1 4.500562499999978e-07 0.018749999999272404 1 4.500562499999978e-07 0.018749999999272404 1 4.500562499999978e-07 0.018749999999272404 1 4.500562499999978e-07 0.018749999999272404 1 4.500562499999978e-07 Current iteration: 13536028 (9400.02/9500.00y | 0.0% | 4.01m/(model year) | 6.7h left) Mean temperature 1.3863958300213575 change to last 7.075937107345772e-05 Mean salinity 34.59038107546459 change to last -1.787231128905947e-07 Temperature var. 23.35722779696682 change to last 0.0010284735180084677 Salinity var. 1196.5244922370043 change to last -1.2250013520800735e-05 Time step took 0.12s 0.01944444444416149 1 4.500583333333325e-07 0.01944444444416149 1 4.500583333333325e-07 0.01944444444416149 1 4.500583333333325e-07 0.01944444444416149 1 4.500583333333325e-07 0.01944444444416149 1 4.500583333333325e-07 0.01944444444416149 1 4.500583333333325e-07 0.01944444444416149 1 4.500583333333325e-07 0.01944444444416149 1 4.500583333333325e-07 0.01944444444416149 1 4.500583333333325e-07 0.01944444444416149 1 4.500583333333325e-07 0.01944444444416149 1 4.500583333333325e-07 0.01944444444416149 1 4.500583333333325e-07 Current iteration: 13536029 (9400.02/9500.00y | 0.0% | 4.09m/(model year) | 6.8h left) Time step took 0.12s 0.020138888889050577 1 4.5006041666666715e-07 0.020138888889050577 1 4.5006041666666715e-07 0.020138888889050577 1 4.5006041666666715e-07 0.020138888889050577 1 4.5006041666666715e-07 0.020138888889050577 1 4.5006041666666715e-07 0.020138888889050577 1 4.5006041666666715e-07 0.020138888889050577 1 4.5006041666666715e-07 0.020138888889050577 1 4.5006041666666715e-07 0.020138888889050577 1 4.5006041666666715e-07 0.020138888889050577 1 4.5006041666666715e-07 0.020138888889050577 1 4.5006041666666715e-07 0.020138888889050577 1 4.5006041666666715e-07 Current iteration: 13536030 (9400.02/9500.00y | 0.0% | 4.05m/(model year) | 6.7h left) Time step took 0.12s 0.020833333333939663 1 4.500625000000018e-07 0.020833333333939663 1 4.500625000000018e-07 0.020833333333939663 1 4.500625000000018e-07 0.020833333333939663 1 4.500625000000018e-07 0.020833333333939663 1 4.500625000000018e-07 0.020833333333939663 1 4.500625000000018e-07 0.020833333333939663 1 4.500625000000018e-07 0.020833333333939663 1 4.500625000000018e-07 0.020833333333939663 1 4.500625000000018e-07 0.020833333333939663 1 4.500625000000018e-07 0.020833333333939663 1 4.500625000000018e-07 0.020833333333939663 1 4.500625000000018e-07 Current iteration: 13536031 (9400.02/9500.00y | 0.0% | 4.01m/(model year) | 6.7h left) Time step took 0.12s 0.02152777777700976 1 4.50064583333331e-07 0.02152777777700976 1 4.50064583333331e-07 0.02152777777700976 1 4.50064583333331e-07 0.02152777777700976 1 4.50064583333331e-07 0.02152777777700976 1 4.50064583333331e-07 0.02152777777700976 1 4.50064583333331e-07 0.02152777777700976 1 4.50064583333331e-07 0.02152777777700976 1 4.50064583333331e-07 0.02152777777700976 1 4.50064583333331e-07 0.02152777777700976 1 4.50064583333331e-07 0.02152777777700976 1 4.50064583333331e-07 0.02152777777700976 1 4.50064583333331e-07 Current iteration: 13536032 (9400.02/9500.00y | 0.0% | 3.98m/(model year) | 6.6h left) Mean temperature 1.3864661062442607 change to last 7.027622290332006e-05 Mean salinity 34.59038089941974 change to last -1.760448497836632e-07 Temperature var. 23.35826714315026 change to last 0.0010393461834381458 Salinity var. 1196.5244801980277 change to last -1.2038976428950631e-05 Time step took 0.12s 0.022222222221898846 1 4.500666666666657e-07 0.022222222221898846 1 4.500666666666657e-07 0.022222222221898846 1 4.500666666666657e-07 0.022222222221898846 1 4.500666666666657e-07 0.022222222221898846 1 4.500666666666657e-07 0.022222222221898846 1 4.500666666666657e-07 0.022222222221898846 1 4.500666666666657e-07 0.022222222221898846 1 4.500666666666657e-07 0.022222222221898846 1 4.500666666666657e-07 0.022222222221898846 1 4.500666666666657e-07 0.022222222221898846 1 4.500666666666657e-07 0.022222222221898846 1 4.500666666666657e-07 Current iteration: 13536033 (9400.02/9500.00y | 0.0% | 4.05m/(model year) | 6.7h left) Time step took 0.12s 0.022916666666787933 1 4.5006875000000034e-07 0.022916666666787933 1 4.5006875000000034e-07 0.022916666666787933 1 4.5006875000000034e-07 0.022916666666787933 1 4.5006875000000034e-07 0.022916666666787933 1 4.5006875000000034e-07 0.022916666666787933 1 4.5006875000000034e-07 0.022916666666787933 1 4.5006875000000034e-07 0.022916666666787933 1 4.5006875000000034e-07 0.022916666666787933 1 4.5006875000000034e-07 0.022916666666787933 1 4.5006875000000034e-07 0.022916666666787933 1 4.5006875000000034e-07 0.022916666666787933 1 4.5006875000000034e-07 Current iteration: 13536034 (9400.02/9500.00y | 0.0% | 4.01m/(model year) | 6.7h left) Time step took 0.12s 0.02361111111167702 1 4.50070833333335e-07 0.02361111111167702 1 4.50070833333335e-07 0.02361111111167702 1 4.50070833333335e-07 0.02361111111167702 1 4.50070833333335e-07 0.02361111111167702 1 4.50070833333335e-07 0.02361111111167702 1 4.50070833333335e-07 0.02361111111167702 1 4.50070833333335e-07 0.02361111111167702 1 4.50070833333335e-07 0.02361111111167702 1 4.50070833333335e-07 0.02361111111167702 1 4.50070833333335e-07 0.02361111111167702 1 4.50070833333335e-07 0.02361111111167702 1 4.50070833333335e-07 Current iteration: 13536035 (9400.02/9500.00y | 0.0% | 3.98m/(model year) | 6.6h left) Time step took 0.12s 0.024305555554747116 1 4.500729166666642e-07 0.024305555554747116 1 4.500729166666642e-07 0.024305555554747116 1 4.500729166666642e-07 0.024305555554747116 1 4.500729166666642e-07 0.024305555554747116 1 4.500729166666642e-07 0.024305555554747116 1 4.500729166666642e-07 0.024305555554747116 1 4.500729166666642e-07 0.024305555554747116 1 4.500729166666642e-07 0.024305555554747116 1 4.500729166666642e-07 0.024305555554747116 1 4.500729166666642e-07 0.024305555554747116 1 4.500729166666642e-07 0.024305555554747116 1 4.500729166666642e-07 Current iteration: 13536036 (9400.03/9500.00y | 0.0% | 3.95m/(model year) | 6.6h left) Mean temperature 1.3865359548329845 change to last 6.984858872381068e-05 Mean salinity 34.59038072868404 change to last -1.7073569921810092e-07 Temperature var. 23.359323163932235 change to last 0.001056020781974263 Salinity var. 1196.524468516543 change to last -1.1681484848401269e-05 Time step took 0.12s 0.024999999999636202 1 4.500749999999989e-07 0.024999999999636202 1 4.500749999999989e-07 0.024999999999636202 1 4.500749999999989e-07 0.024999999999636202 1 4.500749999999989e-07 0.024999999999636202 1 4.500749999999989e-07 0.024999999999636202 1 4.500749999999989e-07 0.024999999999636202 1 4.500749999999989e-07 0.024999999999636202 1 4.500749999999989e-07 0.024999999999636202 1 4.500749999999989e-07 0.024999999999636202 1 4.500749999999989e-07 0.024999999999636202 1 4.500749999999989e-07 0.024999999999636202 1 4.500749999999989e-07 Current iteration: 13536037 (9400.03/9500.00y | 0.0% | 4.03m/(model year) | 6.7h left) Time step took 0.14s 0.02569444444452529 1 4.5007708333333353e-07 0.02569444444452529 1 4.5007708333333353e-07 0.02569444444452529 1 4.5007708333333353e-07 0.02569444444452529 1 4.5007708333333353e-07 0.02569444444452529 1 4.5007708333333353e-07 0.02569444444452529 1 4.5007708333333353e-07 0.02569444444452529 1 4.5007708333333353e-07 0.02569444444452529 1 4.5007708333333353e-07 0.02569444444452529 1 4.5007708333333353e-07 0.02569444444452529 1 4.5007708333333353e-07 0.02569444444452529 1 4.5007708333333353e-07 0.02569444444452529 1 4.5007708333333353e-07 Current iteration: 13536038 (9400.03/9500.00y | 0.0% | 4.00m/(model year) | 6.7h left) Time step took 0.12s 0.026388888889414375 1 4.500791666666682e-07 0.026388888889414375 1 4.500791666666682e-07 0.026388888889414375 1 4.500791666666682e-07 0.026388888889414375 1 4.500791666666682e-07 0.026388888889414375 1 4.500791666666682e-07 0.026388888889414375 1 4.500791666666682e-07 0.026388888889414375 1 4.500791666666682e-07 0.026388888889414375 1 4.500791666666682e-07 0.026388888889414375 1 4.500791666666682e-07 0.026388888889414375 1 4.500791666666682e-07 0.026388888889414375 1 4.500791666666682e-07 0.026388888889414375 1 4.500791666666682e-07 Current iteration: 13536039 (9400.03/9500.00y | 0.0% | 3.98m/(model year) | 6.6h left) 0.02708333333248447 1 4.5008124999999746e-07 0.02708333333248447 1 4.5008124999999746e-07 0.02708333333248447 1 4.5008124999999746e-07 0.02708333333248447 1 4.5008124999999746e-07 0.02708333333248447 1 4.5008124999999746e-07 0.02708333333248447 1 4.5008124999999746e-07 0.02708333333248447 1 4.5008124999999746e-07 0.02708333333248447 1 4.5008124999999746e-07 0.02708333333248447 1 4.5008124999999746e-07 0.02708333333248447 1 4.5008124999999746e-07 Time step took 0.13s 0.02708333333248447 1 4.5008124999999746e-07 0.02708333333248447 1 4.5008124999999746e-07 Current iteration: 13536040 (9400.03/9500.00y | 0.0% | 3.95m/(model year) | 6.6h left) Mean temperature 1.386605308908633 change to last 6.93540756484829e-05 Mean salinity 34.59038055847923 change to last -1.702048046812506e-07 Temperature var. 23.360392742583553 change to last 0.001069578651320054 Salinity var. 1196.524456865594 change to last -1.1650948939268144e-05 Time step took 0.12s 0.027777777777373558 1 4.500833333333321e-07 0.027777777777373558 1 4.500833333333321e-07 0.027777777777373558 1 4.500833333333321e-07 0.027777777777373558 1 4.500833333333321e-07 0.027777777777373558 1 4.500833333333321e-07 0.027777777777373558 1 4.500833333333321e-07 0.027777777777373558 1 4.500833333333321e-07 0.027777777777373558 1 4.500833333333321e-07 0.027777777777373558 1 4.500833333333321e-07 0.027777777777373558 1 4.500833333333321e-07 0.027777777777373558 1 4.500833333333321e-07 0.027777777777373558 1 4.500833333333321e-07 Current iteration: 13536041 (9400.03/9500.00y | 0.0% | 4.01m/(model year) | 6.7h left) Time step took 0.12s 0.028472222222262644 1 4.500854166666668e-07 0.028472222222262644 1 4.500854166666668e-07 0.028472222222262644 1 4.500854166666668e-07 0.028472222222262644 1 4.500854166666668e-07 0.028472222222262644 1 4.500854166666668e-07 0.028472222222262644 1 4.500854166666668e-07 0.028472222222262644 1 4.500854166666668e-07 0.028472222222262644 1 4.500854166666668e-07 0.028472222222262644 1 4.500854166666668e-07 0.028472222222262644 1 4.500854166666668e-07 0.028472222222262644 1 4.500854166666668e-07 0.028472222222262644 1 4.500854166666668e-07 Current iteration: 13536042 (9400.03/9500.00y | 0.0% | 3.98m/(model year) | 6.6h left) Time step took 0.12s 0.02916666666715173 1 4.5008750000000144e-07 0.02916666666715173 1 4.5008750000000144e-07 0.02916666666715173 1 4.5008750000000144e-07 0.02916666666715173 1 4.5008750000000144e-07 0.02916666666715173 1 4.5008750000000144e-07 0.02916666666715173 1 4.5008750000000144e-07 0.02916666666715173 1 4.5008750000000144e-07 0.02916666666715173 1 4.5008750000000144e-07 0.02916666666715173 1 4.5008750000000144e-07 0.02916666666715173 1 4.5008750000000144e-07 0.02916666666715173 1 4.5008750000000144e-07 0.02916666666715173 1 4.5008750000000144e-07 Current iteration: 13536043 (9400.03/9500.00y | 0.0% | 3.96m/(model year) | 6.6h left) Time step took 0.12s 0.029861111110221827 1 4.5008958333333065e-07 0.029861111110221827 1 4.5008958333333065e-07 0.029861111110221827 1 4.5008958333333065e-07 0.029861111110221827 1 4.5008958333333065e-07 0.029861111110221827 1 4.5008958333333065e-07 0.029861111110221827 1 4.5008958333333065e-07 0.029861111110221827 1 4.5008958333333065e-07 0.029861111110221827 1 4.5008958333333065e-07 0.029861111110221827 1 4.5008958333333065e-07 0.029861111110221827 1 4.5008958333333065e-07 0.029861111110221827 1 4.5008958333333065e-07 0.029861111110221827 1 4.5008958333333065e-07 Current iteration: 13536044 (9400.03/9500.00y | 0.0% | 3.93m/(model year) | 6.6h left) Mean temperature 1.3866748113511842 change to last 6.950244255123315e-05 Mean salinity 34.590380393539625 change to last -1.6493960981300258e-07 Temperature var. 23.361473412273046 change to last 0.0010806696894934318 Salinity var. 1196.52444559621 change to last -1.1269384087438004e-05 Time step took 0.12s 0.030555555555110914 1 4.500916666666653e-07 0.030555555555110914 1 4.500916666666653e-07 0.030555555555110914 1 4.500916666666653e-07 0.030555555555110914 1 4.500916666666653e-07 0.030555555555110914 1 4.500916666666653e-07 0.030555555555110914 1 4.500916666666653e-07 0.030555555555110914 1 4.500916666666653e-07 0.030555555555110914 1 4.500916666666653e-07 0.030555555555110914 1 4.500916666666653e-07 0.030555555555110914 1 4.500916666666653e-07 0.030555555555110914 1 4.500916666666653e-07 0.030555555555110914 1 4.500916666666653e-07 Current iteration: 13536045 (9400.03/9500.00y | 0.0% | 3.98m/(model year) | 6.6h left) Time step took 0.12s 0.03125 1 4.5009374999999997e-07 0.03125 1 4.5009374999999997e-07 0.03125 1 4.5009374999999997e-07 0.03125 1 4.5009374999999997e-07 0.03125 1 4.5009374999999997e-07 0.03125 1 4.5009374999999997e-07 0.03125 1 4.5009374999999997e-07 0.03125 1 4.5009374999999997e-07 0.03125 1 4.5009374999999997e-07 0.03125 1 4.5009374999999997e-07 0.03125 1 4.5009374999999997e-07 0.03125 1 4.5009374999999997e-07 Current iteration: 13536046 (9400.03/9500.00y | 0.0% | 3.96m/(model year) | 6.6h left) Time step took 0.12s 0.031944444444889086 1 4.5009583333333463e-07 0.031944444444889086 1 4.5009583333333463e-07 0.031944444444889086 1 4.5009583333333463e-07 0.031944444444889086 1 4.5009583333333463e-07 0.031944444444889086 1 4.5009583333333463e-07 0.031944444444889086 1 4.5009583333333463e-07 0.031944444444889086 1 4.5009583333333463e-07 0.031944444444889086 1 4.5009583333333463e-07 0.031944444444889086 1 4.5009583333333463e-07 0.031944444444889086 1 4.5009583333333463e-07 0.031944444444889086 1 4.5009583333333463e-07 0.031944444444889086 1 4.5009583333333463e-07 Current iteration: 13536047 (9400.03/9500.00y | 0.0% | 3.94m/(model year) | 6.6h left) Time step took 0.12s 0.03263888888977817 1 4.500979166666693e-07 0.03263888888977817 1 4.500979166666693e-07 0.03263888888977817 1 4.500979166666693e-07 0.03263888888977817 1 4.500979166666693e-07 0.03263888888977817 1 4.500979166666693e-07 0.03263888888977817 1 4.500979166666693e-07 0.03263888888977817 1 4.500979166666693e-07 0.03263888888977817 1 4.500979166666693e-07 0.03263888888977817 1 4.500979166666693e-07 0.03263888888977817 1 4.500979166666693e-07 0.03263888888977817 1 4.500979166666693e-07 0.03263888888977817 1 4.500979166666693e-07 srun: Job step aborted: Waiting up to 32 seconds for job step to finish. slurmstepd: error: *** STEP 16489606.0 ON node180 CANCELLED AT 2020-02-21T15:25:00 *** Received interrupt signal 15 Stopping integration at iteration 13536047 Writing restart file rtipSc002.0003.restart.h5... slurmstepd: error: *** JOB 16489606 ON node180 CANCELLED AT 2020-02-21T15:25:00 ***