14.4. Test Reports

14.4.1. GTOpt Test Report

This report contains cumulative GTOpt performance profiles and profile data sheets.

Used methodology:

14.4.1.1. Distance

See the distance measure definition.

GTOpt performance profiles (distance)

GTOpt performance profiles (distance)


Distance
tasks GTOpt 1.7.0
GTOpt
GTOpt 1.9.6
GTOpt
GTOpt 6.0
GTOpt
GTOpt 6.10
GTOpt
GTOpt 6.15
GTOpt
GTOpt 6.16
GTOpt
task001 0 0 0 0 0 0
task002 1.192e-06 0 0 0 0 0
task003 2.384e-06 2.384e-06 2.384e-06 2.384e-06 2.384e-06 2.384e-06
task004 0 0.0002368 0.0001455 0.0001455 0.0002368 0.0002024
task005 1.43e-05 1.43e-05 1.43e-05 1.431e-05 1.43e-05 1.431e-05
task006 0 0 0 0 0 0
task007 0.6992 0.7314 0.5281 0.495 0.495 0.495
task008 0.592 0.4338 0.2202 0.301 0.301 0.301
task009 1.173 0.3864 0.2602 0.3748 0.3748 0.3748
task010 0.0529 1.127 0.04006 0.04006 0.04006 0.04006
task011 0.01452 0.1007 0.006864 0.006864 0.006864 0.006864
task012 0 0 0 0 0 0

14.4.1.2. Objective Evaluations

See the objective evaluations measure definition.

GTOpt performance profiles (objective evaluations)

GTOpt performance profiles (objective evaluations)


Objective evaluations
tasks GTOpt 1.7.0
GTOpt
GTOpt 1.9.6
GTOpt
GTOpt 6.0
GTOpt
GTOpt 6.10
GTOpt
GTOpt 6.15
GTOpt
GTOpt 6.16
GTOpt
task001 185 141 141 141 141 141
task002 91 57 57 62 62 62
task003 6 6 6 9 9 9
task004 42 18 13 16 21 19
task005 25 35 35 40 40 40
task006 53 47 47 48 48 48
task007 271 355 320 344 344 344
task008 390 511 497 569 569 569
task009 318 368 416 445 475 475
task010 124 141 118 112 115 115
task011 179 243 224 211 211 211
task012 613 628 553 570 570 570

14.4.1.3. Constraint Evaluations

See the constraint evaluations measure definition.

GTOpt performance profiles (constraint evaluations)

GTOpt performance profiles (constraint evaluations)


Constraint evaluation
tasks GTOpt 1.7.0
GTOpt
GTOpt 1.9.6
GTOpt
GTOpt 6.0
GTOpt
GTOpt 6.10
GTOpt
GTOpt 6.15
GTOpt
GTOpt 6.16
GTOpt
task001 0 0 0 0 0 0
task002 91 57 57 64 64 64
task003 6 6 6 9 9 9
task004 42 18 13 16 21 19
task005 25 35 35 40 40 40
task006 0 0 0 0 0 0
task007 0 0 0 0 0 0
task008 0 0 0 0 0 0
task009 311 370 429 453 495 495
task010 149 137 119 115 117 117
task011 0 0 0 0 0 0
task012 0 0 0 0 0 0

14.4.1.4. Solving Time

GTOpt performance profiles (solving time)

GTOpt performance profiles (solving time)


Optimization time
tasks GTOpt 1.7.0
GTOpt
GTOpt 1.9.6
GTOpt
GTOpt 6.0
GTOpt
GTOpt 6.10
GTOpt
GTOpt 6.15
GTOpt
GTOpt 6.16
GTOpt
task001 0.4722 0.2256 0.1791 0.3075 0.2734 0.1547
task002 0.4142 6.551 1.682 1.676 1.545 1.171
task003 0.1424 0.05588 0.06148 0.04477 0.04839 0.06277
task004 0.2729 0.0799 0.08019 0.06137 0.08313 0.07544
task005 0.2032 0.1477 0.1236 0.09699 0.08818 0.08526
task006 0.231 0.09649 0.08017 0.07358 0.07698 0.0784
task007 1.329 0.5393 0.5428 0.5058 0.3618 0.3623
task008 2.575 0.9822 0.995 1.03 0.7322 0.7297
task009 1.819 0.814 1.021 0.966 0.6864 0.6746
task010 0.4778 0.1951 0.199 0.1576 0.1265 0.1304
task011 0.3763 0.1923 0.1764 0.1585 0.132 0.1349
task012 1.229 0.3699 0.3463 0.4158 0.2672 0.2675

14.4.2. GTApprox Test Report

This report contains cumulative GTApprox performance profiles and profile data sheets.

Used methodology:

14.4.2.1. RRMS Error

GTApprox performance profiles (RRMS)

GTApprox performance profiles (RRMS)


matlab1d-classic-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.8875 0.8875 0.887 0.887 0.887 0.887
10 0.3074 0.3074 0.3073 0.3073 0.3073 0.3073
20 0.3747 0.3747 0.3745 0.3745 0.3745 0.3745
40 0.001375 0.001375 0.001374 0.001374 0.001374 0.001374
80 0.0009849 0.0009849 0.0009845 0.0009845 0.0009845 0.0009845
160 0.0001715 0.0001715 0.0001714 0.0001714 0.0001714 0.0001714
matlab1d-classic-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 1.209 1.209 1.209 1.209 1.209 1.209
10 1.152 1.152 1.152 1.152 1.152 1.152
20 0.05659 0.05659 0.05656 0.05656 0.05656 0.05656
40 0.001959 0.001959 0.001958 0.001958 0.001958 0.001958
80 0.005215 0.005215 0.005213 0.005213 0.005213 0.005213
matlab1d-classic-unif
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.2816 0.2816 0.2814 0.2814 0.2814 0.2814
10 0.1083 0.1083 0.1082 0.1082 0.1082 0.1082
20 0.00693 0.00693 0.006925 0.006925 0.006925 0.006925
40 0.000778 0.000778 0.0007776 0.0007776 0.0007776 0.0007776
80 6.793e-05 6.793e-05 6.789e-05 6.789e-05 6.789e-05 6.789e-05
matlab1d-f7mod-unif
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
40 0.7984 0.7984 0.7984 0.7984 0.7984 0.7984
80 0.3461 0.3461 0.3461 0.3461 0.3461 0.3461
160 0.08224 0.08224 0.08223 0.08223 0.08223 0.08223
320 0.0218 0.0218 0.0218 0.0218 0.0218 0.0218
640 0.004739 0.004739 0.004738 0.004738 0.004738 0.004738
matlab1d-heaviside-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.6032 0.6032 0.6029 0.6029 0.6029 0.6029
10 0.7748 0.7748 0.7745 0.7745 0.7745 0.7745
20 0.5136 0.5136 0.5134 0.5134 0.5134 0.5134
40 0.3794 0.3794 0.3792 0.3792 0.3792 0.3792
80 0.08308 0.08308 0.08304 0.08304 0.08304 0.08304
160 0.08836 0.08836 0.08831 0.08831 0.08831 0.08831
matlab1d-heaviside-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.7135 0.7135 0.7131 0.7131 0.7131 0.7131
10 1.05 1.05 1.049 1.049 1.049 1.049
20 0.2841 0.2841 0.284 0.284 0.284 0.284
40 0.1266 0.1266 0.1266 0.1266 0.1266 0.1266
80 0.1203 0.1203 0.1203 0.1203 0.1203 0.1203
matlab1d-heaviside-unif
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.6047 0.6047 0.6044 0.6044 0.6044 0.6044
10 0.1653 0.1653 0.1652 0.1652 0.1652 0.1652
20 0.1137 0.1137 0.1137 0.1137 0.1137 0.1137
40 0.07929 0.07929 0.07925 0.07925 0.07925 0.07925
80 0.05547 0.05547 0.05545 0.05545 0.05545 0.05545
matlab1d-kink-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.7562 0.7562 0.7558 0.7558 0.7558 0.7558
10 0.1699 0.1699 0.1698 0.1698 0.1698 0.1698
20 0.03581 0.03581 0.03579 0.03579 0.03579 0.03579
40 0.03055 0.03055 0.03053 0.03053 0.03053 0.03053
80 0.005584 0.005584 0.005582 0.005582 0.005582 0.005582
160 0.0002002 0.0002002 0.0002001 0.0002001 0.0002001 0.0002001
matlab1d-kink-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.5081 0.5081 0.5078 0.5078 0.5078 0.5078
10 0.1505 0.1505 0.1504 0.1504 0.1504 0.1504
20 0.1306 0.1306 0.1306 0.1306 0.1306 0.1306
40 0.005913 0.005913 0.00591 0.00591 0.00591 0.00591
80 0.004607 0.004607 0.004604 0.004604 0.004604 0.004604
matlab1d-kink-unif
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.1714 0.1714 0.1713 0.1713 0.1713 0.1713
10 0.06804 0.06804 0.068 0.068 0.068 0.068
20 0.01409 0.01409 0.01408 0.01408 0.01408 0.01408
40 0.004019 0.004019 0.004017 0.004017 0.004017 0.004017
80 0.001268 0.001268 0.001267 0.001267 0.001267 0.001267
matlab1d-pressure1-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.3495 0.3495 0.3493 0.3493 0.3493 0.3493
10 0.2533 0.2533 0.2532 0.2532 0.2532 0.2532
20 0.04199 0.04199 0.04197 0.04197 0.04197 0.04197
40 0.02351 0.02351 0.0235 0.0235 0.0235 0.0235
80 0.04043 0.04043 0.04041 0.04041 0.04041 0.04041
160 0.0131 0.0131 0.01309 0.01309 0.01309 0.01309
matlab1d-pressure1-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.6896 0.6896 0.6892 0.6892 0.6892 0.6892
10 0.1188 0.1188 0.1187 0.1187 0.1187 0.1187
20 0.07062 0.07062 0.07058 0.07058 0.07058 0.07058
40 0.07702 0.07702 0.07698 0.07698 0.07698 0.07698
80 0.03329 0.03329 0.03327 0.03327 0.03327 0.03327
matlab1d-pressure1-unif
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.356 0.356 0.3559 0.3559 0.3559 0.3559
10 0.1762 0.1762 0.1761 0.1761 0.1761 0.1761
20 0.09259 0.09259 0.09255 0.09255 0.09255 0.09255
40 0.04865 0.04865 0.04863 0.04863 0.04863 0.04863
80 0.02877 0.02877 0.02876 0.02876 0.02876 0.02876
matlab1d-sin10pix-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 1.098 1.098 1.097 1.097 1.097 1.097
10 1.406 1.406 1.405 1.405 1.405 1.405
20 0.6943 0.6943 0.694 0.694 0.694 0.694
40 0.1275 0.1275 0.1276 0.1276 0.1276 0.1276
80 0.006727 0.006727 0.006724 0.006724 0.006724 0.006724
160 0.00932 0.00932 0.009315 0.009315 0.009315 0.009315
matlab1d-sin10pix-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 1.462 1.462 1.461 1.461 1.461 1.461
10 1.595 1.595 1.594 1.594 1.594 1.594
20 0.1332 0.1332 0.1332 0.1332 0.1332 0.1332
40 0.2187 0.2187 0.2186 0.2186 0.2186 0.2186
80 0.07558 0.07558 0.07554 0.07554 0.07554 0.07554
matlab1d-sin10pix-unif
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 1.416 1.416 1.415 1.415 1.415 1.415
10 1.002 1.002 1.001 1.001 1.001 1.001
20 0.06396 0.06396 0.06393 0.06393 0.06393 0.06393
40 0.008679 0.008679 0.008676 0.008676 0.008676 0.008676
80 0.0007893 0.0007893 0.0007889 0.0007889 0.0007889 0.0007889
matlab2d-aero2-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.5603 0.558 0.558 0.558 1 1
20 0.3362 0.3158 0.3158 0.3158 0.4937 0.4937
40 0.3881 0.4253 0.4252 0.4252 0.4536 0.4536
80 0.1623 0.1538 0.1538 0.1538 0.2014 0.2014
160 0.08938 0.09854 0.1082 0.07223 0.09015 0.09015
320 0.02633 0.02044 0.02388 0.04553 0.01974 0.01974
matlab2d-aero2-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.6764 0.6171 0.6171 0.6171 0.5946 0.5946
20 0.4272 0.3019 0.3019 0.3019 0.5089 0.5089
40 0.2888 0.2899 0.2899 0.2899 0.3495 0.3495
80 0.1576 0.1362 0.1362 0.1362 0.1401 0.1401
160 0.09674 0.09751 0.08714 0.0771 0.06629 0.06629
matlab2d-branin-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 1.172 0.6376 0.6376 0.6376 0.7768 0.7768
20 0.05332 0.085 0.085 0.085 0.2072 0.2072
40 0.00236 0.002209 0.002077 0.002077 0.007742 0.007742
80 8.137e-05 8.252e-05 8.33e-05 8.33e-05 0.002079 0.002079
160 0.0009633 4.021e-05 4.021e-05 8.449e-05 0.0003451 0.0002395
320 0.000572 3.141e-05 3.282e-05 3.089e-05 7.351e-05 7.351e-05
matlab2d-branin-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.5443 0.6163 0.6162 0.6162 0.2729 0.2729
20 0.3919 0.4566 0.4566 0.4566 0.1097 0.1097
40 0.002447 0.002663 0.002645 0.002645 0.009023 0.009023
80 6.315e-05 6.665e-05 6.754e-05 6.754e-05 0.0008826 0.0008826
160 0.00485 3.449e-05 3.242e-05 3.311e-05 0.0004262 0.0004262
matlab2d-curvedkink-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.2466 0.2864 0.2864 0.2864 0.4907 0.4907
20 0.437 0.4274 0.4274 0.4274 0.4909 0.4909
40 0.213 0.2903 0.2903 0.2903 0.2972 0.2972
80 0.1138 0.08935 0.08934 0.08934 0.08663 0.08663
160 0.04038 0.05257 0.05544 0.0409 0.03417 0.03097
320 0.01936 0.02237 0.01777 0.02551 0.02421 0.02421
matlab2d-curvedkink-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.2114 0.2595 0.2595 0.2595 0.4302 0.4302
20 0.1689 0.168 0.168 0.168 0.1898 0.1898
40 0.1576 0.1569 0.1569 0.1569 0.117 0.117
80 0.1115 0.0781 0.0781 0.0781 0.0882 0.0882
160 0.04685 0.03808 0.04472 0.04352 0.04788 0.04706
matlab2d-himmelblau-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 1.627 1.616 1.616 1.616 0.9602 0.9602
20 1.222 1.233 1.233 1.233 0.6744 0.6744
40 0.008608 0.002265 0.002821 0.002821 0.03473 0.03473
80 0.001919 0.0001769 0.0001609 0.0001609 0.006451 0.006451
160 0.004891 3.908e-05 4.085e-05 4.162e-05 0.001338 0.001338
320 0.00434 3.734e-05 3.773e-05 3.52e-05 0.001854 0.001854
matlab2d-himmelblau-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.8755 0.9226 0.9225 0.9225 0.8571 0.8571
20 0.7117 0.775 0.775 0.775 0.7697 0.7697
40 0.01626 0.005599 0.005605 0.005605 0.05213 0.05213
80 0.002564 0.0002181 0.0002076 0.0002076 0.009132 0.009132
160 0.00597 0.0001628 0.0001322 0.000206 0.006699 0.006699
matlab2d-michalewicz-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 1.182 1.188 1.188 1.188 1.343 1.343
20 0.3902 0.3931 0.3931 0.3931 0.8028 0.8028
40 0.05491 0.05487 0.05552 0.05552 0.0569 0.0569
80 0.003977 0.004709 0.004852 0.004852 0.00862 0.00862
160 0.0008593 3.693e-05 3.881e-05 4.752e-05 0.0001306 0.0002258
320 0.0004319 3.315e-05 0.0002006 3.352e-05 6.196e-05 0.0001118
matlab2d-michalewicz-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.4735 0.4966 0.4966 0.4966 1.235 1.235
20 0.1969 0.1945 0.1945 0.1945 0.1866 0.1866
40 0.0612 0.06594 0.06593 0.06593 0.06952 0.06952
80 0.005808 0.005996 0.005994 0.005994 0.006348 0.006348
160 4.945e-05 5.035e-05 4.028e-05 6.801e-05 9.691e-05 0.0001079
matlab2d-rastrigin-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 1.396 1.39 1.39 1.39 1.313 1.313
20 1.042 0.9949 0.9949 0.9949 1.061 1.061
40 0.9867 1.008 1.008 1.008 0.9811 0.9811
80 0.9736 1.046 1.046 1.046 0.9587 0.9587
160 0.9001 0.9008 0.9757 0.857 0.8119 0.7898
320 0.7965 0.8031 0.7711 0.7853 0.7354 0.7836
matlab2d-rastrigin-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 1.026 1.128 1.128 1.128 1.155 1.155
20 1.088 1.134 1.134 1.134 0.9808 0.9808
40 1.004 1.056 1.055 1.055 1.01 1.01
80 0.967 0.9672 0.9671 0.9671 0.9299 0.9299
160 0.958 1.015 0.9534 1.009 0.8889 0.9857
matlab2d-rosenbrock-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 1.703 1.712 1.712 1.712 0.4501 0.4501
20 0.001692 0.009698 0.009698 0.009698 0.036 0.036
40 0.001562 0.0001135 0.0001268 0.0001268 0.004406 0.004406
80 0.0001134 3.733e-05 3.889e-05 3.889e-05 0.001392 0.001392
160 0.004238 2.695e-05 4.278e-05 2.66e-05 0.0002508 0.0002508
320 0.002106 2.726e-05 4.23e-05 3.547e-05 0.0001726 0.0001726
matlab2d-rosenbrock-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.5377 0.4974 0.4973 0.4973 0.05599 0.05599
20 0.001181 0.05036 0.05036 0.05036 0.01946 0.01946
40 0.0009054 0.0002045 0.0002283 0.0002283 0.006091 0.006091
80 7.472e-05 5.892e-05 5.442e-05 5.442e-05 0.0009009 0.0009009
160 0.005352 3.026e-05 2.838e-05 3.248e-05 0.0006864 0.0006864
matlab2dextra-randfunc11-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.3085 0.3344 0.3344 0.3344 0.3255 0.3255
20 0.3881 0.4 0.3999 0.3999 0.3211 0.3211
40 0.5617 0.5135 0.5135 0.5135 0.3102 0.3102
80 0.3626 0.3645 0.3645 0.3645 0.297 0.297
160 0.2485 0.2467 0.2389 0.2563 0.3826 0.3807
320 0.1993 0.1816 0.223 0.185 0.196 0.196
matlab2dextra-randfunc11-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.5224 0.4614 0.4614 0.4614 0.2958 0.2958
20 0.3523 0.3676 0.3676 0.3676 0.3588 0.3588
40 0.4639 0.4678 0.4677 0.4677 0.2936 0.2936
80 0.3805 0.2988 0.2987 0.2987 0.3221 0.3221
160 0.2515 0.3129 0.276 0.272 0.2667 0.2667
320 0.1835 0.2421 0.1769 0.2177 0.2109 0.2109
matlab2dextra-randfunc11-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.577 0.4106 0.4106 0.4106 1.725 1.725
20 0.4106 0.2994 0.2994 0.2994 0.2969 0.2969
40 0.5149 0.4603 0.4603 0.4603 0.3432 0.3432
80 0.3069 0.3057 0.3057 0.3057 0.2716 0.2716
160 0.3202 0.3013 0.2837 0.2876 0.365 0.365
320 0.1734 0.1704 0.1811 0.185 0.1933 0.1933
matlab2dextra-randfunc2-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1493 0.1318 0.1318 0.1318 0.1349 0.1349
20 0.2135 0.1251 0.1251 0.1251 0.1031 0.1031
40 0.2406 0.2334 0.2334 0.2334 0.08824 0.08824
80 0.2644 0.09351 0.09351 0.09351 0.09363 0.09363
160 0.1065 0.09514 0.07508 0.07384 0.0744 0.0744
320 0.08381 0.06236 0.07712 0.08906 0.07528 0.07528
matlab2dextra-randfunc2-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.221 0.2748 0.2747 0.2747 0.09441 0.09441
20 0.1487 0.09324 0.09324 0.09324 0.1497 0.1497
40 0.2382 0.09213 0.09213 0.09213 0.0922 0.0922
80 0.2244 0.09195 0.09195 0.09195 0.09184 0.09184
160 0.07886 0.07242 0.07721 0.07238 0.07482 0.07482
320 0.07391 0.06228 0.06037 0.06758 0.06263 0.06263
matlab2dextra-randfunc2-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.3595 0.3474 0.3474 0.3474 0.1885 0.1885
20 0.3603 0.09888 0.09887 0.09887 0.09458 0.09458
40 0.3767 0.09741 0.09741 0.09741 0.09722 0.09722
80 0.2088 0.08801 0.08801 0.08801 0.08793 0.08793
160 0.09356 0.07657 0.08955 0.08459 0.0832 0.0832
320 0.06457 0.06758 0.06456 0.06257 0.07423 0.07423
matlab2dextra-randfunc3-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.2524 0.05764 0.05764 0.05764 0.9024 0.9024
20 0.3339 0.0537 0.0537 0.0537 0.05362 0.05362
40 0.2109 0.04624 0.04623 0.04623 0.04648 0.04648
80 0.2672 0.03886 0.03886 0.03886 0.03952 0.03952
160 0.04814 0.0395 0.04308 0.04185 0.04058 0.04058
320 0.04138 0.03898 0.0401 0.03856 0.03814 0.03902
matlab2dextra-randfunc3-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.08257 0.08243 0.08243 0.08243 0.194 0.194
20 0.08844 0.04694 0.04694 0.04694 0.04698 0.04698
40 0.1358 0.04532 0.04532 0.04532 0.04483 0.04483
80 0.1151 0.04498 0.04498 0.04498 0.04222 0.04222
160 0.04077 0.03961 0.03867 0.03801 0.04079 0.04079
320 0.04737 0.04066 0.03896 0.03766 0.03741 0.03741
matlab2dextra-randfunc3-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1186 0.0519 0.0519 0.0519 0.05782 0.05782
20 0.1131 0.05655 0.05654 0.05654 0.05771 0.05771
40 0.3502 0.04528 0.04528 0.04528 0.04825 0.04825
80 0.2847 0.04125 0.04125 0.04125 0.04206 0.04206
160 0.03965 0.03827 0.03857 0.03941 0.03792 0.03793
320 0.04074 0.03903 0.04003 0.03764 0.03879 0.039
matlab2dextra-randfunc5-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.608 0.1403 0.1403 0.1403 0.3921 0.3921
20 0.1676 0.0644 0.0644 0.0644 0.1257 0.1257
40 0.1506 0.06415 0.06415 0.06415 0.05382 0.05382
80 0.09109 0.02222 0.02222 0.02222 0.02204 0.02204
160 0.0159 0.01054 0.01498 0.01008 0.01116 0.01469
320 0.008112 0.0124 0.007103 0.006705 0.005477 0.006011
matlab2dextra-randfunc5-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.09487 0.1138 0.1138 0.1138 0.1167 0.1167
20 0.1129 0.06381 0.06381 0.06381 0.0777 0.0777
40 0.08489 0.04794 0.04794 0.04794 0.05654 0.05654
80 0.08512 0.01595 0.01595 0.01595 0.01741 0.01741
160 0.02108 0.01082 0.01906 0.01743 0.0147 0.01487
320 0.008184 0.01606 0.00363 0.01753 0.004909 0.00962
matlab2dextra-randfunc5-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.2432 0.2519 0.2519 0.2519 0.3852 0.3852
20 0.4086 0.1221 0.1221 0.1221 0.109 0.109
40 0.2033 0.05999 0.05998 0.05998 0.06737 0.06737
80 0.1661 0.03619 0.03619 0.03619 0.0339 0.0339
160 0.01618 0.02448 0.01241 0.02296 0.0148 0.01475
320 0.009945 0.004154 0.004686 0.005444 0.008279 0.01495
matlab2dextra-randfunc7-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.4195 0.4616 0.4616 0.4616 0.4822 0.4822
20 0.5332 0.5001 0.5001 0.5001 0.3562 0.3562
40 0.5223 0.5148 0.5147 0.5147 0.3194 0.3194
80 0.4686 0.2892 0.2892 0.2892 0.3037 0.3037
160 0.2343 0.2318 0.2335 0.2306 0.2645 0.2653
320 0.1924 0.1925 0.185 0.1868 0.2015 0.2015
matlab2dextra-randfunc7-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.5146 0.4945 0.4945 0.4945 0.3128 0.3128
20 0.3902 0.3909 0.3909 0.3909 0.3072 0.3072
40 0.3522 0.2743 0.2743 0.2743 0.3099 0.3099
80 0.2972 0.2946 0.2945 0.2945 0.2769 0.2769
160 0.2236 0.2362 0.2238 0.251 0.2339 0.2354
320 0.1975 0.2107 0.2435 0.2165 0.2112 0.2112
matlab2dextra-randfunc7-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.8255 0.7643 0.7643 0.7643 0.4902 0.4902
20 0.4333 0.3763 0.3763 0.3763 0.3158 0.3158
40 0.624 0.5342 0.5341 0.5341 0.3262 0.3262
80 0.5096 0.2771 0.2771 0.2771 0.3135 0.3135
160 0.2267 0.2377 0.2505 0.2395 0.2688 0.2688
320 0.1924 0.1917 0.1846 0.1897 0.2179 0.2179
psi-ackley-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 --- --- 1.112 1.001 1.001 1.001
20 1.189 1.103 1.103 1.103 1 1
40 0.858 0.8558 0.8558 0.8558 0.995 0.995
80 0.7997 0.7909 0.7909 0.7909 1.02 1.02
160 0.1917 0.148 0.2122 0.2118 0.1352 0.1735
320 0.02024 0.01982 0.02648 0.02607 0.03083 0.03083
1000 0.009299 0.009827 0.00899 0.009939 0.01136 0.009917
psi-ellipsoidal-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 --- --- 1.326 1.118 1.118 1.118
20 0.917 0.7729 0.7729 0.7729 1.112 1.112
40 0.3449 0.00579 0.00579 0.00579 0.04728 0.04728
80 0.001793 0.0002691 0.0002475 0.0002475 0.012 0.012
160 0.000446 0.0007162 0.0001912 0.000546 0.007468 0.007428
320 0.0002211 0.0001319 0.0001843 0.0001325 0.00987 0.00769
1000 5.597e-06 5.518e-06 2.261e-06 2.438e-06 1.728e-06 1.728e-06
psi-linear-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 --- --- 1.09e-12 1.105e-12 6.651e-11 6.651e-11
20 1.034e-05 8.621e-05 6.909e-05 6.909e-05 0.00133 0.00133
40 0.006541 0.006926 0.005795 0.005795 0.04845 0.04845
80 0.08078 0.06136 0.0679 0.0679 0.17 0.17
160 1.071e-06 2.9e-07 3.875e-07 3.875e-07 0.000446 0.000446
320 4.826e-06 1.969e-05 1.328e-05 1.328e-05 0.000992 0.000992
1000 1.605e-12 1.604e-12 1.419e-12 1.103e-12 1.105e-12 1.603e-12
psi-sinusoid1-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 --- --- 1.458 1.163 1.163 1.163
20 1.912 1.742 1.742 1.742 2.084 2.084
40 1.029 1.049 1.049 1.049 1 1
80 1.081 1.09 1.09 1.09 1 1
160 1.081 1.06 1.071 1.001 1 1.112
320 1.044 1.049 1.013 1.028 1.038 1.041
1000 1.062 1.061 1.057 1.037 1.011 1.128
psi-whitley-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 --- --- 2.957 1.388 1.388 1.388
20 1.003 0.9874 0.9874 0.9874 1.009 1.009
40 0.7229 0.8218 0.8218 0.8218 0.8821 0.8821
80 0.8018 0.7872 0.7872 0.7872 1.004 1.004
160 0.4328 0.4864 0.4146 0.4459 0.4557 0.5274
320 0.3656 0.3729 0.5317 0.2932 0.424 0.424
1000 2.326 0.418 0.04568 0.04326 0.04967 0.04967

14.4.2.2. Training Time

GTApprox performance profiles (training time)

GTApprox performance profiles (training time)


matlab1d-classic-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.1594 0.129 0.1232 0.09476 0.09594 0.1463
10 0.1403 0.1599 0.07713 0.0898 0.09986 0.1051
20 0.1286 0.1366 0.07594 0.08882 0.09832 0.1036
40 0.16 0.1722 0.08052 0.08662 0.09115 0.1363
80 0.132 0.1488 0.06422 0.07629 0.07971 0.09378
160 0.146 0.1128 0.05891 0.06781 0.07469 0.1001
matlab1d-classic-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.1263 0.1702 0.08438 0.09748 0.1049 0.1446
10 0.1299 0.1266 0.07865 0.06208 0.09048 0.1038
20 0.131 0.1601 0.09373 0.08926 0.09768 0.1334
40 0.1494 0.1208 0.07107 0.07615 0.1107 0.1152
80 0.1294 0.1406 0.0602 0.07093 0.09995 0.08707
matlab1d-classic-unif
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.1211 0.1769 0.1171 0.1268 0.1478 0.1283
10 0.1381 0.1622 0.0848 0.09133 0.09129 0.144
20 0.1197 0.1155 0.07929 0.09143 0.1303 0.1425
40 0.1354 0.1182 0.06931 0.08092 0.127 0.1381
80 0.1271 0.09843 0.08263 0.04998 0.09577 0.1072
matlab1d-f7mod-unif
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
40 0.1365 0.1321 0.07687 0.08823 0.1251 0.1364
80 0.1415 0.159 0.07919 0.09231 0.1218 0.1075
160 0.1584 0.1237 0.07468 0.06116 0.09359 0.1079
320 0.1208 0.1601 0.1023 0.07709 0.1094 0.1192
640 0.1397 0.1465 0.07879 0.09014 0.1262 0.1076
matlab1d-heaviside-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.149 0.162 0.08636 0.09534 0.1021 0.1452
10 0.1416 0.1237 0.1191 0.1037 0.1312 0.1495
20 0.1185 0.1089 0.06304 0.07251 0.07885 0.1116
40 0.1274 0.1261 0.09573 0.08776 0.137 0.1441
80 0.1353 0.1656 0.1141 0.08315 0.1191 0.1375
160 0.1404 0.166 0.0751 0.08843 0.131 0.1271
matlab1d-heaviside-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.1441 0.1266 0.08141 0.09719 0.14 0.1134
10 0.1395 0.1255 0.0859 0.08759 0.09878 0.1435
20 0.1409 0.128 0.1204 0.09805 0.1263 0.1015
40 0.1649 0.1207 0.1179 0.0881 0.127 0.1139
80 0.1284 0.1668 0.07372 0.09233 0.09477 0.1394
matlab1d-heaviside-unif
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.1344 0.16 0.08403 0.09677 0.1327 0.1072
10 0.1555 0.1234 0.08345 0.1006 0.1349 0.1494
20 0.133 0.1747 0.07714 0.0865 0.1275 0.1121
40 0.1413 0.121 0.1171 0.09039 0.126 0.1451
80 0.1396 0.1665 0.1152 0.0945 0.1317 0.1194
matlab1d-kink-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.1434 0.1689 0.1214 0.09856 0.1006 0.1506
10 0.1421 0.1251 0.1164 0.09849 0.1356 0.1329
20 0.1312 0.1276 0.08908 0.06765 0.1315 0.1396
40 0.1357 0.1622 0.08499 0.08864 0.1289 0.1045
80 0.1358 0.1212 0.07225 0.08518 0.1278 0.1017
160 0.136 0.1341 0.1149 0.08329 0.09137 0.1342
matlab1d-kink-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.1548 0.1688 0.08789 0.09349 0.1321 0.1107
10 0.1332 0.1667 0.08391 0.08832 0.1028 0.1028
20 0.1334 0.1421 0.1168 0.08839 0.1313 0.1417
40 0.1397 0.1654 0.08432 0.08689 0.1266 0.137
80 0.1248 0.1468 0.1111 0.08627 0.1207 0.1346
matlab1d-kink-unif
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.1252 0.128 0.1273 0.09585 0.1195 0.139
10 0.1349 0.1422 0.1187 0.08995 0.1313 0.1079
20 0.1528 0.1296 0.07826 0.08732 0.09084 0.09871
40 0.1393 0.1259 0.07687 0.08837 0.1252 0.1055
80 0.1512 0.174 0.0756 0.08619 0.09038 0.1413
matlab1d-pressure1-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.1513 0.132 0.08435 0.09971 0.1382 0.1214
10 0.143 0.1311 0.08123 0.0945 0.09687 0.1082
20 0.1323 0.1716 0.08255 0.09074 0.09484 0.1444
40 0.1365 0.1631 0.1143 0.09459 0.09269 0.1032
80 0.1359 0.1239 0.07461 0.08458 0.1249 0.108
160 0.1424 0.1375 0.1124 0.08824 0.0945 0.1362
matlab1d-pressure1-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.1462 0.1774 0.09842 0.09131 0.1321 0.153
10 0.1316 0.1256 0.1193 0.09509 0.1288 0.1151
20 0.1273 0.1456 0.07902 0.08754 0.09363 0.1425
40 0.1371 0.1202 0.07631 0.08573 0.1232 0.1099
80 0.1353 0.1213 0.07351 0.09587 0.1242 0.1041
matlab1d-pressure1-unif
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.1507 0.1728 0.08295 0.094 0.1372 0.1053
10 0.146 0.1707 0.1203 0.07048 0.09087 0.1079
20 0.1366 0.1627 0.1152 0.08994 0.0946 0.1414
40 0.1412 0.1386 0.07589 0.08853 0.1235 0.1334
80 0.1253 0.1224 0.1141 0.08804 0.125 0.09975
matlab1d-sin10pix-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.143 0.1185 0.08141 0.1125 0.09766 0.1387
10 0.1433 0.1789 0.0841 0.09524 0.1375 0.1196
20 0.1288 0.1637 0.09716 0.08922 0.1306 0.1081
40 0.1486 0.1369 0.08004 0.09072 0.1013 0.1392
80 0.1182 0.1496 0.07527 0.0847 0.09151 0.1056
160 0.1694 0.1684 0.07466 0.08994 0.09525 0.1402
matlab1d-sin10pix-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.1407 0.1736 0.08309 0.1029 0.129 0.1586
10 0.145 0.1274 0.08282 0.06208 0.121 0.1423
20 0.1536 0.1413 0.0794 0.08845 0.1324 0.1308
40 0.1494 0.1243 0.07697 0.08952 0.1312 0.14
80 0.1337 0.1221 0.1167 0.0765 0.1242 0.115
matlab1d-sin10pix-unif
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
5 0.1341 0.1299 0.08351 0.09183 0.1308 0.1478
10 0.1426 0.1504 0.07896 0.0941 0.0998 0.1091
20 0.1352 0.1251 0.1174 0.09423 0.09265 0.1052
40 0.1405 0.1462 0.07894 0.088 0.1232 0.1385
80 0.1357 0.1595 0.1136 0.08554 0.1261 0.1369
matlab2d-aero2-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1317 0.08183 0.03115 0.02773 0.05962 0.07571
20 0.1367 0.05847 0.03631 0.03204 0.08478 0.1017
40 0.1067 0.1496 0.1314 0.09403 0.1882 0.1828
80 0.1791 0.3889 0.3614 0.3002 0.55 0.5058
160 7.534 11.75 7.167 6.776 7.725 7.993
320 23.6 27.89 47.28 29.95 19.68 19.84
matlab2d-aero2-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1088 0.05751 0.03045 0.0259 0.0502 0.06318
20 0.1745 0.06745 0.04532 0.03881 0.07388 0.08303
40 0.1737 0.1626 0.104 0.0875 0.1521 0.1647
80 0.1815 0.4544 0.4153 0.3403 0.4962 0.506
160 6.601 7.803 9.869 7.097 8.567 8.59
matlab2d-branin-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1196 0.08956 0.0321 0.0263 0.06573 0.06348
20 0.1282 0.06926 0.04992 0.03681 0.08164 0.08514
40 0.2186 0.1932 0.1237 0.1009 0.151 0.1499
80 0.3147 0.3956 0.3403 0.3102 0.3304 0.3414
160 6.681 11.3 18.02 6.848 10.61 19.47
320 21.45 32.43 32.76 35.19 19.84 20.69
matlab2d-branin-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1341 0.05455 0.03179 0.0415 0.05769 0.06614
20 0.144 0.06237 0.04725 0.03544 0.07222 0.07674
40 0.1957 0.147 0.1283 0.1 0.1495 0.1638
80 0.3147 0.3785 0.4087 0.2883 0.3302 0.3446
160 7.422 11.13 17.27 13.63 6.71 6.926
matlab2d-curvedkink-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1285 0.05341 0.03147 0.02579 0.05489 0.06458
20 0.1388 0.06349 0.05017 0.0486 0.1243 0.07563
40 0.1377 0.1456 0.1306 0.1282 0.178 0.1798
80 0.263 0.4389 0.4848 0.3623 0.337 0.3472
160 5.856 8.282 9.38 5.364 8.986 8.277
320 22.82 25.2 29.94 22.73 17 17.06
matlab2d-curvedkink-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.3523 0.05675 0.03139 0.03819 0.05684 0.06356
20 0.1275 0.08474 0.0499 0.04389 0.07453 0.07158
40 0.1074 0.1599 0.1386 0.09066 0.1755 0.1859
80 0.2078 0.3834 0.4132 0.3038 0.3493 0.3527
160 7.705 13.36 10.2 7.958 10.27 10.94
matlab2d-himmelblau-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1321 0.0781 0.03039 0.02601 0.06757 0.06756
20 0.1342 0.07139 0.05102 0.03835 0.07191 0.08481
40 0.2008 0.1591 0.1602 0.1138 0.1923 0.2328
80 0.414 0.4578 0.4242 0.4055 0.3401 0.3453
160 6.992 7.15 8.77 7.674 8.136 8.144
320 23.67 30.8 61.04 28.53 18.57 19.12
matlab2d-himmelblau-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1242 0.05294 0.03193 0.02628 0.06098 0.06403
20 0.1487 0.05494 0.07748 0.03365 0.06878 0.08334
40 0.1819 0.1788 0.16 0.1341 0.1066 0.1197
80 0.3837 0.4146 0.8803 0.3598 0.3382 0.3637
160 8.569 6.597 14.19 6.721 9.442 9.773
matlab2d-michalewicz-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1699 0.05234 0.03154 0.04868 0.05775 0.06172
20 0.1523 0.1082 0.04947 0.03675 0.07739 0.0924
40 0.1282 0.1552 0.1299 0.09859 0.1783 0.1821
80 0.2479 0.3197 0.2892 0.2417 0.3547 0.3472
160 6.087 9.026 8.101 5.82 6.367 6.907
320 13.58 20.28 20.16 25.77 22.54 17.5
matlab2d-michalewicz-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1372 0.09079 0.03115 0.03691 0.06134 0.06517
20 0.1226 0.105 0.04518 0.03868 0.07486 0.08094
40 0.117 0.169 0.1533 0.1267 0.1355 0.1466
80 0.2203 0.3601 0.3441 0.2915 0.3438 0.3489
160 7.116 8.759 11.64 6.986 11.52 11.45
matlab2d-rastrigin-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1292 0.05351 0.02996 0.02661 0.05746 0.06416
20 0.1485 0.08108 0.04689 0.0414 0.07967 0.08745
40 0.1326 0.135 0.1086 0.08826 0.1928 0.1994
80 0.3627 0.4146 0.4734 0.2953 0.4277 0.4288
160 8.717 8.882 9.224 5.175 5.83 5.377
320 16.52 24.03 38.49 17.57 29.24 20.94
matlab2d-rastrigin-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1239 0.05685 0.1579 0.04193 0.06106 0.06837
20 0.1377 0.06015 0.04214 0.03546 0.08115 0.08806
40 0.2054 0.09969 0.07721 0.05934 0.2286 0.1769
80 0.3459 0.3975 0.3657 0.312 0.5152 0.4393
160 4.421 5.789 5.271 4.384 6.007 7.329
matlab2d-rosenbrock-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1787 0.05505 0.03436 0.02881 0.05675 0.06593
20 0.1412 0.06606 0.1001 0.0545 0.0706 0.08384
40 0.2219 0.1758 0.1633 0.1269 0.1634 0.1555
80 0.3407 0.4003 0.3587 0.3302 0.3291 0.342
160 5.168 6.895 9.413 7.324 6.55 6.622
320 15.84 29.54 36.38 28.59 16.93 17.24
matlab2d-rosenbrock-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1493 0.04994 0.03575 0.02708 0.05817 0.06866
20 0.167 0.08594 0.103 0.0364 0.07662 0.08133
40 0.1967 0.1915 0.3289 0.1293 0.1424 0.1519
80 0.3577 0.4277 0.8858 0.3594 0.2989 0.3174
160 5.923 7.228 21.7 6.722 6.372 6.635
matlab2dextra-randfunc11-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1543 0.06085 0.03748 0.05286 0.06629 0.06753
20 0.1443 0.09074 0.0388 0.03006 0.07662 0.08782
40 0.1524 0.1307 0.1092 0.07895 0.18 0.1925
80 0.1513 0.2373 0.2334 0.1928 0.4517 0.4648
160 5.01 8.126 14.39 6.104 6.021 5.452
320 21.5 26.12 33.17 23.23 19.62 18.84
matlab2dextra-randfunc11-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.132 0.05373 0.02838 0.02572 0.06187 0.062
20 0.1709 0.078 0.04117 0.03267 0.07867 0.08468
40 0.1453 0.1537 0.12 0.08347 0.172 0.1843
80 0.1413 0.3346 0.3255 0.2762 0.4069 0.4565
160 5.585 7.676 7.24 5.826 7.093 7.261
320 18.23 23.26 36.49 19.34 17.15 17.3
matlab2dextra-randfunc11-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1361 0.05361 0.03331 0.02606 0.05421 0.06387
20 0.1331 0.09103 0.04445 0.03373 0.06813 0.07718
40 0.1792 0.168 0.1417 0.09014 0.2257 0.2004
80 0.1579 0.2991 0.2869 0.2571 0.4078 0.4195
160 7.043 9.966 8.059 7.957 5.361 5.551
320 25.31 35.72 40.59 24.41 26.97 21.83
matlab2dextra-randfunc2-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1308 0.05852 0.03418 0.02758 0.05423 0.07065
20 0.1214 0.05688 0.04428 0.03604 0.05686 0.0661
40 0.1212 0.1362 0.1256 0.09784 0.1686 0.1795
80 0.1785 0.4105 0.3908 0.337 0.3537 0.3669
160 3.976 6.251 12.61 6.031 7.671 7.762
320 17.87 21.47 24.73 20.32 18.07 18.43
matlab2dextra-randfunc2-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1291 0.0703 0.03311 0.02632 0.05345 0.06604
20 0.1294 0.09878 0.05302 0.04422 0.06554 0.07286
40 0.1672 0.1486 0.1337 0.1 0.1565 0.1724
80 0.2553 0.3091 0.2959 0.2218 0.4857 0.4753
160 4.875 6.336 7.617 5.593 7.312 7.28
320 16.59 23.65 65.34 18.77 14.47 15.31
matlab2dextra-randfunc2-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1501 0.06081 0.03706 0.02872 0.05481 0.06517
20 0.1681 0.07557 0.05074 0.03679 0.08154 0.0861
40 0.1482 0.1266 0.1257 0.08119 0.1621 0.1655
80 0.1615 0.3364 0.3094 0.2551 0.4549 0.4597
160 9.093 7.584 6.166 4.608 5.331 5.183
320 15.11 22.65 24.67 16.96 17.76 17.4
matlab2dextra-randfunc3-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1054 0.06089 0.06197 0.02699 0.0606 0.06167
20 0.1741 0.07435 0.05461 0.04313 0.07322 0.08348
40 0.1059 0.1456 0.2547 0.1067 0.217 0.185
80 0.1957 0.3089 0.2648 0.2301 0.4252 0.4354
160 3.865 5.874 12.71 5.613 6.646 6.79
320 24.48 37.69 19.19 15.96 15.73 16.28
matlab2dextra-randfunc3-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1461 0.04882 0.03762 0.02999 0.0584 0.06653
20 0.1449 0.07744 0.05275 0.03739 0.08019 0.09151
40 0.1548 0.1431 0.1268 0.09946 0.1728 0.1767
80 0.2177 0.3813 0.4144 0.3453 0.4596 0.4634
160 5.127 6.322 6.04 5.574 5.674 5.765
320 14.52 21.88 24.66 12.68 18.38 18.93
matlab2dextra-randfunc3-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1592 0.04741 0.05955 0.02659 0.06264 0.06553
20 0.09535 0.0644 0.04879 0.03631 0.07419 0.08294
40 0.1691 0.1742 0.1272 0.1008 0.1743 0.1927
80 0.3169 0.2604 0.3129 0.1954 0.3156 0.3214
160 4.438 6.739 12.15 4.446 4.75 4.829
320 11.59 19.87 32.89 16.95 16.58 16.54
matlab2dextra-randfunc5-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1342 0.05972 0.03439 0.02823 0.05255 0.05815
20 0.123 0.05955 0.04665 0.0369 0.06348 0.06688
40 0.1181 0.1394 0.1149 0.08877 0.1469 0.1666
80 0.1458 0.2984 0.355 0.2377 0.3527 0.3603
160 8.019 14.14 7.484 6.233 7.417 6.904
320 27.27 28.17 38.93 30.15 19.06 19.56
matlab2dextra-randfunc5-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1097 0.09501 0.03615 0.02882 0.06104 0.0798
20 0.1193 0.07129 0.04893 0.04464 0.07506 0.07905
40 0.1352 0.1436 0.158 0.1025 0.1813 0.1857
80 0.2024 0.3725 0.3414 0.3153 0.4293 0.4317
160 5.549 7.164 7.561 6.108 6.376 6.513
320 20.42 32.66 41.01 24.05 17.69 16.23
matlab2dextra-randfunc5-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1441 0.05956 0.03455 0.02953 0.0565 0.06202
20 0.1418 0.06904 0.04809 0.03714 0.0811 0.07669
40 0.1641 0.1486 0.1452 0.0939 0.1279 0.1291
80 0.2313 0.3455 0.3359 0.2953 0.3464 0.3505
160 4.85 7.854 7.029 6.853 7.153 7.135
320 16.92 22.92 41.29 30.23 22.71 19.2
matlab2dextra-randfunc7-cornrnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1708 0.07532 0.03684 0.02855 0.05887 0.06315
20 0.1746 0.09208 0.04497 0.03422 0.07694 0.08721
40 0.1805 0.1571 0.1323 0.1059 0.1622 0.1551
80 0.2091 0.364 0.3736 0.3227 0.4539 0.4605
160 5.261 6.035 10.96 6.209 7.881 8.057
320 16.37 21.3 60.23 19.13 18.26 17.9
matlab2dextra-randfunc7-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1317 0.05518 0.0307 0.02644 0.06629 0.05566
20 0.1679 0.105 0.08265 0.03359 0.07507 0.07579
40 0.1156 0.1543 0.1346 0.1095 0.2208 0.2011
80 0.2578 0.2753 0.5959 0.2426 0.3485 0.3601
160 6.531 6.31 9.644 6.15 8.929 6.708
320 33.75 24.82 31.37 22.67 28.77 24.05
matlab2dextra-randfunc7-rnd
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 0.1335 0.04768 0.0328 0.02589 0.05801 0.06368
20 0.1167 0.07137 0.04783 0.03728 0.07921 0.07983
40 0.1126 0.1496 0.1369 0.1064 0.1839 0.1861
80 0.1823 0.3428 0.3185 0.2902 0.4676 0.4798
160 12.61 11.41 11.41 7.502 6.912 6.945
320 26.96 21.82 30.12 17.79 16.93 17.14
psi-ackley-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 --- --- 0.02248 0.01967 0.05427 0.0562
20 0.07837 0.07347 0.05721 0.04024 0.0928 0.1108
40 0.1131 0.1405 0.1219 0.09556 0.2253 0.2347
80 0.4137 0.3264 0.3376 0.282 0.463 0.6582
160 7.387 8.481 14.02 8.882 7.847 9.608
320 34.76 32.1 61.31 27.52 19.31 18.86
1000 299.5 344.9 221.5 60.96 70.63 77.11
psi-ellipsoidal-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 --- --- 0.02379 0.02564 0.05157 0.06508
20 0.08195 0.07526 0.06 0.04421 0.09618 0.1074
40 0.1469 0.2258 0.2017 0.15 0.2804 0.2809
80 0.4322 0.5576 0.542 0.393 0.5599 0.5656
160 8.945 10.41 9.694 7.969 9.65 9.587
320 48.78 47.82 85.19 49.72 50.65 41
1000 251.7 337.7 766.8 306.6 311 315.4
psi-linear-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 --- --- 0.02236 0.03565 0.06382 0.04913
20 0.076 0.09749 0.08601 0.06639 0.08083 0.08716
40 0.1492 0.1957 0.2135 0.1324 0.1406 0.1535
80 0.3867 0.4717 0.3606 0.3304 0.2799 0.3229
160 6.639 5.647 6.017 4.511 2.929 2.913
320 13.15 22.37 21.83 15.47 10.77 10.72
1000 9.184 10.36 18.81 8.746 0.05884 0.06919
psi-sinusoid1-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 --- --- 0.03971 0.01963 0.05423 0.06188
20 0.08223 0.08502 0.1544 0.05368 0.09628 0.1073
40 0.134 0.1514 0.1287 0.1061 0.286 0.2656
80 0.4515 0.3772 0.8172 0.2904 0.5823 0.5683
160 15.51 15.74 16.11 7.329 8.099 6.828
320 29.1 36.18 89.65 20.83 18.13 17.05
1000 190.9 155.6 136 97.36 472.4 115
psi-whitley-lhc
sizes GTApprox 1.7.7
GTApprox
GTApprox 1.9.6
GTApprox
GTApprox 6.0
GTApprox
GTApprox 6.10
GTApprox
GTApprox 6.15
GTApprox
GTApprox 6.16
GTApprox
10 --- --- 0.02227 0.01922 0.05403 0.06038
20 0.07014 0.09001 0.08012 0.0528 0.09183 0.1059
40 0.1514 0.1921 0.1517 0.1234 0.2484 0.2646
80 0.4481 0.3548 0.3307 0.2707 0.4911 0.513
160 14.34 11.97 17.09 9.018 8.923 8.834
320 33.09 37.06 108.4 40.18 29.86 29.41
1000 156.2 141.6 196.4 110.9 86.43 91.42