Last dimension | Dimension = 2 | Next dimension
| Δ fopt f1, 2-D |
1e1 2.0 |
1e0 6.0 |
1e-1 6.0 |
1e-2 6.0 |
1e-3 6.0 |
1e-5 6.0 |
1e-7 6.0 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.5 (1) | 1.5 (0.9) | 2.4 (0.4) | 3.8 (0.8) | 4.7 (1) | 25 (22) | 286 (281) | 0/15 |
| R-DE-10e2 Tanabe | 2.1 (2) | 1.9 (2) | 8.0 (5) | 12 (6) | 18 (5) | 36 (20) | 165 (201) | 0/15 |
| R-DE-10e5 Tanabe | 1.5 (1) | 7.7 (8) | 28 (13) | 72 (162) | 76 (163) | 84 (162) | 101 (162) | 15/15 |
| R-SHADE-10e2 Tanabe | 1.9 (2) | 3.0 (3) | 10 (6) | 17 (6) | 23 (8) | 120 (109) | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.4 (1) | 3.5 (3) | 8.2 (4) | 13 (7) | 19 (5) | 29 (7) | 40 (9) | 15/15 |
| RL-SHADE-10e2 Tanabe | 1.4 (1) | 2.6 (3) | 7.5 (4) | 12 (3) | 16 (5) | 26 (6) | 68 (42) | 2/15 |
| RL-SHADE-10e5 Tanabe | 1.7 (2) | 4.1 (4) | 18 (13) | 38 (20) | 72 (23) | 141 (15) | 197 (32) | 15/15 |
| SOO Derbel | 1 (0.8) | 1.4 (0.9) | 3.4 (2) | 7.3 (2) | 11 (3) | 23 (4) | 43 (2) | 15/15 |
| BrentSTEPif Posik | 1.3 (1) | 1.4 (0.8) | 1.7 (0.2) | 1.8 (0.2) | 1.8 (0.2) | 1.8 (0.2) | 1.8 (0.2) | 15/15 |
| BrentSTEPifeg Posik | 1.3 (1) | 1.4 (0.8) | 1.7 (0.2) | 1.8 (0.2) | 1.8 (0.2) | 1.8 (0.2) | 1.8 (0.2) | 15/15 |
| BrentSTEPqi Posik | 1.3 (1) | 1.4 (0.8) | 1.7 (0.2) | 1.8 (0.2) | 1.8 (0.2) | 1.8 (0.2) | 1.8 (0.2) | 15/15 |
| BrentSTEPrr Posik | 1.3 (1) | 1.4 (0.8) | 1.7 (0.2) | 1.8 (0.2) | 1.8 (0.2) | 1.8 (0.2) | 1.8 (0.2) | 15/15 |
| CMA-CSA Atamna | 2.4 (3) | 2.6 (3) | 8.7 (4) | 14 (5) | 18 (5) | 27 (7) | 38 (6) | 15/15 |
| CMA-MSR Atamna | 3.1 (3) | 3.2 (3) | 10 (7) | 18 (10) | 30 (8) | 45 (8) | 65 (9) | 15/15 |
| CMA-TPA Atamna | 2.7 (3) | 5.4 (5) | 9.4 (6) | 14 (10) | 20 (8) | 32 (9) | 39 (12) | 15/15 |
| GP1-CMAES Bajer | 2.0 (2) | 2.0 (1) | 6.0 (2) | 8.2 (2) | 11 (3) | 16 (3) | 22 (6) | 15/15 |
| GP1-CMAES Bajer 2013instances | 1.6 (2) | 2.6 (3) | 5.4 (2) | 7.2 (3) | 10 (2) | 14 (3) | 21 (4) | 15/15 |
| GP5-CMAES Bajer | 2.7 (2) | 1.8 (1) | 3.0 (2) | 4.0 (1) | 5.0 (1) | 6.5 (1) | 16 (7) | 15/15 |
| GP5-CMAES Bajer 2013instances | 2.5 (2) | 1.8 (0.6) | 2.6 (0.9) | 4.0 (0.8) | 4.3 (1) | 6.5 (2) | 13 (8) | 15/15 |
| IPOPCMAv3p61 Bajer | 2.6 (3) | 4.1 (3) | 9.3 (5) | 14 (5) | 19 (6) | 27 (5) | 39 (5) | 15/15 |
| IPOPCMAv3p61 Bajer 2013instances | 4.0 (4) | 3.8 (4) | 9.2 (7) | 14 (7) | 19 (6) | 29 (6) | 40 (4) | 15/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 2.3 (2) | 4.1 (3) | 10 (0) | 10 (0.4) | 12 (0.4) | 46 (38) | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.1 (2) | 2.1 (0.5) | 2.8 (0.8) | 3.8 (0.8) | 5.1 (1) | 34 (54) | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.6 (3) | 2.1 (0.3) | 2.9 (0.8) | 4.2 (0.8) | 5.2 (0.4) | 43 (43) | ∞100 | 0/15 |
| RF1-CMAES Bajer | 2.8 (3) | 3.0 (2) | 7.1 (5) | 11 (4) | 16 (10) | 37 (13) | 59 (53) | 12/15 |
| RF1-CMAES Bajer 2013instances | 2.9 (4) | 3.4 (4) | 6.2 (3) | 8.9 (3) | 16 (7) | 35 (24) | 64 (78) | 10/15 |
| RF5-CMAES Bajer | 23 (9) | 21 (32) | 49 (69) | 192 (255) | 1263 (1166) | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer 2013instances | 2.8 (3) | 14 (29) | 39 (44) | 93 (97) | 120 (95) | 1207 (1300) | 1261 (1766) | 0/15 |
| STEPif Posik | 1.3 (1) | 1.5 (0.9) | 2.1 (0.2) | 3.2 (0.8) | 3.7 (0.8) | 5.0 (0.8) | 5.9 (0.2) | 15/15 |
| STEPifeg Posik | 1.3 (1) | 1.5 (0.9) | 2.1 (0.2) | 3.0 (0.4) | 3.5 (0.4) | 5.0 (0.8) | 5.9 (0.5) | 15/15 |
| STEPrr Posik | 1.3 (1) | 1.5 (0.9) | 2.1 (0.2) | 2.8 (0.2) | 3.3 (0.2) | 4.4 (0.2) | 5.5 (0.2) | 15/15 |
| Δ fopt f2, 2-D |
1e1 16 |
1e0 19 |
1e-1 25 |
1e-2 25 |
1e-3 26 |
1e-5 28 |
1e-7 29 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 12 (13) | 76 (75) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 5.7 (2) | 7.5 (3) | 8.7 (7) | 16 (11) | 28 (27) | ∞ | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 14 (3) | 13 (4) | 12 (4) | 13 (5) | 18 (36) | 21 (34) | 23 (33) | 15/15 |
| R-SHADE-10e2 Tanabe | 9.1 (3) | 11 (10) | 22 (17) | 118 (164) | ∞ | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 7.2 (2) | 8.6 (3) | 8.3 (2) | 9.4 (2) | 10 (1) | 12 (2) | 14 (2) | 15/15 |
| RL-SHADE-10e2 Tanabe | 6.1 (2) | 6.3 (2) | 5.9 (2) | 9.0 (5) | 15 (21) | ∞ | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 22 (13) | 27 (10) | 30 (6) | 38 (7) | 45 (8) | 56 (5) | 68 (9) | 15/15 |
| SOO Derbel | 7.2 (1) | 9.5 (2) | 8.2 (2) | 12 (1) | 14 (1) | 18 (2) | 25 (4) | 15/15 |
| BrentSTEPif Posik | 1.3 (0.5) | 1.2 (0.4) | 1.0 (0.3) | 1.0 (0.3) | 1.0 (0.3) | 1.1 (0.2) | 1.2 (0.2) | 15/15 |
| BrentSTEPifeg Posik | 1.2 (0.3) | 1.2 (0.4) | 1.0 (0.3) | 1.1 (0.3) | 1.0 (0.3) | 1.1 (0.2) | 1.2 (0.3) | 15/15 |
| BrentSTEPqi Posik | 1.1 (0.2) | 0.98 (0.2) | 0.81 (0.1)↑0 | 0.83 (0.1)↑1 | 0.87 (0.2) | 0.92 (0.1) | 1.1 (0.2) | 15/15 |
| BrentSTEPrr Posik | 1.2 (0.3) | 1.2 (0.4) | 1.0 (0.3) | 1.1 (0.2) | 1.1 (0.2) | 1.1 (0.2) | 1.3 (0.3) | 15/15 |
| CMA-CSA Atamna | 12 (7) | 15 (6) | 13 (2) | 15 (3) | 15 (3) | 16 (2) | 18 (3) | 15/15 |
| CMA-MSR Atamna | 16 (8) | 17 (5) | 14 (4) | 16 (4) | 18 (4) | 20 (3) | 23 (4) | 15/15 |
| CMA-TPA Atamna | 10 (7) | 12 (6) | 11 (3) | 13 (3) | 14 (3) | 15 (2) | 17 (3) | 15/15 |
| GP1-CMAES Bajer | 10 (7) | 12 (6) | 10 (4) | 12 (4) | 12 (3) | 13 (2) | 14 (2) | 13/15 |
| GP1-CMAES Bajer 2013instances | 9.0 (7) | 13 (6) | 12 (3) | 12 (3) | 13 (2) | 15 (3) | 17 (10) | 12/15 |
| GP5-CMAES Bajer | 3.9 (3) | 6.2 (2) | 5.2 (1) | 6.0 (2) | 6.1 (2) | 6.5 (2) | 7.4 (3) | 14/15 |
| GP5-CMAES Bajer 2013instances | 4.3 (3) | 5.3 (2) | 4.5 (1) | 5.0 (1) | 5.3 (1) | 5.3 (1) | 6.9 (3) | 14/15 |
| IPOPCMAv3p61 Bajer | 9.5 (7) | 17 (7) | 18 (2) | 26 (11) | 35 (25) | 134 (181) | ∞506 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 12 (11) | 18 (10) | 20 (11) | 25 (12) | 31 (20) | 67 (50) | ∞506 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 30 (34) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 15 (22) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 16 (17) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RF1-CMAES Bajer | 35 (33) | 378 (539) | ∞ | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF1-CMAES Bajer 2013instances | 30 (32) | 180 (339) | 291 (192) | 292 (177) | ∞ | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer | 72 (78) | 395 (404) | ∞ | ∞ | ∞ | ∞ | ∞502 | 0/15 |
| RF5-CMAES Bajer 2013instances | 36 (40) | 114 (81) | ∞ | ∞ | ∞ | ∞ | ∞502 | 0/15 |
| STEPif Posik | 1.6 (0.4) | 1.5 (0.4) | 1.3 (0.3) | 1.4 (0.3) | 1.4 (0.2) | 1.6 (0.3) | 1.7 (0.3) | 15/15 |
| STEPifeg Posik | 1.6 (0.4) | 1.5 (0.4) | 1.3 (0.2) | 1.4 (0.2) | 1.4 (0.2) | 1.6 (0.3) | 1.7 (0.3) | 15/15 |
| STEPrr Posik | 1.5 (0.2) | 1.4 (0.3) | 1.3 (0.1) | 1.4 (0.1) | 1.4 (0.2) | 1.6 (0.2) | 1.8 (0.3) | 15/15 |
| Δ fopt f3, 2-D |
1e1 15 |
1e0 271 |
1e-1 445 |
1e-2 446 |
1e-3 450 |
1e-5 454 |
1e-7 464 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 3.0 (2) | 6.1 (3) | 3.7 (3) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 2.7 (2) | 0.97 (0.8) | 1.5 (0.9) | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 2.7 (2) | 1.6 (3) | 3.2 (4) | 4.0 (8) | 4.0 (7) | 4.7 (7) | 7.3 (9) | 15/15 |
| R-SHADE-10e2 Tanabe | 2.4 (2) | 0.75 (0.8) | 1.0 (0.8) | 6.7 (7) | ∞ | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 3.6 (2) | 1.3 (2) | 2.0 (2) | 2.1 (2) | 2.2 (2) | 2.4 (2) | 2.5 (2) | 15/15 |
| RL-SHADE-10e2 Tanabe | 2.1 (1) | 0.70 (0.4) | 0.66 (0.5) | 1.3 (1) | 6.6 (9) | ∞ | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 5.5 (4) | 2.3 (0.7) | 2.0 (0.6) | 3.0 (0.6) | 3.5 (0.5) | 4.3 (0.4) | 5.1 (0.5) | 15/15 |
| SOO Derbel | 2.4 (2) | 0.92 (0.6) | 0.73 (0.4) | 0.82 (0.4) | 0.92 (0.4) | 1.2 (0.5) | 1.5 (0.4) | 15/15 |
| BrentSTEPif Posik | 0.96 (0.3) | 0.19 (0.1)↑0 | 0.21 (0.2)↑0 | 0.21 (0.2)↑0 | 0.21 (0.1)↑0 | 0.22 (0.1)↑0 | 0.21 (0.1)↑0 | 15/15 |
| BrentSTEPifeg Posik | 0.99 (0.3) | 0.19 (0.1)↑0 | 0.21 (0.2)↑0 | 0.21 (0.2)↑0 | 0.22 (0.2)↑0 | 0.22 (0.2)↑0 | 0.22 (0.1)↑0 | 15/15 |
| BrentSTEPqi Posik | 0.94 (0.3) | 0.19 (0.1)↑0 | 0.20 (0.1)↑0 | 0.20 (0.1)↑0 | 0.20 (0.1)↑0 | 0.20 (0.1)↑0 | 0.20 (0.1)↑0 | 15/15 |
| BrentSTEPrr Posik | 0.98 (0.4) | 0.18 (0.1)↑0 | 0.19 (0.1)↑0 | 0.20 (0.1)↑0 | 0.20 (0.1)↑0 | 0.21 (0.1)↑0 | 0.21 (0.1)↑0 | 15/15 |
| CMA-CSA Atamna | 2.5 (2) | 2.7 (2) | 4.4 (5) | 4.9 (5) | 5.0 (5) | 5.2 (5) | 5.4 (5) | 15/15 |
| CMA-MSR Atamna | 3.6 (3) | 3.8 (4) | 4.4 (7) | 6.0 (7) | 6.3 (8) | 6.7 (8) | 7.1 (8) | 15/15 |
| CMA-TPA Atamna | 7.0 (5) | 4.7 (4) | 10 (8) | 10 (9) | 10 (9) | 11 (9) | 11 (9) | 15/15 |
| GP1-CMAES Bajer | 3.1 (3) | 1.6 (2) | 5.0 (5) | 5.1 (7) | 5.1 (7) | 5.1 (5) | 5.1 (5) | 3/15 |
| GP1-CMAES Bajer 2013instances | 2.4 (2) | 2.9 (3) | 5.3 (7) | 5.4 (8) | 5.4 (4) | 8.2 (9) | 16 (27) | 1/15 |
| GP5-CMAES Bajer | 4.3 (6) | 3.0 (4) | 5.0 (7) | 7.5 (7) | 7.5 (9) | 7.4 (6) | 7.5 (6) | 1/15 |
| GP5-CMAES Bajer 2013instances | 5.0 (9) | 2.3 (3) | ∞ | ∞ | ∞ | ∞ | ∞508 | 0/15 |
| IPOPCMAv3p61 Bajer | 3.5 (3) | 2.2 (2) | 16 (15) | 16 (22) | 16 (19) | 16 (20) | 16 (13) | 1/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.9 (2) | 1.9 (2) | 3.5 (2) | 3.6 (4) | 3.6 (4) | 3.7 (4) | 3.8 (4) | 4/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 3.7 (3) | 5.4 (5) | 3.4 (3) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.5 (0.9) | 0.73 (0.8) | 1.6 (2) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.3 (2) | 1.6 (1) | 1.6 (2) | 3.3 (4) | ∞ | ∞ | ∞100 | 0/15 |
| RF1-CMAES Bajer | 5.6 (4) | 2.6 (3) | 2.6 (2) | 2.9 (3) | 3.8 (3) | 8.0 (11) | 8.1 (9) | 2/15 |
| RF1-CMAES Bajer 2013instances | 11 (18) | 13 (15) | ∞ | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer | 25 (30) | 26 (31) | ∞ | ∞ | ∞ | ∞ | ∞508 | 0/15 |
| RF5-CMAES Bajer 2013instances | 17 (17) | 13 (16) | ∞ | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| STEPif Posik | 1.3 (0.8) | 0.24 (0.1)↑0 | 0.21 (0.1)↑0 | 0.22 (0.0)↑0 | 0.24 (0.0)↑0 | 0.25 (0.0)↑0 | 0.25 (0.0)↑0 | 15/15 |
| STEPifeg Posik | 1.3 (0.8) | 0.23 (0.1)↑0 | 0.20 (0.1)↑0 | 0.21 (0.1)↑0 | 0.24 (0.1)↑0 | 0.25 (0.0)↑0 | 0.26 (0.0)↑0 | 15/15 |
| STEPrr Posik | 1.3 (0.8) | 0.19 (0.1)↑0 | 0.18 (0.1)↑0 | 0.19 (0.1)↑0 | 0.22 (0.1)↑0 | 0.24 (0.1)↑0 | 0.26 (0.1)↑0 | 15/15 |
| Δ fopt f4, 2-D |
1e1 22 |
1e0 344 |
1e-1 459 |
1e-2 496 |
1e-3 523 |
1e-5 544 |
1e-7 566 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.9 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 1.9 (1) | 2.0 (3) | ∞ | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 5.1 (11) | 1.4 (2) | 4.1 (4) | 4.3 (3) | 6.7 (5) | 7.9 (5) | 8.1 (5) | 15/15 |
| R-SHADE-10e2 Tanabe | 2.0 (1) | 2.0 (2) | 3.3 (4) | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.4 (2) | 1.4 (1) | 2.0 (2) | 2.0 (2) | 2.0 (1) | 2.1 (1) | 2.3 (1) | 15/15 |
| RL-SHADE-10e2 Tanabe | 1.8 (1) | 0.52 (0.3) | 0.94 (1.0) | 1.1 (1) | 1.9 (2) | ∞ | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 5.1 (3) | 2.2 (0.8) | 2.5 (0.6) | 2.9 (0.7) | 3.1 (0.6) | 4.2 (0.5) | 4.6 (0.6) | 15/15 |
| SOO Derbel | 1.5 (0.7) | 0.86 (0.7) | 7.6 (14) | 12 (21) | 11 (20) | 12 (19) | 12 (18) | 15/15 |
| BrentSTEPif Posik | 0.91 (0.4) | 0.17 (0.1)↑0 | 0.22 (0.1)↑0 | 0.21 (0.1)↑0 | 0.21 (0.1)↑0 | 0.22 (0.1)↑0 | 0.27 (0.1)↑0 | 15/15 |
| BrentSTEPifeg Posik | 0.91 (0.4) | 0.17 (0.1)↑0 | 0.21 (0.1)↑0 | 0.20 (0.1)↑0 | 0.20 (0.1)↑0 | 0.22 (0.1)↑0 | 0.28 (0.1)↑0 | 15/15 |
| BrentSTEPqi Posik | 0.98 (0.5) | 0.17 (0.1)↑0 | 0.22 (0.1)↑0 | 0.21 (0.1)↑0 | 0.20 (0.1)↑0 | 0.22 (0.1)↑0 | 0.27 (0.1)↑0 | 15/15 |
| BrentSTEPrr Posik | 0.93 (0.5) | 0.18 (0.1)↑0 | 0.21 (0.1)↑0 | 0.21 (0.1)↑0 | 0.21 (0.1)↑0 | 0.24 (0.1)↑0 | 0.31 (0.1)↑0 | 15/15 |
| CMA-CSA Atamna | 2.3 (2) | 5.6 (6) | 21 (12) | 66 (52) | 75 (58) | 77 (61) | 76 (61) | 14/15 |
| CMA-MSR Atamna | 6.1 (3) | 9.3 (11) | 242 (304) | 533 (647) | 1633 (2059) | 2407 (2498) | 2314 (2663) | 2/15 |
| CMA-TPA Atamna | 2.8 (2) | 6.2 (10) | 34 (59) | 110 (203) | 109 (194) | 134 (230) | 131 (184) | 12/15 |
| GP1-CMAES Bajer | 3.7 (1) | 5.0 (5) | ∞ | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.2 (1) | 3.5 (5) | 3.6 (3) | 3.4 (4) | 6.8 (9) | 14 (17) | ∞506 | 0/15 |
| GP5-CMAES Bajer | 2.8 (6) | 3.4 (4) | ∞ | ∞ | ∞ | ∞ | ∞502 | 0/15 |
| GP5-CMAES Bajer 2013instances | 6.4 (12) | 2.6 (3) | ∞ | ∞ | ∞ | ∞ | ∞508 | 0/15 |
| IPOPCMAv3p61 Bajer | 2.0 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.8 (2) | 4.8 (6) | 16 (24) | 15 (14) | 14 (19) | 14 (13) | ∞506 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 2.7 (2) | 4.3 (4) | 3.2 (3) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.8 (1) | 4.3 (5) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.7 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RF1-CMAES Bajer | 2.9 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF1-CMAES Bajer 2013instances | 3.3 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer | 19 (22) | 21 (28) | ∞ | ∞ | ∞ | ∞ | ∞502 | 0/15 |
| RF5-CMAES Bajer 2013instances | 16 (17) | 21 (30) | ∞ | ∞ | ∞ | ∞ | ∞504 | 0/15 |
| STEPif Posik | 0.94 (0.3) | 0.28 (0.1)↑0 | 0.39 (0.2)↑0 | 0.45 (0.1)↑0 | 0.55 (0.1)↑0 | 0.61 (0.1)↑0 | 0.71 (0.2)↑0 | 15/15 |
| STEPifeg Posik | 0.95 (0.4) | 0.27 (0.1)↑0 | 0.38 (0.2)↑0 | 0.45 (0.1)↑0 | 0.55 (0.1)↑0 | 0.63 (0.1)↑0 | 0.73 (0.2)↑0 | 15/15 |
| STEPrr Posik | 0.95 (0.4) | 0.24 (0.1)↑0 | 0.36 (0.2)↑0 | 0.44 (0.2)↑0 | 0.56 (0.2)↑0 | 0.68 (0.2)↑0 | 0.82 (0.3) | 15/15 |
| Δ fopt f5, 2-D |
1e1 4.0 |
1e0 4.0 |
1e-1 4.0 |
1e-2 4.0 |
1e-3 4.0 |
1e-5 4.0 |
1e-7 4.0 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.4 (0.8) | 2.1 (0.6) | 2.7 (1) | 2.7 (1) | 2.7 (1) | 2.7 (1) | 2.7 (1) | 15/15 |
| R-DE-10e2 Tanabe | 4.5 (4) | 14 (6) | 24 (7) | 34 (9) | 49 (30) | 748 (788) | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 3.1 (3) | 13 (5) | 30 (18) | 89 (62) | 122 (163) | 227 (279) | 333 (301) | 15/15 |
| R-SHADE-10e2 Tanabe | 4.3 (4) | 14 (4) | 25 (4) | 36 (6) | 50 (28) | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 4.3 (4) | 25 (13) | 50 (15) | 69 (25) | 83 (23) | 109 (23) | 133 (21) | 15/15 |
| RL-SHADE-10e2 Tanabe | 5.1 (4) | 13 (5) | 20 (7) | 28 (8) | 37 (11) | 67 (32) | 234 (250) | 2/15 |
| RL-SHADE-10e5 Tanabe | 3.7 (4) | 46 (16) | 94 (23) | 134 (18) | 183 (28) | 266 (30) | 348 (20) | 15/15 |
| SOO Derbel | 2.1 (0.1) | 10 (0.1) | 25 (0.1) | 46 (0.1) | 83 (0.1) | 182 (0.1) | 301 (0.1) | 15/15 |
| BrentSTEPif Posik | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 15/15 |
| BrentSTEPifeg Posik | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 15/15 |
| BrentSTEPqi Posik | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 15/15 |
| BrentSTEPrr Posik | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 15/15 |
| CMA-CSA Atamna | 2.7 (2) | 5.0 (3) | 5.2 (3) | 5.2 (3) | 5.2 (3) | 5.2 (3) | 5.2 (3) | 15/15 |
| CMA-MSR Atamna | 2.9 (2) | 6.3 (4) | 6.7 (4) | 6.8 (4) | 6.8 (4) | 6.8 (4) | 6.8 (4) | 15/15 |
| CMA-TPA Atamna | 1.9 (2) | 3.9 (2) | 4.4 (2) | 4.4 (2) | 4.4 (2) | 4.4 (2) | 4.4 (2) | 15/15 |
| GP1-CMAES Bajer | 2.0 (1) | 24 (64) | 37 (66) | 51 (127) | 51 (96) | 51 (97) | 51 (97) | 11/15 |
| GP1-CMAES Bajer 2013instances | 2.2 (2) | 7.6 (3) | 10 (12) | 10 (12) | 10 (12) | 10 (12) | 10 (12) | 15/15 |
| GP5-CMAES Bajer | 1.5 (0.9) | 3.5 (2) | 3.8 (3) | 3.8 (3) | 3.8 (3) | 3.8 (3) | 3.8 (3) | 15/15 |
| GP5-CMAES Bajer 2013instances | 1.8 (0.8) | 4.1 (3) | 4.6 (3) | 4.8 (3) | 4.8 (3) | 4.8 (3) | 4.8 (3) | 15/15 |
| IPOPCMAv3p61 Bajer | 2.7 (2) | 7.8 (9) | 9.2 (10) | 10 (10) | 10 (10) | 10 (10) | 10 (10) | 15/15 |
| IPOPCMAv3p61 Bajer 2013instances | 4.1 (3) | 14 (13) | 14 (14) | 14 (14) | 14 (14) | 14 (14) | 14 (14) | 15/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 3.1 (3) | 16 (0.6) | 16 (0.6) | 16 (0.6) | 16 (0.6) | 16 (0.6) | 16 (0.6) | 15/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.3 (1) | 3.5 (0.6) | 3.6 (0.6) | 3.6 (0.6) | 3.6 (0.6) | 3.6 (0.6) | 3.6 (0.6) | 15/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.2 (1) | 3.4 (0.6) | 3.9 (0.6) | 4.0 (0.6) | 4.0 (0.6) | 4.0 (0.6) | 4.0 (0.6) | 15/15 |
| RF1-CMAES Bajer | 2.1 (2) | 23 (25) | 24 (25) | 25 (24) | 25 (24) | 25 (24) | 25 (24) | 14/15 |
| RF1-CMAES Bajer 2013instances | 1.6 (2) | 22 (26) | 24 (29) | 24 (29) | 24 (29) | 24 (29) | 24 (29) | 15/15 |
| RF5-CMAES Bajer | 4.3 (2) | 105 (156) | 106 (164) | 106 (116) | 106 (117) | 106 (191) | 106 (94) | 10/15 |
| RF5-CMAES Bajer 2013instances | 2.8 (3) | 64 (71) | 66 (76) | 67 (79) | 67 (83) | 67 (83) | 67 (78) | 12/15 |
| STEPif Posik | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 15/15 |
| STEPifeg Posik | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 15/15 |
| STEPrr Posik | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 1.6 (0.2) | 15/15 |
| Δ fopt f6, 2-D |
1e1 13 |
1e0 23 |
1e-1 41 |
1e-2 54 |
1e-3 67 |
1e-5 95 |
1e-7 124 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.4 (1.0) | 14 (21) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 1.7 (1) | 2.3 (2) | 3.0 (2) | 5.2 (3) | 8.4 (8) | ∞ | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 10 (6) | 20 (35) | 19 (22) | 20 (32) | 21 (26) | 19 (25) | 20 (21) | 15/15 |
| R-SHADE-10e2 Tanabe | 1.5 (0.9) | 4.2 (3) | 9.1 (8) | 13 (12) | ∞ | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.8 (2) | 3.2 (2) | 5.5 (4) | 5.6 (5) | 5.3 (4) | 4.8 (3) | 4.7 (2) | 15/15 |
| RL-SHADE-10e2 Tanabe | 2.0 (2) | 4.2 (2) | 3.6 (1) | 6.8 (10) | 8.7 (5) | ∞ | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 3.4 (3) | 7.1 (5) | 8.6 (4) | 12 (3) | 13 (4) | 16 (2) | 17 (3) | 15/15 |
| SOO Derbel | 1.2 (1) | 7.6 (14) | 94 (126) | 401 (438) | 1663 (1846) | 5266 (3748) | 2.4e4 (2e4) | 1/15 |
| BrentSTEPif Posik | 296 (476) | 438 (444) | 761 (770) | 1181 (1215) | ∞ | ∞ | ∞2e4 | 0/15 |
| BrentSTEPifeg Posik | 369 (696) | 412 (802) | 318 (478) | 536 (872) | 871 (823) | 1390 (1281) | 2219 (3870) | 1/15 |
| BrentSTEPqi Posik | 299 (511) | 341 (402) | 397 (434) | 398 (639) | 515 (464) | 1408 (1431) | 2248 (2422) | 1/15 |
| BrentSTEPrr Posik | 361 (679) | 400 (412) | 319 (444) | 434 (500) | 686 (645) | 1400 (1045) | 2208 (2184) | 1/15 |
| CMA-CSA Atamna | 3.6 (2) | 4.2 (3) | 3.9 (1) | 4.2 (1) | 4.1 (1) | 4.2 (0.8) | 4.1 (0.6) | 15/15 |
| CMA-MSR Atamna | 3.0 (2) | 5.2 (3) | 4.8 (2) | 5.0 (2) | 5.3 (1) | 5.3 (1) | 5.3 (0.9) | 15/15 |
| CMA-TPA Atamna | 1.6 (2) | 3.6 (3) | 3.8 (2) | 3.8 (2) | 3.8 (2) | 3.8 (1) | 3.9 (0.8) | 15/15 |
| GP1-CMAES Bajer | 3.1 (2) | 6.5 (10) | 10 (13) | 18 (22) | 35 (36) | 80 (96) | ∞506 | 0/15 |
| GP1-CMAES Bajer 2013instances | 3.4 (2) | 4.9 (3) | 7.7 (7) | 19 (18) | 112 (117) | ∞ | ∞506 | 0/15 |
| GP5-CMAES Bajer | 4.6 (2) | 6.2 (11) | 7.8 (7) | 23 (23) | ∞ | ∞ | ∞506 | 0/15 |
| GP5-CMAES Bajer 2013instances | 2.6 (4) | 9.1 (11) | 17 (16) | 44 (56) | ∞ | ∞ | ∞506 | 0/15 |
| IPOPCMAv3p61 Bajer | 2.5 (2) | 4.4 (3) | 4.2 (2) | 4.0 (2) | 4.3 (1) | 4.8 (3) | 5.7 (4) | 2/15 |
| IPOPCMAv3p61 Bajer 2013instances | 3.1 (5) | 4.6 (3) | 3.8 (2) | 4.1 (1) | 4.2 (1) | 4.8 (3) | 12 (11) | 2/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 1.5 (1) | 8.9 (12) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.0 (2) | 12 (7) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.9 (2) | 6.3 (7) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RF1-CMAES Bajer | 8.7 (20) | 14 (19) | 182 (166) | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF1-CMAES Bajer 2013instances | 11 (21) | 66 (105) | ∞ | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer | 16 (20) | 55 (77) | 108 (103) | 165 (202) | ∞ | ∞ | ∞516 | 0/15 |
| RF5-CMAES Bajer 2013instances | 9.2 (13) | 40 (57) | ∞ | ∞ | ∞ | ∞ | ∞508 | 0/15 |
| STEPif Posik | 345 (676) | 315 (433) | 395 (632) | 549 (555) | 1261 (1268) | 2856 (2518) | ∞2e4 | 0/15 |
| STEPifeg Posik | 267 (551) | 269 (377) | 245 (346) | 315 (339) | 890 (1011) | 2843 (2826) | 2212 (1768) | 1/15 |
| STEPrr Posik | 261 (624) | 240 (360) | 246 (352) | 300 (276) | 506 (707) | 1333 (1237) | 2159 (2933) | 1/15 |
| Δ fopt f7, 2-D |
1e1 3.0 |
1e0 21 |
1e-1 60 |
1e-2 193 |
1e-3 217 |
1e-5 217 |
1e-7 241 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 3.0 (2) | 1.4 (1) | 0.97 (0.9) | 0.84 (0.7) | 2.2 (3) | 2.2 (2) | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 3.3 (4) | 2.8 (3) | 2.0 (2) | 1.2 (1) | 2.0 (1) | 2.0 (2) | 2.9 (4) | 1/15 |
| R-DE-10e5 Tanabe | 2.4 (3) | 3.6 (4) | 3.8 (3) | 1.9 (1) | 1.7 (1) | 1.7 (1) | 1.8 (0.9) | 15/15 |
| R-SHADE-10e2 Tanabe | 3.1 (3) | 2.7 (3) | 4.1 (4) | 5.0 (6) | ∞ | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.8 (3) | 1.8 (1) | 1.7 (2) | 0.85 (0.7) | 0.93 (0.6) | 0.93 (0.6) | 0.97 (0.5) | 15/15 |
| RL-SHADE-10e2 Tanabe | 6.3 (7) | 3.0 (2) | 5.1 (3) | 2.9 (2) | 6.8 (6) | 6.8 (8) | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 5.2 (5) | 3.5 (3) | 4.6 (3) | 2.7 (1) | 3.0 (1) | 3.0 (1) | 3.5 (1.0) | 15/15 |
| SOO Derbel | 1.9 (2) | 1.4 (0.7) | 1.5 (0.8) | 0.83 (0.5) | 1.1 (0.7) | 1.1 (0.7) | 1.3 (0.8) | 15/15 |
| BrentSTEPif Posik | 1.9 (2) | 479 (717) | 456 (402) | 713 (702) | 1295 (1572) | 1295 (1457) | 1166 (1582) | 1/15 |
| BrentSTEPifeg Posik | 1.9 (2) | 487 (550) | 1428 (1923) | 681 (749) | 1295 (1202) | 1295 (1318) | 1166 (1270) | 1/15 |
| BrentSTEPqi Posik | 1.9 (2) | 258 (502) | 550 (602) | 712 (658) | 1295 (1804) | 1295 (1295) | 1166 (1541) | 1/15 |
| BrentSTEPrr Posik | 1.9 (2) | 566 (645) | 574 (377) | 702 (754) | 1295 (1341) | 1295 (1272) | 1166 (1291) | 1/15 |
| CMA-CSA Atamna | 4.2 (4) | 5.8 (10) | 3.0 (3) | 1.2 (1) | 1.3 (1) | 1.3 (1) | 1.5 (2) | 15/15 |
| CMA-MSR Atamna | 4.7 (4) | 1.9 (2) | 2.4 (1) | 1.1 (0.3) | 1.2 (0.3) | 1.2 (0.3) | 1.3 (0.4) | 15/15 |
| CMA-TPA Atamna | 4.0 (3) | 1.9 (2) | 1.9 (1) | 0.91 (0.4) | 0.88 (0.4) | 0.88 (0.4) | 1.0 (0.8) | 15/15 |
| GP1-CMAES Bajer | 4.1 (3) | 1.8 (2) | 2.3 (2) | 0.97 (0.6) | 1.0 (0.5) | 1.0 (0.5) | 1.4 (0.8) | 11/15 |
| GP1-CMAES Bajer 2013instances | 4.5 (4) | 2.3 (2) | 1.8 (1) | 1.1 (1) | 1.1 (1.0) | 1.1 (1.0) | 1.4 (2) | 8/15 |
| GP5-CMAES Bajer | 2.6 (2) | 1.3 (1) | 1.8 (2) | 0.97 (1) | 1.2 (1) | 1.2 (1) | 1.8 (2) | 5/15 |
| GP5-CMAES Bajer 2013instances | 3.6 (2) | 2.2 (2) | 2.6 (2) | 1.1 (1) | 1.1 (0.8) | 1.1 (0.8) | 1.7 (2) | 8/15 |
| IPOPCMAv3p61 Bajer | 3.4 (5) | 2.1 (2) | 2.6 (2) | 1.6 (1) | 1.9 (2) | 1.9 (2) | 1.9 (1) | 9/15 |
| IPOPCMAv3p61 Bajer 2013instances | 4.2 (4) | 4.6 (4) | 3.2 (2) | 1.8 (2) | 1.7 (2) | 1.7 (2) | 2.1 (2) | 9/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 8.2 (8) | 2.7 (1) | 4.8 (6) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 3.2 (3) | 1.2 (0.6) | 1.6 (2) | 1.7 (2) | 2.1 (4) | 2.1 (2) | 2.9 (2) | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 4.0 (2) | 1.5 (1) | 1.1 (0.8) | 1.3 (2) | 6.7 (7) | 6.7 (7) | 6.0 (4) | 0/15 |
| RF1-CMAES Bajer | 2.3 (3) | 1.9 (2) | 2.8 (2) | 2.3 (2) | 2.9 (3) | 2.9 (3) | 4.4 (5) | 3/15 |
| RF1-CMAES Bajer 2013instances | 4.3 (4) | 4.2 (4) | 4.7 (5) | 2.2 (2) | 2.7 (3) | 2.7 (2) | 3.8 (3) | 4/15 |
| RF5-CMAES Bajer | 7.6 (12) | 7.9 (14) | 12 (12) | 13 (15) | 13 (11) | 13 (15) | 35 (27) | 0/15 |
| RF5-CMAES Bajer 2013instances | 4.1 (4) | 3.5 (2) | 12 (14) | 42 (39) | ∞ | ∞ | ∞550 | 0/15 |
| STEPif Posik | 2.0 (2) | 325 (478) | 704 (569) | 719 (536) | ∞ | ∞ | ∞2e4 | 0/15 |
| STEPifeg Posik | 2.0 (2) | 367 (526) | 970 (1012) | 692 (777) | 1369 (1318) | 1369 (1526) | 1233 (1582) | 1/15 |
| STEPrr Posik | 2.0 (2) | 384 (526) | 570 (794) | 723 (1063) | ∞ | ∞ | ∞2e4 | 0/15 |
| Δ fopt f8, 2-D |
1e1 5.0 |
1e0 12 |
1e-1 37 |
1e-2 46 |
1e-3 86 |
1e-5 94 |
1e-7 112 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 2.9 (2) | 3.9 (3) | 6.6 (5) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 5.1 (3) | 8.8 (8) | 26 (28) | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 2.8 (2) | 11 (18) | 13 (16) | 16 (11) | 10 (6) | 12 (6) | 12 (6) | 15/15 |
| R-SHADE-10e2 Tanabe | 7.5 (5) | 11 (9) | 11 (9) | 63 (77) | ∞ | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 4.2 (3) | 4.4 (3) | 3.9 (4) | 6.1 (6) | 4.2 (3) | 5.3 (5) | 5.1 (4) | 15/15 |
| RL-SHADE-10e2 Tanabe | 4.5 (5) | 7.6 (4) | 6.8 (5) | 63 (64) | ∞ | ∞ | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 8.2 (6) | 13 (12) | 13 (9) | 18 (11) | 17 (9) | 23 (6) | 23 (3) | 15/15 |
| SOO Derbel | 2.1 (2) | 2.8 (2) | 3.8 (2) | 7.5 (4) | 7.0 (3) | 18 (12) | 26 (15) | 15/15 |
| BrentSTEPif Posik | 2.3 (0.6) | 275 (528) | 2237 (2215) | 5997 (4802) | 3208 (2305) | ∞ | ∞2e4 | 0/15 |
| BrentSTEPifeg Posik | 2.3 (0.6) | 309 (747) | 2210 (2169) | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| BrentSTEPqi Posik | 2.3 (0.6) | 408 (734) | 1522 (2913) | 5837 (6670) | ∞ | ∞ | ∞2e4 | 0/15 |
| BrentSTEPrr Posik | 2.3 (0.6) | 308 (926) | 3314 (3222) | 5737 (6899) | ∞ | ∞ | ∞2e4 | 0/15 |
| CMA-CSA Atamna | 8.2 (8) | 17 (21) | 9.0 (9) | 10 (6) | 5.8 (4) | 6.1 (3) | 5.5 (3) | 15/15 |
| CMA-MSR Atamna | 4.0 (4) | 15 (14) | 8.6 (6) | 9.0 (5) | 5.2 (3) | 5.6 (3) | 5.6 (2) | 15/15 |
| CMA-TPA Atamna | 5.6 (4) | 7.7 (7) | 5.3 (3) | 5.6 (2) | 3.6 (1) | 3.9 (1) | 4.0 (0.9) | 15/15 |
| GP1-CMAES Bajer | 4.0 (4) | 11 (16) | 12 (18) | 12 (20) | 7.1 (10) | 8.5 (7) | 9.0 (8) | 6/15 |
| GP1-CMAES Bajer 2013instances | 5.1 (8) | 8.5 (10) | 7.0 (10) | 13 (11) | 10 (12) | 10 (6) | 16 (10) | 2/15 |
| GP5-CMAES Bajer | 3.9 (4) | 12 (23) | 7.7 (7) | 10 (9) | 7.4 (9) | 12 (13) | 14 (10) | 3/15 |
| GP5-CMAES Bajer 2013instances | 3.6 (2) | 11 (17) | 8.9 (11) | 10 (9) | 5.7 (5) | 6.7 (5) | 6.0 (7) | 9/15 |
| IPOPCMAv3p61 Bajer | 10 (7) | 10 (10) | 8.8 (8) | 11 (7) | 7.2 (5) | 12 (10) | 13 (11) | 4/15 |
| IPOPCMAv3p61 Bajer 2013instances | 5.9 (5) | 10 (9) | 6.7 (7) | 8.1 (7) | 5.6 (3) | 9.0 (11) | 11 (7) | 3/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 6.5 (6) | 10 (9) | 20 (22) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 3.7 (2) | 4.0 (2) | 4.4 (4) | 15 (16) | 17 (18) | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 4.1 (2) | 3.9 (2) | 19 (23) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RF1-CMAES Bajer | 5.8 (7) | 29 (46) | 44 (42) | 164 (159) | ∞ | ∞ | ∞506 | 0/15 |
| RF1-CMAES Bajer 2013instances | 12 (4) | 13 (23) | 15 (16) | 48 (49) | 44 (48) | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer | 42 (51) | 90 (99) | 94 (85) | ∞ | ∞ | ∞ | ∞502 | 0/15 |
| RF5-CMAES Bajer 2013instances | 27 (52) | 74 (74) | 91 (107) | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| STEPif Posik | 2.7 (0.6) | 337 (684) | 1370 (1524) | 1757 (1484) | 2932 (2348) | ∞ | ∞2e4 | 0/15 |
| STEPifeg Posik | 2.6 (0.6) | 355 (691) | 1067 (1529) | 1763 (2297) | ∞ | ∞ | ∞2e4 | 0/15 |
| STEPrr Posik | 2.7 (0.7) | 266 (628) | 1800 (3143) | 5122 (5889) | ∞ | ∞ | ∞2e4 | 0/15 |
| Δ fopt f9, 2-D |
1e1 1 |
1e0 18 |
1e-1 30 |
1e-2 44 |
1e-3 68 |
1e-5 81 |
1e-7 92 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 16 (18) | 2.7 (3) | 4.7 (4) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 19 (18) | 5.9 (5) | 15 (11) | 33 (26) | ∞ | ∞ | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 33 (23) | 7.7 (11) | 23 (27) | 25 (28) | 20 (17) | 20 (14) | 20 (13) | 15/15 |
| R-SHADE-10e2 Tanabe | 32 (21) | 10 (8) | 17 (29) | 67 (57) | ∞ | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 23 (18) | 3.4 (4) | 7.4 (8) | 11 (10) | 8.0 (6) | 7.7 (5) | 7.8 (5) | 15/15 |
| RL-SHADE-10e2 Tanabe | 34 (36) | 6.9 (7) | 13 (13) | 33 (34) | 44 (38) | ∞ | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 39 (46) | 10 (7) | 14 (12) | 18 (7) | 18 (4) | 23 (4) | 26 (4) | 15/15 |
| SOO Derbel | 1 (0)★2 | 2.0 (0.8) | 3.1 (2) | 5.8 (4) | 6.8 (4) | 14 (12) | 19 (11) | 15/15 |
| BrentSTEPif Posik | 50 (70) | 129 (277) | 445 (584) | 1439 (1608) | 1953 (1963) | ∞ | ∞2e4 | 0/15 |
| BrentSTEPifeg Posik | 76 (48) | 153 (214) | 311 (303) | 679 (554) | 1935 (3130) | ∞ | ∞2e4 | 0/15 |
| BrentSTEPqi Posik | 73 (79) | 104 (188) | 483 (429) | 2764 (2865) | 3852 (3928) | 3234 (3502) | ∞2e4 | 0/15 |
| BrentSTEPrr Posik | 62 (38) | 140 (224) | 502 (867) | 1830 (1243) | 3916 (3866) | ∞ | ∞2e4 | 0/15 |
| CMA-CSA Atamna | 30 (16) | 5.7 (6) | 8.4 (6) | 8.0 (4) | 5.9 (3) | 5.7 (2) | 5.8 (2) | 15/15 |
| CMA-MSR Atamna | 26 (18) | 7.1 (10) | 10 (7) | 8.8 (5) | 6.2 (3) | 6.4 (2) | 6.5 (2) | 15/15 |
| CMA-TPA Atamna | 26 (26) | 6.7 (10) | 8.2 (8) | 7.1 (5) | 5.6 (4) | 5.4 (4) | 5.7 (3) | 15/15 |
| GP1-CMAES Bajer | 23 (20) | 6.6 (9) | 17 (18) | 19 (23) | 24 (21) | 28 (42) | 26 (28) | 3/15 |
| GP1-CMAES Bajer 2013instances | 29 (19) | 7.7 (12) | 14 (16) | 17 (14) | 19 (20) | 21 (21) | 26 (25) | 3/15 |
| GP5-CMAES Bajer | 23 (9) | 3.4 (3) | 10 (14) | 11 (14) | 9.0 (9) | 9.3 (11) | 11 (8) | 5/15 |
| GP5-CMAES Bajer 2013instances | 19 (10) | 3.4 (2) | 5.3 (4) | 5.9 (8) | 4.4 (4) | 5.1 (6) | 4.8 (3) | 10/15 |
| IPOPCMAv3p61 Bajer | 26 (24) | 3.5 (2) | 4.9 (4) | 6.9 (5) | 5.7 (5) | 8.9 (7) | 11 (11) | 6/15 |
| IPOPCMAv3p61 Bajer 2013instances | 23 (17) | 3.4 (2) | 6.6 (6) | 8.1 (5) | 5.9 (3) | 6.5 (6) | 11 (10) | 7/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 25 (26) | 3.9 (4) | 49 (54) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 15 (13) | 2.5 (1) | 5.1 (4) | 11 (7) | ∞ | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 16 (9) | 2.3 (1.0) | 12 (14) | 11 (10) | ∞ | ∞ | ∞100 | 0/15 |
| RF1-CMAES Bajer | 25 (26) | 5.2 (4) | 29 (38) | 39 (31) | 111 (121) | ∞ | ∞506 | 0/15 |
| RF1-CMAES Bajer 2013instances | 20 (30) | 19 (28) | 30 (40) | 83 (86) | 110 (147) | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer | 23 (20) | 21 (36) | 37 (29) | 162 (224) | 106 (82) | ∞ | ∞504 | 0/15 |
| RF5-CMAES Bajer 2013instances | 172 (414) | 34 (35) | 113 (97) | 164 (198) | ∞ | ∞ | ∞504 | 0/15 |
| STEPif Posik | 16 (10) | 120 (336) | 442 (557) | 970 (875) | 3814 (4584) | 3228 (3472) | ∞2e4 | 0/15 |
| STEPifeg Posik | 22 (18) | 66 (163) | 373 (308) | 1286 (1481) | 1781 (1424) | 3222 (3098) | ∞2e4 | 0/15 |
| STEPrr Posik | 19 (14) | 79 (152) | 432 (482) | 5429 (4438) | 3513 (3964) | ∞ | ∞2e4 | 0/15 |
| Δ fopt f10, 2-D |
1e1 30 |
1e0 46 |
1e-1 54 |
1e-2 61 |
1e-3 68 |
1e-5 82 |
1e-7 98 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 9.0 (10) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 7.2 (5) | 32 (32) | 55 (58) | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 27 (36) | 61 (88) | 73 (105) | 68 (92) | 78 (111) | 70 (91) | 74 (93) | 15/15 |
| R-SHADE-10e2 Tanabe | 13 (18) | 63 (71) | ∞ | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 3.2 (1) | 3.2 (1) | 3.6 (0.9) | 3.9 (2) | 4.1 (2) | 4.4 (1) | 4.3 (1) | 15/15 |
| RL-SHADE-10e2 Tanabe | 17 (21) | 31 (27) | 53 (36) | 49 (58) | 44 (51) | ∞ | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 15 (8) | 17 (5) | 20 (3) | 23 (3) | 23 (3) | 25 (4) | 26 (3) | 15/15 |
| SOO Derbel | 3.2 (2) | 4.8 (5) | 10 (5) | 29 (39) | 103 (123) | 302 (307) | 451 (548) | 15/15 |
| BrentSTEPif Posik | 71 (131) | 196 (163) | 1079 (1149) | 2032 (1747) | 1822 (2082) | ∞ | ∞8444 | 0/15 |
| BrentSTEPifeg Posik | 38 (69) | 197 (143) | 1906 (2342) | ∞ | ∞ | ∞ | ∞5883 | 0/15 |
| BrentSTEPqi Posik | 135 (285) | 464 (319) | 1528 (1268) | ∞ | ∞ | ∞ | ∞1e4 | 0/15 |
| BrentSTEPrr Posik | 46 (70) | 238 (234) | 540 (491) | 1618 (1399) | ∞ | ∞ | ∞6681 | 0/15 |
| CMA-CSA Atamna | 7.5 (4) | 6.5 (2) | 6.2 (1) | 6.0 (1) | 5.8 (1) | 5.6 (0.9) | 5.3 (1) | 15/15 |
| CMA-MSR Atamna | 7.4 (4) | 6.1 (2) | 5.8 (2) | 6.3 (1) | 6.3 (1) | 6.5 (1) | 6.6 (1) | 15/15 |
| CMA-TPA Atamna | 6.3 (3) | 5.6 (2) | 5.9 (2) | 6.0 (1) | 5.9 (1) | 5.5 (1.0) | 5.3 (1) | 15/15 |
| GP1-CMAES Bajer | 4.8 (3) | 5.0 (2) | 5.3 (1.0) | 5.1 (1.0) | 4.9 (1) | 4.6 (0.8) | 5.4 (3) | 11/15 |
| GP1-CMAES Bajer 2013instances | 4.5 (3) | 4.6 (2) | 4.7 (2) | 4.5 (2) | 4.5 (1) | 4.7 (1) | 4.8 (3) | 12/15 |
| GP5-CMAES Bajer | 2.3 (1) | 2.4 (1) | 2.2 (1.0) | 2.2 (1) | 2.2 (1) | 2.0 (1.0) | 2.4 (1.0) | 10/15 |
| GP5-CMAES Bajer 2013instances | 1.6 (0.9) | 1.8 (0.8) | 2.0 (0.5) | 2.0 (0.4) | 1.9 (0.4) | 1.8 (0.2) | 1.9 (0.5) | 12/15 |
| IPOPCMAv3p61 Bajer | 7.0 (7) | 7.6 (6) | 8.9 (5) | 10 (5) | 11 (6) | 30 (40) | 77 (80) | 1/15 |
| IPOPCMAv3p61 Bajer 2013instances | 8.3 (6) | 8.6 (4) | 11 (6) | 17 (17) | 18 (8) | 23 (25) | ∞506 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 16 (9) | 33 (29) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 6.9 (7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 10 (14) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RF1-CMAES Bajer | 8.1 (10) | 15 (15) | 40 (48) | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF1-CMAES Bajer 2013instances | 19 (18) | 34 (33) | ∞ | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer | 22 (21) | 163 (138) | ∞ | ∞ | ∞ | ∞ | ∞508 | 0/15 |
| RF5-CMAES Bajer 2013instances | 14 (13) | 77 (85) | 140 (126) | ∞ | ∞ | ∞ | ∞502 | 0/15 |
| STEPif Posik | 12 (20) | 94 (85) | 321 (427) | 612 (591) | 549 (417) | ∞ | ∞2178 | 0/15 |
| STEPifeg Posik | 8.5 (13) | 80 (80) | 110 (110) | 309 (351) | 278 (214) | ∞ | ∞2159 | 0/15 |
| STEPrr Posik | 7.8 (10) | 70 (60) | 223 (201) | 642 (1016) | ∞ | ∞ | ∞2193 | 0/15 |
| Δ fopt f11, 2-D |
1e1 35 |
1e0 45 |
1e-1 50 |
1e-2 62 |
1e-3 67 |
1e-5 81 |
1e-7 97 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 8.0 (7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 5.1 (4) | 22 (18) | 60 (69) | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 18 (23) | 23 (20) | 25 (19) | 31 (35) | 39 (45) | 48 (47) | 56 (58) | 15/15 |
| R-SHADE-10e2 Tanabe | 11 (10) | 21 (15) | 58 (75) | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 4.8 (5) | 4.9 (4) | 5.4 (4) | 4.7 (3) | 4.8 (4) | 4.9 (3) | 4.9 (3) | 15/15 |
| RL-SHADE-10e2 Tanabe | 12 (13) | 33 (20) | ∞ | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 14 (9) | 18 (6) | 22 (3) | 22 (4) | 24 (3) | 25 (4) | 25 (3) | 15/15 |
| SOO Derbel | 3.0 (1) | 5.2 (5) | 14 (17) | 46 (42) | 97 (94) | 251 (177) | 488 (378) | 15/15 |
| BrentSTEPif Posik | 45 (83) | 240 (337) | 1904 (1597) | 1536 (1532) | 1421 (1975) | ∞ | ∞5430 | 0/15 |
| BrentSTEPifeg Posik | 58 (111) | 209 (337) | 435 (427) | 1492 (1746) | 1381 (1605) | ∞ | ∞6926 | 0/15 |
| BrentSTEPqi Posik | 60 (94) | 196 (354) | 270 (235) | 546 (643) | 1606 (1512) | ∞ | ∞5998 | 0/15 |
| BrentSTEPrr Posik | 59 (115) | 302 (509) | 636 (873) | 1619 (2954) | 1498 (1865) | ∞ | ∞6000 | 0/15 |
| CMA-CSA Atamna | 5.0 (3) | 6.4 (3) | 6.7 (1) | 5.9 (0.9) | 6.0 (1.0) | 5.6 (0.6) | 5.3 (0.8) | 15/15 |
| CMA-MSR Atamna | 5.1 (2) | 5.7 (2) | 6.4 (1) | 5.6 (2) | 6.1 (1.0) | 6.5 (1) | 6.7 (1.0) | 15/15 |
| CMA-TPA Atamna | 5.4 (3) | 6.0 (1) | 6.2 (1) | 5.7 (0.9) | 5.7 (0.8) | 5.6 (0.7) | 5.2 (0.7) | 15/15 |
| GP1-CMAES Bajer | 4.6 (3) | 5.1 (3) | 5.7 (1) | 5.0 (1) | 5.0 (0.9) | 4.9 (0.8) | 4.6 (0.9) | 14/15 |
| GP1-CMAES Bajer 2013instances | 4.4 (4) | 4.9 (3) | 5.8 (2) | 5.0 (1) | 4.9 (1) | 4.6 (1) | 4.7 (0.8) | 11/15 |
| GP5-CMAES Bajer | 2.0 (1) | 2.5 (0.4) | 2.4 (0.5) | 2.1 (0.3) | 2.1 (0.3) | 1.9 (0.2) | 2.1 (0.4) | 12/15 |
| GP5-CMAES Bajer 2013instances | 1.5 (1) | 2.2 (0.6) | 2.5 (0.4) | 2.1 (0.4) | 2.2 (0.4) | 2.0 (0.4) | 2.1 (0.4) | 13/15 |
| IPOPCMAv3p61 Bajer | 6.1 (4) | 11 (9) | 13 (8) | 16 (15) | 18 (11) | 46 (47) | ∞506 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 7.3 (6) | 10 (7) | 12 (9) | 11 (7) | 14 (8) | 47 (39) | ∞506 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 42 (39) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 21 (19) | 16 (17) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 7.2 (8) | 10 (11) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RF1-CMAES Bajer | 13 (22) | 79 (88) | 144 (207) | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF1-CMAES Bajer 2013instances | 14 (18) | 36 (34) | 73 (88) | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer | 17 (19) | 50 (62) | ∞ | ∞ | ∞ | ∞ | ∞504 | 0/15 |
| RF5-CMAES Bajer 2013instances | 8.8 (9) | 79 (87) | ∞ | ∞ | ∞ | ∞ | ∞508 | 0/15 |
| STEPif Posik | 13 (24) | 40 (73) | 98 (198) | 184 (272) | 544 (414) | ∞ | ∞2405 | 0/15 |
| STEPifeg Posik | 22 (38) | 65 (83) | 225 (412) | 182 (173) | 265 (273) | 465 (482) | ∞2391 | 0/15 |
| STEPrr Posik | 22 (36) | 89 (149) | 168 (161) | 585 (674) | 542 (393) | ∞ | ∞2357 | 0/15 |
| Δ fopt f12, 2-D |
1e1 35 |
1e0 46 |
1e-1 75 |
1e-2 94 |
1e-3 105 |
1e-5 153 |
1e-7 195 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 9.2 (9) | 32 (40) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 6.5 (6) | 12 (9) | 19 (17) | 16 (18) | ∞ | ∞ | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 15 (37) | 29 (46) | 33 (48) | 34 (51) | 37 (47) | 40 (33) | 44 (52) | 15/15 |
| R-SHADE-10e2 Tanabe | 7.1 (4) | 32 (27) | ∞ | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 4.5 (2) | 12 (14) | 13 (23) | 14 (23) | 15 (21) | 13 (17) | 11 (16) | 15/15 |
| RL-SHADE-10e2 Tanabe | 4.2 (3) | 7.0 (7) | 19 (15) | 31 (40) | 28 (38) | ∞ | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 11 (4) | 17 (6) | 15 (6) | 19 (6) | 26 (12) | 26 (15) | 24 (12) | 15/15 |
| SOO Derbel | 3.9 (2) | 5.2 (3) | 10 (8) | 17 (17) | 46 (54) | 65 (71) | 132 (131) | 15/15 |
| BrentSTEPif Posik | 78 (113) | 132 (200) | 192 (224) | 232 (331) | 352 (301) | 242 (271) | 190 (161) | 4/15 |
| BrentSTEPifeg Posik | 94 (262) | 156 (207) | 218 (248) | 294 (384) | 283 (310) | 254 (295) | 199 (213) | 4/15 |
| BrentSTEPqi Posik | 92 (204) | 132 (203) | 163 (223) | 248 (229) | 306 (275) | 305 (300) | 240 (268) | 3/15 |
| BrentSTEPrr Posik | 62 (98) | 148 (223) | 161 (100) | 204 (208) | 313 (337) | 295 (242) | 231 (242) | 3/15 |
| CMA-CSA Atamna | 8.0 (7) | 11 (19) | 9.0 (17) | 8.6 (14) | 8.4 (13) | 7.3 (13) | 6.2 (10) | 15/15 |
| CMA-MSR Atamna | 8.9 (5) | 12 (10) | 8.7 (8) | 9.0 (8) | 9.0 (7) | 7.4 (5) | 6.7 (4) | 15/15 |
| CMA-TPA Atamna | 5.2 (4) | 7.0 (3) | 6.9 (7) | 6.9 (9) | 6.8 (9) | 5.7 (7) | 5.4 (7) | 15/15 |
| GP1-CMAES Bajer | 5.6 (5) | 6.5 (6) | 5.2 (5) | 5.1 (3) | 8.0 (6) | 16 (18) | ∞506 | 0/15 |
| GP1-CMAES Bajer 2013instances | 6.3 (7) | 7.0 (11) | 6.5 (4) | 7.3 (4) | 11 (7) | 49 (39) | 39 (60) | 0/15 |
| GP5-CMAES Bajer | 7.0 (14) | 5.8 (6) | 5.9 (7) | 6.9 (10) | 9.2 (7) | 8.2 (7) | 6.9 (6) | 4/15 |
| GP5-CMAES Bajer 2013instances | 3.0 (2) | 7.5 (6) | 4.9 (4) | 6.5 (10) | 7.6 (9) | 11 (10) | 18 (15) | 2/15 |
| IPOPCMAv3p61 Bajer | 10 (10) | 10 (8) | 11 (8) | 8.9 (10) | 18 (16) | 49 (60) | ∞506 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 4.5 (5) | 7.4 (6) | 6.5 (5) | 7.9 (6) | 17 (12) | 25 (28) | ∞506 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 7.2 (12) | 31 (38) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 7.0 (6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RF1-CMAES Bajer | 7.2 (15) | 21 (22) | 96 (126) | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF1-CMAES Bajer 2013instances | 11 (8) | 20 (24) | 97 (140) | 78 (94) | ∞ | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer | 27 (30) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞502 | 0/15 |
| RF5-CMAES Bajer 2013instances | 12 (15) | 80 (127) | 100 (114) | ∞ | ∞ | ∞ | ∞504 | 0/15 |
| STEPif Posik | 29 (51) | 66 (72) | 49 (60) | 71 (110) | 79 (77) | 90 (166) | 71 (112) | 4/15 |
| STEPifeg Posik | 17 (29) | 45 (108) | 39 (59) | 66 (104) | 73 (109) | 81 (79) | 64 (54) | 4/15 |
| STEPrr Posik | 11 (16) | 44 (77) | 45 (57) | 85 (96) | 119 (169) | 83 (97) | 65 (103) | 4/15 |
| Δ fopt f13, 2-D |
1e1 23 |
1e0 35 |
1e-1 46 |
1e-2 60 |
1e-3 71 |
1e-5 95 |
1e-7 122 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.5 (1) | 3.7 (4) | 18 (18) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 3.9 (2) | 6.0 (4) | 32 (36) | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 4.5 (4) | 6.1 (7) | 9.4 (6) | 16 (17) | 33 (26) | 75 (90) | 341 (212) | 14/15 |
| R-SHADE-10e2 Tanabe | 5.7 (5) | 28 (27) | ∞ | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.5 (1) | 3.8 (2) | 5.6 (3) | 5.1 (2) | 5.2 (2) | 4.9 (2) | 5.0 (1) | 15/15 |
| RL-SHADE-10e2 Tanabe | 3.9 (4) | 8.8 (7) | 32 (37) | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 4.6 (4) | 15 (3) | 20 (5) | 22 (5) | 24 (2) | 25 (2) | 25 (1) | 15/15 |
| SOO Derbel | 2.7 (2) | 4.9 (3) | 15 (8) | 24 (14) | 38 (54) | 113 (139) | 261 (430) | 15/15 |
| BrentSTEPif Posik | 776 (890) | 1796 (1677) | 5996 (5295) | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| BrentSTEPifeg Posik | 532 (853) | 805 (1056) | 1360 (1223) | 4694 (6816) | ∞ | ∞ | ∞2e4 | 0/15 |
| BrentSTEPqi Posik | 423 (490) | 1046 (1131) | 2849 (2943) | 4857 (4733) | ∞ | ∞ | ∞2e4 | 0/15 |
| BrentSTEPrr Posik | 483 (793) | 1255 (1696) | 2962 (2982) | 4875 (6008) | 4120 (4939) | ∞ | ∞2e4 | 0/15 |
| CMA-CSA Atamna | 2.9 (2) | 4.2 (1) | 4.7 (2) | 4.6 (1.0) | 4.6 (0.4) | 4.9 (0.7) | 4.8 (0.4) | 15/15 |
| CMA-MSR Atamna | 3.7 (3) | 4.7 (2) | 5.7 (1) | 5.6 (0.8) | 5.7 (0.7) | 6.3 (0.7) | 6.3 (0.8) | 15/15 |
| CMA-TPA Atamna | 4.4 (3) | 4.9 (2) | 5.1 (2) | 4.9 (2) | 5.5 (1) | 5.2 (0.8) | 5.4 (0.7) | 15/15 |
| GP1-CMAES Bajer | 4.3 (2) | 4.0 (2) | 6.6 (7) | 7.4 (5) | 7.0 (4) | 40 (51) | ∞506 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.7 (2) | 3.7 (3) | 5.3 (4) | 7.7 (9) | 11 (11) | 19 (15) | ∞506 | 0/15 |
| GP5-CMAES Bajer | 2.1 (2) | 3.4 (3) | 3.0 (2) | 2.7 (2) | 3.0 (2) | 9.2 (5) | ∞506 | 0/15 |
| GP5-CMAES Bajer 2013instances | 3.8 (3) | 4.6 (3) | 4.4 (3) | 4.4 (2) | 4.3 (2) | 8.5 (8) | ∞506 | 0/15 |
| IPOPCMAv3p61 Bajer | 3.2 (3) | 8.7 (5) | 8.3 (8) | 8.9 (6) | 10 (11) | ∞ | ∞506 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 3.8 (5) | 5.6 (4) | 6.1 (3) | 7.3 (4) | 12 (8) | ∞ | ∞506 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 2.8 (1) | 21 (21) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.4 (0.7) | 4.2 (4) | 33 (37) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.4 (0.7) | 4.0 (2) | 31 (35) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RF1-CMAES Bajer | 7.2 (11) | 43 (61) | ∞ | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF1-CMAES Bajer 2013instances | 7.8 (11) | 17 (19) | 21 (25) | 22 (20) | 52 (46) | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer | 20 (23) | 64 (79) | ∞ | ∞ | ∞ | ∞ | ∞508 | 0/15 |
| RF5-CMAES Bajer 2013instances | 11 (12) | 63 (56) | 161 (161) | ∞ | ∞ | ∞ | ∞508 | 0/15 |
| STEPif Posik | 403 (436) | 763 (1048) | 1739 (2462) | 4333 (5969) | ∞ | ∞ | ∞2e4 | 0/15 |
| STEPifeg Posik | 553 (850) | 1466 (1841) | ∞ | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| STEPrr Posik | 420 (585) | 1063 (1995) | 2586 (2706) | 4077 (4405) | 3451 (4044) | ∞ | ∞2e4 | 0/15 |
| Δ fopt f14, 2-D |
1e1 1 |
1e0 7.0 |
1e-1 16 |
1e-2 24 |
1e-3 38 |
1e-5 67 |
1e-7 90 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.7 (1) | 1.6 (1) | 1.5 (0.5) | 3.2 (3) | 20 (24) | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 2.3 (2) | 3.2 (3) | 3.8 (2) | 4.7 (2) | 7.6 (5) | ∞ | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 1.7 (2) | 2.0 (3) | 3.6 (1) | 11 (20) | 11 (17) | 14 (10) | 38 (50) | 15/15 |
| R-SHADE-10e2 Tanabe | 2.1 (1) | 3.5 (3) | 5.6 (5) | 11 (7) | 19 (21) | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.1 (2) | 4.0 (3) | 4.0 (0.9) | 4.5 (1) | 4.2 (0.8) | 3.9 (0.5) | 4.0 (0.5) | 15/15 |
| RL-SHADE-10e2 Tanabe | 2.2 (2) | 2.8 (3) | 3.8 (2) | 4.3 (2) | 6.4 (3) | ∞ | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 1.8 (1) | 4.5 (5) | 8.9 (7) | 17 (9) | 17 (7) | 22 (3) | 24 (4) | 15/15 |
| SOO Derbel | 1.1 (0) | 1.9 (2) | 2.6 (1) | 3.8 (2) | 5.9 (2) | 12 (11) | 23 (17) | 15/15 |
| BrentSTEPif Posik | 3.6 (4) | 9.2 (12) | 5.5 (10) | 15 (11) | 1122 (1207) | 4181 (4853) | ∞2e4 | 0/15 |
| BrentSTEPifeg Posik | 3.6 (4) | 9.0 (14) | 5.5 (10) | 15 (28) | 691 (1076) | 4181 (6271) | ∞2e4 | 0/15 |
| BrentSTEPqi Posik | 3.6 (4) | 6.0 (9) | 3.8 (4) | 8.0 (11) | 1166 (1574) | ∞ | ∞2e4 | 0/15 |
| BrentSTEPrr Posik | 3.6 (4) | 8.8 (16) | 5.3 (8) | 8.0 (10) | 574 (529) | 4181 (3957) | 3113 (2445) | 0/15 |
| CMA-CSA Atamna | 1.9 (1) | 2.0 (2) | 3.6 (2) | 4.1 (2) | 4.2 (2) | 5.1 (1) | 5.4 (0.7) | 15/15 |
| CMA-MSR Atamna | 3.8 (4) | 3.0 (2) | 4.5 (2) | 6.3 (2) | 5.7 (1) | 5.7 (0.9) | 6.2 (0.5) | 15/15 |
| CMA-TPA Atamna | 3.9 (5) | 3.7 (3) | 4.9 (3) | 5.4 (2) | 4.8 (2) | 5.0 (0.7) | 5.5 (1) | 15/15 |
| GP1-CMAES Bajer | 4.1 (4) | 2.1 (2) | 2.5 (1) | 2.9 (1) | 3.4 (2) | 8.0 (6) | 41 (39) | 1/15 |
| GP1-CMAES Bajer 2013instances | 2.3 (2) | 2.0 (2) | 2.1 (0.8) | 3.0 (2) | 4.8 (3) | 9.3 (10) | 84 (136) | 0/15 |
| GP5-CMAES Bajer | 1.8 (1) | 2.3 (2) | 2.0 (1) | 2.2 (1) | 2.3 (1) | 5.5 (4) | 82 (91) | 0/15 |
| GP5-CMAES Bajer 2013instances | 3.2 (4) | 2.4 (2) | 1.8 (0.8) | 1.9 (0.7) | 2.3 (1) | 4.2 (3) | 41 (35) | 0/15 |
| IPOPCMAv3p61 Bajer | 3.7 (2) | 2.6 (3) | 3.8 (2) | 4.9 (2) | 5.1 (2) | 7.2 (5) | 42 (48) | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.9 (4) | 3.2 (3) | 3.4 (2) | 4.7 (1) | 5.5 (2) | 6.6 (1) | 27 (23) | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 2.3 (2) | 3.3 (4) | 4.5 (0.6) | 12 (12) | 39 (41) | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.3 (2) | 1.4 (1) | 1.6 (0.6) | 3.5 (3) | ∞ | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.7 (1) | 2.0 (1) | 1.7 (0.6) | 4.8 (6) | 12 (15) | ∞ | ∞100 | 0/15 |
| RF1-CMAES Bajer | 2.7 (2) | 5.2 (6) | 6.2 (7) | 15 (12) | 19 (17) | 109 (94) | 83 (112) | 1/15 |
| RF1-CMAES Bajer 2013instances | 2.6 (4) | 6.7 (7) | 6.4 (7) | 10 (9) | 37 (26) | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer | 5.2 (4) | 23 (38) | 36 (32) | 68 (54) | 58 (63) | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer 2013instances | 1.8 (1) | 51 (48) | 56 (73) | 148 (189) | ∞ | ∞ | ∞506 | 0/15 |
| STEPif Posik | 3.6 (4) | 2.5 (2) | 2.3 (2) | 10 (15) | 2244 (2360) | 4182 (4927) | ∞2e4 | 0/15 |
| STEPifeg Posik | 3.6 (4) | 2.4 (1) | 2.2 (2) | 7.2 (5) | 1246 (1850) | 4182 (4106) | ∞2e4 | 0/15 |
| STEPrr Posik | 3.6 (4) | 2.2 (1) | 1.9 (1) | 3.9 (4) | 640 (790) | 4182 (6196) | ∞2e4 | 0/15 |
| Δ fopt f15, 2-D |
1e1 37 |
1e0 291 |
1e-1 1033 |
1e-2 1066 |
1e-3 1113 |
1e-5 1231 |
1e-7 1412 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 0.86 (0.5) | 5.1 (4) | 1.4 (1.0) | 1.4 (0.8) | ∞ | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 1.2 (0.5) | 4.8 (5) | ∞ | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 0.95 (0.5) | 3.3 (3) | 4.7 (6) | 5.4 (7) | 5.6 (6) | 5.4 (6) | 4.7 (5) | 15/15 |
| R-SHADE-10e2 Tanabe | 1.8 (2) | 5.0 (5) | ∞ | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.0 (0.8) | 1.1 (1) | 0.87 (2) | 0.91 (2) | 0.91 (1) | 0.89 (1) | 0.83 (1) | 15/15 |
| RL-SHADE-10e2 Tanabe | 1.8 (2) | 2.3 (3) | 1.4 (2) | 1.4 (1) | 2.7 (3) | ∞ | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 1.5 (2) | 2.7 (2) | 1.4 (0.5) | 1.8 (0.6) | 2.0 (0.5) | 2.2 (0.3) | 2.2 (0.3) | 15/15 |
| SOO Derbel | 0.75 (0.4) | 0.82 (0.7) | 0.80 (0.4)↑1 | 0.89 (0.7) | 0.91 (0.7) | 1.1 (0.9) | 1.1 (0.8) | 15/15 |
| BrentSTEPif Posik | 22 (8) | 77 (80) | 80 (91) | 81 (88) | 79 (96) | 112 (83) | ∞2e4 | 0/15 |
| BrentSTEPifeg Posik | 28 (11) | 116 (91) | 56 (53) | 55 (51) | 54 (69) | 71 (67) | ∞2e4 | 0/15 |
| BrentSTEPqi Posik | 3.3 (6) | 49 (63) | 45 (57) | 44 (42) | 42 (78) | 50 (57) | 64 (71) | 2/15 |
| BrentSTEPrr Posik | 4.2 (10) | 47 (45) | 44 (49) | 55 (45) | 54 (45) | 107 (103) | 192 (312) | 1/15 |
| CMA-CSA Atamna | 1.1 (0.9) | 1.4 (2) | 1.5 (2) | 1.6 (2) | 1.6 (2) | 1.5 (2) | 1.4 (1) | 15/15 |
| CMA-MSR Atamna | 0.87 (0.6) | 2.3 (3) | 2.6 (2) | 2.7 (2) | 2.7 (2) | 2.6 (1) | 2.4 (1) | 15/15 |
| CMA-TPA Atamna | 1.5 (1) | 3.8 (2) | 2.3 (2) | 2.5 (2) | 2.4 (2) | 2.3 (2) | 2.2 (2) | 15/15 |
| GP1-CMAES Bajer | 0.58 (0.3)↑1 | 1.3 (1) | 1.5 (2) | 2.1 (2) | 2.0 (2) | 1.9 (3) | 1.6 (2) | 3/15 |
| GP1-CMAES Bajer 2013instances | 1.3 (0.9) | 2.8 (3) | 1.6 (2) | 1.6 (2) | 1.6 (3) | 1.5 (2) | 1.7 (2) | 3/15 |
| GP5-CMAES Bajer | 0.50 (0.4)↑0 | 1.6 (2) | 3.4 (4) | 7.0 (9) | 6.7 (9) | 6.1 (8) | 5.3 (7) | 1/15 |
| GP5-CMAES Bajer 2013instances | 0.75 (0.4) | 1.6 (1) | 0.81 (1) | 0.93 (1) | 0.90 (0.6) | 0.83 (0.7) | 0.90 (1) | 3/15 |
| IPOPCMAv3p61 Bajer | 2.4 (1) | 2.3 (2) | 7.2 (6) | 7.0 (9) | 6.7 (8) | 6.1 (5) | ∞506 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 1.3 (1) | 2.3 (2) | 2.2 (3) | 2.2 (2) | 2.1 (3) | 1.9 (3) | 1.7 (1) | 2/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 2.2 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 0.90 (0.7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.4 (1) | 2.4 (2) | 1.4 (1) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RF1-CMAES Bajer | 0.95 (0.6) | 4.1 (6) | 3.4 (7) | 3.4 (3) | 3.3 (4) | 6.1 (8) | 5.3 (5) | 1/15 |
| RF1-CMAES Bajer 2013instances | 1.9 (0.8) | 5.5 (8) | 7.0 (8) | 6.8 (8) | ∞ | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer | 8.2 (17) | 24 (35) | 7.1 (10) | 6.9 (9) | 6.6 (5) | ∞ | ∞502 | 0/15 |
| RF5-CMAES Bajer 2013instances | 6.1 (10) | 24 (32) | ∞ | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| STEPif Posik | 1.7 (0.8) | 35 (36) | 27 (28) | 26 (25) | 26 (28) | 37 (48) | 89 (127) | 0/15 |
| STEPifeg Posik | 1.7 (0.8) | 31 (46) | 37 (44) | 36 (54) | 35 (26) | 32 (46) | 30 (40) | 5/15 |
| STEPrr Posik | 1.6 (0.6) | 29 (39) | 39 (36) | 38 (43) | 37 (57) | 44 (39) | 86 (113) | 2/15 |
| Δ fopt f16, 2-D |
1e1 9.0 |
1e0 50 |
1e-1 174 |
1e-2 326 |
1e-3 358 |
1e-5 409 |
1e-7 538 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 2.0 (2) | 1.2 (1) | 1.2 (1) | 2.2 (3) | ∞ | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 3.3 (2) | 2.8 (4) | 8.3 (11) | 4.5 (5) | ∞ | ∞ | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 4.7 (7) | 3.8 (4) | 2.9 (3) | 4.3 (5) | 4.1 (4) | 4.8 (6) | 4.2 (4) | 15/15 |
| R-SHADE-10e2 Tanabe | 3.2 (3) | 3.0 (2) | 3.9 (5) | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.6 (2) | 2.4 (2) | 2.2 (3) | 1.8 (2) | 1.8 (1) | 2.2 (2) | 1.8 (1) | 15/15 |
| RL-SHADE-10e2 Tanabe | 3.0 (3) | 3.9 (4) | 5.1 (6) | 4.3 (5) | 8.3 (8) | ∞ | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 4.4 (5) | 4.1 (5) | 5.8 (5) | 6.6 (3) | 8.9 (4) | 10 (5) | 9.2 (4) | 15/15 |
| SOO Derbel | 2.2 (2) | 1.5 (1) | 1.8 (3) | 1.4 (2) | 1.6 (2) | 2.0 (1) | 2.1 (2) | 15/15 |
| BrentSTEPif Posik | 3.1 (4) | 8.6 (1) | 29 (41) | 37 (40) | 45 (49) | 151 (143) | 249 (385) | 2/15 |
| BrentSTEPifeg Posik | 3.3 (4) | 18 (50) | 32 (52) | 46 (46) | 57 (89) | 149 (133) | 256 (336) | 2/15 |
| BrentSTEPqi Posik | 2.9 (3) | 5.9 (4) | 28 (37) | 42 (64) | 72 (89) | 142 (195) | 251 (376) | 2/15 |
| BrentSTEPrr Posik | 3.9 (5) | 6.9 (3) | 20 (27) | 36 (53) | 55 (55) | 146 (138) | 161 (190) | 2/15 |
| CMA-CSA Atamna | 10 (7) | 5.9 (9) | 3.0 (3) | 2.0 (2) | 2.3 (2) | 2.4 (1) | 2.0 (1) | 15/15 |
| CMA-MSR Atamna | 13 (4) | 11 (12) | 10 (13) | 5.4 (7) | 5.2 (7) | 4.9 (6) | 4.0 (5) | 15/15 |
| CMA-TPA Atamna | 2.9 (3) | 4.2 (4) | 3.9 (4) | 2.5 (3) | 2.7 (2) | 2.8 (2) | 2.3 (2) | 15/15 |
| GP1-CMAES Bajer | 1.7 (1) | 6.9 (6) | 6.5 (6) | 3.7 (4) | 6.2 (7) | 9.0 (8) | 14 (14) | 1/15 |
| GP1-CMAES Bajer 2013instances | 3.4 (3) | 6.4 (6) | 8.5 (11) | 6.8 (8) | 6.5 (11) | 5.9 (6) | ∞506 | 0/15 |
| GP5-CMAES Bajer | 1.6 (2) | 4.2 (5) | 5.3 (10) | 4.8 (7) | 6.0 (6) | 5.7 (4) | ∞506 | 0/15 |
| GP5-CMAES Bajer 2013instances | 8.3 (18) | 14 (12) | 4.8 (4) | 5.4 (3) | 6.6 (11) | ∞ | ∞506 | 0/15 |
| IPOPCMAv3p61 Bajer | 4.1 (6) | 5.5 (6) | 2.2 (2) | 1.4 (1) | 1.6 (2) | 1.9 (2) | 1.5 (1) | 8/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.5 (3) | 3.9 (5) | 2.8 (2) | 2.1 (2) | 2.9 (4) | 3.2 (5) | 2.6 (3) | 5/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 3.1 (3) | 3.1 (3) | 8.5 (9) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.2 (1) | 2.1 (2) | 2.6 (3) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.6 (5) | 1.2 (1) | 1.9 (2) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RF1-CMAES Bajer | 6.8 (3) | 6.9 (10) | 12 (18) | 11 (9) | 10 (11) | ∞ | ∞506 | 0/15 |
| RF1-CMAES Bajer 2013instances | 2.1 (3) | 8.1 (10) | 12 (11) | 11 (16) | 20 (24) | 18 (14) | 14 (16) | 1/15 |
| RF5-CMAES Bajer | 1.8 (1) | 13 (13) | 7.3 (9) | 11 (12) | 20 (29) | ∞ | ∞502 | 0/15 |
| RF5-CMAES Bajer 2013instances | 4.3 (2) | 10 (15) | 12 (13) | ∞ | ∞ | ∞ | ∞502 | 0/15 |
| STEPif Posik | 2.3 (2) | 27 (27) | 29 (56) | 34 (39) | 35 (55) | 89 (119) | 242 (320) | 2/15 |
| STEPifeg Posik | 2.4 (2) | 14 (1) | 21 (28) | 31 (31) | 33 (35) | 69 (57) | 89 (104) | 4/15 |
| STEPrr Posik | 2.4 (2) | 17 (34) | 21 (30) | 19 (31) | 37 (56) | 102 (112) | 152 (238) | 2/15 |
| Δ fopt f17, 2-D |
1e1 3.0 |
1e0 61 |
1e-1 133 |
1e-2 275 |
1e-3 396 |
1e-5 1086 |
1e-7 1657 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.4 (1) | 0.88 (1.0) | 2.5 (2) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 2.9 (2) | 1.1 (0.8) | 1.9 (2) | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 1.6 (1) | 0.90 (0.9) | 1.8 (0.9) | 2.2 (2) | 2.6 (2) | 3.5 (3) | 3.2 (2) | 15/15 |
| R-SHADE-10e2 Tanabe | 2.4 (3) | 1.5 (1) | 11 (12) | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.1 (2) | 1.0 (0.5) | 1.2 (0.5) | 0.96 (0.2) | 0.93 (0.3) | 0.97 (0.5) | 0.75 (0.3) | 15/15 |
| RL-SHADE-10e2 Tanabe | 2.1 (3) | 1.3 (1) | 1.8 (2) | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 1.7 (2) | 2.1 (1) | 4.7 (1) | 4.4 (0.9) | 4.7 (0.7) | 3.0 (0.3) | 2.6 (0.2) | 15/15 |
| SOO Derbel | 1.6 (1) | 0.57 (0.3) | 0.97 (0.5) | 1.0 (0.6) | 1.3 (0.8) | 1.7 (1.0) | 1.6 (0.7) | 15/15 |
| BrentSTEPif Posik | 2.0 (2) | 35 (84) | 37 (53) | 73 (96) | 160 (155) | ∞ | ∞2e4 | 0/15 |
| BrentSTEPifeg Posik | 2.0 (2) | 6.2 (18) | 48 (84) | 59 (63) | 130 (100) | ∞ | ∞2e4 | 0/15 |
| BrentSTEPqi Posik | 2.0 (2) | 27 (50) | 33 (41) | 41 (59) | 64 (73) | ∞ | ∞2e4 | 0/15 |
| BrentSTEPrr Posik | 2.0 (2) | 32 (37) | 78 (84) | 88 (150) | 102 (109) | ∞ | ∞2e4 | 0/15 |
| CMA-CSA Atamna | 2.7 (2) | 2.0 (5) | 2.0 (3) | 1.5 (2) | 1.6 (1) | 1.8 (2) | 1.4 (1) | 15/15 |
| CMA-MSR Atamna | 18 (5) | 4.5 (5) | 3.3 (3) | 2.6 (2) | 2.2 (1) | 1.9 (0.7) | 1.5 (0.5) | 15/15 |
| CMA-TPA Atamna | 3.2 (4) | 1.1 (0.9) | 2.1 (3) | 2.0 (2) | 2.0 (1) | 1.8 (0.9) | 1.4 (0.7) | 15/15 |
| GP1-CMAES Bajer | 14 (4) | 2.8 (4) | 4.1 (4) | 2.7 (3) | 4.4 (4) | ∞ | ∞506 | 0/15 |
| GP1-CMAES Bajer 2013instances | 3.4 (5) | 4.1 (7) | 5.1 (7) | 5.8 (5) | 18 (15) | ∞ | ∞506 | 0/15 |
| GP5-CMAES Bajer | 14 (34) | 6.5 (8) | 6.3 (8) | 28 (38) | ∞ | ∞ | ∞508 | 0/15 |
| GP5-CMAES Bajer 2013instances | 6.8 (11) | 5.6 (5) | 5.1 (8) | 5.8 (7) | 9.0 (17) | ∞ | ∞508 | 0/15 |
| IPOPCMAv3p61 Bajer | 2.9 (4) | 1.4 (1) | 2.0 (2) | 1.8 (2) | 1.7 (1) | 3.4 (3) | ∞506 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.2 (2) | 3.0 (4) | 3.1 (2) | 2.6 (2) | 2.8 (2) | ∞ | ∞506 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 1.6 (1) | 1.3 (1) | 11 (13) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.3 (2) | 1.1 (0.9) | 5.3 (6) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.7 (2) | 0.69 (0.5) | 3.5 (3) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RF1-CMAES Bajer | 2.7 (2) | 2.7 (4) | 2.8 (2) | 4.3 (6) | 9.3 (13) | ∞ | ∞506 | 0/15 |
| RF1-CMAES Bajer 2013instances | 2.3 (2) | 3.8 (4) | 6.5 (8) | 8.5 (9) | 9.2 (8) | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer | 12 (4) | 12 (12) | 25 (28) | 27 (30) | ∞ | ∞ | ∞502 | 0/15 |
| RF5-CMAES Bajer 2013instances | 44 (85) | 16 (17) | 55 (74) | ∞ | ∞ | ∞ | ∞502 | 0/15 |
| STEPif Posik | 2.0 (2) | 4.1 (6) | 7.9 (14) | 10 (13) | 45 (49) | 264 (286) | ∞2e4 | 0/15 |
| STEPifeg Posik | 2.0 (2) | 1.8 (3) | 6.6 (9) | 18 (17) | 34 (34) | ∞ | ∞2e4 | 0/15 |
| STEPrr Posik | 2.0 (2) | 1.8 (3) | 3.8 (4) | 22 (37) | 31 (31) | ∞ | ∞2e4 | 0/15 |
| Δ fopt f18, 2-D |
1e1 19 |
1e0 134 |
1e-1 666 |
1e-2 1249 |
1e-3 1708 |
1e-5 2438 |
1e-7 2858 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 0.87 (0.9) | 1.7 (2) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 1.7 (0.9) | 1.2 (0.9) | 1.4 (1) | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 4.9 (1) | 3.0 (4) | 1.4 (2) | 1.9 (3) | 1.9 (2) | 15 (19) | 14 (16) | 15/15 |
| R-SHADE-10e2 Tanabe | 1.2 (1) | 2.7 (2) | ∞ | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.2 (1) | 2.3 (5) | 0.66 (1) | 0.44 (0.5) | 0.54 (0.4) | 0.81 (0.6) | 0.77 (0.5) | 15/15 |
| RL-SHADE-10e2 Tanabe | 1.4 (0.8) | 1.5 (2) | ∞ | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 2.1 (3) | 2.7 (1) | 1.6 (0.5) | 1.6 (0.2) | 1.5 (0.2) | 1.6 (0.1) | 1.8 (0.2) | 15/15 |
| SOO Derbel | 0.95 (0.5) | 0.90 (0.5) | 0.65 (0.6) | 0.91 (0.6) | 2.0 (3) | 4.3 (4) | 9.0 (9) | 15/15 |
| BrentSTEPif Posik | 0.78 (0.3) | 149 (225) | 210 (190) | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| BrentSTEPifeg Posik | 0.77 (0.2) | 120 (146) | 138 (183) | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| BrentSTEPqi Posik | 0.77 (0.3) | 123 (133) | 74 (106) | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| BrentSTEPrr Posik | 0.76 (0.2) | 113 (117) | 135 (159) | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| CMA-CSA Atamna | 1.5 (1) | 3.9 (3) | 1.3 (1) | 0.94 (0.9) | 0.78 (0.7) | 1.1 (0.5) | 1.1 (0.5) | 15/15 |
| CMA-MSR Atamna | 5.0 (2) | 5.8 (7) | 1.7 (1) | 1.2 (0.8) | 1.0 (0.4) | 1.1 (0.5) | 1.3 (0.8) | 15/15 |
| CMA-TPA Atamna | 1.7 (2) | 3.8 (3) | 1.3 (0.7) | 0.91 (0.4) | 0.78 (0.3) | 1.0 (0.7) | 1.1 (0.6) | 15/15 |
| GP1-CMAES Bajer | 1.5 (0.6) | 3.4 (4) | 1.9 (1) | 2.9 (2) | ∞ | ∞ | ∞506 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.7 (2) | 5.4 (7) | 2.5 (2) | 6.0 (7) | 4.4 (5) | ∞ | ∞506 | 0/15 |
| GP5-CMAES Bajer | 6.3 (13) | 7.5 (5) | 5.3 (8) | 6.1 (8) | 4.4 (4) | ∞ | ∞502 | 0/15 |
| GP5-CMAES Bajer 2013instances | 13 (31) | 7.1 (12) | ∞ | ∞ | ∞ | ∞ | ∞502 | 0/15 |
| IPOPCMAv3p61 Bajer | 0.97 (0.8) | 4.1 (8) | 5.2 (8) | 2.8 (3) | 2.2 (3) | ∞ | ∞506 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 1.3 (1) | 3.4 (4) | 1.8 (2) | 1.4 (1) | 2.2 (2) | ∞ | ∞506 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 1.9 (2) | 2.7 (3) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.3 (0.7) | 1.3 (1) | 2.2 (2) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.1 (0.5) | 2.0 (2) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RF1-CMAES Bajer | 1.6 (2) | 8.5 (9) | 11 (16) | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF1-CMAES Bajer 2013instances | 1.4 (1) | 8.4 (7) | ∞ | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer | 2.1 (0.7) | 15 (18) | ∞ | ∞ | ∞ | ∞ | ∞508 | 0/15 |
| RF5-CMAES Bajer 2013instances | 7.1 (14) | 12 (16) | ∞ | ∞ | ∞ | ∞ | ∞502 | 0/15 |
| STEPif Posik | 0.86 (0.4) | 140 (158) | 85 (92) | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| STEPifeg Posik | 0.88 (0.6) | 90 (102) | 94 (71) | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| STEPrr Posik | 0.88 (0.4) | 147 (178) | 125 (113) | 233 (221) | ∞ | ∞ | ∞2e4 | 0/15 |
| Δ fopt f19, 2-D |
1e1 1 |
1e0 1 |
1e-1 26 |
1e-2 216 |
1e-3 227 |
1e-5 252 |
1e-7 276 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 5.8 (6) | 40 (40) | 9.5 (13) | 6.6 (9) | ∞ | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 4.2 (4) | 40 (37) | 4.2 (3) | 6.7 (5) | 13 (11) | ∞ | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 5.1 (4) | 28 (22) | 5.7 (6) | 11 (11) | 12 (11) | 22 (31) | 23 (28) | 15/15 |
| R-SHADE-10e2 Tanabe | 5.3 (6) | 42 (54) | 8.5 (9) | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 4.7 (4) | 29 (13) | 3.3 (4) | 5.2 (7) | 6.0 (7) | 5.8 (6) | 5.6 (5) | 15/15 |
| RL-SHADE-10e2 Tanabe | 5.4 (4) | 41 (45) | 7.2 (6) | 6.5 (6) | 13 (10) | ∞ | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 7.0 (4) | 54 (56) | 7.7 (9) | 9.1 (7) | 10 (7) | 14 (7) | 17 (7) | 15/15 |
| SOO Derbel | 1 (0) | 1 (0)★2 | 5.0 (3) | 17 (17) | 30 (27) | 98 (105) | 167 (174) | 15/15 |
| BrentSTEPif Posik | 4.7 (4) | 22 (22) | 4.3 (4) | 33 (49) | 117 (225) | 235 (308) | 1040 (1251) | 1/15 |
| BrentSTEPifeg Posik | 4.7 (4) | 23 (24) | 4.0 (3) | 15 (22) | 70 (91) | 533 (732) | ∞2e4 | 0/15 |
| BrentSTEPqi Posik | 4.7 (4) | 23 (24) | 3.8 (3) | 35 (37) | 66 (71) | 245 (217) | 1025 (1125) | 0/15 |
| BrentSTEPrr Posik | 4.7 (4) | 21 (22) | 3.7 (3) | 28 (46) | 124 (171) | 352 (290) | ∞2e4 | 0/15 |
| CMA-CSA Atamna | 5.5 (4) | 29 (39) | 21 (43) | 13 (18) | 13 (17) | 17 (15) | 15 (14) | 15/15 |
| CMA-MSR Atamna | 4.5 (4) | 31 (18) | 12 (16) | 13 (14) | 18 (15) | 33 (15) | 125 (365) | 13/15 |
| CMA-TPA Atamna | 3.3 (4) | 38 (24) | 6.3 (6) | 6.2 (7) | 7.1 (8) | 7.9 (6) | 7.6 (6) | 15/15 |
| GP1-CMAES Bajer | 4.3 (5) | 51 (44) | 3.7 (3) | 10 (20) | 31 (48) | ∞ | ∞506 | 0/15 |
| GP1-CMAES Bajer 2013instances | 5.6 (5) | 34 (32) | 11 (13) | 16 (27) | 16 (14) | ∞ | ∞506 | 0/15 |
| GP5-CMAES Bajer | 4.6 (4) | 42 (34) | 7.6 (9) | 10 (11) | 16 (13) | 15 (16) | ∞508 | 0/15 |
| GP5-CMAES Bajer 2013instances | 4.0 (4) | 164 (190) | 18 (25) | 16 (13) | 16 (21) | 29 (29) | ∞504 | 0/15 |
| IPOPCMAv3p61 Bajer | 4.1 (5) | 57 (42) | 12 (11) | 5.5 (5) | 10 (10) | 10 (9) | 13 (19) | 2/15 |
| IPOPCMAv3p61 Bajer 2013instances | 5.2 (4) | 29 (32) | 14 (17) | 34 (44) | ∞ | ∞ | ∞506 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 4.1 (4) | 35 (44) | 18 (13) | 6.9 (7) | ∞ | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 3.9 (4) | 41 (39) | 8.4 (9) | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 3.7 (3) | 42 (53) | 16 (19) | 6.6 (8) | ∞ | ∞ | ∞100 | 0/15 |
| RF1-CMAES Bajer | 6.3 (6) | 178 (249) | 15 (17) | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF1-CMAES Bajer 2013instances | 8.6 (8) | 46 (32) | 20 (30) | 10 (14) | 15 (11) | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer | 6.9 (6) | 93 (132) | 16 (24) | 34 (56) | 32 (26) | ∞ | ∞508 | 0/15 |
| RF5-CMAES Bajer 2013instances | 6.6 (9) | 51 (64) | 12 (12) | ∞ | ∞ | ∞ | ∞504 | 0/15 |
| STEPif Posik | 5.8 (6) | 20 (28) | 6.3 (5) | 25 (32) | 116 (118) | 339 (360) | ∞2e4 | 0/15 |
| STEPifeg Posik | 5.9 (6) | 20 (30) | 6.9 (7) | 31 (44) | 61 (64) | 245 (237) | 539 (615) | 1/15 |
| STEPrr Posik | 5.8 (6) | 19 (20) | 5.2 (4) | 28 (32) | 110 (98) | 231 (257) | ∞2e4 | 0/15 |
| Δ fopt f20, 2-D |
1e1 4.0 |
1e0 61 |
1e-1 365 |
1e-2 366 |
1e-3 366 |
1e-5 370 |
1e-7 375 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.7 (1) | 5.5 (5) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 2.0 (2) | 2.8 (2) | 1.4 (2) | 1.9 (1) | 8.2 (6) | ∞ | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 2.7 (3) | 3.1 (5) | 5.1 (6) | 6.0 (6) | 6.6 (7) | 8.2 (8) | 8.6 (8) | 15/15 |
| R-SHADE-10e2 Tanabe | 3.4 (5) | 4.4 (7) | 3.9 (5) | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.8 (3) | 4.1 (5) | 3.2 (3) | 3.5 (3) | 3.7 (3) | 3.9 (3) | 4.1 (3) | 15/15 |
| RL-SHADE-10e2 Tanabe | 2.9 (4) | 4.1 (3) | 3.9 (5) | 8.0 (11) | 8.2 (5) | ∞ | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 3.4 (4) | 5.0 (3) | 17 (54) | 18 (54) | 19 (54) | 20 (54) | 21 (54) | 15/15 |
| SOO Derbel | 3.6 (0.1) | 1.8 (8e-3) | 5.1 (5e-3) | 5.5 (1e-2) | 5.6 (8e-3) | 5.8 (9e-3) | 6.3 (8e-3) | 15/15 |
| BrentSTEPif Posik | 15 (19) | 140 (165) | 30 (31) | 32 (29) | 40 (51) | 56 (43) | 80 (77) | 6/15 |
| BrentSTEPifeg Posik | 14 (15) | 62 (102) | 19 (23) | 20 (23) | 21 (24) | 23 (22) | 36 (39) | 12/15 |
| BrentSTEPqi Posik | 12 (10) | 33 (71) | 13 (22) | 14 (22) | 15 (25) | 18 (29) | 28 (31) | 11/15 |
| BrentSTEPrr Posik | 14 (12) | 40 (77) | 26 (48) | 26 (33) | 27 (28) | 29 (29) | 34 (35) | 10/15 |
| CMA-CSA Atamna | 2.6 (2) | 5.4 (7) | 8.2 (10) | 9.2 (10) | 10 (10) | 10 (11) | 10 (11) | 15/15 |
| CMA-MSR Atamna | 2.0 (2) | 12 (16) | 28 (31) | 45 (49) | 70 (48) | 98 (238) | 102 (245) | 15/15 |
| CMA-TPA Atamna | 4.0 (6) | 18 (27) | 13 (9) | 15 (16) | 16 (17) | 17 (18) | 17 (18) | 15/15 |
| GP1-CMAES Bajer | 2.2 (2) | 7.0 (5) | 5.8 (6) | 9.3 (9) | 9.5 (9) | 9.5 (10) | 9.5 (14) | 2/15 |
| GP1-CMAES Bajer 2013instances | 1.9 (2) | 8.2 (13) | 4.2 (6) | 4.3 (3) | 6.2 (5) | 6.3 (6) | 9.5 (8) | 2/15 |
| GP5-CMAES Bajer | 2.1 (2) | 7.4 (8) | 4.3 (7) | 6.0 (10) | 6.0 (8) | 9.1 (11) | 9.0 (14) | 2/15 |
| GP5-CMAES Bajer 2013instances | 2.0 (2) | 12 (12) | 9.3 (9) | 9.4 (8) | 9.4 (14) | 9.4 (9) | 9.4 (14) | 2/15 |
| IPOPCMAv3p61 Bajer | 3.0 (4) | 25 (27) | 20 (24) | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.2 (2) | 25 (23) | 20 (29) | 20 (28) | 20 (22) | 20 (22) | 20 (24) | 1/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 3.2 (2) | 12 (12) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.2 (1) | 25 (19) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.3 (2) | 7.7 (9) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RF1-CMAES Bajer | 1.4 (1) | 9.0 (10) | 10 (13) | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF1-CMAES Bajer 2013instances | 2.2 (2) | 19 (36) | ∞ | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer | 15 (44) | 35 (53) | 21 (16) | ∞ | ∞ | ∞ | ∞508 | 0/15 |
| RF5-CMAES Bajer 2013instances | 33 (65) | 39 (43) | 20 (22) | ∞ | ∞ | ∞ | ∞504 | 0/15 |
| STEPif Posik | 4.7 (7) | 44 (96) | 18 (21) | 19 (21) | 20 (21) | 25 (22) | 35 (25) | 11/15 |
| STEPifeg Posik | 4.5 (6) | 36 (62) | 11 (14) | 12 (14) | 13 (14) | 20 (21) | 32 (36) | 12/15 |
| STEPrr Posik | 3.8 (4) | 35 (53) | 16 (27) | 16 (27) | 17 (27) | 22 (26) | 37 (37) | 11/15 |
| Δ fopt f21, 2-D |
1e1 2.0 |
1e0 51 |
1e-1 174 |
1e-2 276 |
1e-3 290 |
1e-5 324 |
1e-7 330 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 0.93 (0.5) | 0.82 (0.7) | 0.51 (0.5) | 0.78 (0.7) | 1.6 (2) | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 1.4 (1) | 1.9 (4) | 1.7 (2) | 1.4 (2) | 2.2 (2) | 2.9 (3) | 4.4 (6) | 0/15 |
| R-DE-10e5 Tanabe | 1.1 (0.8) | 7.1 (13) | 3.4 (4) | 2.6 (3) | 2.9 (3) | 3.0 (2) | 3.3 (2) | 15/15 |
| R-SHADE-10e2 Tanabe | 1.2 (0.8) | 1.1 (1) | 0.80 (0.8) | 1.1 (0.9) | 4.7 (6) | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.1 (1) | 1.3 (1) | 2.1 (2) | 1.5 (1) | 1.5 (2) | 1.6 (1) | 1.7 (1) | 15/15 |
| RL-SHADE-10e2 Tanabe | 0.93 (1) | 0.89 (0.8) | 0.76 (0.9) | 1.1 (0.8) | 1.5 (2) | 4.5 (5) | 9.1 (14) | 1/15 |
| RL-SHADE-10e5 Tanabe | 1.3 (0.8) | 1.2 (1) | 0.98 (0.8) | 1.1 (1) | 1.7 (1) | 3.0 (0.8) | 3.7 (0.9) | 15/15 |
| SOO Derbel | 0.73 (0.5) | 0.68 (0.5) | 0.44 (0.4) | 0.38 (0.4) | 0.57 (0.8) | 0.74 (0.9) | 1.0 (0.9) | 15/15 |
| BrentSTEPif Posik | 1.8 (2) | 90 (196) | 38 (63) | 28 (37) | 30 (55) | 40 (65) | 48 (73) | 8/15 |
| BrentSTEPifeg Posik | 1.8 (2) | 24 (68) | 26 (58) | 17 (37) | 17 (37) | 19 (31) | 34 (48) | 11/15 |
| BrentSTEPqi Posik | 1.8 (2) | 19 (51) | 32 (58) | 21 (36) | 21 (36) | 23 (31) | 39 (55) | 9/15 |
| BrentSTEPrr Posik | 1.8 (2) | 41 (62) | 38 (74) | 25 (36) | 24 (35) | 24 (37) | 35 (43) | 11/15 |
| CMA-CSA Atamna | 1.3 (1) | 2.6 (6) | 3.3 (5) | 3.0 (6) | 3.4 (5) | 3.2 (5) | 3.3 (5) | 15/15 |
| CMA-MSR Atamna | 1.6 (1) | 11 (18) | 120 (170) | 82 (109) | 229 (448) | 315 (315) | 310 (312) | 10/15 |
| CMA-TPA Atamna | 1.2 (0.8) | 59 (30) | 49 (83) | 32 (52) | 62 (50) | 131 (312) | 136 (307) | 13/15 |
| GP1-CMAES Bajer | 1.1 (1) | 4.4 (10) | 2.3 (4) | 1.6 (2) | 1.6 (2) | 1.5 (2) | 1.7 (1) | 8/15 |
| GP1-CMAES Bajer 2013instances | 1.5 (2) | 10 (10) | 3.8 (7) | 3.1 (3) | 3.1 (5) | 2.9 (4) | 4.6 (8) | 4/15 |
| GP5-CMAES Bajer | 1.3 (1) | 9.0 (15) | 4.2 (5) | 4.1 (5) | 3.9 (4) | 3.7 (5) | 6.4 (11) | 2/15 |
| GP5-CMAES Bajer 2013instances | 1.3 (1) | 8.4 (10) | 5.4 (6) | 4.3 (5) | 5.2 (6) | 4.8 (6) | 6.8 (7) | 2/15 |
| IPOPCMAv3p61 Bajer | 0.80 (0.5) | 3.3 (6) | 2.8 (3) | 2.3 (3) | 2.3 (3) | 2.7 (3) | 2.8 (2) | 6/15 |
| IPOPCMAv3p61 Bajer 2013instances | 1.3 (1) | 3.5 (6) | 4.7 (6) | 5.4 (8) | 5.2 (6) | 4.8 (4) | 4.8 (6) | 4/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 1.1 (0.8) | 0.99 (0.7) | 0.68 (0.5) | 0.68 (0.6) | 1.2 (0.8) | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.1 (1) | 0.58 (0.5) | 0.34 (0.2)↑1 | 0.38 (0.2) | 0.77 (0.4) | 2.3 (2) | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.2 (0.8) | 0.71 (0.4) | 0.32 (0.2)↑1 | 0.41 (0.2) | 0.44 (0.4) | 1.1 (0.9) | ∞100 | 0/15 |
| RF1-CMAES Bajer | 1.0 (0.8) | 12 (15) | 12 (14) | 7.7 (13) | 7.4 (9) | 6.7 (6) | 11 (10) | 1/15 |
| RF1-CMAES Bajer 2013instances | 1 (0.8) | 16 (20) | 19 (32) | 12 (12) | 11 (11) | 10 (12) | 10 (13) | 2/15 |
| RF5-CMAES Bajer | 1.5 (1) | 10 (9) | 5.7 (6) | 4.4 (5) | 5.7 (4) | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer 2013instances | 1.4 (1) | 4.1 (6) | 6.9 (7) | 7.9 (11) | 7.6 (8) | 6.9 (5) | 11 (16) | 0/15 |
| STEPif Posik | 1.7 (2) | 90 (196) | 59 (77) | 38 (49) | 38 (80) | 36 (42) | 45 (47) | 10/15 |
| STEPifeg Posik | 1.7 (2) | 76 (140) | 55 (89) | 35 (37) | 35 (48) | 36 (62) | 42 (102) | 9/15 |
| STEPrr Posik | 1.7 (2) | 77 (89) | 65 (115) | 48 (73) | 46 (70) | 43 (55) | 62 (98) | 8/15 |
| Δ fopt f22, 2-D |
1e1 5.0 |
1e0 27 |
1e-1 168 |
1e-2 218 |
1e-3 249 |
1e-5 289 |
1e-7 306 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.7 (2) | 1.1 (0.8) | 0.90 (0.9) | 3.4 (3) | 6.2 (7) | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 1.3 (1) | 2.1 (2) | 0.64 (0.7) | 1.1 (0.6) | 1.7 (2) | 5.1 (4) | 10 (11) | 1/15 |
| R-DE-10e5 Tanabe | 1.5 (1) | 11 (7) | 3.0 (3) | 2.6 (3) | 2.4 (2) | 2.3 (2) | 2.6 (2) | 15/15 |
| R-SHADE-10e2 Tanabe | 0.63 (0.5) | 2.9 (3) | 1.5 (1) | 1.6 (1) | 3.8 (4) | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 0.93 (0.8) | 4.0 (3) | 1.9 (3) | 1.7 (2) | 1.7 (2) | 1.6 (2) | 1.7 (2) | 15/15 |
| RL-SHADE-10e2 Tanabe | 1.5 (2) | 2.2 (4) | 0.89 (1) | 2.3 (3) | 3.5 (4) | 4.9 (6) | 4.7 (6) | 1/15 |
| RL-SHADE-10e5 Tanabe | 0.44 (0.3)↑1 | 2.5 (3) | 17 (2) | 13 (2) | 13 (2) | 12 (2) | 13 (2) | 15/15 |
| SOO Derbel | 1.0 (1) | 0.90 (1) | 0.71 (0.9) | 0.82 (0.9) | 1.7 (1) | 4.1 (4) | 4.2 (4) | 15/15 |
| BrentSTEPif Posik | 2.1 (2) | 60 (38) | 80 (123) | 263 (229) | 230 (229) | ∞ | ∞2e4 | 0/15 |
| BrentSTEPifeg Posik | 2.3 (2) | 23 (43) | 94 (152) | 150 (182) | 196 (197) | ∞ | ∞2e4 | 0/15 |
| BrentSTEPqi Posik | 2.7 (2) | 24 (39) | 90 (124) | 154 (171) | 235 (294) | ∞ | ∞2e4 | 0/15 |
| BrentSTEPrr Posik | 2.5 (2) | 50 (76) | 85 (93) | 151 (122) | 144 (163) | 971 (1073) | ∞2e4 | 0/15 |
| CMA-CSA Atamna | 2.3 (2) | 16 (24) | 14 (8) | 12 (9) | 10 (8) | 15 (36) | 15 (35) | 15/15 |
| CMA-MSR Atamna | 2.3 (4) | 21 (33) | 18 (16) | 75 (39) | 75 (61) | 115 (346) | 115 (328) | 13/15 |
| CMA-TPA Atamna | 1.2 (1) | 13 (15) | 7.6 (6) | 65 (5) | 63 (21) | 111 (338) | 105 (307) | 13/15 |
| GP1-CMAES Bajer | 1.1 (1) | 8.2 (10) | 3.8 (6) | 5.0 (6) | 6.1 (5) | 5.3 (8) | 5.4 (4) | 4/15 |
| GP1-CMAES Bajer 2013instances | 8.7 (3) | 6.0 (10) | 6.8 (9) | 5.3 (7) | 4.7 (7) | 5.6 (6) | 5.6 (6) | 3/15 |
| GP5-CMAES Bajer | 1.3 (2) | 4.8 (9) | 2.1 (3) | 2.0 (2) | 2.3 (2) | 2.1 (3) | 3.1 (4) | 4/15 |
| GP5-CMAES Bajer 2013instances | 1.4 (1) | 3.9 (5) | 2.1 (3) | 1.7 (2) | 1.6 (2) | 2.3 (3) | 4.1 (6) | 3/15 |
| IPOPCMAv3p61 Bajer | 1.7 (2) | 8.4 (10) | 3.4 (5) | 3.5 (5) | 3.3 (3) | 2.9 (3) | 2.9 (3) | 7/15 |
| IPOPCMAv3p61 Bajer 2013instances | 1.5 (2) | 4.6 (10) | 4.2 (5) | 4.2 (5) | 3.9 (4) | 3.6 (5) | 3.6 (3) | 6/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 1.1 (0.9) | 1.8 (2) | 0.81 (0.9) | 1.7 (2) | 6.0 (5) | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.7 (1) | 1.5 (1) | 1.9 (3) | 2.1 (3) | 6.0 (6) | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.0 (0.7) | 1.6 (1) | 0.58 (0.4) | 1.0 (0.9) | 1.4 (2) | 5.1 (5) | ∞100 | 0/15 |
| RF1-CMAES Bajer | 1.8 (2) | 6.7 (10) | 3.9 (5) | 6.5 (8) | 9.0 (6) | 8.3 (7) | 12 (7) | 2/15 |
| RF1-CMAES Bajer 2013instances | 1.1 (1) | 15 (24) | 12 (13) | 9.5 (8) | 8.5 (9) | 7.3 (6) | 24 (20) | 1/15 |
| RF5-CMAES Bajer | 2.0 (2) | 16 (19) | 44 (46) | 34 (38) | ∞ | ∞ | ∞508 | 0/15 |
| RF5-CMAES Bajer 2013instances | 1.7 (2) | 19 (19) | 12 (17) | 16 (21) | ∞ | ∞ | ∞502 | 0/15 |
| STEPif Posik | 2.3 (2) | 27 (71) | 103 (141) | 133 (142) | 360 (468) | 966 (1101) | ∞2e4 | 0/15 |
| STEPifeg Posik | 2.2 (2) | 16 (43) | 84 (120) | 144 (145) | 182 (200) | 969 (1021) | ∞2e4 | 0/15 |
| STEPrr Posik | 2.2 (2) | 28 (36) | 88 (112) | 158 (136) | 266 (312) | 969 (1090) | ∞2e4 | 0/15 |
| Δ fopt f23, 2-D |
1e1 8.0 |
1e0 193 |
1e-1 234 |
1e-2 263 |
1e-3 299 |
1e-5 348 |
1e-7 379 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.1 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 1.8 (2) | 3.3 (4) | ∞ | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 1.6 (2) | 23 (31) | 282 (270) | 265 (240) | 287 (372) | 351 (510) | 476 (429) | 9/15 |
| R-SHADE-10e2 Tanabe | 2.4 (3) | 15 (21) | ∞ | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.3 (3) | 4.0 (3) | 16 (21) | 15 (18) | 13 (16) | 12 (14) | 11 (13) | 15/15 |
| RL-SHADE-10e2 Tanabe | 1.9 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 1.9 (3) | 6.6 (5) | 41 (90) | 146 (152) | 148 (134) | 129 (115) | 121 (105) | 15/15 |
| SOO Derbel | 2.6 (4) | 2.0 (1) | 2.7 (2) | 3.5 (2) | 4.4 (3) | 6.8 (3) | 9.4 (4) | 15/15 |
| BrentSTEPif Posik | 1.9 (2) | 1.7 (2) | 34 (35) | 253 (230) | ∞ | ∞ | ∞2e4 | 0/15 |
| BrentSTEPifeg Posik | 1.9 (2) | 1.5 (1) | 22 (20) | 1072 (1429) | ∞ | ∞ | ∞2e4 | 0/15 |
| BrentSTEPqi Posik | 1.8 (1) | 2.2 (2) | 36 (48) | 339 (253) | ∞ | ∞ | ∞2e4 | 0/15 |
| BrentSTEPrr Posik | 2.0 (2) | 2.1 (2) | 24 (21) | 504 (494) | 948 (905) | 815 (1583) | 748 (859) | 1/15 |
| CMA-CSA Atamna | 3.1 (3) | 4.5 (4) | 10 (16) | 9.3 (14) | 8.5 (12) | 7.8 (11) | 7.6 (10) | 15/15 |
| CMA-MSR Atamna | 2.2 (2) | 7.7 (9) | 9.3 (12) | 9.0 (11) | 10 (10) | 9.2 (9) | 9.3 (9) | 15/15 |
| CMA-TPA Atamna | 1.8 (2) | 8.8 (10) | 21 (40) | 19 (36) | 18 (32) | 17 (28) | 16 (26) | 15/15 |
| GP1-CMAES Bajer | 2.4 (3) | 12 (12) | 32 (30) | 28 (37) | ∞ | ∞ | ∞506 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.1 (3) | 18 (14) | 32 (38) | 29 (36) | ∞ | ∞ | ∞506 | 0/15 |
| GP5-CMAES Bajer | 1.3 (1) | 6.2 (8) | 10 (11) | 8.6 (13) | 12 (15) | ∞ | ∞508 | 0/15 |
| GP5-CMAES Bajer 2013instances | 1.9 (2) | 2.5 (3) | 3.0 (3) | 4.6 (3) | 4.2 (5) | ∞ | ∞502 | 0/15 |
| IPOPCMAv3p61 Bajer | 2.2 (2) | 6.9 (8) | 16 (16) | 29 (46) | ∞ | ∞ | ∞506 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 0.97 (0.9) | 6.8 (8) | 16 (18) | 14 (21) | ∞ | ∞ | ∞506 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 1.5 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.4 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.0 (2) | 7.7 (7) | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RF1-CMAES Bajer | 2.3 (2) | 19 (22) | ∞ | ∞ | ∞ | ∞ | ∞502 | 0/15 |
| RF1-CMAES Bajer 2013instances | 1.8 (2) | 8.7 (15) | ∞ | ∞ | ∞ | ∞ | ∞502 | 0/15 |
| RF5-CMAES Bajer | 2.4 (2) | 8.1 (11) | ∞ | ∞ | ∞ | ∞ | ∞504 | 0/15 |
| RF5-CMAES Bajer 2013instances | 1.5 (2) | 4.9 (5) | 31 (33) | ∞ | ∞ | ∞ | ∞504 | 0/15 |
| STEPif Posik | 1.8 (2) | 3.5 (2) | 93 (84) | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| STEPifeg Posik | 1.8 (2) | 3.3 (3) | 59 (76) | 1117 (981) | ∞ | ∞ | ∞2e4 | 0/15 |
| STEPrr Posik | 1.8 (2) | 3.4 (2) | 57 (57) | 1110 (780) | ∞ | ∞ | ∞2e4 | 0/15 |
| Δ fopt f24, 2-D |
1e1 18 |
1e0 857 |
1e-1 8515 |
1e-2 23399 |
1e-3 24113 |
1e-5 24721 |
1e-7 24721 |
#succ 5/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.6 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| R-DE-10e2 Tanabe | 1.1 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-DE-10e5 Tanabe | 1.1 (1) | 12 (11) | 10 (13) | 6.9 (9) | 8.6 (10) | 8.4 (12) | 8.4 (13) | 8/15 |
| R-SHADE-10e2 Tanabe | 1.7 (2) | 3.4 (4) | ∞ | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.0 (0.6) | 3.2 (5) | 1.3 (2) | 1.4 (1) | 1.5 (1) | 1.5 (1) | 1.5 (1) | 15/15 |
| RL-SHADE-10e2 Tanabe | 1.6 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞200 | 0/15 |
| RL-SHADE-10e5 Tanabe | 1.2 (1) | 49 (70) | 5.1 (7) | 2.0 (3) | 2.0 (2) | 1.9 (2) | 1.9 (2) | 15/15 |
| SOO Derbel | 1.5 (1) | 4.1 (2) | 5.9 (6) | 56 (79) | 54 (66) | 53 (44) | 53 (107) | 2/15 |
| BrentSTEPif Posik | 1.8 (1) | 32 (41) | 31 (35) | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| BrentSTEPifeg Posik | 1.7 (2) | 46 (53) | ∞ | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| BrentSTEPqi Posik | 2.7 (6) | 25 (21) | 30 (34) | 11 (13) | ∞ | ∞ | ∞2e4 | 0/15 |
| BrentSTEPrr Posik | 1.9 (2) | 34 (43) | 30 (35) | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| CMA-CSA Atamna | 1.4 (1) | 161 (173) | 153 (176) | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| CMA-MSR Atamna | 4.6 (1) | 94 (117) | 37 (61) | 57 (73) | 55 (63) | 54 (39) | 54 (85) | 2/15 |
| CMA-TPA Atamna | 1.5 (1) | 94 (177) | 154 (294) | 57 (68) | 118 (150) | 115 (105) | 115 (176) | 1/15 |
| GP1-CMAES Bajer | 1.2 (2) | 8.4 (8) | ∞ | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| GP1-CMAES Bajer 2013instances | 3.2 (1) | 4.0 (4) | 0.88 (0.8) | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| GP5-CMAES Bajer | 3.8 (7) | 8.6 (12) | ∞ | ∞ | ∞ | ∞ | ∞508 | 0/15 |
| GP5-CMAES Bajer 2013instances | 4.4 (8) | 2.7 (2) | 0.84 (2) | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| IPOPCMAv3p61 Bajer | 1.6 (0.8) | 4.1 (6) | ∞ | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 1.1 (1.0) | 8.6 (6) | ∞ | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 1.7 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.1 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.4 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞100 | 0/15 |
| RF1-CMAES Bajer | 1.6 (2) | 4.1 (4) | ∞ | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF1-CMAES Bajer 2013instances | 0.89 (0.9) | 8.6 (6) | ∞ | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer | 3.0 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞506 | 0/15 |
| RF5-CMAES Bajer 2013instances | 3.2 (1.0) | 8.4 (11) | ∞ | ∞ | ∞ | ∞ | ∞508 | 0/15 |
| STEPif Posik | 1.5 (2) | 35 (38) | 31 (36) | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| STEPifeg Posik | 1.5 (2) | 26 (26) | ∞ | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| STEPrr Posik | 1.6 (2) | 31 (33) | 32 (27) | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
Previous dimension | Dimension = 3 | Next dimension
| Δ fopt f1, 3-D |
1e1 4.0 |
1e0 8.0 |
1e-1 8.0 |
1e-2 8.0 |
1e-3 8.0 |
1e-5 8.0 |
1e-7 8.0 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.7 (2) | 2.2 (0.9) | 2.9 (0.6) | 4.4 (0.6) | 5.5 (2) | 71 (52) | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 2.4 (2) | 4.7 (3) | 10 (3) | 16 (4) | 22 (3) | 41 (21) | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 2.3 (2) | 5.5 (3) | 9.2 (4) | 15 (4) | 22 (8) | 36 (12) | 64 (54) | 15/15 |
| R-SHADE-10e2 Tanabe | 2.6 (3) | 5.4 (3) | 14 (6) | 22 (5) | 29 (6) | 280 (206) | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.7 (3) | 7.3 (5) | 14 (4) | 21 (4) | 30 (5) | 48 (5) | 64 (9) | 15/15 |
| RL-SHADE-10e2 Tanabe | 1.4 (1) | 5.6 (4) | 12 (3) | 18 (5) | 22 (5) | 40 (21) | 276 (366) | 2/15 |
| RL-SHADE-10e5 Tanabe | 1.9 (2) | 15 (8) | 47 (17) | 79 (33) | 147 (22) | 251 (28) | 344 (35) | 15/15 |
| SOO Derbel | 1.0 (0.9) | 2.4 (1) | 6.4 (2) | 14 (1) | 20 (3) | 44 (7) | 79 (9) | 15/15 |
| BrentSTEPif Posik | 1.4 (1) | 1.8 (0.2) | 1.9 (0.4) | 2.0 (0.3) | 2.1 (0.3) | 2.1 (0.3) | 2.1 (0.3) | 15/15 |
| BrentSTEPifeg Posik | 1.4 (1) | 1.8 (0.2) | 1.9 (0.4) | 2.0 (0.3) | 2.1 (0.3) | 2.1 (0.3) | 2.1 (0.3) | 15/15 |
| BrentSTEPqi Posik | 1.4 (1) | 1.8 (0.2) | 1.9 (0.4) | 2.0 (0.3) | 2.1 (0.3) | 2.1 (0.3) | 2.1 (0.3) | 15/15 |
| BrentSTEPrr Posik | 1.4 (1) | 1.8 (0.2) | 1.9 (0.4) | 2.0 (0.3) | 2.1 (0.3) | 2.1 (0.3) | 2.1 (0.3) | 15/15 |
| CMA-CSA Atamna | 5.0 (5) | 6.1 (5) | 13 (4) | 18 (6) | 24 (5) | 36 (5) | 46 (3) | 15/15 |
| CMA-MSR Atamna | 2.2 (2) | 5.8 (4) | 16 (5) | 27 (6) | 38 (7) | 57 (9) | 74 (8) | 15/15 |
| CMA-TPA Atamna | 3.0 (3) | 7.9 (5) | 14 (6) | 19 (6) | 23 (6) | 37 (11) | 49 (14) | 15/15 |
| GP1-CMAES Bajer | 2.1 (2) | 4.3 (2) | 6.9 (2) | 10 (2) | 13 (3) | 21 (4) | 29 (5) | 15/15 |
| GP1-CMAES Bajer 2013instances | 2.9 (2) | 4.4 (3) | 7.3 (2) | 10 (3) | 13 (2) | 19 (3) | 27 (5) | 15/15 |
| GP5-CMAES Bajer | 2.4 (2) | 2.7 (0.9) | 3.7 (0.8) | 4.8 (0.9) | 5.6 (1) | 7.7 (1) | 23 (21) | 15/15 |
| GP5-CMAES Bajer 2013instances | 2.5 (2) | 2.7 (1) | 3.7 (0.9) | 4.6 (0.9) | 5.6 (0.9) | 7.7 (1) | 25 (22) | 15/15 |
| IPOPCMAv3p61 Bajer | 2.6 (2) | 6.3 (5) | 13 (6) | 19 (4) | 24 (5) | 35 (6) | 48 (4) | 15/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.5 (2) | 6.5 (4) | 12 (3) | 18 (5) | 23 (6) | 34 (4) | 46 (5) | 15/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 3.2 (4) | 9.3 (1) | 10 (0.3) | 12 (1) | 13 (0.6) | 66 (52) | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.0 (2) | 2.4 (0.3) | 3.2 (0.6) | 4.7 (0.6) | 6.3 (0.9) | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.0 (2) | 2.5 (0.4) | 3.6 (0.9) | 5.0 (0.9) | 6.5 (2) | 276 (412) | ∞150 | 0/15 |
| RF1-CMAES Bajer | 2.9 (2) | 5.3 (2) | 9.5 (4) | 20 (11) | 29 (16) | 77 (54) | 140 (121) | 7/15 |
| RF1-CMAES Bajer 2013instances | 2.0 (2) | 4.8 (2) | 8.4 (4) | 14 (6) | 21 (8) | 60 (57) | 102 (85) | 9/15 |
| RF5-CMAES Bajer | 19 (53) | 43 (49) | 208 (197) | 696 (851) | 1408 (1350) | ∞ | ∞760 | 0/15 |
| RF5-CMAES Bajer 2013instances | 10 (2) | 22 (39) | 94 (79) | 306 (320) | 1331 (1677) | ∞ | ∞753 | 0/15 |
| STEPif Posik | 1.4 (1) | 1.9 (0.2) | 2.4 (0.4) | 3.7 (1) | 4.7 (0.9) | 5.9 (0.8) | 6.8 (0.4) | 15/15 |
| STEPifeg Posik | 1.4 (1) | 1.9 (0.2) | 2.4 (0.4) | 3.5 (0.5) | 4.2 (0.7) | 5.8 (0.9) | 6.8 (0.5) | 15/15 |
| STEPrr Posik | 1.4 (1) | 1.9 (0.2) | 2.4 (0.4) | 3.1 (0.2) | 3.7 (0.2) | 5.0 (0.2) | 6.2 (0.3) | 15/15 |
| Δ fopt f2, 3-D |
1e1 38 |
1e0 42 |
1e-1 43 |
1e-2 44 |
1e-3 45 |
1e-5 47 |
1e-7 48 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 57 (75) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 4.1 (0.9) | 5.8 (4) | 7.3 (4) | 12 (9) | 25 (18) | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 3.9 (2) | 4.9 (2) | 5.9 (3) | 18 (5) | 20 (5) | 21 (6) | 26 (11) | 15/15 |
| R-SHADE-10e2 Tanabe | 5.6 (1) | 7.0 (4) | 17 (17) | 102 (153) | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 6.2 (2) | 7.7 (2) | 8.6 (2) | 10 (2) | 12 (2) | 14 (3) | 17 (3) | 15/15 |
| RL-SHADE-10e2 Tanabe | 4.1 (0.9) | 4.5 (0.8) | 6.4 (4) | 7.3 (4) | 10 (7) | 95 (115) | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 24 (8) | 30 (5) | 41 (6) | 49 (5) | 56 (4) | 70 (6) | 85 (9) | 15/15 |
| SOO Derbel | 7.2 (2) | 8.5 (2) | 13 (2) | 14 (3) | 17 (3) | 25 (4) | 35 (5) | 15/15 |
| BrentSTEPif Posik | 0.67 (0.2)↑1 | 0.72 (0.2)↑0 | 0.79 (0.2) | 0.85 (0.3) | 0.98 (0.1) | 1.0 (0.1) | 1.2 (0.1) | 15/15 |
| BrentSTEPifeg Posik | 0.65 (0.2)↑0 | 0.68 (0.2)↑1 | 0.76 (0.2) | 0.84 (0.2) | 0.97 (0.2) | 1.0 (0.1) | 1.2 (0.2) | 15/15 |
| BrentSTEPqi Posik | 0.60 (0.1)↑0 | 0.58 (0.1)↑0 | 0.61 (0.1)↑0 | 0.66 (0.1)↑0 | 0.74 (0.1)★2↑0 | 0.82 (0.1)★3↑0 | 0.96 (0.2)★ | 15/15 |
| BrentSTEPrr Posik | 0.66 (0.2)↑0 | 0.67 (0.2)↑0 | 0.72 (0.2)↑0 | 0.78 (0.1)↑0 | 0.91 (0.1) | 1.0 (0.2) | 1.2 (0.2) | 15/15 |
| CMA-CSA Atamna | 9.4 (3) | 12 (3) | 13 (3) | 14 (2) | 14 (2) | 16 (2) | 17 (2) | 15/15 |
| CMA-MSR Atamna | 10 (3) | 12 (3) | 13 (3) | 15 (3) | 16 (2) | 18 (3) | 21 (2) | 15/15 |
| CMA-TPA Atamna | 8.4 (5) | 12 (2) | 13 (2) | 14 (2) | 15 (2) | 17 (2) | 18 (2) | 15/15 |
| GP1-CMAES Bajer | 8.6 (4) | 11 (4) | 11 (3) | 12 (2) | 13 (2) | 15 (2) | 22 (16) | 5/15 |
| GP1-CMAES Bajer 2013instances | 8.0 (5) | 10 (4) | 12 (2) | 13 (2) | 14 (2) | 16 (9) | 28 (20) | 5/15 |
| GP5-CMAES Bajer | 3.4 (1) | 4.0 (0.9) | 4.3 (0.9) | 4.6 (0.7) | 5.0 (0.9) | 5.1 (0.9) | 10 (8) | 6/15 |
| GP5-CMAES Bajer 2013instances | 3.4 (1) | 4.1 (1) | 4.7 (1) | 5.0 (1) | 5.3 (0.9) | 5.6 (1) | 13 (13) | 8/15 |
| IPOPCMAv3p61 Bajer | 12 (6) | 17 (14) | 40 (56) | 83 (103) | 123 (175) | ∞ | ∞751 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 13 (10) | 24 (22) | 42 (27) | 64 (85) | ∞ | ∞ | ∞751 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 92 (92) | 268 (308) | 262 (262) | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF1-CMAES Bajer 2013instances | 281 (296) | 258 (282) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| STEPif Posik | 1.1 (0.3) | 1.1 (0.2) | 1.2 (0.2) | 1.2 (0.1) | 1.3 (0.2) | 1.4 (0.1) | 1.5 (0.1) | 15/15 |
| STEPifeg Posik | 1.1 (0.3) | 1.1 (0.2) | 1.2 (0.2) | 1.3 (0.2) | 1.3 (0.2) | 1.4 (0.2) | 1.6 (0.2) | 15/15 |
| STEPrr Posik | 1.0 (0.1) | 1.0 (0.1) | 1.1 (0.1) | 1.2 (0.0) | 1.3 (0.1) | 1.4 (0.2) | 1.6 (0.1) | 15/15 |
| Δ fopt f3, 3-D |
1e1 38 |
1e0 822 |
1e-1 830 |
1e-2 835 |
1e-3 842 |
1e-5 847 |
1e-7 853 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.8 (0.9) | 2.7 (3) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 4.6 (5) | 2.7 (2) | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 3.0 (2) | 1.4 (1) | 7.7 (8) | 9.1 (9) | 9.2 (9) | 9.2 (9) | 11 (9) | 15/15 |
| R-SHADE-10e2 Tanabe | 2.6 (1) | 1.7 (2) | 5.3 (9) | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 4.3 (2) | 1.2 (1.0) | 3.5 (3) | 3.6 (3) | 3.7 (3) | 3.9 (3) | 4.0 (3) | 15/15 |
| RL-SHADE-10e2 Tanabe | 2.4 (0.6) | 0.39 (0.2) | 0.83 (0.7) | 1.0 (0.9) | 5.3 (3) | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 8.7 (4) | 2.2 (0.8) | 3.3 (0.7) | 3.9 (0.5) | 4.6 (0.4) | 5.5 (0.5) | 6.4 (0.5) | 15/15 |
| SOO Derbel | 4.0 (3) | 2.6 (3) | 9.1 (11) | 9.2 (11) | 9.3 (11) | 10 (11) | 10 (11) | 15/15 |
| BrentSTEPif Posik | 0.83 (0.5) | 0.12 (0.0)↑0 | 0.18 (0.1)↑0 | 0.18 (0.1)↑0 | 0.18 (0.1)↑0 | 0.18 (0.1)↑0 | 0.18 (0.1)↑0 | 15/15 |
| BrentSTEPifeg Posik | 0.80 (0.5) | 0.12 (0.0)↑0 | 0.18 (0.1)↑0 | 0.18 (0.1)↑0 | 0.18 (0.1)↑0 | 0.18 (0.1)↑0 | 0.18 (0.1)↑0 | 15/15 |
| BrentSTEPqi Posik | 0.80 (0.5) | 0.12 (0.0)↑0 | 0.17 (0.1)↑0 | 0.17 (0.1)↑0 | 0.17 (0.1)↑0 | 0.17 (0.1)↑0 | 0.17 (0.1)↑0 | 15/15 |
| BrentSTEPrr Posik | 0.74 (0.5) | 0.12 (0.0)↑0 | 0.16 (0.0)↑0 | 0.17 (0.0)↑0 | 0.17 (0.0)↑0 | 0.17 (0.0)↑0 | 0.18 (0.0)↑0 | 15/15 |
| CMA-CSA Atamna | 8.1 (13) | 2.9 (2) | 8.7 (7) | 9.4 (8) | 10 (8) | 10 (8) | 10 (8) | 15/15 |
| CMA-MSR Atamna | 8.0 (17) | 3.5 (4) | 10 (10) | 11 (10) | 11 (10) | 12 (11) | 13 (11) | 15/15 |
| CMA-TPA Atamna | 3.5 (3) | 2.9 (3) | 13 (12) | 13 (13) | 13 (13) | 14 (13) | 14 (14) | 15/15 |
| GP1-CMAES Bajer | 4.1 (2) | 1.3 (1) | 4.1 (5) | 4.1 (3) | 4.1 (4) | 4.2 (3) | 4.3 (5) | 2/15 |
| GP1-CMAES Bajer 2013instances | 4.7 (2) | 1.6 (1) | 4.3 (6) | 6.4 (7) | 6.5 (6) | 6.5 (5) | 13 (10) | 1/15 |
| GP5-CMAES Bajer | 2.5 (1) | 3.1 (4) | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| GP5-CMAES Bajer 2013instances | 2.4 (3) | 13 (13) | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| IPOPCMAv3p61 Bajer | 5.5 (3) | 13 (14) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 5.1 (2) | 4.1 (6) | 13 (23) | 13 (18) | 13 (22) | 13 (16) | 13 (12) | 1/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 5.0 (5) | 2.7 (3) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.1 (0.8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 3.0 (3) | 2.7 (3) | 2.7 (4) | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 5.7 (10) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF1-CMAES Bajer 2013instances | 8.5 (11) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF5-CMAES Bajer | 28 (33) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| RF5-CMAES Bajer 2013instances | 26 (20) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| STEPif Posik | 0.98 (0.5) | 0.15 (0.1)↑0 | 0.18 (0.1)↑0 | 0.19 (0.0)↑0 | 0.21 (0.0)↑0 | 0.23 (0.0)↑0 | 0.23 (0.0)↑0 | 15/15 |
| STEPifeg Posik | 0.98 (0.5) | 0.14 (0.1)↑0 | 0.18 (0.1)↑0 | 0.19 (0.1)↑0 | 0.21 (0.1)↑0 | 0.23 (0.0)↑0 | 0.23 (0.0)↑0 | 15/15 |
| STEPrr Posik | 0.98 (0.6) | 0.12 (0.0)↑0 | 0.17 (0.1)↑0 | 0.18 (0.1)↑0 | 0.19 (0.0)↑0 | 0.22 (0.0)↑0 | 0.23 (0.0)↑0 | 15/15 |
| Δ fopt f4, 3-D |
1e1 40 |
1e0 808 |
1e-1 866 |
1e-2 921 |
1e-3 952 |
1e-5 1015 |
1e-7 1044 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 5.8 (5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 3.0 (2) | 2.7 (3) | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 3.5 (2) | 3.8 (5) | 14 (10) | 14 (10) | 15 (9) | 18 (31) | 17 (30) | 15/15 |
| R-SHADE-10e2 Tanabe | 3.1 (2) | 1.3 (1) | 5.2 (6) | 4.9 (6) | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 7.4 (4) | 2.6 (2) | 8.8 (8) | 8.4 (7) | 8.2 (7) | 7.9 (7) | 7.8 (7) | 15/15 |
| RL-SHADE-10e2 Tanabe | 2.5 (1) | 1.1 (1) | 2.6 (3) | 4.9 (6) | ∞ | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 12 (6) | 3.0 (0.6) | 3.7 (0.7) | 4.5 (0.5) | 4.8 (0.4) | 5.5 (0.4) | 6.2 (0.3) | 15/15 |
| SOO Derbel | 4.5 (1) | 14 (9) | 226 (321) | 350 (287) | 353 (438) | 464 (772) | 572 (565) | 6/15 |
| BrentSTEPif Posik | 1.5 (0.6) | 0.18 (0.1)↑0 | 0.29 (0.1)↑0 | 0.28 (0.1)↑0 | 0.28 (0.1)↑0 | 0.28 (0.1)↑0 | 0.31 (0.1)↑0 | 15/15 |
| BrentSTEPifeg Posik | 1.4 (0.6) | 0.18 (0.1)↑0 | 0.28 (0.2)↑0 | 0.27 (0.2)↑0 | 0.27 (0.1)↑0 | 0.27 (0.1)↑0 | 0.31 (0.1)↑0 | 15/15 |
| BrentSTEPqi Posik | 1.4 (0.8) | 0.20 (0.1)↑0 | 0.26 (0.1)↑0 | 0.25 (0.1)↑0 | 0.25 (0.1)↑0 | 0.25 (0.1)↑0 | 0.31 (0.1)↑0 | 15/15 |
| BrentSTEPrr Posik | 1.4 (0.8) | 0.18 (0.1)↑0 | 0.23 (0.1)↑0 | 0.22 (0.1)↑0 | 0.23 (0.1)↑0 | 0.26 (0.1)↑0 | 0.34 (0.1)↑0 | 15/15 |
| CMA-CSA Atamna | 5.8 (2) | 359 (680) | 4872 (5996) | 4581 (6539) | 4432 (4430) | 4157 (3929) | 4041 (5769) | 1/15 |
| CMA-MSR Atamna | 8.6 (17) | 632 (840) | ∞ | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| CMA-TPA Atamna | 7.3 (4) | 269 (296) | 5064 (4707) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| GP1-CMAES Bajer | 10 (12) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| GP1-CMAES Bajer 2013instances | 8.3 (11) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| GP5-CMAES Bajer | 9.2 (7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| GP5-CMAES Bajer 2013instances | 8.4 (9) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞755 | 0/15 |
| IPOPCMAv3p61 Bajer | 4.6 (3) | 14 (14) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 11 (19) | 14 (17) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 11 (8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 18 (21) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 7.7 (11) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 58 (57) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF1-CMAES Bajer 2013instances | 125 (84) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF5-CMAES Bajer | 279 (241) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| RF5-CMAES Bajer 2013instances | 270 (175) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| STEPif Posik | 1.2 (0.6) | 0.26 (0.1)↑0 | 0.47 (0.2)↑0 | 0.58 (0.2)↑0 | 0.72 (0.2)↑1 | 0.97 (0.2) | 1.0 (0.1) | 15/15 |
| STEPifeg Posik | 1.2 (0.6) | 0.26 (0.1)↑0 | 0.44 (0.2)↑0 | 0.55 (0.2)↑0 | 0.70 (0.3)↑0 | 0.98 (0.2) | 1.0 (0.1) | 15/15 |
| STEPrr Posik | 1.2 (0.5) | 0.26 (0.1)↑0 | 0.41 (0.2)↑0 | 0.52 (0.2)↑0 | 0.64 (0.1)↑0 | 0.96 (0.2) | 1.1 (0.1) | 15/15 |
| Δ fopt f5, 3-D |
1e1 7.0 |
1e0 7.0 |
1e-1 7.0 |
1e-2 7.0 |
1e-3 7.0 |
1e-5 7.0 |
1e-7 7.0 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.2 (0.1) | 1.7 (0.4) | 1.8 (0.4) | 1.8 (0.4) | 1.8 (0.4) | 1.8 (0.4) | 1.8 (0.4) | 15/15 |
| R-DE-10e2 Tanabe | 5.8 (5) | 15 (7) | 24 (7) | 32 (6) | 59 (25) | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 5.8 (3) | 19 (11) | 44 (18) | 62 (76) | 92 (82) | 148 (133) | 177 (134) | 15/15 |
| R-SHADE-10e2 Tanabe | 5.9 (3) | 14 (3) | 23 (5) | 32 (4) | 46 (23) | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 8.4 (6) | 30 (14) | 45 (14) | 57 (19) | 72 (14) | 101 (20) | 128 (19) | 15/15 |
| RL-SHADE-10e2 Tanabe | 5.0 (4) | 13 (3) | 19 (4) | 24 (5) | 29 (5) | 44 (25) | 211 (161) | 0/15 |
| RL-SHADE-10e5 Tanabe | 16 (13) | 73 (17) | 116 (11) | 162 (10) | 206 (10) | 289 (14) | 370 (20) | 15/15 |
| SOO Derbel | 2.9 (0.1) | 14 (0.1) | 38 (0.1) | 76 (0.1) | 127 (0.1) | 246 (0.1) | 405 (0.1) | 15/15 |
| BrentSTEPif Posik | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 15/15 |
| BrentSTEPifeg Posik | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 15/15 |
| BrentSTEPqi Posik | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 15/15 |
| BrentSTEPrr Posik | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 15/15 |
| CMA-CSA Atamna | 2.8 (3) | 4.8 (4) | 5.2 (3) | 5.2 (3) | 5.2 (3) | 5.2 (3) | 5.2 (3) | 15/15 |
| CMA-MSR Atamna | 2.6 (3) | 4.6 (3) | 4.6 (3) | 4.6 (3) | 4.6 (3) | 4.6 (3) | 4.6 (3) | 15/15 |
| CMA-TPA Atamna | 2.4 (2) | 3.5 (2) | 3.6 (2) | 3.6 (2) | 3.6 (2) | 3.6 (2) | 3.6 (2) | 15/15 |
| GP1-CMAES Bajer | 2.9 (2) | 11 (6) | 20 (41) | 20 (41) | 20 (41) | 20 (41) | 20 (41) | 14/15 |
| GP1-CMAES Bajer 2013instances | 2.2 (1) | 16 (13) | 23 (45) | 23 (45) | 23 (45) | 23 (45) | 23 (45) | 14/15 |
| GP5-CMAES Bajer | 2.1 (0.6) | 3.6 (2) | 4.5 (3) | 4.5 (3) | 4.5 (3) | 4.5 (3) | 4.5 (3) | 15/15 |
| GP5-CMAES Bajer 2013instances | 2.1 (0.7) | 3.6 (2) | 4.4 (3) | 4.4 (3) | 4.4 (3) | 4.4 (3) | 4.4 (3) | 15/15 |
| IPOPCMAv3p61 Bajer | 3.6 (4) | 14 (16) | 15 (17) | 15 (17) | 15 (17) | 15 (17) | 15 (17) | 15/15 |
| IPOPCMAv3p61 Bajer 2013instances | 3.8 (2) | 7.4 (4) | 9.5 (10) | 9.5 (10) | 9.5 (10) | 9.5 (10) | 9.5 (10) | 15/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 9.0 (4) | 12 (0.4) | 12 (0.4) | 12 (0.4) | 12 (0.4) | 12 (0.4) | 12 (0.4) | 15/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.4 (0) | 2.7 (0.4) | 2.9 (0.7) | 2.9 (0.7) | 2.9 (0.7) | 2.9 (0.7) | 2.9 (0.7) | 15/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.4 (0) | 2.7 (0.4) | 2.9 (0.4) | 2.9 (0.4) | 2.9 (0.4) | 2.9 (0.4) | 2.9 (0.4) | 15/15 |
| RF1-CMAES Bajer | 3.6 (4) | 15 (14) | 23 (33) | 25 (33) | 25 (33) | 25 (33) | 25 (33) | 15/15 |
| RF1-CMAES Bajer 2013instances | 2.8 (2) | 17 (38) | 18 (38) | 18 (38) | 18 (38) | 18 (38) | 18 (38) | 15/15 |
| RF5-CMAES Bajer | 20 (25) | 47 (54) | 76 (79) | 90 (99) | 90 (114) | 90 (109) | 90 (129) | 10/15 |
| RF5-CMAES Bajer 2013instances | 15 (21) | 95 (198) | 141 (195) | 142 (143) | 142 (194) | 142 (227) | 142 (178) | 7/15 |
| STEPif Posik | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 15/15 |
| STEPifeg Posik | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 15/15 |
| STEPrr Posik | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 1.3 (0.1) | 15/15 |
| Δ fopt f6, 3-D |
1e1 34 |
1e0 56 |
1e-1 90 |
1e-2 117 |
1e-3 149 |
1e-5 215 |
1e-7 265 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 6.2 (7) | 42 (31) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 1.9 (1) | 3.3 (3) | 3.5 (2) | 7.6 (7) | ∞ | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 2.2 (2) | 3.5 (2) | 3.9 (2) | 19 (29) | 27 (37) | 33 (36) | 31 (27) | 15/15 |
| R-SHADE-10e2 Tanabe | 2.6 (2) | 5.1 (6) | 24 (24) | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.3 (3) | 3.2 (1) | 3.2 (0.7) | 3.4 (0.7) | 3.5 (0.8) | 3.6 (0.9) | 3.9 (0.7) | 15/15 |
| RL-SHADE-10e2 Tanabe | 2.7 (0.8) | 3.5 (3) | 6.1 (5) | 7.2 (5) | 15 (17) | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 4.8 (5) | 10 (5) | 14 (5) | 17 (3) | 16 (2) | 17 (2) | 18 (1) | 15/15 |
| SOO Derbel | 1.9 (2) | 97 (43) | 528 (626) | 3200 (3010) | 8854 (9063) | ∞ | ∞3e5 | 0/15 |
| BrentSTEPif Posik | 207 (319) | 609 (603) | 769 (799) | 1724 (2237) | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPifeg Posik | 145 (237) | 413 (790) | 563 (564) | 1053 (1202) | 1340 (1578) | ∞ | ∞3e4 | 0/15 |
| BrentSTEPqi Posik | 228 (432) | 329 (746) | 343 (360) | 484 (639) | 672 (442) | ∞ | ∞3e4 | 0/15 |
| BrentSTEPrr Posik | 113 (252) | 504 (533) | 576 (546) | 808 (1097) | 1388 (2412) | ∞ | ∞3e4 | 0/15 |
| CMA-CSA Atamna | 1.5 (1) | 2.6 (0.8) | 2.3 (0.7) | 2.6 (0.8) | 2.7 (0.5) | 2.7 (0.4) | 2.9 (0.4) | 15/15 |
| CMA-MSR Atamna | 2.7 (1) | 3.8 (1) | 3.5 (0.8) | 3.7 (1) | 3.7 (0.8) | 3.7 (0.6) | 3.9 (0.3) | 15/15 |
| CMA-TPA Atamna | 3.1 (2) | 3.5 (1) | 3.1 (0.9) | 3.2 (0.7) | 3.1 (0.7) | 2.9 (0.6) | 3.0 (0.5) | 15/15 |
| GP1-CMAES Bajer | 3.0 (2) | 7.6 (7) | 14 (14) | 47 (46) | ∞ | ∞ | ∞751 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.7 (2) | 4.9 (3) | 14 (14) | 96 (122) | ∞ | ∞ | ∞751 | 0/15 |
| GP5-CMAES Bajer | 4.4 (7) | 33 (29) | ∞ | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| GP5-CMAES Bajer 2013instances | 2.5 (3) | 15 (18) | 125 (114) | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| IPOPCMAv3p61 Bajer | 2.0 (1) | 3.1 (1) | 3.1 (0.9) | 3.1 (0.8) | 3.0 (0.6) | 3.7 (2) | 10 (9) | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.8 (2) | 3.7 (1) | 3.4 (1) | 3.5 (0.9) | 3.3 (0.7) | 3.6 (2) | ∞751 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 4.2 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 4.7 (5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 3.0 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 5.1 (6) | 60 (57) | 120 (217) | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF1-CMAES Bajer 2013instances | 13 (21) | 58 (64) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF5-CMAES Bajer | 55 (68) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞762 | 0/15 |
| RF5-CMAES Bajer 2013instances | 42 (59) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| STEPif Posik | 105 (186) | 325 (319) | 1008 (985) | 1682 (2175) | ∞ | ∞ | ∞3e4 | 0/15 |
| STEPifeg Posik | 80 (170) | 293 (365) | 457 (619) | 596 (592) | 848 (694) | 1976 (2050) | ∞3e4 | 0/15 |
| STEPrr Posik | 75 (130) | 188 (296) | 419 (548) | 526 (789) | 578 (667) | 1817 (1902) | ∞3e4 | 0/15 |
| Δ fopt f7, 3-D |
1e1 11 |
1e0 65 |
1e-1 342 |
1e-2 464 |
1e-3 482 |
1e-5 482 |
1e-7 535 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 2.4 (2) | 2.1 (2) | 3.6 (4) | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 2.3 (2) | 1.8 (1) | 0.92 (0.7) | 1.3 (1) | 1.8 (2) | 1.8 (2) | 2.7 (2) | 2/15 |
| R-DE-10e5 Tanabe | 1.7 (2) | 2.3 (2) | 1.8 (2) | 2.3 (3) | 3.1 (3) | 3.1 (3) | 2.9 (3) | 15/15 |
| R-SHADE-10e2 Tanabe | 3.5 (3) | 2.7 (3) | 3.0 (3) | 10 (12) | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 3.9 (6) | 2.0 (1) | 0.82 (0.7) | 0.77 (0.5) | 0.78 (0.5) | 0.78 (0.5) | 0.81 (0.4) | 15/15 |
| RL-SHADE-10e2 Tanabe | 3.7 (4) | 2.5 (1) | 0.86 (0.6) | 2.3 (2) | 3.1 (3) | 3.1 (2) | 8.3 (10) | 1/15 |
| RL-SHADE-10e5 Tanabe | 6.9 (8) | 4.7 (3) | 2.4 (0.7) | 3.1 (1) | 3.7 (0.8) | 3.7 (0.8) | 3.9 (0.8) | 15/15 |
| SOO Derbel | 2.3 (2) | 2.7 (2) | 2.1 (2) | 2.3 (3) | 3.3 (4) | 3.3 (4) | 3.5 (3) | 15/15 |
| BrentSTEPif Posik | 63 (92) | 314 (457) | 199 (270) | 425 (844) | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPifeg Posik | 50 (92) | 301 (534) | 131 (114) | 201 (126) | 901 (829) | 901 (891) | 812 (789) | 0/15 |
| BrentSTEPqi Posik | 173 (184) | 279 (279) | 206 (245) | 285 (268) | 442 (379) | 442 (587) | 398 (599) | 2/15 |
| BrentSTEPrr Posik | 136 (184) | 316 (271) | 197 (268) | 442 (429) | ∞ | ∞ | ∞3e4 | 0/15 |
| CMA-CSA Atamna | 2.9 (2) | 1.8 (0.8) | 0.75 (0.8) | 0.75 (0.5) | 0.93 (0.6) | 0.93 (0.6) | 0.91 (0.5) | 15/15 |
| CMA-MSR Atamna | 3.6 (4) | 1.7 (0.9) | 1.2 (1) | 1.3 (1) | 1.3 (1) | 1.3 (1) | 1.4 (1) | 15/15 |
| CMA-TPA Atamna | 3.9 (5) | 3.0 (4) | 1.0 (0.8) | 0.87 (0.6) | 0.99 (0.6) | 0.99 (0.6) | 1.0 (0.6) | 15/15 |
| GP1-CMAES Bajer | 2.3 (2) | 1.6 (2) | 0.81 (0.6) | 0.96 (1.0) | 1.0 (1) | 1.0 (0.8) | 1.5 (1.0) | 5/15 |
| GP1-CMAES Bajer 2013instances | 2.1 (2) | 1.2 (1) | 0.89 (1) | 0.98 (1.0) | 1.4 (2) | 1.4 (1) | 1.7 (1) | 5/15 |
| GP5-CMAES Bajer | 2.5 (2) | 2.2 (2) | 0.85 (1) | 1.7 (2) | 2.8 (3) | 2.8 (3) | 3.2 (4) | 2/15 |
| GP5-CMAES Bajer 2013instances | 2.1 (2) | 0.95 (0.7) | 0.49 (0.6) | 0.69 (0.6) | 1.2 (1) | 1.2 (2) | 1.6 (2) | 3/15 |
| IPOPCMAv3p61 Bajer | 3.0 (3) | 2.1 (0.9) | 1.2 (1) | 1.2 (1) | 1.2 (1) | 1.2 (1) | 1.3 (1) | 10/15 |
| IPOPCMAv3p61 Bajer 2013instances | 5.1 (4) | 2.8 (2) | 1.2 (0.8) | 1.1 (0.8) | 1.1 (0.8) | 1.1 (0.8) | 1.2 (0.9) | 11/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 3.8 (4) | 2.5 (1) | 3.2 (4) | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.9 (2) | 1.7 (3) | 1.8 (2) | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.5 (3) | 1.2 (0.8) | 3.2 (4) | 4.7 (4) | 4.5 (6) | 4.5 (6) | ∞150 | 0/15 |
| RF1-CMAES Bajer | 5.0 (6) | 5.2 (7) | 3.7 (3) | 7.5 (12) | 11 (17) | 11 (14) | ∞760 | 0/15 |
| RF1-CMAES Bajer 2013instances | 7.8 (8) | 4.2 (6) | 2.9 (2) | 7.5 (9) | 11 (15) | 11 (15) | 21 (25) | 1/15 |
| RF5-CMAES Bajer | 6.3 (8) | 22 (23) | 32 (36) | ∞ | ∞ | ∞ | ∞762 | 0/15 |
| RF5-CMAES Bajer 2013instances | 10 (11) | 26 (42) | ∞ | ∞ | ∞ | ∞ | ∞755 | 0/15 |
| STEPif Posik | 63 (187) | 203 (240) | 115 (143) | 276 (308) | 419 (579) | 419 (655) | 378 (519) | 2/15 |
| STEPifeg Posik | 39 (94) | 165 (248) | 132 (160) | 205 (174) | 417 (313) | 417 (342) | 376 (394) | 2/15 |
| STEPrr Posik | 101 (189) | 249 (325) | 116 (165) | 286 (223) | ∞ | ∞ | ∞3e4 | 0/15 |
| Δ fopt f8, 3-D |
1e1 27 |
1e0 45 |
1e-1 152 |
1e-2 179 |
1e-3 188 |
1e-5 198 |
1e-7 208 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 3.2 (2) | 50 (57) | 15 (18) | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 4.0 (1) | 6.2 (4) | 5.5 (7) | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 3.7 (2) | 23 (32) | 14 (11) | 22 (25) | 24 (24) | 31 (22) | 36 (21) | 15/15 |
| R-SHADE-10e2 Tanabe | 4.8 (4) | 15 (13) | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 3.0 (2) | 9.2 (7) | 4.6 (3) | 4.6 (3) | 4.9 (3) | 5.3 (2) | 6.1 (3) | 15/15 |
| RL-SHADE-10e2 Tanabe | 3.5 (2) | 9.2 (6) | 14 (14) | 25 (30) | ∞ | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 10 (5) | 22 (10) | 14 (4) | 16 (3) | 18 (3) | 22 (3) | 25 (3) | 15/15 |
| SOO Derbel | 1.8 (1) | 4.1 (2) | 4.6 (4) | 8.9 (9) | 13 (15) | 32 (17) | 49 (28) | 15/15 |
| BrentSTEPif Posik | 5.8 (11) | 113 (196) | 266 (254) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPifeg Posik | 7.4 (16) | 99 (210) | 397 (273) | 1161 (1494) | 2255 (2607) | ∞ | ∞3e4 | 0/15 |
| BrentSTEPqi Posik | 6.3 (12) | 177 (311) | 787 (1022) | 2193 (2443) | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPrr Posik | 3.7 (8) | 209 (320) | 593 (686) | 715 (657) | 1046 (912) | ∞ | ∞3e4 | 0/15 |
| CMA-CSA Atamna | 3.4 (1) | 6.2 (4) | 3.3 (2) | 3.5 (1) | 3.7 (1) | 4.0 (1) | 4.3 (1) | 15/15 |
| CMA-MSR Atamna | 3.2 (2) | 10 (10) | 4.5 (3) | 4.5 (2) | 4.7 (2) | 5.1 (2) | 5.5 (2) | 15/15 |
| CMA-TPA Atamna | 3.7 (2) | 8.2 (6) | 3.7 (2) | 3.9 (2) | 4.1 (2) | 4.5 (2) | 4.7 (2) | 15/15 |
| GP1-CMAES Bajer | 2.6 (1) | 15 (17) | 36 (42) | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.6 (1) | 13 (15) | 13 (9) | 19 (12) | 28 (21) | 28 (28) | 53 (47) | 1/15 |
| GP5-CMAES Bajer | 1.9 (0.8) | 9.3 (10) | 7.5 (9) | 18 (16) | 17 (14) | 17 (16) | 16 (19) | 3/15 |
| GP5-CMAES Bajer 2013instances | 2.3 (1) | 6.5 (9) | 4.4 (5) | 8.9 (8) | 18 (22) | 26 (22) | 25 (25) | 2/15 |
| IPOPCMAv3p61 Bajer | 3.0 (1) | 7.6 (4) | 4.6 (4) | 8.0 (8) | 11 (11) | 18 (19) | 18 (24) | 1/15 |
| IPOPCMAv3p61 Bajer 2013instances | 3.4 (2) | 7.9 (6) | 5.4 (5) | 6.1 (6) | 7.9 (11) | 18 (21) | 27 (23) | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 8.8 (10) | 50 (47) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.7 (2) | 12 (12) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.7 (2) | 8.9 (10) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 8.3 (14) | 49 (63) | 34 (41) | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF1-CMAES Bajer 2013instances | 8.4 (15) | 112 (125) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF5-CMAES Bajer | 51 (60) | 248 (323) | ∞ | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| RF5-CMAES Bajer 2013instances | 31 (40) | 237 (403) | ∞ | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| STEPif Posik | 1.4 (0.9) | 155 (289) | 260 (278) | 2116 (2732) | 2015 (2930) | ∞ | ∞3e4 | 0/15 |
| STEPifeg Posik | 1.3 (0.6) | 67 (89) | 123 (119) | 254 (277) | ∞ | ∞ | ∞3e4 | 0/15 |
| STEPrr Posik | 1.2 (0.5) | 123 (218) | 211 (259) | 653 (599) | 1956 (2586) | ∞ | ∞3e4 | 0/15 |
| Δ fopt f9, 3-D |
1e1 21 |
1e0 65 |
1e-1 127 |
1e-2 149 |
1e-3 159 |
1e-5 169 |
1e-7 178 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 2.5 (1) | 6.0 (8) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 4.5 (3) | 5.7 (5) | 35 (30) | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 8.0 (6) | 34 (67) | 34 (41) | 36 (40) | 37 (35) | 41 (34) | 45 (33) | 15/15 |
| R-SHADE-10e2 Tanabe | 6.1 (4) | 23 (27) | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 3.6 (1) | 3.4 (2) | 3.6 (2) | 4.2 (3) | 4.7 (2) | 5.4 (2) | 6.0 (2) | 15/15 |
| RL-SHADE-10e2 Tanabe | 5.1 (3) | 7.2 (8) | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 14 (11) | 16 (9) | 16 (6) | 18 (4) | 21 (4) | 25 (4) | 29 (5) | 15/15 |
| SOO Derbel | 2.2 (0.8) | 2.4 (2) | 5.4 (4) | 9.4 (6) | 15 (8) | 27 (18) | 42 (24) | 15/15 |
| BrentSTEPif Posik | 12 (16) | 952 (857) | 3292 (2954) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPifeg Posik | 14 (28) | 153 (193) | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPqi Posik | 8.4 (11) | 108 (151) | 1513 (1506) | 1291 (962) | 2527 (3503) | ∞ | ∞3e4 | 0/15 |
| BrentSTEPrr Posik | 8.0 (15) | 110 (194) | 3049 (5399) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| CMA-CSA Atamna | 3.7 (1) | 4.8 (4) | 4.0 (3) | 4.2 (3) | 4.5 (3) | 4.8 (2) | 5.1 (2) | 15/15 |
| CMA-MSR Atamna | 5.7 (3) | 8.6 (6) | 6.1 (4) | 6.0 (3) | 5.9 (3) | 6.3 (3) | 7.0 (2) | 15/15 |
| CMA-TPA Atamna | 4.3 (2) | 6.9 (5) | 5.4 (3) | 5.4 (2) | 5.5 (2) | 5.8 (3) | 6.1 (2) | 15/15 |
| GP1-CMAES Bajer | 3.6 (2) | 6.4 (7) | 12 (12) | 17 (22) | 22 (21) | 32 (33) | 63 (61) | 1/15 |
| GP1-CMAES Bajer 2013instances | 3.4 (1) | 15 (22) | 26 (25) | 36 (43) | 34 (34) | 64 (54) | 61 (58) | 1/15 |
| GP5-CMAES Bajer | 2.3 (2) | 7.9 (7) | 9.1 (14) | 23 (27) | 22 (21) | 21 (30) | 30 (41) | 2/15 |
| GP5-CMAES Bajer 2013instances | 2.4 (2) | 5.4 (12) | 8.8 (9) | 12 (13) | 21 (24) | 20 (16) | 19 (18) | 1/15 |
| IPOPCMAv3p61 Bajer | 4.8 (2) | 4.1 (3) | 4.9 (3) | 7.4 (4) | 9.4 (8) | 33 (34) | 63 (59) | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 3.5 (2) | 4.7 (2) | 5.2 (3) | 8.3 (11) | 13 (13) | 16 (13) | 31 (38) | 1/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 10 (8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.4 (1) | 17 (12) | 18 (20) | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.5 (1) | 11 (13) | 18 (32) | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 4.9 (5) | 15 (20) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF1-CMAES Bajer 2013instances | 8.0 (7) | 35 (46) | 84 (99) | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF5-CMAES Bajer | 44 (36) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| RF5-CMAES Bajer 2013instances | 36 (49) | 78 (104) | ∞ | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| STEPif Posik | 1.8 (2) | 153 (171) | 3111 (2648) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| STEPifeg Posik | 1.9 (2) | 76 (127) | 1594 (2299) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| STEPrr Posik | 1.5 (1) | 117 (219) | 906 (885) | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| Δ fopt f10, 3-D |
1e1 114 |
1e0 152 |
1e-1 168 |
1e-2 180 |
1e-3 194 |
1e-5 218 |
1e-7 242 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 38 (39) | 29 (24) | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 33 (51) | 52 (59) | 135 (141) | 189 (218) | 237 (332) | 605 (903) | 1002 (895) | 8/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.9 (0.6) | 2.2 (0.8) | 3.0 (2) | 3.2 (2) | 3.4 (2) | 3.8 (2) | 4.2 (2) | 15/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 13 (3) | 14 (2) | 16 (2) | 17 (2) | 18 (2) | 20 (2) | 21 (2) | 15/15 |
| SOO Derbel | 18 (28) | 92 (141) | 524 (808) | 1030 (1434) | 1746 (2325) | 9423 (7715) | ∞3e5 | 0/15 |
| BrentSTEPif Posik | 783 (851) | 1254 (1340) | ∞ | ∞ | ∞ | ∞ | ∞1e4 | 0/15 |
| BrentSTEPifeg Posik | 805 (878) | 1212 (1662) | 1154 (991) | 1078 (1238) | ∞ | ∞ | ∞1e4 | 0/15 |
| BrentSTEPqi Posik | 442 (770) | 725 (933) | ∞ | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| BrentSTEPrr Posik | 732 (1369) | 1157 (1750) | ∞ | ∞ | ∞ | ∞ | ∞1e4 | 0/15 |
| CMA-CSA Atamna | 3.3 (1) | 3.0 (0.9) | 3.0 (1.0) | 3.2 (0.7) | 3.3 (0.5) | 3.3 (0.3) | 3.4 (0.3) | 15/15 |
| CMA-MSR Atamna | 3.8 (2) | 3.4 (1) | 3.5 (0.8) | 3.7 (0.8) | 3.8 (0.8) | 4.0 (0.9) | 4.4 (0.8) | 15/15 |
| CMA-TPA Atamna | 3.3 (1) | 3.1 (1) | 3.4 (0.6) | 3.5 (0.4) | 3.5 (0.6) | 3.5 (0.5) | 3.5 (0.4) | 15/15 |
| GP1-CMAES Bajer | 2.6 (1) | 3.0 (1.0) | 3.0 (0.8) | 3.4 (0.7) | 3.7 (2) | 3.9 (2) | 5.0 (5) | 2/15 |
| GP1-CMAES Bajer 2013instances | 2.5 (1) | 2.8 (1) | 3.1 (0.7) | 3.1 (0.7) | 3.3 (0.6) | 3.8 (2) | 4.9 (3) | 4/15 |
| GP5-CMAES Bajer | 1.2 (0.3) | 1.2 (0.4) | 1.3 (0.4) | 1.3 (0.4) | 1.3 (0.4) | 1.3 (0.3) | 1.6 (0.3) | 5/15 |
| GP5-CMAES Bajer 2013instances | 1.2 (0.4) | 1.1 (0.4) | 1.2 (0.2) | 1.3 (0.2) | 1.2 (0.2) | 1.2 (0.2) | 1.9 (0.8) | 9/15 |
| IPOPCMAv3p61 Bajer | 4.2 (2) | 11 (11) | 22 (28) | 62 (67) | ∞ | ∞ | ∞751 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 3.9 (2) | 4.4 (3) | 6.1 (3) | 10 (9) | 19 (15) | ∞ | ∞751 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 21 (21) | 72 (56) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF1-CMAES Bajer 2013instances | 47 (62) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF5-CMAES Bajer | 99 (100) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| STEPif Posik | 285 (300) | 482 (572) | ∞ | ∞ | ∞ | ∞ | ∞4482 | 0/15 |
| STEPifeg Posik | 286 (381) | 467 (454) | ∞ | ∞ | ∞ | ∞ | ∞4486 | 0/15 |
| STEPrr Posik | 161 (131) | 194 (191) | 413 (343) | ∞ | ∞ | ∞ | ∞3648 | 0/15 |
| Δ fopt f11, 3-D |
1e1 67 |
1e0 105 |
1e-1 227 |
1e-2 263 |
1e-3 277 |
1e-5 302 |
1e-7 327 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 11 (8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 11 (8) | 41 (44) | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 18 (35) | 90 (184) | 205 (295) | 517 (497) | 589 (542) | 2685 (2514) | 6695 (8438) | 0/15 |
| R-SHADE-10e2 Tanabe | 12 (12) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 3.3 (2) | 4.7 (3) | 2.8 (1) | 3.0 (2) | 3.1 (2) | 3.4 (2) | 3.6 (1) | 15/15 |
| RL-SHADE-10e2 Tanabe | 12 (9) | 14 (12) | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 13 (9) | 15 (3) | 11 (2) | 11 (1) | 12 (1) | 14 (1) | 16 (1) | 15/15 |
| SOO Derbel | 4.6 (4) | 41 (55) | 300 (654) | 2112 (1774) | ∞ | ∞ | ∞3e5 | 0/15 |
| BrentSTEPif Posik | 164 (295) | 422 (595) | 879 (944) | ∞ | ∞ | ∞ | ∞1e4 | 0/15 |
| BrentSTEPifeg Posik | 124 (161) | 401 (543) | ∞ | ∞ | ∞ | ∞ | ∞1e4 | 0/15 |
| BrentSTEPqi Posik | 218 (250) | 1152 (2079) | ∞ | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| BrentSTEPrr Posik | 147 (285) | 539 (576) | 811 (1369) | ∞ | ∞ | ∞ | ∞1e4 | 0/15 |
| CMA-CSA Atamna | 4.6 (2) | 4.5 (2) | 2.5 (0.5) | 2.3 (0.5) | 2.3 (0.4) | 2.5 (0.4) | 2.5 (0.4) | 15/15 |
| CMA-MSR Atamna | 5.8 (3) | 4.6 (0.9) | 2.5 (0.5) | 2.4 (0.4) | 2.5 (0.5) | 2.8 (0.4) | 3.2 (0.4) | 15/15 |
| CMA-TPA Atamna | 4.8 (3) | 4.5 (1) | 2.5 (0.5) | 2.4 (0.5) | 2.5 (0.3) | 2.6 (0.3) | 2.6 (0.3) | 15/15 |
| GP1-CMAES Bajer | 5.6 (4) | 5.8 (5) | 3.0 (2) | 3.2 (2) | 3.3 (2) | 5.9 (9) | 8.6 (6) | 2/15 |
| GP1-CMAES Bajer 2013instances | 4.8 (3) | 4.4 (1) | 2.3 (0.5) | 2.2 (0.3) | 2.4 (0.2) | 3.1 (1) | 5.5 (3) | 2/15 |
| GP5-CMAES Bajer | 1.9 (1.0) | 1.7 (0.5) | 0.95 (0.2) | 0.90 (0.2) | 0.95 (0.2) | 0.96 (0.2) | 1.3 (0.3) | 6/15 |
| GP5-CMAES Bajer 2013instances | 2.1 (0.9) | 1.8 (0.5) | 0.96 (0.2) | 0.90 (0.2) | 0.91 (0.2) | 0.92 (0.2) | 1.7 (1) | 5/15 |
| IPOPCMAv3p61 Bajer | 6.8 (6) | 19 (14) | 15 (13) | 21 (14) | 20 (20) | ∞ | ∞751 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 8.8 (6) | 12 (7) | 16 (13) | 42 (36) | 40 (37) | ∞ | ∞751 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 33 (36) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 16 (26) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 11 (9) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 27 (30) | 101 (89) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF1-CMAES Bajer 2013instances | 46 (68) | 101 (123) | 47 (69) | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF5-CMAES Bajer | 20 (17) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| RF5-CMAES Bajer 2013instances | 34 (40) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| STEPif Posik | 76 (140) | 365 (610) | ∞ | ∞ | ∞ | ∞ | ∞7579 | 0/15 |
| STEPifeg Posik | 51 (94) | 359 (295) | ∞ | ∞ | ∞ | ∞ | ∞7533 | 0/15 |
| STEPrr Posik | 68 (150) | 307 (274) | 227 (211) | ∞ | ∞ | ∞ | ∞6563 | 0/15 |
| Δ fopt f12, 3-D |
1e1 65 |
1e0 168 |
1e-1 338 |
1e-2 401 |
1e-3 445 |
1e-5 696 |
1e-7 790 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 11 (11) | 14 (11) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 61 (112) | 76 (75) | 74 (74) | 86 (68) | 93 (64) | 96 (80) | 113 (87) | 13/15 |
| R-SHADE-10e2 Tanabe | 68 (62) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 11 (25) | 8.2 (20) | 6.2 (14) | 6.3 (13) | 6.5 (12) | 5.8 (9) | 6.1 (8) | 15/15 |
| RL-SHADE-10e2 Tanabe | 13 (10) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 33 (9) | 20 (11) | 13 (6) | 13 (5) | 14 (6) | 11 (4) | 11 (3) | 15/15 |
| SOO Derbel | 5.3 (2) | 4.3 (2) | 4.1 (2) | 9.5 (10) | 22 (26) | 46 (45) | 189 (231) | 11/15 |
| BrentSTEPif Posik | 62 (132) | 80 (62) | 108 (171) | 380 (509) | ∞ | ∞ | ∞9690 | 0/15 |
| BrentSTEPifeg Posik | 59 (107) | 48 (97) | 75 (84) | 171 (171) | 332 (456) | ∞ | ∞8987 | 0/15 |
| BrentSTEPqi Posik | 70 (171) | 71 (120) | 107 (89) | 488 (760) | 439 (413) | ∞ | ∞1e4 | 0/15 |
| BrentSTEPrr Posik | 61 (84) | 46 (53) | 44 (36) | 152 (192) | ∞ | ∞ | ∞7634 | 0/15 |
| CMA-CSA Atamna | 6.7 (3) | 5.1 (4) | 3.8 (3) | 4.0 (3) | 4.0 (3) | 3.7 (2) | 3.8 (2) | 15/15 |
| CMA-MSR Atamna | 10 (8) | 6.7 (7) | 4.6 (4) | 4.6 (4) | 4.7 (3) | 3.9 (2) | 4.0 (2) | 15/15 |
| CMA-TPA Atamna | 7.6 (4) | 5.0 (6) | 3.2 (4) | 3.0 (4) | 3.0 (4) | 2.4 (3) | 2.7 (3) | 15/15 |
| GP1-CMAES Bajer | 8.4 (8) | 4.8 (4) | 3.7 (4) | 4.9 (6) | 25 (24) | ∞ | ∞751 | 0/15 |
| GP1-CMAES Bajer 2013instances | 5.8 (8) | 4.3 (5) | 3.4 (3) | 5.2 (7) | 8.2 (10) | ∞ | ∞751 | 0/15 |
| GP5-CMAES Bajer | 5.0 (6) | 3.4 (5) | 3.1 (6) | 3.5 (7) | 12 (14) | ∞ | ∞753 | 0/15 |
| GP5-CMAES Bajer 2013instances | 7.7 (9) | 4.9 (10) | 6.7 (8) | 8.1 (13) | 12 (17) | ∞ | ∞753 | 0/15 |
| IPOPCMAv3p61 Bajer | 6.8 (6) | 4.3 (4) | 4.8 (4) | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 7.7 (6) | 5.9 (5) | 15 (19) | 28 (30) | ∞ | ∞ | ∞751 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 11 (10) | 13 (9) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 11 (11) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 13 (16) | 11 (14) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF1-CMAES Bajer 2013instances | 14 (12) | 20 (23) | 33 (43) | 28 (23) | 25 (16) | ∞ | ∞751 | 0/15 |
| RF5-CMAES Bajer | 168 (212) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| STEPif Posik | 10 (10) | 19 (21) | 26 (42) | ∞ | ∞ | ∞ | ∞3248 | 0/15 |
| STEPifeg Posik | 8.3 (8) | 20 (28) | 36 (42) | 131 (131) | ∞ | ∞ | ∞3495 | 0/15 |
| STEPrr Posik | 14 (23) | 19 (27) | 35 (32) | 62 (72) | 112 (166) | ∞ | ∞3419 | 0/15 |
| Δ fopt f13, 3-D |
1e1 49 |
1e0 85 |
1e-1 108 |
1e-2 136 |
1e-3 215 |
1e-5 281 |
1e-7 365 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 2.2 (2) | 8.1 (9) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 3.8 (2) | 25 (26) | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 6.1 (4) | 13 (11) | 22 (14) | 41 (25) | 59 (46) | 690 (883) | 1443 (1184) | 2/15 |
| R-SHADE-10e2 Tanabe | 8.1 (8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 3.9 (2) | 4.0 (2) | 4.4 (2) | 4.6 (1) | 3.5 (1) | 3.9 (1) | 3.8 (0.9) | 15/15 |
| RL-SHADE-10e2 Tanabe | 4.6 (4) | 26 (28) | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 16 (8) | 21 (3) | 25 (4) | 25 (3) | 19 (2) | 20 (2) | 19 (0.9) | 15/15 |
| SOO Derbel | 3.9 (1) | 7.0 (5) | 13 (8) | 19 (11) | 25 (24) | 81 (76) | 223 (225) | 13/15 |
| BrentSTEPif Posik | 302 (398) | 706 (855) | 1558 (1742) | 2701 (1618) | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPifeg Posik | 293 (300) | 554 (839) | 1558 (2095) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPqi Posik | 185 (263) | 407 (405) | 1056 (1572) | 2768 (2217) | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPrr Posik | 171 (263) | 662 (686) | 1575 (2168) | 1260 (1869) | ∞ | ∞ | ∞2e4 | 0/15 |
| CMA-CSA Atamna | 4.6 (3) | 4.5 (2) | 4.4 (1) | 4.2 (0.7) | 3.1 (0.7) | 3.4 (0.4) | 3.2 (0.3) | 15/15 |
| CMA-MSR Atamna | 4.0 (1) | 4.2 (1) | 4.7 (1) | 4.8 (0.9) | 3.6 (0.6) | 3.7 (0.4) | 3.6 (0.4) | 15/15 |
| CMA-TPA Atamna | 3.5 (2) | 3.6 (1) | 4.3 (2) | 4.6 (1) | 3.6 (0.5) | 3.5 (0.4) | 3.4 (0.6) | 15/15 |
| GP1-CMAES Bajer | 4.4 (6) | 6.2 (5) | 31 (32) | 40 (31) | ∞ | ∞ | ∞751 | 0/15 |
| GP1-CMAES Bajer 2013instances | 5.1 (8) | 5.7 (6) | 11 (9) | 18 (15) | 51 (46) | ∞ | ∞751 | 0/15 |
| GP5-CMAES Bajer | 2.3 (2) | 2.8 (2) | 3.5 (4) | 3.9 (3) | 3.9 (4) | ∞ | ∞753 | 0/15 |
| GP5-CMAES Bajer 2013instances | 1.2 (0.5) | 2.6 (2) | 3.4 (3) | 3.4 (3) | 4.0 (5) | ∞ | ∞753 | 0/15 |
| IPOPCMAv3p61 Bajer | 5.9 (5) | 5.9 (3) | 10 (8) | 13 (10) | 26 (36) | ∞ | ∞751 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 7.3 (8) | 6.7 (6) | 8.7 (6) | 11 (11) | 13 (13) | ∞ | ∞751 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 4.0 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.7 (3) | 4.6 (7) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.8 (2) | 26 (23) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 12 (21) | 132 (126) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF1-CMAES Bajer 2013instances | 13 (12) | 60 (55) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF5-CMAES Bajer | 23 (39) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| RF5-CMAES Bajer 2013instances | 39 (61) | 126 (134) | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| STEPif Posik | 141 (219) | 776 (1116) | 1357 (1069) | 2338 (3485) | ∞ | ∞ | ∞2e4 | 0/15 |
| STEPifeg Posik | 218 (348) | 479 (813) | 1451 (1412) | 2427 (3660) | ∞ | ∞ | ∞2e4 | 0/15 |
| STEPrr Posik | 131 (218) | 633 (538) | 928 (1113) | 1199 (1331) | ∞ | ∞ | ∞2e4 | 0/15 |
| Δ fopt f14, 3-D |
1e1 2.0 |
1e0 17 |
1e-1 28 |
1e-2 43 |
1e-3 71 |
1e-5 110 |
1e-7 194 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.7 (1) | 1.5 (0.6) | 2.1 (1) | 9.5 (10) | 31 (32) | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 2.0 (2) | 2.2 (0.9) | 3.6 (2) | 4.4 (1) | 12 (12) | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 3.0 (3) | 2.9 (1) | 5.1 (4) | 14 (31) | 19 (26) | 121 (98) | 530 (492) | 9/15 |
| R-SHADE-10e2 Tanabe | 3.8 (6) | 2.9 (1) | 4.9 (2) | 7.2 (4) | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 3.0 (3) | 2.9 (2) | 4.1 (1) | 4.8 (0.8) | 4.2 (1) | 5.0 (2) | 4.0 (1) | 15/15 |
| RL-SHADE-10e2 Tanabe | 1.9 (2) | 2.6 (2) | 3.7 (2) | 3.9 (1) | 4.7 (3) | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 1.5 (2) | 4.2 (5) | 17 (3) | 23 (5) | 24 (5) | 28 (4) | 22 (2) | 15/15 |
| SOO Derbel | 1.4 (1) | 1.5 (0.8) | 3.0 (1.0) | 6.2 (2) | 12 (7) | 286 (315) | 675 (864) | 12/15 |
| BrentSTEPif Posik | 1.9 (2) | 5.4 (10) | 5.0 (7) | 188 (300) | 6285 (7397) | ∞ | ∞3e4 | 0/15 |
| BrentSTEPifeg Posik | 1.9 (2) | 4.8 (9) | 4.4 (5) | 33 (24) | 1329 (2008) | ∞ | ∞3e4 | 0/15 |
| BrentSTEPqi Posik | 1.9 (2) | 4.0 (6) | 3.3 (4) | 15 (15) | 1022 (1600) | ∞ | ∞3e4 | 0/15 |
| BrentSTEPrr Posik | 1.9 (2) | 5.5 (10) | 4.6 (7) | 28 (42) | 779 (1012) | ∞ | ∞3e4 | 0/15 |
| CMA-CSA Atamna | 4.2 (5) | 2.3 (2) | 3.7 (2) | 4.1 (2) | 4.4 (1) | 5.1 (0.9) | 4.2 (0.5) | 15/15 |
| CMA-MSR Atamna | 2.7 (2) | 3.2 (2) | 4.5 (2) | 5.8 (1) | 5.1 (0.9) | 5.6 (0.9) | 4.5 (0.8) | 15/15 |
| CMA-TPA Atamna | 4.8 (5) | 3.5 (1) | 4.5 (1) | 4.2 (0.9) | 3.9 (1) | 4.9 (1) | 4.1 (0.7) | 15/15 |
| GP1-CMAES Bajer | 3.6 (4) | 2.1 (1) | 2.6 (0.8) | 3.3 (1) | 4.1 (2) | 48 (45) | ∞751 | 0/15 |
| GP1-CMAES Bajer 2013instances | 4.3 (5) | 2.5 (1) | 2.8 (0.9) | 3.5 (1) | 6.3 (5) | 23 (18) | ∞751 | 0/15 |
| GP5-CMAES Bajer | 4.0 (4) | 1.8 (0.9) | 1.7 (0.6) | 1.9 (0.4) | 2.1 (0.7) | 32 (37) | ∞760 | 0/15 |
| GP5-CMAES Bajer 2013instances | 3.7 (4) | 1.8 (0.9) | 1.8 (0.8) | 2.2 (1) | 3.6 (3) | 31 (38) | ∞753 | 0/15 |
| IPOPCMAv3p61 Bajer | 4.0 (4) | 3.6 (3) | 4.3 (2) | 5.2 (2) | 5.4 (1) | 16 (16) | ∞751 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.4 (2) | 3.1 (2) | 3.6 (1) | 4.0 (0.8) | 4.4 (1) | 8.9 (7) | ∞751 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 1.7 (2) | 4.1 (2) | 3.9 (0.4) | 8.3 (9) | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.1 (1) | 1.4 (0.4) | 1.7 (0.6) | 24 (37) | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.6 (2) | 1.4 (0.4) | 1.9 (1) | 12 (13) | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 4.2 (4) | 3.2 (1) | 6.6 (3) | 10 (15) | 23 (22) | ∞ | ∞751 | 0/15 |
| RF1-CMAES Bajer 2013instances | 3.2 (4) | 7.7 (8) | 14 (19) | 24 (21) | 71 (98) | ∞ | ∞751 | 0/15 |
| RF5-CMAES Bajer | 3.3 (5) | 37 (51) | 59 (67) | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| RF5-CMAES Bajer 2013instances | 2.1 (2) | 24 (23) | 41 (28) | 72 (83) | 151 (154) | ∞ | ∞753 | 0/15 |
| STEPif Posik | 1.9 (2) | 1.7 (1) | 2.4 (2) | 21 (42) | 2772 (2959) | ∞ | ∞3e4 | 0/15 |
| STEPifeg Posik | 1.9 (2) | 1.6 (1.0) | 2.1 (2) | 12 (12) | 618 (652) | ∞ | ∞3e4 | 0/15 |
| STEPrr Posik | 1.9 (2) | 1.4 (0.7) | 1.6 (1) | 12 (12) | 1294 (1469) | ∞ | ∞3e4 | 0/15 |
| Δ fopt f15, 3-D |
1e1 121 |
1e0 1372 |
1e-1 6285 |
1e-2 8282 |
1e-3 8429 |
1e-5 8787 |
1e-7 9041 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 0.77 (0.8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 0.93 (0.6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 3.1 (3) | 7.1 (6) | 10 (8) | 9.2 (8) | 9.0 (7) | 11 (8) | 11 (8) | 15/15 |
| R-SHADE-10e2 Tanabe | 1.6 (0.7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.7 (0.9) | 1.0 (0.8) | 0.84 (1) | 0.64 (0.8) | 0.64 (0.8) | 0.63 (0.8) | 0.63 (0.7) | 15/15 |
| RL-SHADE-10e2 Tanabe | 1.0 (0.5) | 3.2 (3) | 0.71 (0.8) | 0.54 (0.5) | ∞ | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 2.7 (2) | 2.7 (1) | 2.1 (5) | 1.7 (4) | 1.8 (4) | 1.8 (4) | 1.8 (3) | 15/15 |
| SOO Derbel | 0.96 (0.3) | 1.5 (3) | 3.0 (6) | 2.3 (4) | 2.5 (4) | 2.5 (4) | 2.4 (4) | 15/15 |
| BrentSTEPif Posik | 62 (94) | 291 (367) | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPifeg Posik | 50 (76) | 84 (93) | 30 (27) | 23 (26) | 23 (21) | 22 (29) | 46 (50) | 0/15 |
| BrentSTEPqi Posik | 84 (118) | 60 (77) | 63 (66) | 48 (46) | 47 (46) | 45 (47) | 45 (45) | 0/15 |
| BrentSTEPrr Posik | 80 (99) | 47 (62) | 31 (38) | 23 (19) | 23 (24) | 22 (28) | 22 (24) | 2/15 |
| CMA-CSA Atamna | 1.2 (0.6) | 1.3 (1) | 0.83 (0.8) | 0.64 (0.6) | 0.65 (0.6) | 0.65 (0.6) | 0.66 (0.6) | 15/15 |
| CMA-MSR Atamna | 2.7 (5) | 1.8 (1) | 0.72 (0.4) | 0.56 (0.3)↑1 | 0.57 (0.3)↑1 | 0.58 (0.3)↑1 | 0.60 (0.3)↑1 | 15/15 |
| CMA-TPA Atamna | 1.00 (0.5) | 1.6 (1) | 1.1 (0.7) | 0.91 (0.6) | 0.91 (0.5) | 0.91 (0.5) | 0.92 (0.5) | 15/15 |
| GP1-CMAES Bajer | 0.92 (0.4) | 0.87 (0.7) | 1.8 (2) | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.2 (3) | 1.7 (2) | 1.7 (2) | 1.3 (2) | 1.3 (2) | 1.3 (1) | 1.2 (0.6) | 0/15 |
| GP5-CMAES Bajer | 0.88 (0.7) | 7.8 (12) | 1.7 (3) | 1.3 (2) | 1.3 (2) | 1.2 (1) | 1.2 (1) | 1/15 |
| GP5-CMAES Bajer 2013instances | 0.74 (0.5) | 3.8 (4) | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| IPOPCMAv3p61 Bajer | 1.1 (0.7) | 1.8 (2) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 0.98 (0.4) | 1.4 (2) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 1.6 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.1 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 0.72 (0.3)↑1 | 1.6 (2) | 0.35 (0.4) | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 2.0 (3) | 3.8 (4) | 1.7 (2) | 1.3 (1) | 1.3 (1) | ∞ | ∞751 | 0/15 |
| RF1-CMAES Bajer 2013instances | 1.0 (0.7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF5-CMAES Bajer | 8.2 (16) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| RF5-CMAES Bajer 2013instances | 4.7 (6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| STEPif Posik | 51 (101) | 88 (79) | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| STEPifeg Posik | 32 (57) | 41 (52) | 21 (24) | 16 (18) | 16 (16) | 24 (28) | 47 (32) | 1/15 |
| STEPrr Posik | 25 (45) | 33 (33) | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| Δ fopt f16, 3-D |
1e1 41 |
1e0 319 |
1e-1 582 |
1e-2 789 |
1e-3 1864 |
1e-5 3204 |
1e-7 3361 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.3 (1) | 1.6 (1) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 1.7 (2) | 3.2 (4) | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 1.7 (1) | 4.0 (4) | 7.7 (9) | 9.3 (10) | 4.5 (4) | 3.8 (3) | 5.2 (4) | 15/15 |
| R-SHADE-10e2 Tanabe | 0.97 (1.0) | 14 (10) | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.0 (1) | 1.7 (1) | 1.6 (0.6) | 1.5 (1) | 0.82 (0.7) | 0.54 (0.4) | 0.63 (0.5) | 15/15 |
| RL-SHADE-10e2 Tanabe | 1.3 (1) | 2.6 (3) | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 1.9 (1) | 4.4 (4) | 11 (4) | 11 (3) | 8.6 (10) | 5.9 (9) | 5.9 (9) | 15/15 |
| SOO Derbel | 0.90 (0.9) | 0.48 (0.3)↑0 | 0.84 (0.8) | 1.0 (1) | 0.64 (0.5) | 1.4 (2) | 2.2 (3) | 15/15 |
| BrentSTEPif Posik | 1.9 (2) | 24 (35) | 57 (62) | 168 (155) | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPifeg Posik | 1.6 (2) | 20 (20) | 74 (76) | 163 (156) | 108 (80) | ∞ | ∞3e4 | 0/15 |
| BrentSTEPqi Posik | 1.9 (2) | 26 (35) | 63 (44) | 164 (148) | 217 (245) | ∞ | ∞3e4 | 0/15 |
| BrentSTEPrr Posik | 1.5 (2) | 19 (31) | 144 (103) | 161 (200) | 107 (89) | ∞ | ∞3e4 | 0/15 |
| CMA-CSA Atamna | 1.7 (2) | 3.1 (3) | 3.5 (4) | 2.7 (3) | 1.2 (1) | 0.74 (0.8) | 0.75 (0.8) | 15/15 |
| CMA-MSR Atamna | 6.6 (17) | 7.1 (7) | 5.3 (4) | 4.4 (3) | 3.0 (3) | 1.9 (2) | 1.9 (2) | 15/15 |
| CMA-TPA Atamna | 3.2 (5) | 4.8 (7) | 3.6 (4) | 3.9 (7) | 1.7 (3) | 1.1 (2) | 1.1 (2) | 15/15 |
| GP1-CMAES Bajer | 1.4 (2) | 5.3 (5) | 5.8 (9) | 14 (16) | ∞ | ∞ | ∞751 | 0/15 |
| GP1-CMAES Bajer 2013instances | 1.2 (1) | 3.1 (3) | 3.2 (4) | 6.6 (7) | 2.8 (5) | 1.7 (2) | ∞751 | 0/15 |
| GP5-CMAES Bajer | 1.9 (0.9) | 2.7 (2) | 2.2 (2) | 2.5 (1) | 2.8 (3) | ∞ | ∞760 | 0/15 |
| GP5-CMAES Bajer 2013instances | 0.78 (0.7) | 3.6 (3) | 4.1 (6) | 4.4 (5) | 2.9 (5) | 3.4 (3) | ∞760 | 0/15 |
| IPOPCMAv3p61 Bajer | 1.2 (1) | 1.9 (2) | 3.4 (4) | 4.4 (6) | 1.9 (2) | 1.1 (0.8) | 1.6 (1) | 2/15 |
| IPOPCMAv3p61 Bajer 2013instances | 1.6 (1) | 1.7 (2) | 1.8 (2) | 2.0 (2) | 1.1 (0.7) | 0.66 (0.5) | 1.1 (2) | 2/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 0.98 (1) | 1.2 (1) | 3.8 (3) | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.0 (0.9) | 1.00 (1) | 3.7 (4) | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.3 (1) | 1.0 (0.7) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 1.3 (1) | 2.2 (2) | 5.7 (7) | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF1-CMAES Bajer 2013instances | 1.0 (1) | 3.4 (4) | 4.0 (4) | 4.3 (5) | ∞ | ∞ | ∞751 | 0/15 |
| RF5-CMAES Bajer | 3.0 (4) | 11 (15) | 19 (18) | 14 (17) | 6.0 (6) | ∞ | ∞753 | 0/15 |
| RF5-CMAES Bajer 2013instances | 2.7 (6) | 4.6 (5) | 9.1 (8) | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| STEPif Posik | 1.0 (0.6) | 12 (32) | 36 (52) | 91 (83) | 111 (156) | ∞ | ∞3e4 | 0/15 |
| STEPifeg Posik | 1.0 (0.6) | 10 (17) | 28 (35) | 265 (264) | 112 (139) | ∞ | ∞3e4 | 0/15 |
| STEPrr Posik | 1.2 (0.8) | 19 (26) | 47 (52) | 257 (246) | ∞ | ∞ | ∞3e4 | 0/15 |
| Δ fopt f17, 3-D |
1e1 4.0 |
1e0 78 |
1e-1 282 |
1e-2 491 |
1e-3 1134 |
1e-5 2347 |
1e-7 3469 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 2.3 (2) | 1.2 (1) | 8.4 (9) | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 2.0 (2) | 1.7 (0.8) | 2.5 (1) | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 1.9 (1) | 1.5 (0.6) | 2.0 (0.9) | 6.6 (6) | 7.8 (10) | 9.2 (10) | 17 (22) | 14/15 |
| R-SHADE-10e2 Tanabe | 2.3 (4) | 2.5 (3) | 16 (12) | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.6 (2) | 1.3 (0.8) | 1.1 (0.5) | 1.1 (0.3) | 0.66 (0.1)↑0 | 0.67 (0.4) | 0.84 (0.5) | 15/15 |
| RL-SHADE-10e2 Tanabe | 2.3 (2) | 2.3 (3) | 5.2 (7) | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 1.9 (3) | 4.7 (2) | 5.3 (1.0) | 5.9 (2) | 3.9 (0.4) | 3.1 (0.3) | 2.7 (0.2) | 15/15 |
| SOO Derbel | 1.1 (1) | 0.90 (0.5) | 0.98 (0.4) | 1.8 (1) | 1.3 (1.0) | 1.6 (0.9) | 2.0 (0.9) | 15/15 |
| BrentSTEPif Posik | 2.6 (2) | 54 (111) | 143 (222) | 267 (339) | 385 (587) | ∞ | ∞3e4 | 0/15 |
| BrentSTEPifeg Posik | 3.3 (2) | 47 (91) | 304 (353) | 879 (1419) | 384 (462) | ∞ | ∞3e4 | 0/15 |
| BrentSTEPqi Posik | 2.7 (2) | 70 (207) | 73 (97) | 180 (275) | 187 (258) | ∞ | ∞3e4 | 0/15 |
| BrentSTEPrr Posik | 4.7 (2) | 53 (147) | 116 (119) | 248 (350) | 374 (600) | ∞ | ∞3e4 | 0/15 |
| CMA-CSA Atamna | 2.0 (2) | 1.2 (0.5) | 0.93 (0.2)↑1 | 1.3 (2) | 0.78 (0.8) | 0.86 (0.5) | 0.81 (0.7) | 15/15 |
| CMA-MSR Atamna | 2.8 (2) | 3.3 (7) | 2.3 (2) | 1.9 (2) | 0.97 (0.7) | 1.1 (0.8) | 1.0 (0.4) | 15/15 |
| CMA-TPA Atamna | 4.0 (5) | 1.5 (0.8) | 0.85 (0.4) | 0.78 (0.2) | 0.77 (0.6) | 1.2 (1) | 1.2 (0.9) | 15/15 |
| GP1-CMAES Bajer | 3.0 (3) | 1.7 (0.7) | 1.7 (2) | 3.2 (3) | 10 (7) | ∞ | ∞751 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.1 (4) | 2.4 (5) | 1.5 (2) | 3.0 (4) | 3.2 (4) | ∞ | ∞751 | 0/15 |
| GP5-CMAES Bajer | 8.2 (7) | 2.6 (4) | 4.6 (7) | 11 (13) | ∞ | ∞ | ∞760 | 0/15 |
| GP5-CMAES Bajer 2013instances | 2.9 (3) | 4.2 (5) | 3.5 (3) | 22 (33) | ∞ | ∞ | ∞753 | 0/15 |
| IPOPCMAv3p61 Bajer | 3.4 (3) | 3.0 (5) | 1.6 (2) | 1.3 (1) | 0.80 (0.7) | 2.4 (2) | ∞751 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 4.8 (6) | 1.6 (0.5) | 0.94 (0.3) | 0.92 (0.2) | 0.74 (0.7) | 4.8 (6) | ∞751 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 2.5 (3) | 1.7 (1) | 7.9 (9) | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.1 (2) | 1.4 (1) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.4 (2) | 1.0 (0.5) | 2.6 (3) | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 3.5 (4) | 5.9 (10) | 11 (14) | 22 (20) | 10 (8) | ∞ | ∞751 | 0/15 |
| RF1-CMAES Bajer 2013instances | 3.7 (4) | 6.2 (8) | 8.2 (7) | 22 (25) | ∞ | ∞ | ∞751 | 0/15 |
| RF5-CMAES Bajer | 16 (3) | 13 (14) | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| RF5-CMAES Bajer 2013instances | 19 (60) | 12 (14) | 40 (26) | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| STEPif Posik | 4.2 (2) | 30 (42) | 69 (85) | 268 (263) | ∞ | ∞ | ∞3e4 | 0/15 |
| STEPifeg Posik | 3.5 (2) | 47 (71) | 48 (53) | 193 (167) | ∞ | ∞ | ∞3e4 | 0/15 |
| STEPrr Posik | 3.3 (2) | 15 (40) | 51 (81) | 184 (177) | 378 (278) | ∞ | ∞3e4 | 0/15 |
| Δ fopt f18, 3-D |
1e1 40 |
1e0 145 |
1e-1 1289 |
1e-2 3084 |
1e-3 3523 |
1e-5 4738 |
1e-7 5527 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.1 (0.9) | 16 (15) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 1.3 (1) | 2.0 (2) | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 1.3 (0.9) | 7.4 (7) | 5.3 (9) | 4.0 (5) | 12 (17) | 28 (29) | 46 (46) | 9/15 |
| R-SHADE-10e2 Tanabe | 2.4 (3) | 7.4 (7) | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.2 (0.9) | 1.7 (0.7) | 0.64 (0.2)↑1 | 0.42 (0.4) | 0.61 (0.8) | 0.68 (0.6) | 0.90 (0.8) | 15/15 |
| RL-SHADE-10e2 Tanabe | 2.2 (2) | 7.3 (7) | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 2.9 (3) | 7.1 (3) | 2.0 (0.4) | 1.3 (0.2) | 1.5 (0.1) | 1.7 (0.1) | 1.9 (0.1) | 15/15 |
| SOO Derbel | 0.97 (0.8) | 1.4 (0.5) | 0.74 (0.5) | 1.0 (0.7) | 1.6 (1) | 3.7 (4) | 6.1 (5) | 15/15 |
| BrentSTEPif Posik | 1.3 (3) | 210 (335) | 149 (265) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPifeg Posik | 1.6 (3) | 132 (168) | 324 (410) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPqi Posik | 1.1 (1.0) | 127 (244) | 332 (297) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPrr Posik | 17 (2) | 72 (94) | 151 (179) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| CMA-CSA Atamna | 1.4 (0.9) | 3.1 (4) | 1.2 (2) | 0.71 (0.8) | 0.81 (0.8) | 0.85 (0.5) | 0.95 (0.5) | 15/15 |
| CMA-MSR Atamna | 1.4 (0.9) | 5.1 (8) | 1.1 (2) | 0.73 (1) | 0.96 (1) | 0.96 (0.8) | 1.0 (0.7) | 15/15 |
| CMA-TPA Atamna | 1.7 (1) | 4.2 (7) | 1.0 (0.9) | 0.55 (0.4)↑1 | 0.75 (0.6) | 0.85 (0.5) | 0.93 (0.4) | 15/15 |
| GP1-CMAES Bajer | 1.1 (0.8) | 2.3 (3) | 1.4 (1) | 1.8 (2) | ∞ | ∞ | ∞751 | 0/15 |
| GP1-CMAES Bajer 2013instances | 1.3 (0.7) | 3.7 (3) | 2.6 (3) | 3.6 (3) | ∞ | ∞ | ∞751 | 0/15 |
| GP5-CMAES Bajer | 1.2 (1) | 3.3 (5) | 8.4 (11) | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| GP5-CMAES Bajer 2013instances | 5.7 (9) | 3.3 (6) | 2.5 (3) | 3.5 (3) | ∞ | ∞ | ∞760 | 0/15 |
| IPOPCMAv3p61 Bajer | 1.6 (0.9) | 2.6 (4) | 1.9 (2) | 1.7 (2) | 3.2 (5) | ∞ | ∞751 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 1.8 (1) | 4.2 (6) | 2.0 (2) | 1.2 (0.8) | 1.6 (1) | ∞ | ∞751 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 2.1 (0.4) | 15 (13) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 0.93 (0.6) | 2.4 (2) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 0.97 (0.6) | 2.7 (2) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 1.6 (2) | 9.0 (15) | 1.8 (3) | 3.5 (3) | ∞ | ∞ | ∞751 | 0/15 |
| RF1-CMAES Bajer 2013instances | 7.7 (10) | 12 (12) | 4.1 (5) | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF5-CMAES Bajer | 11 (13) | 23 (16) | ∞ | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| RF5-CMAES Bajer 2013instances | 5.1 (7) | 16 (16) | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| STEPif Posik | 3.8 (3) | 110 (136) | 142 (157) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| STEPifeg Posik | 1.5 (3) | 74 (131) | 93 (149) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| STEPrr Posik | 1.2 (2) | 90 (118) | 93 (130) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| Δ fopt f19, 3-D |
1e1 1 |
1e0 1 |
1e-1 109 |
1e-2 6764 |
1e-3 7367 |
1e-5 7399 |
1e-7 7441 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 8.9 (8) | 286 (225) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 8.4 (9) | 177 (191) | 39 (46) | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 6.9 (6) | 142 (106) | 31 (36) | 7.5 (10) | 11 (11) | 22 (27) | 22 (26) | 12/15 |
| R-SHADE-10e2 Tanabe | 9.0 (8) | 274 (240) | 39 (35) | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 7.1 (5) | 178 (132) | 24 (40) | 1.9 (2) | 2.2 (4) | 2.2 (4) | 2.3 (4) | 15/15 |
| RL-SHADE-10e2 Tanabe | 15 (14) | 228 (376) | 41 (47) | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 7.7 (10) | 191 (184) | 25 (19) | 2.6 (5) | 4.1 (5) | 7.4 (12) | 8.3 (11) | 15/15 |
| SOO Derbel | 1 (0)★ | 1 (0)★3 | 2.9 (2) | 7.2 (11) | 23 (22) | 77 (92) | 134 (131) | 2/15 |
| BrentSTEPif Posik | 8.3 (7) | 242 (191) | 36 (51) | 30 (32) | 57 (43) | ∞ | ∞3e4 | 0/15 |
| BrentSTEPifeg Posik | 8.3 (7) | 220 (346) | 17 (14) | 61 (80) | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPqi Posik | 8.3 (7) | 253 (252) | 46 (36) | 10 (8) | 55 (64) | ∞ | ∞3e4 | 0/15 |
| BrentSTEPrr Posik | 8.3 (7) | 237 (182) | 33 (34) | 66 (70) | ∞ | ∞ | ∞3e4 | 0/15 |
| CMA-CSA Atamna | 11 (10) | 352 (890) | 39 (37) | 2.1 (2) | 2.4 (2) | 2.5 (2) | 2.5 (2) | 15/15 |
| CMA-MSR Atamna | 8.8 (4) | 251 (600) | 96 (147) | 46 (47) | 94 (122) | 122 (135) | 122 (124) | 4/15 |
| CMA-TPA Atamna | 8.7 (10) | 172 (114) | 41 (61) | 2.3 (2) | 2.8 (3) | 2.9 (4) | 2.9 (4) | 15/15 |
| GP1-CMAES Bajer | 10 (8) | 160 (143) | 48 (52) | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| GP1-CMAES Bajer 2013instances | 6.1 (8) | 154 (197) | 48 (74) | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| GP5-CMAES Bajer | 7.3 (8) | 143 (170) | 21 (20) | ∞ | ∞ | ∞ | ∞762 | 0/15 |
| GP5-CMAES Bajer 2013instances | 10 (10) | 282 (414) | 104 (118) | ∞ | ∞ | ∞ | ∞762 | 0/15 |
| IPOPCMAv3p61 Bajer | 7.5 (8) | 126 (98) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 9.4 (10) | 189 (116) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 8.9 (12) | 522 (488) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 8.1 (8) | 229 (241) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 8.3 (13) | 455 (487) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 11 (12) | 157 (168) | 98 (94) | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF1-CMAES Bajer 2013instances | 10 (10) | 210 (195) | 24 (25) | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF5-CMAES Bajer | 6.8 (9) | 425 (439) | 102 (112) | ∞ | ∞ | ∞ | ∞755 | 0/15 |
| RF5-CMAES Bajer 2013instances | 8.1 (7) | 456 (514) | ∞ | ∞ | ∞ | ∞ | ∞755 | 0/15 |
| STEPif Posik | 8.7 (8) | 338 (338) | 36 (75) | 63 (45) | ∞ | ∞ | ∞3e4 | 0/15 |
| STEPifeg Posik | 8.7 (8) | 289 (285) | 19 (31) | 63 (46) | 59 (75) | ∞ | ∞3e4 | 0/15 |
| STEPrr Posik | 8.7 (8) | 433 (312) | 21 (42) | 19 (22) | ∞ | ∞ | ∞3e4 | 0/15 |
| Δ fopt f20, 3-D |
1e1 8.0 |
1e0 385 |
1e-1 2291 |
1e-2 2398 |
1e-3 2481 |
1e-5 2573 |
1e-7 2776 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.6 (1) | 2.9 (4) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 3.6 (2) | 0.89 (1) | 1.9 (2) | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 27 (3) | 2.7 (3) | 2.3 (4) | 2.7 (3) | 2.8 (3) | 5.9 (7) | 6.9 (10) | 15/15 |
| R-SHADE-10e2 Tanabe | 4.0 (4) | 1.3 (1) | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.7 (2) | 1.8 (2) | 3.0 (3) | 2.9 (3) | 2.8 (3) | 2.8 (3) | 2.6 (2) | 15/15 |
| RL-SHADE-10e2 Tanabe | 2.6 (3) | 0.62 (0.4) | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 3.5 (4) | 2.7 (1) | 8.0 (13) | 8.2 (13) | 8.2 (12) | 8.3 (12) | 7.9 (11) | 15/15 |
| SOO Derbel | 3.5 (0.1) | 0.19 (1e-3)↑0 | 18 (2) | 18 (2) | 17 (2) | 17 (2) | 15 (2) | 15/15 |
| BrentSTEPif Posik | 3.9 (2) | 17 (26) | 87 (124) | 84 (117) | 81 (103) | 80 (73) | 76 (74) | 1/15 |
| BrentSTEPifeg Posik | 5.1 (2) | 13 (21) | 17 (15) | 16 (15) | 16 (22) | 16 (19) | 18 (17) | 7/15 |
| BrentSTEPqi Posik | 3.1 (2) | 11 (16) | 31 (35) | 30 (27) | 29 (34) | 37 (42) | 35 (48) | 4/15 |
| BrentSTEPrr Posik | 2.4 (1) | 14 (15) | 19 (12) | 19 (17) | 18 (13) | 24 (23) | 23 (20) | 6/15 |
| CMA-CSA Atamna | 2.4 (2) | 4.5 (4) | 3.6 (4) | 3.7 (4) | 3.6 (4) | 3.7 (4) | 3.5 (4) | 15/15 |
| CMA-MSR Atamna | 2.9 (2) | 13 (13) | 151 (179) | 269 (263) | 261 (349) | 253 (276) | 235 (220) | 5/15 |
| CMA-TPA Atamna | 3.9 (3) | 7.6 (8) | 10 (12) | 10 (13) | 10 (13) | 10 (13) | 10 (13) | 15/15 |
| GP1-CMAES Bajer | 2.0 (1) | 5.6 (5) | 2.2 (2) | 4.5 (5) | 4.4 (3) | 4.3 (4) | 4.0 (5) | 1/15 |
| GP1-CMAES Bajer 2013instances | 2.8 (2) | 3.7 (4) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| GP5-CMAES Bajer | 2.2 (1) | 4.8 (5) | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| GP5-CMAES Bajer 2013instances | 1.8 (2) | 2.0 (2) | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| IPOPCMAv3p61 Bajer | 3.5 (4) | 8.3 (8) | 4.7 (5) | 4.6 (4) | 4.4 (5) | 4.3 (5) | 4.0 (6) | 1/15 |
| IPOPCMAv3p61 Bajer 2013instances | 3.6 (4) | 4.5 (5) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 4.3 (5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.1 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.1 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 3.3 (2) | 13 (14) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF1-CMAES Bajer 2013instances | 8.6 (19) | 5.9 (6) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF5-CMAES Bajer | 23 (41) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| RF5-CMAES Bajer 2013instances | 40 (50) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| STEPif Posik | 3.4 (3) | 10 (25) | 20 (24) | 20 (19) | 19 (30) | 22 (19) | 26 (45) | 4/15 |
| STEPifeg Posik | 3.0 (2) | 7.3 (17) | 19 (17) | 18 (15) | 17 (22) | 21 (17) | 25 (32) | 5/15 |
| STEPrr Posik | 2.7 (2) | 9.0 (16) | 17 (24) | 16 (21) | 16 (17) | 15 (19) | 20 (29) | 6/15 |
| Δ fopt f21, 3-D |
1e1 6.0 |
1e0 184 |
1e-1 425 |
1e-2 439 |
1e-3 458 |
1e-5 469 |
1e-7 482 |
#succ 14/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.5 (1) | 0.70 (0.9) | 1.5 (2) | 5.0 (5) | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 1.3 (2) | 1.5 (2) | 1.5 (2) | 3.0 (2) | 3.1 (3) | 4.7 (4) | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 1.8 (3) | 7.4 (14) | 6.0 (8) | 6.2 (8) | 6.1 (7) | 6.5 (7) | 7.1 (7) | 15/15 |
| R-SHADE-10e2 Tanabe | 2.6 (3) | 3.2 (4) | 2.5 (2) | 3.3 (3) | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.4 (1) | 2.8 (6) | 2.4 (3) | 2.5 (3) | 2.5 (3) | 2.6 (3) | 2.7 (2) | 15/15 |
| RL-SHADE-10e2 Tanabe | 1.2 (1) | 2.1 (3) | 5.2 (6) | 10 (10) | ∞ | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 1.3 (1) | 3.1 (4) | 20 (71) | 21 (69) | 21 (66) | 22 (65) | 23 (63) | 15/15 |
| SOO Derbel | 1.3 (1) | 0.56 (0.9) | 0.66 (0.7) | 1.4 (2) | 1.9 (3) | 2.1 (3) | 2.6 (3) | 15/15 |
| BrentSTEPif Posik | 1.5 (1) | 104 (164) | 114 (181) | 145 (290) | 143 (116) | 192 (262) | 265 (339) | 3/15 |
| BrentSTEPifeg Posik | 1.5 (1) | 105 (114) | 55 (75) | 55 (52) | 60 (97) | 75 (87) | 148 (161) | 4/15 |
| BrentSTEPqi Posik | 1.5 (1) | 167 (154) | 120 (209) | 118 (208) | 114 (115) | 142 (157) | 188 (344) | 4/15 |
| BrentSTEPrr Posik | 1.5 (1) | 141 (227) | 145 (291) | 142 (188) | 137 (149) | 141 (213) | 268 (358) | 3/15 |
| CMA-CSA Atamna | 1.3 (1) | 6.7 (11) | 5.9 (7) | 6.5 (8) | 6.8 (8) | 7.0 (8) | 7.1 (8) | 15/15 |
| CMA-MSR Atamna | 2.0 (2) | 17 (17) | 154 (343) | 251 (509) | 240 (489) | 235 (335) | 229 (323) | 11/15 |
| CMA-TPA Atamna | 1.6 (2) | 2.1 (2) | 17 (8) | 20 (25) | 20 (30) | 59 (63) | 58 (61) | 14/15 |
| GP1-CMAES Bajer | 1.9 (2) | 2.4 (4) | 2.8 (4) | 3.6 (3) | 3.5 (4) | 3.5 (4) | 4.0 (4) | 4/15 |
| GP1-CMAES Bajer 2013instances | 0.92 (0.8) | 17 (19) | 25 (40) | 24 (27) | 23 (27) | 23 (31) | ∞751 | 0/15 |
| GP5-CMAES Bajer | 1.9 (2) | 4.4 (4) | 4.2 (4) | 4.2 (4) | 4.0 (5) | 5.5 (5) | ∞753 | 0/15 |
| GP5-CMAES Bajer 2013instances | 1.4 (2) | 4.0 (6) | 5.6 (5) | 5.5 (9) | 5.3 (6) | 7.2 (12) | 22 (21) | 1/15 |
| IPOPCMAv3p61 Bajer | 1.3 (1) | 27 (28) | 25 (22) | 24 (36) | 23 (23) | 23 (29) | 22 (26) | 1/15 |
| IPOPCMAv3p61 Bajer 2013instances | 1.9 (2) | 4.3 (5) | 7.2 (9) | 11 (12) | 11 (9) | 11 (14) | 11 (10) | 2/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 1.7 (2) | 0.75 (0.6) | 0.66 (0.8) | 1.2 (2) | 1.6 (2) | 4.8 (6) | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.2 (1) | 1.2 (1) | 1.7 (1) | 2.5 (2) | 4.9 (5) | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.2 (1) | 1.0 (1) | 1.2 (2) | 2.5 (3) | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 1.6 (1) | 8.8 (11) | 12 (18) | 12 (8) | 23 (32) | 23 (30) | 22 (50) | 1/15 |
| RF1-CMAES Bajer 2013instances | 2.1 (2) | 5.0 (10) | 5.0 (6) | 5.0 (9) | 5.0 (10) | 6.8 (7) | 7.1 (8) | 2/15 |
| RF5-CMAES Bajer | 1.3 (2) | 9.1 (8) | 7.7 (8) | 11 (22) | 11 (10) | ∞ | ∞753 | 0/15 |
| RF5-CMAES Bajer 2013instances | 1.9 (1) | 8.0 (12) | 13 (16) | 26 (34) | ∞ | ∞ | ∞760 | 0/15 |
| STEPif Posik | 2.1 (2) | 106 (145) | 142 (248) | 138 (188) | 134 (183) | 147 (167) | 258 (233) | 3/15 |
| STEPifeg Posik | 1.9 (2) | 111 (214) | 77 (139) | 76 (108) | 74 (72) | 113 (160) | 159 (194) | 4/15 |
| STEPrr Posik | 1.9 (2) | 163 (152) | 195 (335) | 190 (188) | 183 (198) | 184 (242) | 407 (436) | 2/15 |
| Δ fopt f22, 3-D |
1e1 18 |
1e0 170 |
1e-1 354 |
1e-2 362 |
1e-3 384 |
1e-5 401 |
1e-7 414 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.4 (1.0) | 1.5 (2) | 3.0 (3) | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 1.7 (1) | 1.5 (1) | 2.9 (3) | 12 (13) | 11 (18) | 11 (10) | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 8.2 (1) | 5.7 (8) | 6.3 (9) | 6.5 (8) | 6.3 (8) | 7.1 (9) | 7.6 (9) | 15/15 |
| R-SHADE-10e2 Tanabe | 2.2 (3) | 1.6 (1) | 2.1 (2) | 6.1 (6) | 12 (9) | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 0.87 (0.9) | 1.9 (3) | 2.8 (4) | 3.1 (4) | 3.1 (3) | 3.2 (3) | 3.3 (3) | 15/15 |
| RL-SHADE-10e2 Tanabe | 2.9 (6) | 1.5 (2) | 4.1 (3) | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 2.0 (3) | 2.4 (2) | 25 (86) | 26 (84) | 26 (79) | 27 (76) | 28 (74) | 15/15 |
| SOO Derbel | 0.71 (0.7) | 0.47 (0.4)↑1 | 1.2 (2) | 3.0 (2) | 4.5 (8) | 30 (60) | 44 (86) | 15/15 |
| BrentSTEPif Posik | 10 (8) | 219 (233) | 245 (254) | 373 (299) | 1094 (1047) | 1048 (1151) | 1019 (1466) | 1/15 |
| BrentSTEPifeg Posik | 7.7 (11) | 87 (159) | 73 (98) | 144 (195) | 240 (219) | 335 (367) | 1080 (1069) | 0/15 |
| BrentSTEPqi Posik | 4.8 (7) | 130 (181) | 108 (155) | 210 (258) | 359 (278) | 527 (767) | ∞3e4 | 0/15 |
| BrentSTEPrr Posik | 3.9 (9) | 146 (185) | 187 (184) | 344 (396) | 525 (447) | 1068 (1006) | 1059 (1304) | 0/15 |
| CMA-CSA Atamna | 1.4 (1) | 11 (22) | 227 (342) | 363 (581) | 399 (617) | 705 (938) | 683 (986) | 7/15 |
| CMA-MSR Atamna | 2.0 (2) | 5.9 (8) | 36 (20) | 107 (206) | 207 (368) | 199 (354) | 193 (363) | 12/15 |
| CMA-TPA Atamna | 1.9 (3) | 19 (13) | 267 (388) | 305 (533) | 424 (663) | 646 (771) | 1335 (1664) | 5/15 |
| GP1-CMAES Bajer | 1.3 (1) | 7.8 (9) | 9.0 (11) | 9.1 (8) | 8.7 (9) | 8.6 (10) | 8.5 (12) | 3/15 |
| GP1-CMAES Bajer 2013instances | 1.7 (2) | 3.8 (5) | 4.6 (6) | 6.4 (9) | 6.2 (5) | 8.9 (8) | 13 (15) | 2/15 |
| GP5-CMAES Bajer | 6.3 (11) | 4.6 (5) | 9.1 (16) | 9.1 (12) | 8.7 (8) | 13 (11) | ∞760 | 0/15 |
| GP5-CMAES Bajer 2013instances | 4.3 (5) | 10 (7) | 10 (12) | 10 (11) | 9.2 (6) | 27 (32) | 26 (26) | 0/15 |
| IPOPCMAv3p61 Bajer | 4.5 (2) | 4.5 (5) | 6.7 (10) | 6.7 (7) | 6.4 (8) | 6.2 (5) | 6.2 (5) | 4/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.1 (1) | 10 (11) | 15 (17) | 14 (11) | 14 (8) | 13 (27) | 13 (10) | 2/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 1.7 (2) | 0.88 (0.7) | 3.0 (6) | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.4 (0.9) | 2.2 (2) | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 0.98 (0.8) | 1.1 (1) | 3.1 (4) | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 4.4 (2) | 13 (25) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF1-CMAES Bajer 2013instances | 1.7 (1) | 5.5 (9) | 14 (15) | 29 (37) | 28 (45) | 27 (25) | ∞751 | 0/15 |
| RF5-CMAES Bajer | 4.3 (13) | 29 (34) | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| RF5-CMAES Bajer 2013instances | 6.9 (17) | 11 (10) | 15 (11) | 31 (32) | ∞ | ∞ | ∞753 | 0/15 |
| STEPif Posik | 3.3 (2) | 67 (113) | 181 (261) | 377 (280) | 1100 (1502) | 1118 (991) | ∞3e4 | 0/15 |
| STEPifeg Posik | 1.9 (2) | 61 (103) | 77 (84) | 105 (112) | 192 (243) | 1059 (861) | ∞3e4 | 0/15 |
| STEPrr Posik | 1.5 (1.0) | 66 (89) | 50 (70) | 84 (102) | 243 (310) | 527 (623) | ∞3e4 | 0/15 |
| Δ fopt f23, 3-D |
1e1 3.0 |
1e0 407 |
1e-1 906 |
1e-2 1215 |
1e-3 2214 |
1e-5 2293 |
1e-7 2393 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 3.7 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 2.7 (2) | 11 (11) | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 4.0 (4) | 24 (28) | 4863 (5298) | 3627 (3395) | 1991 (1897) | 1923 (2191) | 1843 (1818) | 1/15 |
| R-SHADE-10e2 Tanabe | 3.6 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.4 (2) | 5.4 (5) | 8.7 (6) | 6.6 (5) | 3.7 (3) | 3.7 (3) | 3.7 (2) | 15/15 |
| RL-SHADE-10e2 Tanabe | 3.0 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 2.8 (2) | 8.2 (7) | 20 (34) | 19 (26) | 11 (14) | 11 (14) | 11 (13) | 15/15 |
| SOO Derbel | 3.8 (5) | 1.4 (1) | 4.3 (7) | 5.8 (7) | 4.8 (5) | 9.3 (9) | 13 (11) | 15/15 |
| BrentSTEPif Posik | 3.3 (4) | 2.1 (2) | 158 (184) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPifeg Posik | 3.3 (4) | 1.5 (1) | 220 (297) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPqi Posik | 3.2 (4) | 2.1 (2) | 56 (75) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPrr Posik | 3.4 (4) | 1.6 (2) | 486 (689) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| CMA-CSA Atamna | 2.9 (2) | 6.2 (6) | 14 (15) | 11 (11) | 6.1 (6) | 6.1 (6) | 6.0 (6) | 15/15 |
| CMA-MSR Atamna | 2.3 (1) | 4.2 (3) | 3.3 (3) | 2.7 (2) | 1.6 (1) | 1.7 (1) | 1.8 (1) | 15/15 |
| CMA-TPA Atamna | 3.6 (2) | 9.4 (6) | 13 (11) | 11 (8) | 5.9 (5) | 5.9 (5) | 5.9 (4) | 15/15 |
| GP1-CMAES Bajer | 3.3 (4) | 3.2 (3) | ∞ | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.9 (2) | 13 (18) | ∞ | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| GP5-CMAES Bajer | 3.1 (4) | 1.2 (1) | 5.7 (5) | 8.9 (7) | 4.9 (9) | ∞ | ∞753 | 0/15 |
| GP5-CMAES Bajer 2013instances | 5.0 (5) | 1.1 (1) | 2.7 (4) | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| IPOPCMAv3p61 Bajer | 3.7 (4) | 4.6 (6) | 12 (9) | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 3.8 (6) | 6.3 (6) | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 5.6 (8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 3.5 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 3.9 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 1.7 (2) | 27 (34) | ∞ | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| RF1-CMAES Bajer 2013instances | 4.4 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| RF5-CMAES Bajer | 2.6 (2) | 13 (13) | ∞ | ∞ | ∞ | ∞ | ∞755 | 0/15 |
| RF5-CMAES Bajer 2013instances | 3.1 (4) | 8.1 (7) | ∞ | ∞ | ∞ | ∞ | ∞762 | 0/15 |
| STEPif Posik | 3.2 (4) | 2.7 (2) | 111 (108) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| STEPifeg Posik | 3.2 (4) | 2.5 (1) | 146 (242) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| STEPrr Posik | 3.2 (4) | 1.9 (1) | 493 (398) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| Δ fopt f24, 3-D |
1e1 97 |
1e0 10391 |
1e-1 1.0e5 |
1e-2 3.6e5 |
1e-3 3.6e5 |
1e-5 3.6e5 |
1e-7 3.6e5 |
#succ 2/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 7.1 (9) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| R-DE-10e2 Tanabe | 3.4 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-DE-10e5 Tanabe | 2.5 (3) | 12 (13) | ∞ | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| R-SHADE-10e2 Tanabe | 3.0 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.7 (1) | 1.6 (2) | 2.5 (4) | 3.7 (3) | 3.7 (4) | 3.7 (3) | 3.7 (4) | 3/15 |
| RL-SHADE-10e2 Tanabe | 2.3 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞300 | 0/15 |
| RL-SHADE-10e5 Tanabe | 3.2 (3) | 20 (20) | 2.6 (3) | 0.81 (0.8) | 0.82 (0.8) | 0.82 (0.9) | 0.82 (0.7) | 9/15 |
| SOO Derbel | 2.3 (2) | 2.3 (3) | 8.5 (8) | 5.7 (7) | 5.7 (7) | 5.7 (6) | 5.7 (9) | 2/15 |
| BrentSTEPif Posik | 4.5 (5) | 12 (19) | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPifeg Posik | 4.1 (4) | 39 (59) | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPqi Posik | 5.0 (7) | 39 (46) | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPrr Posik | 3.0 (4) | 18 (15) | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| CMA-CSA Atamna | 1.8 (2) | 116 (181) | ∞ | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| CMA-MSR Atamna | 2.4 (1) | 45 (51) | 19 (21) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| CMA-TPA Atamna | 2.5 (1) | 117 (109) | ∞ | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| GP1-CMAES Bajer | 1.3 (0.9) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞753 | 0/15 |
| GP1-CMAES Bajer 2013instances | 1.5 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| GP5-CMAES Bajer | 2.8 (3) | 1.0 (2) | ∞ | ∞ | ∞ | ∞ | ∞755 | 0/15 |
| GP5-CMAES Bajer 2013instances | 1.5 (2) | 1.0 (1.0) | ∞ | ∞ | ∞ | ∞ | ∞760 | 0/15 |
| IPOPCMAv3p61 Bajer | 2.4 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.0 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 11 (11) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 3.5 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 11 (9) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞150 | 0/15 |
| RF1-CMAES Bajer | 3.3 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF1-CMAES Bajer 2013instances | 2.6 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞751 | 0/15 |
| RF5-CMAES Bajer | 6.0 (7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞755 | 0/15 |
| RF5-CMAES Bajer 2013instances | 6.1 (7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞755 | 0/15 |
| STEPif Posik | 2.4 (3) | 18 (16) | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| STEPifeg Posik | 2.3 (3) | 8.9 (11) | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| STEPrr Posik | 1.8 (1) | 39 (30) | 3.9 (4) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
Previous dimension | Dimension = 5 | Next dimension
| Δ fopt f1, 5-D |
1e1 11 |
1e0 12 |
1e-1 12 |
1e-2 12 |
1e-3 12 |
1e-5 12 |
1e-7 12 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.5 (0.5) | 2.9 (1) | 4.0 (1) | 9.2 (8) | 56 (68) | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | 2.8 (2) | 8.3 (3) | 14 (4) | 20 (5) | 27 (6) | 50 (23) | 622 (458) | 0/15 |
| R-DE-10e5 Tanabe | 3.0 (2) | 8.7 (3) | 14 (3) | 22 (3) | 29 (5) | 43 (7) | 56 (8) | 15/15 |
| R-SHADE-10e2 Tanabe | 3.2 (3) | 9.1 (4) | 16 (4) | 25 (5) | 35 (5) | 625 (562) | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 4.1 (4) | 14 (4) | 25 (3) | 36 (5) | 48 (7) | 72 (10) | 97 (12) | 15/15 |
| RL-SHADE-10e2 Tanabe | 2.4 (3) | 9.3 (6) | 14 (7) | 20 (7) | 26 (8) | 41 (21) | 205 (231) | 1/15 |
| RL-SHADE-10e5 Tanabe | 4.7 (5) | 35 (26) | 114 (19) | 189 (25) | 269 (35) | 424 (31) | 561 (40) | 15/15 |
| SOO Derbel | 1.3 (0.5) | 5.4 (2) | 14 (3) | 26 (4) | 44 (6) | 87 (10) | 158 (11) | 15/15 |
| BrentSTEPif Posik | 1.6 (0.3) | 2.0 (0.2) | 2.2 (0.3) | 2.2 (0.2) | 2.3 (0.2) | 2.3 (0.2) | 2.3 (0.2) | 15/15 |
| BrentSTEPifeg Posik | 1.6 (0.3) | 2.0 (0.2) | 2.2 (0.3) | 2.2 (0.2) | 2.3 (0.2) | 2.3 (0.2) | 2.3 (0.2) | 15/15 |
| BrentSTEPqi Posik | 1.6 (0.3) | 2.0 (0.2) | 2.2 (0.3) | 2.2 (0.2) | 2.3 (0.2) | 2.3 (0.2) | 2.3 (0.2) | 15/15 |
| BrentSTEPrr Posik | 1.6 (0.3) | 2.0 (0.2) | 2.2 (0.3) | 2.2 (0.2) | 2.3 (0.2) | 2.3 (0.2) | 2.3 (0.2) | 15/15 |
| CMA-CSA Atamna | 3.8 (2) | 10 (3) | 16 (3) | 22 (4) | 29 (4) | 41 (5) | 52 (6) | 15/15 |
| CMA-MSR Atamna | 3.6 (3) | 12 (3) | 21 (5) | 32 (3) | 41 (5) | 63 (7) | 83 (8) | 15/15 |
| CMA-TPA Atamna | 3.2 (3) | 9.3 (3) | 14 (4) | 20 (4) | 25 (4) | 37 (7) | 48 (8) | 15/15 |
| GP1-CMAES Bajer | 2.5 (2) | 6.5 (1) | 10 (2) | 13 (2) | 16 (2) | 23 (3) | 32 (6) | 15/15 |
| GP1-CMAES Bajer 2013instances | 2.3 (1) | 6.1 (1) | 9.2 (2) | 13 (2) | 16 (3) | 21 (4) | 31 (5) | 15/15 |
| GP5-CMAES Bajer | 1.7 (0.5) | 3.0 (0.6) | 4.0 (0.5) | 5.1 (0.6) | 6.1 (0.7) | 9.4 (4) | 35 (19) | 14/15 |
| GP5-CMAES Bajer 2013instances | 1.7 (0.8) | 3.0 (0.5) | 3.9 (0.7) | 5.2 (0.4) | 6.3 (0.6) | 8.5 (1) | 45 (24) | 11/15 |
| IPOPCMAv3p61 Bajer | 2.7 (1) | 10 (3) | 16 (4) | 22 (6) | 28 (5) | 41 (6) | 53 (5) | 15/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.5 (3) | 10 (2) | 16 (4) | 22 (4) | 27 (5) | 39 (6) | 52 (5) | 15/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 5.6 (5) | 10 (0.2) | 12 (0.8) | 13 (0.8) | 15 (1) | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.1 (1.0) | 3.4 (1) | 5.0 (1) | 8.9 (4) | 29 (23) | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.0 (1.0) | 3.1 (0.6) | 4.6 (0.8) | 8.2 (3) | 65 (57) | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 2.6 (2) | 8.3 (2) | 15 (4) | 25 (7) | 44 (24) | 217 (265) | 758 (500) | 1/15 |
| RF1-CMAES Bajer 2013instances | 2.8 (1) | 7.6 (1) | 14 (4) | 28 (7) | 52 (58) | 229 (272) | 1508 (2202) | 1/15 |
| RF5-CMAES Bajer | 2.2 (1) | 42 (38) | 163 (111) | 1563 (2198) | ∞ | ∞ | ∞1252 | 0/15 |
| RF5-CMAES Bajer 2013instances | 2.4 (2) | 43 (40) | 93 (81) | 1541 (1490) | ∞ | ∞ | ∞1252 | 0/15 |
| STEPif Posik | 1.6 (0.4) | 2.1 (0.2) | 2.9 (0.2) | 4.5 (0.8) | 5.4 (0.8) | 6.9 (0.9) | 7.8 (0.4) | 15/15 |
| STEPifeg Posik | 1.6 (0.4) | 2.1 (0.2) | 2.9 (0.2) | 4.1 (1) | 5.1 (0.8) | 6.9 (1.0) | 7.9 (0.5) | 15/15 |
| STEPrr Posik | 1.6 (0.4) | 2.1 (0.2) | 2.9 (0.2) | 3.6 (0.2) | 4.2 (0.2) | 5.7 (0.2) | 6.9 (0.3) | 15/15 |
| Δ fopt f2, 5-D |
1e1 83 |
1e0 87 |
1e-1 88 |
1e-2 89 |
1e-3 90 |
1e-5 92 |
1e-7 94 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | 4.0 (0.9) | 5.3 (3) | 8.7 (6) | 17 (18) | 83 (124) | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 3.4 (0.4) | 4.1 (0.6) | 4.9 (0.6) | 5.7 (0.6) | 6.5 (0.7) | 8.2 (0.6) | 10 (0.6) | 15/15 |
| R-SHADE-10e2 Tanabe | 4.3 (0.7) | 6.5 (3) | 16 (16) | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 7.5 (2) | 8.7 (1) | 10 (2) | 12 (2) | 14 (2) | 17 (2) | 21 (2) | 15/15 |
| RL-SHADE-10e2 Tanabe | 4.9 (4) | 7.0 (6) | 11 (10) | 27 (21) | 83 (111) | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 34 (5) | 45 (4) | 54 (4) | 63 (4) | 73 (4) | 90 (4) | 105 (4) | 15/15 |
| SOO Derbel | 10 (3) | 14 (2) | 18 (2) | 23 (3) | 424 (6) | 874 (2718) | 869 (2661) | 13/15 |
| BrentSTEPif Posik | 0.63 (0.2)↑0 | 0.66 (0.2)↑0 | 0.73 (0.1)↑0 | 0.76 (0.1)↑0 | 0.84 (0.1)↑0 | 0.95 (0.2) | 1.0 (0.2) | 15/15 |
| BrentSTEPifeg Posik | 0.64 (0.2)↑0 | 0.66 (0.2)↑0 | 0.72 (0.1)↑1 | 0.77 (0.1)↑1 | 0.84 (0.1)↑1 | 0.96 (0.2) | 1.1 (0.2) | 15/15 |
| BrentSTEPqi Posik | 0.46 (0.1)↑0 | 0.46 (0.0)★↑0 | 0.50 (0.1)★2↑0 | 0.55 (0.1)★2↑0 | 0.59 (0.1)★3↑0 | 0.70 (0.1)★2↑0 | 0.83 (0.1)★↑1 | 15/15 |
| BrentSTEPrr Posik | 0.56 (0.2)↑0 | 0.59 (0.1)↑0 | 0.63 (0.1)↑0 | 0.72 (0.1)↑0 | 0.79 (0.1)↑1 | 0.90 (0.2) | 1.0 (0.2) | 15/15 |
| CMA-CSA Atamna | 11 (2) | 13 (1) | 14 (2) | 14 (1) | 15 (1) | 16 (1) | 17 (1) | 15/15 |
| CMA-MSR Atamna | 12 (3) | 13 (2) | 14 (2) | 15 (2) | 16 (2) | 18 (2) | 20 (2) | 15/15 |
| CMA-TPA Atamna | 10 (3) | 12 (3) | 14 (1) | 15 (3) | 15 (3) | 17 (3) | 18 (3) | 15/15 |
| GP1-CMAES Bajer | 8.9 (4) | 11 (3) | 24 (12) | 33 (36) | 34 (28) | 68 (55) | ∞1258 | 0/15 |
| GP1-CMAES Bajer 2013instances | 9.2 (4) | 15 (10) | 27 (22) | 28 (25) | 33 (22) | 67 (78) | 200 (187) | 0/15 |
| GP5-CMAES Bajer | 4.1 (2) | 4.8 (2) | 5.3 (2) | 5.7 (2) | 6.9 (2) | 7.1 (2) | 15 (14) | 0/15 |
| GP5-CMAES Bajer 2013instances | 3.8 (2) | 4.4 (1) | 5.0 (2) | 5.4 (2) | 5.6 (2) | 6.5 (2) | 12 (8) | 2/15 |
| IPOPCMAv3p61 Bajer | 18 (9) | 68 (73) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 26 (16) | 215 (166) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1252 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| STEPif Posik | 0.74 (0.2)↑1 | 0.96 (0.3) | 1.00 (0.3) | 1.1 (0.2) | 1.1 (0.2) | 1.3 (0.1) | 1.3 (0.1) | 15/15 |
| STEPifeg Posik | 0.75 (0.2)↑1 | 0.91 (0.2) | 0.96 (0.2) | 1.1 (0.2) | 1.1 (0.2) | 1.3 (0.1) | 1.3 (0.1) | 15/15 |
| STEPrr Posik | 0.72 (0.1)↑0 | 0.82 (0.1)↑0 | 0.88 (0.1)↑1 | 0.98 (0.1) | 1.1 (0.1) | 1.2 (0.1) | 1.4 (0.1) | 15/15 |
| Δ fopt f3, 5-D |
1e1 716 |
1e0 1622 |
1e-1 1637 |
1e-2 1642 |
1e-3 1646 |
1e-5 1650 |
1e-7 1654 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.1 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | 0.41 (0.2)↑0 | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 0.36 (0.1)↑0 | 3.2 (6) | 11 (12) | 14 (12) | 14 (12) | 14 (12) | 14 (12) | 15/15 |
| R-SHADE-10e2 Tanabe | 0.33 (0.1)↑0 | 2.3 (3) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.1 (0.5) | 1.7 (1) | 4.5 (5) | 4.7 (5) | 4.8 (5) | 5.1 (5) | 5.3 (5) | 15/15 |
| RL-SHADE-10e2 Tanabe | 0.33 (0.1)↑1 | 2.3 (3) | 4.5 (7) | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 3.1 (0.9) | 5.2 (0.7) | 6.4 (0.6) | 7.3 (0.6) | 7.9 (0.5) | 8.9 (0.5) | 10 (0.5) | 15/15 |
| SOO Derbel | 1.2 (0.9) | 185 (208) | 698 (664) | 696 (766) | 695 (1639) | 694 (655) | 692 (1160) | 5/15 |
| BrentSTEPif Posik | 0.11 (0.1)↑0 | 0.14 (0.0)↑0 | 0.19 (0.1)↑0 | 0.19 (0.1)↑0 | 0.19 (0.1)↑0 | 0.19 (0.1)↑0 | 0.19 (0.1)↑0 | 15/15 |
| BrentSTEPifeg Posik | 0.11 (0.1)↑0 | 0.13 (0.0)↑0 | 0.18 (0.1)↑0 | 0.19 (0.1)↑0 | 0.19 (0.1)↑0 | 0.19 (0.1)↑0 | 0.19 (0.1)↑0 | 15/15 |
| BrentSTEPqi Posik | 0.10 (0.1)↑0 | 0.13 (0.0)↑0 | 0.18 (0.1)↑0 | 0.18 (0.1)↑0 | 0.18 (0.1)↑0 | 0.18 (0.1)↑0 | 0.18 (0.1)↑0 | 15/15 |
| BrentSTEPrr Posik | 0.09 (0.1)↑0 | 0.13 (0.0)↑0 | 0.16 (0.1)↑0 | 0.17 (0.1)↑0 | 0.17 (0.1)↑0 | 0.18 (0.1)↑0 | 0.18 (0.1)↑0 | 15/15 |
| CMA-CSA Atamna | 1.4 (1) | 32 (47) | 623 (995) | 622 (842) | 620 (538) | 619 (911) | 618 (994) | 5/15 |
| CMA-MSR Atamna | 1.7 (2) | 5.7 (4) | 36 (15) | 36 (15) | 36 (15) | 37 (16) | 38 (17) | 14/15 |
| CMA-TPA Atamna | 0.81 (1) | 9.3 (9) | 632 (548) | 630 (1071) | 629 (1068) | 628 (762) | 627 (833) | 5/15 |
| GP1-CMAES Bajer | 1.5 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP1-CMAES Bajer 2013instances | 1.6 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP5-CMAES Bajer | 25 (43) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1262 | 0/15 |
| GP5-CMAES Bajer 2013instances | 2.6 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1262 | 0/15 |
| IPOPCMAv3p61 Bajer | 1.3 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 1.1 (1.0) | 5.5 (6) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 1.0 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.5 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 0.58 (0.5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 1.6 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | 3.0 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | 4.7 (5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1252 | 0/15 |
| RF5-CMAES Bajer 2013instances | 6.1 (7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1252 | 0/15 |
| STEPif Posik | 0.13 (0.1)↑0 | 0.15 (0.0)↑0 | 0.17 (0.0)↑0 | 0.19 (0.0)↑0 | 0.20 (0.0)↑0 | 0.20 (0.0)↑0 | 0.21 (0.0)↑0 | 15/15 |
| STEPifeg Posik | 0.13 (0.1)↑0 | 0.14 (0.0)↑0 | 0.16 (0.0)↑0 | 0.18 (0.0)↑0 | 0.19 (0.0)↑0 | 0.20 (0.0)↑0 | 0.21 (0.0)↑0 | 15/15 |
| STEPrr Posik | 0.12 (0.1)↑0 | 0.12 (0.0)↑0 | 0.14 (0.0)↑0 | 0.15 (0.0)↑0 | 0.16 (0.0)↑0 | 0.17 (0.0)↑0 | 0.20 (0.1)↑0 | 15/15 |
| Δ fopt f4, 5-D |
1e1 809 |
1e0 1633 |
1e-1 1688 |
1e-2 1758 |
1e-3 1817 |
1e-5 1886 |
1e-7 1903 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | 0.79 (0.7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 0.88 (0.9) | 8.7 (6) | 63 (71) | 64 (68) | 62 (66) | 60 (64) | 59 (63) | 15/15 |
| R-SHADE-10e2 Tanabe | 0.37 (0.1)↑0 | 4.5 (4) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.4 (0.5) | 4.5 (4) | 8.7 (7) | 8.5 (7) | 8.3 (7) | 8.3 (6) | 8.4 (6) | 15/15 |
| RL-SHADE-10e2 Tanabe | 0.41 (0.4) | 2.2 (3) | 4.3 (4) | 4.2 (4) | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 3.6 (0.7) | 5.9 (0.8) | 7.1 (0.8) | 7.8 (0.6) | 8.2 (0.5) | 8.9 (0.6) | 10 (0.5) | 15/15 |
| SOO Derbel | 4.9 (10) | 1358 (1427) | 4424 (4740) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| BrentSTEPif Posik | 0.15 (0.0)↑0 | 0.23 (0.1)↑0 | 0.37 (0.1)↑0 | 0.36 (0.1)↑0 | 0.35 (0.1)↑0 | 0.35 (0.1)↑0 | 0.37 (0.1)↑0 | 15/15 |
| BrentSTEPifeg Posik | 0.15 (0.0)↑0 | 0.22 (0.1)↑0 | 0.38 (0.1)↑0 | 0.37 (0.1)↑0 | 0.36 (0.1)↑0 | 0.36 (0.1)↑0 | 0.38 (0.1)↑0 | 15/15 |
| BrentSTEPqi Posik | 0.17 (0.1)↑0 | 0.21 (0.1)↑0 | 0.33 (0.1)↑0 | 0.32 (0.1)↑0 | 0.31 (0.1)↑0 | 0.31 (0.1)↑0 | 0.37 (0.1)↑0 | 15/15 |
| BrentSTEPrr Posik | 0.15 (0.0)↑0 | 0.21 (0.1)↑0 | 0.29 (0.1)↑0 | 0.29 (0.1)↑0 | 0.30 (0.1)↑0 | 0.32 (0.1)↑0 | 0.40 (0.1)↑0 | 15/15 |
| CMA-CSA Atamna | 2.2 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| CMA-MSR Atamna | 2.2 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| CMA-TPA Atamna | 2.7 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| GP1-CMAES Bajer | 5.0 (6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP1-CMAES Bajer 2013instances | 4.4 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| GP5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1254 | 0/15 |
| IPOPCMAv3p61 Bajer | 1.4 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.5 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 22 (17) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | 11 (12) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1252 | 0/15 |
| STEPif Posik | 0.15 (0.1)↑0 | 0.27 (0.1)↑0 | 0.46 (0.1)↑0 | 0.63 (0.2)↑0 | 0.71 (0.2)↑0 | 0.92 (0.2) | 0.94 (0.2) | 15/15 |
| STEPifeg Posik | 0.15 (0.1)↑0 | 0.26 (0.1)↑0 | 0.44 (0.1)↑0 | 0.60 (0.2)↑0 | 0.69 (0.2)↑0 | 0.91 (0.2) | 0.94 (0.2) | 15/15 |
| STEPrr Posik | 0.14 (0.0)↑0 | 0.24 (0.1)↑0 | 0.40 (0.1)↑0 | 0.53 (0.1)↑0 | 0.61 (0.2)↑0 | 0.87 (0.1)↑1 | 0.94 (0.1) | 15/15 |
| Δ fopt f5, 5-D |
1e1 10 |
1e0 10 |
1e-1 10 |
1e-2 10 |
1e-3 10 |
1e-5 10 |
1e-7 10 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.6 (0.2) | 1.9 (0.5) | 1.9 (0.5) | 1.9 (0.5) | 1.9 (0.5) | 1.9 (0.5) | 1.9 (0.5) | 15/15 |
| R-DE-10e2 Tanabe | 8.4 (4) | 18 (4) | 27 (5) | 37 (4) | 57 (38) | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 10 (4) | 33 (15) | 45 (19) | 70 (20) | 83 (22) | 125 (49) | 160 (47) | 15/15 |
| R-SHADE-10e2 Tanabe | 11 (3) | 21 (3) | 30 (5) | 37 (5) | 47 (6) | 749 (562) | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 21 (9) | 43 (7) | 62 (14) | 84 (17) | 106 (22) | 151 (25) | 198 (28) | 15/15 |
| RL-SHADE-10e2 Tanabe | 10 (3) | 18 (4) | 25 (5) | 31 (5) | 36 (4) | 57 (53) | 147 (164) | 2/15 |
| RL-SHADE-10e5 Tanabe | 55 (24) | 137 (12) | 205 (14) | 270 (22) | 339 (16) | 454 (20) | 562 (20) | 15/15 |
| SOO Derbel | 14 (0.1) | 45 (0.1) | 95 (0.1) | 172 (0.1) | 263 (0.1) | 505 (0.1) | 843 (0.1) | 15/15 |
| BrentSTEPif Posik | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 15/15 |
| BrentSTEPifeg Posik | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 15/15 |
| BrentSTEPqi Posik | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 15/15 |
| BrentSTEPrr Posik | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 15/15 |
| CMA-CSA Atamna | 3.6 (1) | 5.0 (2) | 5.2 (2) | 5.2 (2) | 5.2 (2) | 5.2 (2) | 5.2 (2) | 15/15 |
| CMA-MSR Atamna | 4.2 (2) | 5.8 (3) | 5.9 (3) | 5.9 (3) | 5.9 (3) | 5.9 (3) | 5.9 (3) | 15/15 |
| CMA-TPA Atamna | 4.0 (2) | 5.0 (2) | 5.1 (2) | 5.1 (2) | 5.1 (2) | 5.1 (2) | 5.1 (2) | 15/15 |
| GP1-CMAES Bajer | 5.2 (4) | 21 (31) | 33 (48) | 34 (48) | 34 (48) | 34 (48) | 34 (48) | 14/15 |
| GP1-CMAES Bajer 2013instances | 4.0 (2) | 15 (25) | 25 (36) | 26 (36) | 26 (36) | 26 (36) | 26 (36) | 15/15 |
| GP5-CMAES Bajer | 2.4 (0.8) | 3.8 (2) | 5.1 (2) | 5.2 (2) | 5.2 (2) | 5.2 (2) | 5.2 (2) | 15/15 |
| GP5-CMAES Bajer 2013instances | 2.8 (0.8) | 6.1 (4) | 6.4 (4) | 6.4 (4) | 6.4 (4) | 6.4 (4) | 6.4 (4) | 15/15 |
| IPOPCMAv3p61 Bajer | 5.0 (2) | 17 (19) | 21 (17) | 22 (17) | 22 (17) | 22 (17) | 22 (17) | 15/15 |
| IPOPCMAv3p61 Bajer 2013instances | 8.6 (8) | 17 (17) | 21 (17) | 21 (17) | 21 (17) | 21 (17) | 21 (17) | 15/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 12 (0.2) | 13 (0.2) | 13 (0.2) | 13 (0.2) | 13 (0.2) | 13 (0.2) | 13 (0.2) | 15/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.6 (0.2) | 3.0 (0.5) | 3.0 (0.5) | 3.1 (0.5) | 3.5 (0.7) | 3.5 (0.7) | 3.5 (0.7) | 15/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.6 (0.1) | 3.1 (0.2) | 3.1 (0.2) | 3.1 (0.2) | 3.1 (0.2) | 3.1 (0.2) | 3.1 (0.2) | 15/15 |
| RF1-CMAES Bajer | 7.2 (7) | 45 (30) | 49 (33) | 50 (35) | 51 (35) | 51 (35) | 51 (35) | 14/15 |
| RF1-CMAES Bajer 2013instances | 9.0 (13) | 36 (44) | 42 (44) | 44 (42) | 45 (43) | 45 (43) | 45 (43) | 15/15 |
| RF5-CMAES Bajer | 28 (32) | 111 (104) | 171 (196) | 235 (232) | 239 (316) | 239 (208) | 239 (206) | 6/15 |
| RF5-CMAES Bajer 2013instances | 15 (26) | 94 (93) | 123 (86) | 124 (132) | 137 (91) | 137 (130) | 137 (159) | 10/15 |
| STEPif Posik | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 15/15 |
| STEPifeg Posik | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 15/15 |
| STEPrr Posik | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 15/15 |
| Δ fopt f6, 5-D |
1e1 114 |
1e0 214 |
1e-1 281 |
1e-2 404 |
1e-3 580 |
1e-5 1038 |
1e-7 1332 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 33 (44) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | 1.9 (1) | 3.5 (3) | 8.7 (9) | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 2.3 (2) | 7.1 (4) | 28 (44) | 33 (43) | 34 (32) | 87 (173) | 119 (212) | 12/15 |
| R-SHADE-10e2 Tanabe | 2.1 (1) | 3.6 (2) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.1 (0.9) | 2.5 (0.8) | 2.8 (0.6) | 2.6 (0.4) | 2.3 (0.3) | 1.8 (0.1) | 1.9 (0.2) | 15/15 |
| RL-SHADE-10e2 Tanabe | 2.3 (1) | 4.5 (3) | 26 (25) | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 6.4 (3) | 11 (2) | 14 (2) | 13 (1) | 11 (0.7) | 8.5 (0.6) | 8.2 (0.6) | 15/15 |
| SOO Derbel | 52 (93) | 1737 (2337) | 1.2e4 (1e4) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| BrentSTEPif Posik | 159 (214) | 484 (578) | 2385 (3416) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPifeg Posik | 77 (188) | 122 (150) | 346 (304) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPqi Posik | 68 (189) | 108 (208) | 347 (290) | 821 (1288) | 1220 (1370) | ∞ | ∞5e4 | 0/15 |
| BrentSTEPrr Posik | 59 (125) | 106 (167) | 270 (192) | 1696 (1656) | ∞ | ∞ | ∞5e4 | 0/15 |
| CMA-CSA Atamna | 2.0 (0.7) | 1.9 (0.4) | 2.0 (0.4) | 1.8 (0.2) | 1.5 (0.3) | 1.2 (0.2) | 1.1 (0.2) | 15/15 |
| CMA-MSR Atamna | 2.5 (0.7) | 2.0 (0.5) | 2.1 (0.4) | 1.9 (0.4) | 1.6 (0.2) | 1.2 (0.2) | 1.2 (0.2) | 15/15 |
| CMA-TPA Atamna | 2.2 (1.0) | 1.9 (0.5) | 1.9 (0.4) | 1.7 (0.4) | 1.4 (0.3) | 1.0 (0.1) | 1.0 (0.1) | 15/15 |
| GP1-CMAES Bajer | 2.5 (2) | 4.6 (4) | 32 (27) | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.5 (0.8) | 10 (6) | 67 (93) | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP5-CMAES Bajer | 7.0 (7) | 83 (97) | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| GP5-CMAES Bajer 2013instances | 6.4 (6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| IPOPCMAv3p61 Bajer | 1.6 (0.6) | 1.8 (0.4) | 1.9 (0.3) | 1.7 (0.2) | 1.5 (0.2) | 1.4 (0.6) | 14 (13) | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.1 (1) | 2.2 (0.7) | 2.2 (0.6) | 1.9 (0.4) | 1.9 (1) | 2.9 (2) | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 16 (27) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 9.4 (7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 32 (33) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 12 (20) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | 16 (22) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | 165 (209) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| STEPif Posik | 76 (156) | 219 (246) | 716 (917) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPifeg Posik | 37 (26) | 91 (104) | 176 (170) | 857 (837) | 1218 (1432) | ∞ | ∞5e4 | 0/15 |
| STEPrr Posik | 43 (94) | 55 (90) | 130 (198) | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| Δ fopt f7, 5-D |
1e1 24 |
1e0 324 |
1e-1 1171 |
1e-2 1451 |
1e-3 1572 |
1e-5 1572 |
1e-7 1597 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 5.0 (6) | 5.4 (7) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | 5.7 (4) | 5.3 (6) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 6.2 (3) | 2.7 (1) | 4.3 (4) | 12 (8) | 15 (17) | 15 (17) | 15 (17) | 15/15 |
| R-SHADE-10e2 Tanabe | 5.9 (3) | 1.9 (2) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 4.3 (2) | 1.3 (2) | 0.72 (0.8) | 0.75 (0.7) | 0.73 (0.6) | 0.73 (0.6) | 0.79 (0.6) | 15/15 |
| RL-SHADE-10e2 Tanabe | 5.5 (6) | 2.8 (3) | 6.3 (5) | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 14 (4) | 5.5 (2) | 3.2 (0.7) | 3.6 (0.2) | 3.4 (0.4) | 3.4 (0.4) | 3.7 (0.5) | 15/15 |
| SOO Derbel | 5.6 (7) | 2.1 (2) | 2.0 (2) | 7.8 (4) | 18 (29) | 18 (29) | 27 (43) | 14/15 |
| BrentSTEPif Posik | 555 (906) | 1036 (924) | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPifeg Posik | 723 (1050) | 753 (972) | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPqi Posik | 370 (595) | 725 (904) | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPrr Posik | 259 (426) | 1049 (921) | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| CMA-CSA Atamna | 4.8 (2) | 1.3 (1) | 0.87 (0.8) | 0.80 (0.7) | 0.80 (0.7) | 0.80 (0.7) | 0.86 (0.7) | 15/15 |
| CMA-MSR Atamna | 5.2 (5) | 1.1 (1.0) | 0.94 (0.7) | 0.90 (0.6) | 0.90 (0.6) | 0.90 (0.6) | 0.92 (0.6) | 15/15 |
| CMA-TPA Atamna | 4.0 (2) | 0.98 (0.7) | 0.93 (0.5) | 0.86 (0.5) | 0.82 (0.5) | 0.82 (0.5) | 0.83 (0.5) | 15/15 |
| GP1-CMAES Bajer | 3.6 (3) | 1.2 (1) | 0.99 (0.8) | 6.3 (9) | 5.9 (7) | 5.9 (6) | 5.8 (7) | 1/15 |
| GP1-CMAES Bajer 2013instances | 3.9 (2) | 1.4 (1) | 0.81 (0.5) | 2.2 (3) | 3.7 (4) | 3.7 (4) | 5.6 (5) | 2/15 |
| GP5-CMAES Bajer | 1.6 (1) | 0.46 (0.4) | 0.69 (0.5) | 12 (12) | 11 (18) | 11 (9) | ∞1270 | 0/15 |
| GP5-CMAES Bajer 2013instances | 2.1 (1) | 0.82 (0.9) | 0.61 (0.7) | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| IPOPCMAv3p61 Bajer | 4.7 (3) | 1.4 (1) | 2.2 (2) | 2.3 (3) | 2.8 (2) | 2.8 (3) | 5.5 (5) | 1/15 |
| IPOPCMAv3p61 Bajer 2013instances | 5.0 (3) | 1.5 (2) | 1.6 (1) | 1.8 (1) | 2.6 (3) | 2.6 (4) | 3.5 (4) | 3/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 6.1 (3) | 5.5 (8) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 4.9 (4) | 11 (14) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 4.0 (4) | 11 (13) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 6.8 (6) | 9.2 (14) | ∞ | ∞ | ∞ | ∞ | ∞1254 | 0/15 |
| RF1-CMAES Bajer 2013instances | 11 (21) | 10 (10) | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| RF5-CMAES Bajer | 20 (17) | 56 (63) | ∞ | ∞ | ∞ | ∞ | ∞1270 | 0/15 |
| RF5-CMAES Bajer 2013instances | 19 (30) | 17 (20) | ∞ | ∞ | ∞ | ∞ | ∞1270 | 0/15 |
| STEPif Posik | 126 (243) | 204 (255) | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPifeg Posik | 180 (345) | 276 (359) | 620 (656) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPrr Posik | 59 (88) | 306 (314) | 621 (882) | 502 (582) | ∞ | ∞ | ∞5e4 | 0/15 |
| Δ fopt f8, 5-D |
1e1 73 |
1e0 273 |
1e-1 336 |
1e-2 372 |
1e-3 391 |
1e-5 410 |
1e-7 422 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 17 (19) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | 3.1 (0.7) | 13 (15) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 3.4 (0.9) | 24 (29) | 86 (88) | 250 (380) | 393 (486) | 1.7e4 (2e4) | ∞5e5 | 0/15 |
| R-SHADE-10e2 Tanabe | 4.9 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 4.9 (1) | 4.7 (2) | 5.3 (3) | 5.8 (2) | 6.1 (2) | 6.7 (2) | 7.5 (2) | 15/15 |
| RL-SHADE-10e2 Tanabe | 4.4 (2) | 13 (13) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 25 (7) | 18 (3) | 20 (3) | 20 (4) | 21 (3) | 25 (3) | 28 (2) | 15/15 |
| SOO Derbel | 3.1 (0.7) | 32 (63) | 71 (114) | 133 (101) | 150 (100) | 220 (181) | 256 (218) | 15/15 |
| BrentSTEPif Posik | 77 (114) | 74 (60) | 364 (402) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPifeg Posik | 24 (32) | 94 (146) | 595 (674) | 542 (823) | 1721 (2470) | ∞ | ∞5e4 | 0/15 |
| BrentSTEPqi Posik | 12 (15) | 58 (88) | 952 (1204) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPrr Posik | 19 (16) | 52 (67) | 403 (558) | 815 (1030) | ∞ | ∞ | ∞4e4 | 0/15 |
| CMA-CSA Atamna | 3.0 (0.8) | 5.1 (5) | 5.3 (4) | 5.4 (4) | 5.5 (4) | 5.7 (4) | 6.0 (4) | 15/15 |
| CMA-MSR Atamna | 4.7 (2) | 3.6 (1) | 4.1 (1) | 4.3 (1) | 4.3 (0.9) | 4.7 (0.9) | 5.1 (0.9) | 15/15 |
| CMA-TPA Atamna | 4.1 (3) | 6.0 (5) | 6.2 (4) | 6.2 (3) | 6.3 (3) | 6.5 (3) | 6.7 (3) | 15/15 |
| GP1-CMAES Bajer | 2.8 (2) | 13 (16) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP1-CMAES Bajer 2013instances | 3.2 (1) | 10 (12) | 56 (57) | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP5-CMAES Bajer | 14 (16) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| GP5-CMAES Bajer 2013instances | 10 (15) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| IPOPCMAv3p61 Bajer | 3.2 (0.7) | 3.0 (1) | 8.8 (6) | 25 (24) | ∞ | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 4.0 (3) | 5.6 (5) | 18 (15) | 50 (36) | 48 (51) | ∞ | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 16 (21) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 8.7 (10) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 12 (17) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | 10 (14) | 68 (61) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | 114 (116) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1252 | 0/15 |
| RF5-CMAES Bajer 2013instances | 255 (142) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1252 | 0/15 |
| STEPif Posik | 4.6 (2) | 93 (135) | 172 (240) | 855 (733) | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPifeg Posik | 3.0 (2) | 61 (80) | 163 (267) | 570 (568) | 1698 (1531) | 1621 (1671) | ∞4e4 | 0/15 |
| STEPrr Posik | 2.1 (1) | 54 (83) | 178 (258) | 1661 (1642) | ∞ | ∞ | ∞4e4 | 0/15 |
| Δ fopt f9, 5-D |
1e1 35 |
1e0 127 |
1e-1 214 |
1e-2 263 |
1e-3 300 |
1e-5 335 |
1e-7 369 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 34 (32) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | 8.0 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 11 (8) | 133 (153) | 223 (243) | 575 (639) | 1368 (1441) | 3081 (4267) | 6218 (8286) | 3/15 |
| R-SHADE-10e2 Tanabe | 10 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 8.0 (3) | 11 (13) | 9.4 (8) | 9.0 (6) | 8.7 (5) | 9.0 (4) | 9.3 (4) | 15/15 |
| RL-SHADE-10e2 Tanabe | 10 (8) | 28 (28) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 46 (14) | 39 (4) | 30 (3) | 27 (2) | 27 (3) | 29 (2) | 31 (2) | 15/15 |
| SOO Derbel | 5.6 (2) | 19 (45) | 81 (67) | 243 (231) | 297 (445) | 326 (398) | 413 (391) | 15/15 |
| BrentSTEPif Posik | 36 (21) | 1130 (1099) | 3088 (3844) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPifeg Posik | 14 (16) | 663 (826) | 3062 (3497) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPqi Posik | 11 (17) | 453 (492) | 1405 (1863) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPrr Posik | 14 (15) | 811 (973) | 2783 (2949) | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| CMA-CSA Atamna | 5.6 (1.0) | 10 (10) | 7.7 (6) | 7.1 (5) | 6.7 (4) | 6.5 (4) | 6.4 (4) | 15/15 |
| CMA-MSR Atamna | 7.1 (1) | 9.4 (10) | 7.5 (6) | 6.8 (5) | 6.3 (4) | 6.3 (4) | 6.4 (4) | 15/15 |
| CMA-TPA Atamna | 5.3 (2) | 5.8 (2) | 5.2 (2) | 5.0 (1) | 4.8 (1) | 4.9 (1) | 4.8 (1) | 15/15 |
| GP1-CMAES Bajer | 5.3 (3) | 70 (79) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP1-CMAES Bajer 2013instances | 8.1 (9) | 47 (82) | 88 (91) | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP5-CMAES Bajer | 26 (37) | 68 (64) | 84 (88) | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| GP5-CMAES Bajer 2013instances | 13 (18) | 67 (59) | 83 (99) | 68 (75) | 60 (55) | 53 (88) | 49 (55) | 0/15 |
| IPOPCMAv3p61 Bajer | 7.4 (4) | 8.7 (9) | 14 (11) | 36 (32) | ∞ | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 7.4 (2) | 7.3 (2) | 14 (15) | 35 (40) | 63 (80) | ∞ | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 25 (23) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 20 (18) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 28 (32) | 141 (129) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | 30 (46) | 145 (156) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1252 | 0/15 |
| RF5-CMAES Bajer 2013instances | 254 (255) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1252 | 0/15 |
| STEPif Posik | 23 (21) | 1540 (2119) | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPifeg Posik | 5.8 (6) | 500 (374) | 3141 (2560) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPrr Posik | 4.5 (4) | 327 (424) | 2886 (3876) | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| Δ fopt f10, 5-D |
1e1 349 |
1e0 500 |
1e-1 574 |
1e-2 607 |
1e-3 626 |
1e-5 829 |
1e-7 880 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 431 (479) | 2396 (1985) | 5744 (4977) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.2 (1) | 2.3 (0.9) | 2.4 (0.7) | 2.6 (0.8) | 2.9 (0.9) | 2.9 (0.8) | 3.2 (0.9) | 15/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 14 (1) | 12 (0.9) | 12 (0.7) | 13 (1) | 14 (0.6) | 13 (0.6) | 14 (0.7) | 15/15 |
| SOO Derbel | 136 (215) | 1506 (1855) | 3126 (2655) | 1.2e4 (2e4) | ∞ | ∞ | ∞5e5 | 0/15 |
| BrentSTEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPqi Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| CMA-CSA Atamna | 2.5 (0.5) | 2.1 (0.2) | 2.0 (0.2) | 2.0 (0.2) | 2.1 (0.2) | 1.8 (0.1) | 1.8 (0.1) | 15/15 |
| CMA-MSR Atamna | 2.6 (0.7) | 2.1 (0.5) | 2.1 (0.3) | 2.2 (0.2) | 2.3 (0.3) | 2.0 (0.3) | 2.2 (0.2) | 15/15 |
| CMA-TPA Atamna | 2.5 (0.8) | 2.2 (0.2) | 2.1 (0.2) | 2.1 (0.2) | 2.2 (0.2) | 1.8 (0.1) | 1.8 (0.1) | 15/15 |
| GP1-CMAES Bajer | 2.1 (0.7) | 2.1 (0.5) | 2.9 (2) | 3.7 (2) | 3.7 (3) | 11 (11) | ∞1258 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.7 (2) | 2.8 (2) | 3.7 (3) | 4.1 (3) | 4.1 (3) | 11 (10) | 21 (21) | 1/15 |
| GP5-CMAES Bajer | 1.1 (0.4) | 0.91 (0.3) | 0.88 (0.3) | 0.90 (0.3) | 0.97 (0.3) | 0.78 (0.2)↑1 | 2.3 (2) | 0/15 |
| GP5-CMAES Bajer 2013instances | 0.95 (0.3) | 0.86 (0.3) | 0.83 (0.2) | 0.84 (0.2) | 0.86 (0.2) | 0.70 (0.2)↑1 | 1.5 (0.9) | 1/15 |
| IPOPCMAv3p61 Bajer | 4.8 (5) | 6.9 (5) | 8.1 (9) | 16 (21) | ∞ | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 6.7 (6) | 7.0 (7) | 16 (17) | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1252 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| STEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e4 | 0/15 |
| STEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e4 | 0/15 |
| STEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e4 | 0/15 |
| Δ fopt f11, 5-D |
1e1 143 |
1e0 202 |
1e-1 763 |
1e-2 977 |
1e-3 1177 |
1e-5 1467 |
1e-7 1673 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 144 (156) | 1773 (1666) | 4825 (6512) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| R-SHADE-10e2 Tanabe | 25 (27) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 3.1 (0.8) | 3.5 (2) | 1.3 (0.7) | 1.3 (0.5) | 1.2 (0.5) | 1.3 (0.4) | 1.4 (0.3) | 15/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 16 (6) | 20 (5) | 6.7 (1) | 6.2 (0.9) | 6.1 (0.6) | 6.2 (0.6) | 6.5 (0.4) | 15/15 |
| SOO Derbel | 53 (17) | 1760 (3147) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| BrentSTEPif Posik | 497 (890) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPifeg Posik | 916 (1259) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| BrentSTEPqi Posik | 888 (674) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| BrentSTEPrr Posik | 631 (549) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| CMA-CSA Atamna | 4.9 (1) | 4.3 (1.0) | 1.3 (0.2) | 1.1 (0.1) | 0.99 (0.1) | 0.91 (0.1) | 0.88 (0.1)↑1 | 15/15 |
| CMA-MSR Atamna | 5.9 (0.7) | 5.0 (0.8) | 1.5 (0.2) | 1.3 (0.2) | 1.2 (0.1) | 1.1 (0.1) | 1.1 (0.1) | 15/15 |
| CMA-TPA Atamna | 5.1 (0.9) | 4.6 (0.6) | 1.3 (0.2) | 1.1 (0.1) | 1.0 (0.1) | 0.91 (0.1)↑0 | 0.89 (0.1)↑0 | 15/15 |
| GP1-CMAES Bajer | 5.0 (2) | 4.9 (0.7) | 2.1 (0.9) | 2.7 (4) | 4.0 (5) | ∞ | ∞1258 | 0/15 |
| GP1-CMAES Bajer 2013instances | 5.3 (0.9) | 6.6 (4) | 4.7 (4) | 6.3 (6) | 8.0 (7) | ∞ | ∞1258 | 0/15 |
| GP5-CMAES Bajer | 2.4 (0.8) | 3.6 (3) | 1.1 (0.8) | 1.0 (0.7) | 0.87 (0.5) | 0.72 (0.5) | 1.4 (1) | 3/15 |
| GP5-CMAES Bajer 2013instances | 3.2 (1) | 3.3 (2) | 1.2 (1) | 1.3 (1) | 1.1 (0.6) | 0.92 (0.5) | 1.4 (1) | 1/15 |
| IPOPCMAv3p61 Bajer | 8.9 (6) | 31 (33) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 12 (8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 25 (30) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | 62 (97) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1252 | 0/15 |
| RF5-CMAES Bajer 2013instances | 130 (121) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| STEPif Posik | 1010 (593) | 1492 (1696) | ∞ | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| STEPifeg Posik | 312 (279) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| STEPrr Posik | 378 (314) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| Δ fopt f12, 5-D |
1e1 108 |
1e0 268 |
1e-1 371 |
1e-2 413 |
1e-3 461 |
1e-5 1303 |
1e-7 1494 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 37 (48) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | 69 (75) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 91 (163) | 112 (163) | 683 (799) | 2567 (3029) | 1.6e4 (1e4) | ∞ | ∞5e5 | 0/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 10 (3) | 7.1 (6) | 8.0 (7) | 8.9 (8) | 10 (7) | 5.0 (3) | 5.3 (3) | 15/15 |
| RL-SHADE-10e2 Tanabe | 11 (7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 57 (8) | 29 (4) | 27 (5) | 28 (5) | 29 (7) | 13 (3) | 13 (3) | 15/15 |
| SOO Derbel | 11 (3) | 6.8 (2) | 21 (11) | 39 (42) | 154 (220) | 220 (197) | 587 (458) | 6/15 |
| BrentSTEPif Posik | 91 (108) | 157 (138) | 790 (920) | 710 (692) | ∞ | ∞ | ∞2e4 | 0/15 |
| BrentSTEPifeg Posik | 75 (97) | 144 (117) | 389 (362) | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| BrentSTEPqi Posik | 67 (122) | 42 (57) | 119 (156) | 392 (498) | 722 (897) | ∞ | ∞2e4 | 0/15 |
| BrentSTEPrr Posik | 50 (82) | 51 (64) | 210 (300) | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| CMA-CSA Atamna | 10 (8) | 7.1 (8) | 6.9 (7) | 7.2 (6) | 7.4 (6) | 3.5 (2) | 3.5 (2) | 15/15 |
| CMA-MSR Atamna | 7.7 (4) | 5.4 (5) | 5.5 (5) | 5.8 (5) | 6.0 (4) | 2.7 (2) | 2.8 (2) | 15/15 |
| CMA-TPA Atamna | 8.3 (7) | 6.1 (7) | 6.0 (6) | 6.2 (6) | 6.2 (6) | 2.7 (2) | 2.9 (2) | 15/15 |
| GP1-CMAES Bajer | 6.9 (4) | 5.8 (7) | 9.2 (10) | 45 (40) | ∞ | ∞ | ∞1258 | 0/15 |
| GP1-CMAES Bajer 2013instances | 4.8 (3) | 6.2 (6) | 16 (21) | 46 (54) | ∞ | ∞ | ∞1258 | 0/15 |
| GP5-CMAES Bajer | 7.0 (10) | 4.8 (6) | 15 (18) | 21 (17) | ∞ | ∞ | ∞1258 | 0/15 |
| GP5-CMAES Bajer 2013instances | 16 (22) | 8.5 (14) | 15 (13) | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer | 7.3 (6) | 9.2 (8) | 49 (50) | 44 (49) | ∞ | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 7.6 (6) | 10 (12) | 15 (25) | 22 (22) | 40 (30) | ∞ | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 34 (48) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 15 (24) | 21 (28) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | 13 (12) | 22 (34) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1252 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| STEPif Posik | 35 (38) | 56 (40) | ∞ | ∞ | ∞ | ∞ | ∞6044 | 0/15 |
| STEPifeg Posik | 25 (25) | 50 (74) | ∞ | ∞ | ∞ | ∞ | ∞6082 | 0/15 |
| STEPrr Posik | 7.7 (8) | 21 (21) | 33 (24) | 100 (108) | ∞ | ∞ | ∞5870 | 0/15 |
| Δ fopt f13, 5-D |
1e1 132 |
1e0 195 |
1e-1 250 |
1e-2 319 |
1e-3 1310 |
1e-5 1752 |
1e-7 2255 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 5.3 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | 5.4 (4) | 38 (49) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 24 (39) | 119 (142) | 522 (777) | 4599 (4439) | 1591 (2423) | ∞ | ∞5e5 | 0/15 |
| R-SHADE-10e2 Tanabe | 11 (10) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 3.6 (1) | 4.2 (0.7) | 4.7 (0.8) | 4.9 (0.7) | 1.5 (0.2) | 1.5 (0.1) | 1.5 (0.1) | 15/15 |
| RL-SHADE-10e2 Tanabe | 4.6 (3) | 38 (46) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 24 (6) | 27 (2) | 28 (2) | 28 (2) | 7.9 (0.5) | 7.8 (0.5) | 7.5 (0.3) | 15/15 |
| SOO Derbel | 6.3 (4) | 14 (12) | 28 (27) | 43 (42) | 27 (26) | 105 (156) | 298 (244) | 7/15 |
| BrentSTEPif Posik | 463 (679) | 3269 (6115) | ∞ | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| BrentSTEPifeg Posik | 325 (347) | 1563 (1441) | 2520 (2757) | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| BrentSTEPqi Posik | 381 (426) | 977 (1762) | 2437 (2167) | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| BrentSTEPrr Posik | 371 (309) | 1462 (1892) | 1178 (1822) | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| CMA-CSA Atamna | 3.4 (2) | 3.4 (2) | 4.1 (2) | 3.9 (0.8) | 1.1 (0.2) | 1.1 (0.2) | 1.1 (0.2) | 15/15 |
| CMA-MSR Atamna | 3.2 (0.5) | 3.6 (0.8) | 3.8 (0.6) | 4.0 (0.5) | 1.2 (0.1) | 1.2 (0.1) | 1.1 (0.1) | 15/15 |
| CMA-TPA Atamna | 2.9 (1) | 3.8 (1) | 4.1 (2) | 4.1 (1) | 1.2 (0.2) | 1.3 (0.3) | 1.2 (0.3) | 15/15 |
| GP1-CMAES Bajer | 3.3 (3) | 20 (20) | 35 (28) | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP1-CMAES Bajer 2013instances | 3.2 (5) | 20 (18) | 73 (70) | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP5-CMAES Bajer | 1.8 (2) | 5.0 (4) | 12 (12) | 27 (27) | ∞ | ∞ | ∞1260 | 0/15 |
| GP5-CMAES Bajer 2013instances | 1.5 (0.9) | 3.5 (4) | 10 (15) | 27 (41) | ∞ | ∞ | ∞1260 | 0/15 |
| IPOPCMAv3p61 Bajer | 4.7 (3) | 5.5 (4) | 10 (9) | 19 (12) | 14 (10) | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 4.2 (3) | 8.1 (5) | 10 (10) | 59 (57) | ∞ | ∞ | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 2.2 (1) | 6.3 (8) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 3.0 (4) | 5.9 (4) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 3.7 (5) | 5.9 (8) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 10 (14) | 92 (115) | 73 (113) | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | 16 (19) | 44 (59) | 72 (70) | 58 (54) | ∞ | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | 135 (155) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1252 | 0/15 |
| STEPif Posik | 237 (385) | 491 (532) | ∞ | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| STEPifeg Posik | 170 (202) | 659 (636) | 2383 (2619) | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| STEPrr Posik | 181 (244) | 512 (710) | 1159 (1313) | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| Δ fopt f14, 5-D |
1e1 10 |
1e0 41 |
1e-1 58 |
1e-2 90 |
1e-3 139 |
1e-5 251 |
1e-7 476 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.4 (1) | 1.6 (0.7) | 8.6 (8) | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | 1.7 (2) | 2.8 (1) | 4.1 (2) | 5.2 (3) | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 2.0 (2) | 3.0 (1) | 4.0 (1) | 5.2 (2) | 19 (9) | 580 (718) | ∞5e5 | 0/15 |
| R-SHADE-10e2 Tanabe | 1.6 (2) | 3.2 (2) | 4.5 (0.8) | 5.6 (3) | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.3 (0.9) | 3.4 (2) | 5.2 (1.0) | 5.7 (1) | 5.4 (1) | 5.3 (1) | 4.0 (0.5) | 15/15 |
| RL-SHADE-10e2 Tanabe | 2.1 (2) | 3.4 (1) | 4.0 (1) | 10 (7) | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 3.1 (2) | 13 (4) | 25 (8) | 32 (7) | 33 (4) | 29 (2) | 20 (1) | 15/15 |
| SOO Derbel | 0.57 (0.4)↑1 | 2.2 (0.7) | 4.5 (2) | 10 (6) | 22 (12) | 1344 (1483) | 7480 (7176) | 0/15 |
| BrentSTEPif Posik | 1.4 (1) | 6.5 (8) | 12 (14) | 415 (444) | 5275 (6477) | ∞ | ∞5e4 | 0/15 |
| BrentSTEPifeg Posik | 1.4 (1) | 6.5 (7) | 11 (10) | 30 (27) | 2523 (2192) | ∞ | ∞5e4 | 0/15 |
| BrentSTEPqi Posik | 1.4 (1) | 4.6 (5) | 6.7 (5) | 24 (19) | 5072 (4768) | ∞ | ∞5e4 | 0/15 |
| BrentSTEPrr Posik | 1.4 (1) | 5.7 (6) | 10 (8) | 29 (14) | ∞ | ∞ | ∞5e4 | 0/15 |
| CMA-CSA Atamna | 1.7 (2) | 2.7 (0.9) | 3.6 (0.8) | 3.7 (0.9) | 3.8 (0.9) | 3.9 (0.6) | 3.0 (0.4) | 15/15 |
| CMA-MSR Atamna | 2.5 (3) | 3.3 (1) | 4.8 (0.8) | 5.0 (1.0) | 4.4 (0.8) | 4.1 (0.6) | 3.1 (0.3) | 15/15 |
| CMA-TPA Atamna | 2.0 (4) | 3.3 (2) | 3.7 (1) | 3.9 (2) | 3.8 (1) | 4.0 (0.6) | 3.1 (0.3) | 15/15 |
| GP1-CMAES Bajer | 1.4 (1) | 2.1 (0.9) | 2.6 (1) | 3.3 (1) | 6.7 (6) | 75 (85) | ∞1258 | 0/15 |
| GP1-CMAES Bajer 2013instances | 1.5 (2) | 1.9 (0.5) | 2.8 (0.7) | 3.4 (1) | 6.4 (5) | ∞ | ∞1258 | 0/15 |
| GP5-CMAES Bajer | 1.7 (0.9) | 1.6 (0.5) | 2.0 (0.9) | 2.8 (1) | 7.9 (5) | ∞ | ∞1260 | 0/15 |
| GP5-CMAES Bajer 2013instances | 1.7 (1) | 1.5 (0.6) | 1.7 (0.7) | 2.2 (1) | 8.9 (21) | ∞ | ∞1260 | 0/15 |
| IPOPCMAv3p61 Bajer | 1.8 (2) | 2.8 (2) | 3.9 (1) | 3.9 (0.9) | 4.2 (0.9) | 19 (23) | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.3 (2) | 3.5 (1) | 4.1 (1) | 4.2 (1) | 4.6 (2) | 24 (18) | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 1.2 (2) | 3.3 (0.4) | 3.4 (0.4) | 42 (60) | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.5 (1) | 1.6 (0.7) | 3.6 (3) | 41 (35) | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.3 (2) | 2.2 (2) | 4.9 (4) | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 1.2 (1) | 2.5 (1) | 5.7 (6) | 16 (22) | 64 (67) | ∞ | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | 2.0 (2) | 3.6 (2) | 5.7 (5) | 12 (13) | 30 (47) | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | 6.9 (5) | 29 (27) | 100 (137) | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| RF5-CMAES Bajer 2013instances | 1.1 (1) | 39 (27) | 152 (224) | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| STEPif Posik | 1.5 (1) | 1.9 (0.9) | 2.9 (1) | 92 (141) | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPifeg Posik | 1.5 (1) | 1.8 (0.8) | 3.0 (3) | 33 (20) | 5120 (5577) | ∞ | ∞5e4 | 0/15 |
| STEPrr Posik | 1.5 (1) | 1.5 (0.6) | 2.0 (1) | 12 (13) | 2350 (2159) | ∞ | ∞5e4 | 0/15 |
| Δ fopt f15, 5-D |
1e1 511 |
1e0 9310 |
1e-1 19369 |
1e-2 19743 |
1e-3 20073 |
1e-5 20769 |
1e-7 21359 |
#succ 14/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 2.0 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 3.3 (3) | 80 (58) | 373 (426) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| R-SHADE-10e2 Tanabe | 4.8 (5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.9 (1) | 2.3 (2) | 6.3 (6) | 6.2 (6) | 8.3 (9) | 9.0 (8) | 8.7 (8) | 14/15 |
| RL-SHADE-10e2 Tanabe | 2.8 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 6.9 (5) | 2.8 (2) | 6.1 (5) | 6.3 (5) | 6.4 (5) | 7.4 (5) | 7.3 (5) | 14/15 |
| SOO Derbel | 1.4 (0.9) | 3.5 (5) | 40 (54) | 46 (60) | 46 (40) | 44 (63) | 43 (53) | 6/15 |
| BrentSTEPif Posik | 226 (208) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPifeg Posik | 176 (137) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPqi Posik | 213 (250) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPrr Posik | 372 (509) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| CMA-CSA Atamna | 1.1 (0.8) | 1.1 (0.9) | 0.91 (0.3) | 0.92 (0.3) | 0.92 (0.3) | 0.92 (0.3) | 0.92 (0.3) | 15/15 |
| CMA-MSR Atamna | 1.9 (2) | 0.95 (0.8) | 0.89 (0.7) | 0.89 (0.7) | 0.91 (0.7) | 0.93 (0.7) | 0.95 (0.8) | 15/15 |
| CMA-TPA Atamna | 1.9 (2) | 0.90 (0.6) | 0.87 (0.6) | 0.88 (0.6) | 0.88 (0.6) | 0.88 (0.6) | 0.89 (0.6) | 15/15 |
| GP1-CMAES Bajer | 1.6 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.9 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP5-CMAES Bajer | 5.0 (6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1262 | 0/15 |
| GP5-CMAES Bajer 2013instances | 4.6 (8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1262 | 0/15 |
| IPOPCMAv3p61 Bajer | 1.2 (0.4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 1.2 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 1.7 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.2 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.7 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 3.1 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | 1.0 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | 35 (44) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1252 | 0/15 |
| RF5-CMAES Bajer 2013instances | 11 (14) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| STEPif Posik | 98 (121) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| STEPifeg Posik | 51 (48) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPrr Posik | 72 (85) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| Δ fopt f16, 5-D |
1e1 120 |
1e0 612 |
1e-1 2662 |
1e-2 10163 |
1e-3 10449 |
1e-5 11644 |
1e-7 12095 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.2 (0.9) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | 0.95 (1.0) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 1.7 (2) | 28 (32) | 102 (87) | 342 (399) | 706 (909) | ∞ | ∞5e5 | 0/15 |
| R-SHADE-10e2 Tanabe | 1.4 (1) | 5.9 (7) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.1 (1) | 2.7 (0.6) | 2.5 (3) | 1.4 (2) | 2.2 (2) | 2.4 (3) | 2.3 (3) | 15/15 |
| RL-SHADE-10e2 Tanabe | 1.2 (0.8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 1.7 (2) | 15 (4) | 12 (5) | 30 (35) | 60 (74) | 65 (101) | 63 (45) | 7/15 |
| SOO Derbel | 1.2 (0.8) | 1.1 (0.5) | 1.2 (0.5) | 0.96 (1.0) | 1.6 (2) | 3.2 (2) | 7.7 (10) | 15/15 |
| BrentSTEPif Posik | 10 (2) | 63 (81) | 247 (255) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPifeg Posik | 1.3 (1) | 158 (135) | 271 (259) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPqi Posik | 2.5 (1) | 93 (136) | 264 (415) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPrr Posik | 1.4 (1) | 67 (115) | 263 (296) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| CMA-CSA Atamna | 2.2 (1) | 1.9 (2) | 1.4 (1) | 0.49 (0.4)↑1 | 0.54 (0.4)↑1 | 0.55 (0.2)↑1 | 0.56 (0.2)↑1 | 15/15 |
| CMA-MSR Atamna | 5.9 (11) | 5.8 (5) | 4.7 (4) | 1.6 (2) | 1.6 (2) | 1.5 (2) | 1.5 (2) | 15/15 |
| CMA-TPA Atamna | 1.8 (2) | 3.1 (3) | 1.8 (2) | 0.56 (0.8) | 0.62 (0.8) | 0.62 (0.6) | 0.65 (0.6) | 15/15 |
| GP1-CMAES Bajer | 1.1 (0.9) | 2.1 (2) | 3.3 (3) | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP1-CMAES Bajer 2013instances | 1.2 (1.0) | 3.8 (2) | 6.8 (8) | 1.8 (2) | 1.8 (3) | ∞ | ∞1258 | 0/15 |
| GP5-CMAES Bajer | 0.77 (0.8) | 2.3 (4) | 3.2 (3) | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| GP5-CMAES Bajer 2013instances | 1.3 (3) | 4.7 (6) | 1.5 (3) | 1.8 (3) | ∞ | ∞ | ∞1260 | 0/15 |
| IPOPCMAv3p61 Bajer | 1.6 (1) | 1.8 (1) | 2.2 (2) | 0.90 (0.9) | 0.89 (1) | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.4 (2) | 6.8 (7) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 1.5 (1) | 6.1 (9) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.2 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.7 (2) | 6.0 (6) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 1.5 (0.8) | 4.0 (5) | 3.3 (7) | 1.8 (2) | ∞ | ∞ | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | 1.8 (1) | 3.6 (4) | 3.2 (3) | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | 1.5 (3) | 29 (47) | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| RF5-CMAES Bajer 2013instances | 1.7 (4) | 9.0 (12) | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| STEPif Posik | 0.69 (0.4) | 52 (48) | 268 (366) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPifeg Posik | 0.62 (0.3)↑1 | 46 (66) | 47 (37) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPrr Posik | 0.68 (0.4) | 28 (40) | 132 (155) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| Δ fopt f17, 5-D |
1e1 5.0 |
1e0 215 |
1e-1 899 |
1e-2 2861 |
1e-3 3669 |
1e-5 6351 |
1e-7 7934 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 3.2 (4) | 8.6 (11) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | 4.3 (5) | 1.4 (0.9) | 4.0 (5) | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 4.3 (4) | 4.6 (8) | 8.2 (8) | 4.7 (4) | 12 (7) | 35 (41) | 127 (179) | 2/15 |
| R-SHADE-10e2 Tanabe | 3.4 (4) | 2.8 (2) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.9 (2) | 1.5 (0.8) | 1.9 (0.6) | 0.81 (0.2)↑1 | 0.94 (1) | 1.1 (1) | 1.1 (1) | 15/15 |
| RL-SHADE-10e2 Tanabe | 2.5 (2) | 2.0 (2) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 2.9 (2) | 6.5 (3) | 5.4 (0.9) | 2.8 (0.3) | 3.0 (0.3) | 2.7 (0.2) | 2.8 (0.1) | 15/15 |
| SOO Derbel | 1.5 (2) | 1.2 (0.6) | 1.7 (1) | 1.8 (2) | 4.4 (3) | 11 (14) | 19 (16) | 14/15 |
| BrentSTEPif Posik | 7.3 (4) | 174 (150) | 794 (944) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPifeg Posik | 6.6 (4) | 173 (228) | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPqi Posik | 4.3 (4) | 142 (121) | 779 (777) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPrr Posik | 4.5 (4) | 313 (427) | 408 (402) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| CMA-CSA Atamna | 4.4 (4) | 0.98 (0.3) | 0.53 (0.2)↑0 | 1.0 (0.7) | 1.2 (1.0) | 1.1 (0.5) | 1.3 (0.7) | 15/15 |
| CMA-MSR Atamna | 4.3 (3) | 0.93 (0.3) | 0.97 (1) | 0.83 (0.6) | 0.82 (0.4) | 0.96 (0.5) | 1.1 (0.5) | 15/15 |
| CMA-TPA Atamna | 24 (18) | 2.6 (4) | 1.6 (2) | 0.97 (0.6) | 0.94 (0.2) | 0.88 (0.5) | 1.0 (0.5) | 15/15 |
| GP1-CMAES Bajer | 2.9 (3) | 0.83 (0.6) | 1.3 (2) | 0.73 (0.7) | ∞ | ∞ | ∞1258 | 0/15 |
| GP1-CMAES Bajer 2013instances | 4.7 (4) | 0.67 (0.3)↑0 | 0.80 (1) | 0.89 (0.9) | ∞ | ∞ | ∞1258 | 0/15 |
| GP5-CMAES Bajer | 2.5 (2) | 1.8 (2) | 9.3 (11) | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| GP5-CMAES Bajer 2013instances | 3.8 (5) | 1.8 (2) | 10 (6) | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer | 3.8 (4) | 1.7 (3) | 0.99 (1) | 0.40 (0.3) | 0.55 (0.4) | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 4.3 (4) | 1.1 (0.6) | 0.66 (0.4) | 0.46 (0.4) | 0.95 (0.6) | ∞ | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 2.1 (2) | 2.6 (3) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.5 (2) | 2.4 (2) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.4 (3) | 5.3 (5) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 4.5 (6) | 3.7 (6) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | 3.1 (3) | 4.0 (3) | 10 (9) | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | 14 (4) | 15 (13) | 10 (16) | ∞ | ∞ | ∞ | ∞1252 | 0/15 |
| RF5-CMAES Bajer 2013instances | 5.0 (8) | 13 (9) | ∞ | ∞ | ∞ | ∞ | ∞1252 | 0/15 |
| STEPif Posik | 4.0 (3) | 136 (194) | 360 (480) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPifeg Posik | 4.0 (3) | 128 (271) | 172 (183) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPrr Posik | 4.1 (3) | 239 (233) | 226 (397) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| Δ fopt f18, 5-D |
1e1 103 |
1e0 378 |
1e-1 3968 |
1e-2 8451 |
1e-3 9280 |
1e-5 10905 |
1e-7 12469 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.1 (0.8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | 1.1 (0.9) | 6.4 (6) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 1.3 (0.7) | 4.3 (5) | 6.7 (7) | 27 (35) | 223 (206) | ∞ | ∞5e5 | 0/15 |
| R-SHADE-10e2 Tanabe | 2.0 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.4 (0.8) | 1.6 (0.7) | 0.32 (0.1)↑0 | 0.64 (0.8) | 1.2 (2) | 2.6 (3) | 4.7 (8) | 15/15 |
| RL-SHADE-10e2 Tanabe | 1.3 (0.6) | 10 (10) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 3.8 (2) | 10 (2) | 1.7 (0.2) | 1.2 (0.1) | 1.4 (0.1) | 1.8 (0.1) | 2.0 (0.1) | 15/15 |
| SOO Derbel | 0.95 (0.6) | 1.8 (0.6) | 0.80 (0.5) | 3.6 (5) | 10 (18) | 25 (23) | 50 (71) | 8/15 |
| BrentSTEPif Posik | 95 (173) | 229 (388) | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPifeg Posik | 103 (172) | 159 (147) | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPqi Posik | 129 (213) | 553 (469) | ∞ | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| BrentSTEPrr Posik | 169 (327) | 213 (248) | 166 (165) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| CMA-CSA Atamna | 1.3 (0.9) | 2.3 (5) | 0.61 (0.5) | 0.54 (0.5) | 0.74 (0.5) | 0.77 (0.4) | 0.90 (0.4) | 15/15 |
| CMA-MSR Atamna | 1.1 (0.7) | 5.0 (7) | 1.0 (1) | 0.70 (0.6) | 1.0 (0.6) | 1.2 (0.7) | 1.3 (0.9) | 15/15 |
| CMA-TPA Atamna | 0.93 (0.5) | 1.8 (3) | 0.67 (0.5) | 0.59 (0.4) | 0.69 (0.5) | 0.70 (0.4) | 0.85 (0.4) | 15/15 |
| GP1-CMAES Bajer | 0.90 (0.7) | 0.96 (0.8) | 0.65 (0.7) | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP1-CMAES Bajer 2013instances | 1.0 (0.5) | 1.8 (2) | 1.4 (2) | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP5-CMAES Bajer | 1.4 (1) | 7.8 (11) | 4.5 (3) | 2.1 (2) | ∞ | ∞ | ∞1260 | 0/15 |
| GP5-CMAES Bajer 2013instances | 2.0 (3) | 14 (22) | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| IPOPCMAv3p61 Bajer | 0.98 (0.4) | 1.9 (2) | 0.80 (1) | 2.2 (2) | ∞ | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 1.2 (0.2) | 1.3 (0.3) | 0.47 (0.3) | 1.1 (1) | 2.0 (2) | ∞ | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 1.4 (0.3) | 10 (17) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.5 (1) | 9.4 (12) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.6 (1) | 10 (13) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 1.1 (0.8) | 10 (11) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | 0.75 (0.3) | 5.6 (6) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | 4.4 (6) | 16 (15) | ∞ | ∞ | ∞ | ∞ | ∞1252 | 0/15 |
| RF5-CMAES Bajer 2013instances | 5.2 (5) | 24 (20) | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| STEPif Posik | 27 (85) | 194 (299) | 169 (181) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPifeg Posik | 22 (20) | 188 (130) | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPrr Posik | 81 (215) | 85 (95) | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| Δ fopt f19, 5-D |
1e1 1 |
1e0 1 |
1e-1 242 |
1e-2 1.0e5 |
1e-3 1.2e5 |
1e-5 1.2e5 |
1e-7 1.2e5 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 19 (15) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | 26 (21) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 19 (20) | 2417 (3172) | 1952 (1720) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| R-SHADE-10e2 Tanabe | 21 (22) | 7330 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 22 (22) | 1787 (1484) | 111 (125) | 21 (26) | ∞ | ∞ | ∞5e5 | 0/15 |
| RL-SHADE-10e2 Tanabe | 31 (28) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 32 (42) | 4183 (3040) | 269 (238) | 68 (91) | ∞ | ∞ | ∞5e5 | 0/15 |
| SOO Derbel | 1 (0)★ | 1 (0)★4 | 10 (1) | 12 (14) | ∞ | ∞ | ∞5e5 | 0/15 |
| BrentSTEPif Posik | 16 (15) | 3125 (2486) | 694 (763) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPifeg Posik | 17 (15) | 2964 (3376) | 910 (1309) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPqi Posik | 22 (15) | 3284 (3734) | 1441 (1295) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPrr Posik | 17 (15) | 4781 (5633) | 926 (691) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| CMA-CSA Atamna | 19 (14) | 2971 (3428) | 153 (139) | 0.86 (0.7) | 0.83 (0.6) | 0.83 (0.6) | 0.84 (0.6) | 15/15 |
| CMA-MSR Atamna | 31 (24) | 2573 (4899) | 306 (202) | 67 (64) | ∞ | ∞ | ∞5e5 | 0/15 |
| CMA-TPA Atamna | 25 (23) | 959 (889) | 84 (67) | 0.68 (0.7) | 0.78 (0.6) | 0.80 (0.6) | 0.80 (0.6) | 15/15 |
| GP1-CMAES Bajer | 23 (21) | 2991 (2936) | 76 (109) | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP1-CMAES Bajer 2013instances | 25 (18) | 2568 (1971) | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| GP5-CMAES Bajer | 19 (14) | 1364 (1758) | ∞ | ∞ | ∞ | ∞ | ∞1270 | 0/15 |
| GP5-CMAES Bajer 2013instances | 15 (13) | 1496 (1334) | ∞ | ∞ | ∞ | ∞ | ∞1262 | 0/15 |
| IPOPCMAv3p61 Bajer | 23 (21) | 1962 (1529) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 23 (31) | 3070 (4364) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 39 (53) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 23 (13) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 20 (16) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 22 (20) | 1929 (2264) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | 24 (25) | 1868 (1419) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | 32 (22) | 1.9e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞1262 | 0/15 |
| RF5-CMAES Bajer 2013instances | 18 (16) | 1379 (1148) | ∞ | ∞ | ∞ | ∞ | ∞1262 | 0/15 |
| STEPif Posik | 14 (13) | 3090 (3162) | 1386 (1296) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPifeg Posik | 14 (13) | 5045 (3000) | 478 (572) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPrr Posik | 14 (13) | 3069 (2092) | 672 (767) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| Δ fopt f20, 5-D |
1e1 16 |
1e0 851 |
1e-1 38111 |
1e-2 51362 |
1e-3 54470 |
1e-5 54861 |
1e-7 55313 |
#succ 14/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 2.1 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | 4.0 (3) | 1.1 (0.9) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 3.6 (2) | 0.94 (0.9) | 0.82 (1) | 0.81 (0.9) | 0.80 (0.9) | 0.91 (0.9) | 0.95 (0.9) | 15/15 |
| R-SHADE-10e2 Tanabe | 4.1 (2) | 1.4 (1) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 3.9 (2) | 1.9 (0.8) | 0.33 (0.2)↑1 | 0.26 (0.2)↑1 | 0.25 (0.1)↑0 | 0.25 (0.1)↑0 | 0.26 (0.1)↑0 | 15/15 |
| RL-SHADE-10e2 Tanabe | 4.4 (3) | 1.3 (2) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 14 (6) | 5.6 (2) | 0.64 (1) | 0.54 (1.0) | 0.53 (0.9) | 0.56 (0.9) | 0.58 (0.9) | 15/15 |
| SOO Derbel | 12 (0.0) | 1.2 (6e-4) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| BrentSTEPif Posik | 2.1 (2) | 23 (41) | 5.8 (6) | 4.3 (4) | 6.5 (7) | 6.5 (8) | 6.5 (10) | 1/15 |
| BrentSTEPifeg Posik | 2.2 (2) | 9.3 (11) | 18 (23) | 13 (18) | 13 (13) | 13 (17) | 13 (12) | 1/15 |
| BrentSTEPqi Posik | 1.8 (0.9) | 8.7 (24) | 8.8 (9) | 6.6 (10) | 6.2 (5) | 6.2 (10) | 13 (17) | 0/15 |
| BrentSTEPrr Posik | 1.9 (0.8) | 11 (16) | 9.3 (9) | 7.0 (5) | 6.6 (8) | 13 (13) | ∞5e4 | 0/15 |
| CMA-CSA Atamna | 3.7 (2) | 9.2 (6) | 1.1 (0.7) | 0.83 (0.6) | 0.80 (0.5) | 0.82 (0.5) | 0.84 (0.6) | 15/15 |
| CMA-MSR Atamna | 4.8 (2) | 1666 (1780) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| CMA-TPA Atamna | 3.9 (2) | 17 (19) | 2.0 (1) | 1.5 (0.8) | 1.5 (0.7) | 1.5 (0.8) | 1.5 (0.8) | 15/15 |
| GP1-CMAES Bajer | 2.8 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP1-CMAES Bajer 2013instances | 3.1 (1) | 11 (11) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP5-CMAES Bajer | 2.1 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1262 | 0/15 |
| GP5-CMAES Bajer 2013instances | 2.2 (0.8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| IPOPCMAv3p61 Bajer | 4.9 (2) | 4.6 (4) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 4.2 (2) | 21 (18) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 6.4 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.5 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.5 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 3.9 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | 4.0 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | 13 (25) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| RF5-CMAES Bajer 2013instances | 31 (30) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| STEPif Posik | 1.9 (1) | 6.6 (14) | 3.7 (3) | 2.9 (3) | 2.7 (2) | 3.7 (5) | 3.8 (4) | 2/15 |
| STEPifeg Posik | 1.9 (1) | 3.1 (8) | 3.9 (5) | 2.9 (3) | 2.7 (3) | 2.8 (3) | 2.9 (4) | 3/15 |
| STEPrr Posik | 1.8 (1) | 2.8 (6) | 3.1 (3) | 2.3 (2) | 2.2 (3) | 2.8 (3) | 4.0 (5) | 1/15 |
| Δ fopt f21, 5-D |
1e1 41 |
1e0 1157 |
1e-1 1674 |
1e-2 1692 |
1e-3 1705 |
1e-5 1729 |
1e-7 1757 |
#succ 14/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 0.87 (0.5) | 0.79 (1) | 2.3 (2) | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | 1.4 (1) | 6.2 (7) | 4.4 (3) | 4.3 (6) | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 1.7 (2) | 16 (24) | 15 (16) | 15 (17) | 15 (17) | 15 (17) | 17 (19) | 15/15 |
| R-SHADE-10e2 Tanabe | 2.3 (2) | 1.5 (2) | 2.2 (2) | 4.4 (7) | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.0 (2) | 2.6 (3) | 3.3 (2) | 3.3 (2) | 3.4 (2) | 3.4 (2) | 3.5 (2) | 15/15 |
| RL-SHADE-10e2 Tanabe | 2.0 (2) | 1.4 (1) | 2.1 (3) | 4.2 (4) | 4.2 (5) | 4.3 (5) | 4.2 (5) | 1/15 |
| RL-SHADE-10e5 Tanabe | 3.1 (4) | 7.3 (2) | 5.8 (1) | 6.7 (2) | 7.2 (2) | 7.9 (2) | 8.5 (2) | 15/15 |
| SOO Derbel | 0.88 (0.8) | 0.35 (0.3)↑1 | 0.70 (0.7) | 1.1 (0.7) | 1.4 (0.7) | 6.2 (7) | 8.5 (8) | 15/15 |
| BrentSTEPif Posik | 77 (7) | 174 (238) | 125 (125) | 196 (213) | 197 (226) | 202 (272) | 208 (208) | 0/15 |
| BrentSTEPifeg Posik | 9.3 (6) | 90 (89) | 63 (90) | 62 (68) | 63 (59) | 67 (83) | 92 (103) | 2/15 |
| BrentSTEPqi Posik | 14 (2) | 121 (216) | 84 (115) | 84 (135) | 84 (88) | 121 (152) | 210 (199) | 0/15 |
| BrentSTEPrr Posik | 11 (6) | 67 (75) | 56 (68) | 67 (72) | 67 (81) | 72 (88) | 203 (218) | 0/15 |
| CMA-CSA Atamna | 1.9 (1) | 55 (141) | 119 (210) | 148 (160) | 147 (218) | 145 (258) | 143 (155) | 9/15 |
| CMA-MSR Atamna | 5.3 (2) | 206 (357) | 388 (251) | 384 (502) | 382 (389) | 376 (560) | 371 (429) | 6/15 |
| CMA-TPA Atamna | 2.2 (1) | 88 (170) | 116 (207) | 115 (214) | 114 (116) | 113 (199) | 112 (160) | 10/15 |
| GP1-CMAES Bajer | 1.1 (0.7) | 4.4 (5) | 5.0 (6) | 5.0 (3) | 5.0 (6) | 5.0 (7) | 10 (14) | 1/15 |
| GP1-CMAES Bajer 2013instances | 1.3 (0.5) | 1.9 (2) | 1.7 (2) | 1.7 (2) | 2.2 (2) | 2.3 (2) | 2.4 (2) | 4/15 |
| GP5-CMAES Bajer | 5.2 (8) | 16 (19) | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| GP5-CMAES Bajer 2013instances | 1.4 (0.8) | 1.4 (2) | 1.5 (1) | 1.9 (3) | 1.9 (2) | 10 (11) | ∞1252 | 0/15 |
| IPOPCMAv3p61 Bajer | 1.7 (2) | 15 (14) | 11 (14) | 11 (9) | 10 (15) | 10 (7) | 10 (12) | 1/15 |
| IPOPCMAv3p61 Bajer 2013instances | 4.3 (2) | 15 (19) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 2.0 (2) | 1.0 (1.0) | 2.2 (2) | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.3 (0.7) | 0.94 (1) | 2.1 (2) | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.4 (0.4) | 1.5 (2) | 2.1 (2) | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 1.6 (0.8) | 2.4 (3) | 5.1 (8) | 5.1 (5) | 10 (10) | 10 (9) | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | 3.5 (3) | 4.5 (7) | 3.2 (4) | 5.1 (7) | 11 (9) | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | 5.6 (11) | 4.7 (7) | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| RF5-CMAES Bajer 2013instances | 3.7 (9) | 7.8 (7) | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| STEPif Posik | 1.2 (1) | 96 (82) | 84 (129) | 84 (89) | 84 (112) | 129 (108) | 206 (128) | 1/15 |
| STEPifeg Posik | 1.1 (0.9) | 80 (93) | 56 (52) | 55 (88) | 55 (44) | 71 (92) | 94 (92) | 2/15 |
| STEPrr Posik | 1.1 (0.8) | 93 (95) | 85 (133) | 84 (133) | 84 (69) | 88 (101) | 129 (141) | 3/15 |
| Δ fopt f22, 5-D |
1e1 71 |
1e0 386 |
1e-1 938 |
1e-2 980 |
1e-3 1008 |
1e-5 1040 |
1e-7 1068 |
#succ 14/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.1 (0.7) | 5.8 (7) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | 1.3 (1.0) | 2.2 (2) | 7.7 (5) | 7.4 (8) | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 2.1 (2) | 16 (24) | 25 (19) | 26 (19) | 27 (19) | 36 (41) | 41 (40) | 15/15 |
| R-SHADE-10e2 Tanabe | 1.6 (2) | 5.7 (7) | 3.7 (3) | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.5 (1) | 3.2 (3) | 5.5 (7) | 5.5 (7) | 5.5 (7) | 5.5 (6) | 5.6 (6) | 15/15 |
| RL-SHADE-10e2 Tanabe | 1.6 (1) | 2.6 (2) | 3.7 (4) | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 3.7 (4) | 4.5 (3) | 65 (107) | 64 (102) | 63 (99) | 62 (97) | 62 (94) | 14/15 |
| SOO Derbel | 1.0 (0.9) | 0.98 (1.0) | 14 (28) | 37 (59) | 50 (84) | 92 (83) | 205 (238) | 13/15 |
| BrentSTEPif Posik | 102 (292) | 236 (306) | 236 (235) | 739 (1020) | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPifeg Posik | 34 (44) | 80 (136) | 129 (115) | 341 (363) | 710 (1005) | ∞ | ∞5e4 | 0/15 |
| BrentSTEPqi Posik | 31 (43) | 55 (65) | 85 (125) | 335 (471) | 333 (472) | ∞ | ∞5e4 | 0/15 |
| BrentSTEPrr Posik | 37 (63) | 110 (164) | 129 (118) | 350 (476) | 709 (707) | ∞ | ∞5e4 | 0/15 |
| CMA-CSA Atamna | 4.1 (11) | 135 (240) | 345 (380) | 426 (567) | 535 (781) | 519 (536) | 506 (1098) | 6/15 |
| CMA-MSR Atamna | 14 (30) | 458 (565) | 531 (695) | 508 (849) | 494 (758) | 479 (426) | 467 (826) | 7/15 |
| CMA-TPA Atamna | 2.5 (0.6) | 224 (483) | 323 (383) | 310 (558) | 301 (518) | 293 (484) | 285 (444) | 8/15 |
| GP1-CMAES Bajer | 4.2 (9) | 22 (19) | 19 (26) | 18 (31) | 18 (18) | 17 (18) | 17 (20) | 1/15 |
| GP1-CMAES Bajer 2013instances | 3.6 (9) | 9.3 (13) | 19 (18) | 18 (23) | 18 (23) | 17 (24) | 17 (14) | 1/15 |
| GP5-CMAES Bajer | 3.7 (8) | 6.9 (7) | 4.0 (5) | 3.9 (5) | 4.0 (4) | 18 (14) | ∞1260 | 0/15 |
| GP5-CMAES Bajer 2013instances | 4.3 (8) | 10 (12) | 9.2 (15) | 8.8 (10) | 8.6 (10) | ∞ | ∞1254 | 0/15 |
| IPOPCMAv3p61 Bajer | 5.7 (9) | 46 (73) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 5.8 (9) | 5.6 (8) | 20 (11) | 19 (22) | 18 (23) | 18 (13) | 18 (18) | 1/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 1.9 (0.6) | 2.3 (2) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.4 (1) | 3.0 (2) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 0.79 (0.5) | 4.5 (3) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 7.7 (14) | 13 (17) | 19 (20) | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | 5.5 (9) | 3.0 (5) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | 11 (15) | 46 (52) | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| RF5-CMAES Bajer 2013instances | 7.3 (9) | 21 (31) | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| STEPif Posik | 117 (350) | 131 (194) | 350 (492) | 754 (727) | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPifeg Posik | 123 (388) | 104 (133) | 129 (136) | 724 (765) | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPrr Posik | 62 (64) | 67 (87) | 67 (101) | 237 (306) | 738 (645) | ∞ | ∞5e4 | 0/15 |
| Δ fopt f23, 5-D |
1e1 3.0 |
1e0 518 |
1e-1 14249 |
1e-2 27890 |
1e-3 31654 |
1e-5 33030 |
1e-7 34256 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.8 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | 1.6 (1) | 14 (14) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 2.0 (3) | 34 (43) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| R-SHADE-10e2 Tanabe | 3.1 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.9 (3) | 6.2 (4) | 1.7 (2) | 0.93 (1) | 0.83 (1.0) | 0.82 (0.9) | 0.82 (0.9) | 15/15 |
| RL-SHADE-10e2 Tanabe | 2.8 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 2.2 (2) | 18 (25) | 11 (11) | 7.4 (7) | 6.8 (6) | 6.6 (6) | 6.4 (6) | 14/15 |
| SOO Derbel | 1.7 (2) | 1.4 (0.3) | 0.71 (0.7) | 1.9 (3) | 3.3 (3) | 6.5 (9) | 10 (8) | 11/15 |
| BrentSTEPif Posik | 2.6 (2) | 3.3 (4) | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPifeg Posik | 2.6 (2) | 4.3 (6) | 50 (55) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPqi Posik | 2.6 (2) | 6.6 (7) | 50 (67) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPrr Posik | 2.6 (2) | 3.7 (4) | 50 (42) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| CMA-CSA Atamna | 2.3 (3) | 13 (16) | 4.7 (5) | 2.5 (3) | 2.2 (2) | 2.2 (2) | 2.1 (2) | 15/15 |
| CMA-MSR Atamna | 2.5 (2) | 3.2 (4) | 0.91 (0.8) | 0.52 (0.4) | 0.48 (0.4)↑1 | 0.51 (0.4)↑1 | 0.53 (0.4) | 15/15 |
| CMA-TPA Atamna | 3.2 (3) | 16 (16) | 8.1 (18) | 4.2 (9) | 3.8 (8) | 3.8 (8) | 3.7 (8) | 13/15 |
| GP1-CMAES Bajer | 2.3 (2) | 11 (10) | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| GP1-CMAES Bajer 2013instances | 1.9 (2) | 4.9 (4) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP5-CMAES Bajer | 2.1 (2) | 1.4 (1) | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| GP5-CMAES Bajer 2013instances | 2.4 (3) | 2.2 (1) | ∞ | ∞ | ∞ | ∞ | ∞1252 | 0/15 |
| IPOPCMAv3p61 Bajer | 2.5 (3) | 17 (18) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.3 (2) | 12 (13) | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 3.9 (5) | 6.8 (8) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 3.1 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.5 (3) | 7.1 (7) | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 1.8 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| RF1-CMAES Bajer 2013instances | 1.8 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| RF5-CMAES Bajer | 2.8 (3) | 36 (40) | ∞ | ∞ | ∞ | ∞ | ∞1288 | 0/15 |
| RF5-CMAES Bajer 2013instances | 2.4 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1288 | 0/15 |
| STEPif Posik | 3.4 (2) | 2.8 (3) | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPifeg Posik | 3.4 (2) | 2.7 (2) | 50 (60) | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPrr Posik | 3.4 (2) | 2.5 (1) | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| Δ fopt f24, 5-D |
1e1 1622 |
1e0 2.2e5 |
1e-1 6.4e6 |
1e-2 9.6e6 |
1e-3 9.6e6 |
1e-5 1.3e7 |
1e-7 1.3e7 |
#succ 3/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e5 Tanabe | 5.0 (6) | 16 (18) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.7 (0.9) | 2.6 (3) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RL-SHADE-10e5 Tanabe | 6.9 (3) | 16 (18) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| SOO Derbel | 3.0 (3) | 1.2 (2) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| BrentSTEPif Posik | 41 (64) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| BrentSTEPifeg Posik | 21 (25) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPqi Posik | 38 (40) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPrr Posik | 29 (28) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| CMA-CSA Atamna | 2.0 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| CMA-MSR Atamna | 1.3 (2) | 33 (30) | 1.1 (1) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| CMA-TPA Atamna | 1.3 (1) | 10 (6) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| GP1-CMAES Bajer | 2.0 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.1 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| GP5-CMAES Bajer | 2.3 (4) | 0.08 (0.1) | ∞ | ∞ | ∞ | ∞ | ∞1262 | 0/15 |
| GP5-CMAES Bajer 2013instances | 1.1 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| IPOPCMAv3p61 Bajer | 11 (20) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.0 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞250 | 0/15 |
| RF1-CMAES Bajer | 11 (10) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF1-CMAES Bajer 2013instances | 5.5 (6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1258 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1252 | 0/15 |
| RF5-CMAES Bajer 2013instances | 5.2 (6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1260 | 0/15 |
| STEPif Posik | 15 (19) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| STEPifeg Posik | 15 (27) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPrr Posik | 21 (26) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
Previous dimension | Dimension = 10 | Next dimension
| Δ fopt f1, 10-D |
1e1 22 |
1e0 23 |
1e-1 23 |
1e-2 23 |
1e-3 23 |
1e-5 23 |
1e-7 23 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 2.5 (0.8) | 11 (12) | 13 (17) | 30 (22) | 318 (408) | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | 4.3 (1) | 11 (4) | 18 (4) | 25 (6) | 32 (7) | 126 (109) | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 8.6 (2) | 18 (2) | 30 (4) | 43 (6) | 53 (5) | 76 (6) | 100 (6) | 15/15 |
| R-SHADE-10e2 Tanabe | 6.1 (1) | 14 (3) | 21 (8) | 32 (8) | 46 (36) | 652 (609) | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 12 (5) | 29 (5) | 47 (8) | 69 (5) | 88 (9) | 126 (10) | 169 (13) | 15/15 |
| RL-SHADE-10e2 Tanabe | 7.2 (1) | 13 (7) | 43 (45) | 115 (134) | 208 (216) | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 44 (20) | 144 (31) | 256 (23) | 360 (30) | 460 (20) | 642 (23) | 803 (28) | 15/15 |
| SOO Derbel | 3.9 (2) | 16 (5) | 39 (6) | 67 (10) | 111 (17) | 226 (19) | 370 (21) | 15/15 |
| BrentSTEPif Posik | 1.8 (0.1) | 2.2 (0.1) | 2.3 (0.2) | 2.3 (0.3) | 2.3 (0.3) | 2.3 (0.3) | 2.4 (0.3) | 15/15 |
| BrentSTEPifeg Posik | 1.8 (0.1) | 2.2 (0.1) | 2.3 (0.2) | 2.3 (0.3) | 2.3 (0.3) | 2.3 (0.3) | 2.4 (0.3) | 15/15 |
| BrentSTEPqi Posik | 1.8 (0.1) | 2.2 (0.1) | 2.3 (0.2) | 2.3 (0.3) | 2.3 (0.3) | 2.3 (0.3) | 2.4 (0.3) | 15/15 |
| BrentSTEPrr Posik | 1.8 (0.1) | 2.2 (0.1) | 2.3 (0.2) | 2.3 (0.3) | 2.3 (0.3) | 2.3 (0.3) | 2.4 (0.3) | 15/15 |
| CMA-CSA Atamna | 6.4 (3) | 12 (2) | 18 (4) | 25 (4) | 31 (5) | 44 (5) | 56 (6) | 15/15 |
| CMA-MSR Atamna | 7.0 (2) | 15 (3) | 24 (4) | 34 (4) | 42 (5) | 60 (5) | 78 (6) | 15/15 |
| CMA-TPA Atamna | 6.2 (2) | 11 (2) | 16 (2) | 21 (3) | 26 (4) | 36 (4) | 46 (5) | 15/15 |
| GP1-CMAES Bajer | 4.1 (1) | 6.8 (1) | 10 (0.9) | 14 (1) | 17 (2) | 25 (4) | 36 (4) | 15/15 |
| GP1-CMAES Bajer 2013instances | 3.7 (0.6) | 6.9 (1) | 10 (1) | 13 (2) | 16 (2) | 24 (2) | 34 (4) | 15/15 |
| GP5-CMAES Bajer | 2.3 (0.5) | 3.2 (0.3) | 4.3 (0.5) | 5.5 (0.6) | 6.7 (0.5) | 9.0 (0.7) | 41 (29) | 4/15 |
| GP5-CMAES Bajer 2013instances | 2.3 (0.4) | 3.3 (0.3) | 4.4 (0.3) | 5.6 (0.6) | 6.7 (0.6) | 9.0 (0.7) | 39 (33) | 4/15 |
| IPOPCMAv3p61 Bajer | 5.8 (3) | 13 (3) | 19 (2) | 25 (3) | 32 (3) | 45 (4) | 59 (5) | 15/15 |
| IPOPCMAv3p61 Bajer 2013instances | 6.5 (2) | 13 (3) | 19 (4) | 26 (4) | 32 (4) | 45 (4) | 59 (3) | 15/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 10 (0.1) | 10 (0.3) | 12 (0.9) | 14 (0.8) | 15 (1) | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.9 (0.5) | 6.4 (5) | 8.9 (5) | 27 (20) | 101 (88) | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 3.1 (0.5) | 5.3 (1) | 7.7 (2) | 22 (13) | 74 (54) | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | 4.9 (2) | 10 (3) | 17 (6) | 25 (10) | 35 (12) | 67 (28) | 231 (274) | 4/15 |
| RF1-CMAES Bajer 2013instances | 5.1 (2) | 11 (3) | 18 (4) | 28 (9) | 41 (13) | 81 (65) | 246 (228) | 3/15 |
| RF5-CMAES Bajer | 4.5 (4) | 42 (44) | 289 (363) | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| RF5-CMAES Bajer 2013instances | 3.8 (1) | 29 (48) | 220 (319) | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| STEPif Posik | 1.9 (0.1) | 2.4 (0.2) | 3.3 (0.3) | 5.1 (1.0) | 6.2 (0.7) | 7.6 (0.8) | 8.7 (0.5) | 15/15 |
| STEPifeg Posik | 1.9 (0.1) | 2.4 (0.2) | 3.2 (0.2) | 4.5 (0.7) | 5.5 (0.6) | 7.3 (0.9) | 8.8 (0.5) | 15/15 |
| STEPrr Posik | 1.9 (0.1) | 2.4 (0.2) | 3.2 (0.2) | 3.9 (0.1) | 4.7 (0.1) | 6.1 (0.1) | 7.5 (0.2) | 15/15 |
| Δ fopt f2, 10-D |
1e1 187 |
1e0 190 |
1e-1 191 |
1e-2 191 |
1e-3 193 |
1e-5 194 |
1e-7 195 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | 4.5 (3) | 8.6 (8) | 15 (11) | 78 (92) | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 5.9 (0.8) | 7.1 (0.5) | 8.3 (0.5) | 10 (0.7) | 11 (0.9) | 14 (0.9) | 16 (1.0) | 15/15 |
| R-SHADE-10e2 Tanabe | 4.4 (0.9) | 9.0 (5) | 26 (30) | 78 (75) | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 11 (2) | 14 (2) | 16 (2) | 19 (2) | 21 (2) | 26 (2) | 30 (2) | 15/15 |
| RL-SHADE-10e2 Tanabe | 18 (18) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 56 (3) | 67 (2) | 78 (4) | 88 (3) | 97 (2) | 115 (4) | 132 (4) | 15/15 |
| SOO Derbel | 2695 (5348) | 3537 (5268) | 4619 (1e4) | 4628 (6546) | 4589 (7776) | 5970 (9019) | 6145 (7695) | 7/15 |
| BrentSTEPif Posik | 0.64 (0.2)↑0 | 0.73 (0.2)↑0 | 0.77 (0.1)↑0 | 0.83 (0.1)↑0 | 0.86 (0.1)↑0 | 0.95 (0.1) | 1.0 (0.1) | 15/15 |
| BrentSTEPifeg Posik | 0.63 (0.2)↑0 | 0.70 (0.2)↑0 | 0.74 (0.2)↑0 | 0.83 (0.1)↑0 | 0.86 (0.1)↑1 | 0.96 (0.1) | 1.0 (0.1) | 15/15 |
| BrentSTEPqi Posik | 0.41 (0.0)★↑0 | 0.43 (0.0)★3↑0 | 0.45 (0.0)★4↑0 | 0.50 (0.0)★4↑0 | 0.54 (0.1)★4↑0 | 0.69 (0.1)★3↑0 | 0.86 (0.2)★ | 15/15 |
| BrentSTEPrr Posik | 0.55 (0.2)↑0 | 0.62 (0.1)↑0 | 0.67 (0.1)↑0 | 0.71 (0.1)↑0 | 0.76 (0.1)↑0 | 0.94 (0.1) | 1.0 (0.2) | 15/15 |
| CMA-CSA Atamna | 14 (3) | 16 (3) | 17 (2) | 18 (1) | 19 (1) | 20 (1) | 22 (2) | 15/15 |
| CMA-MSR Atamna | 16 (3) | 18 (3) | 19 (2) | 21 (2) | 22 (1) | 24 (1) | 25 (1) | 15/15 |
| CMA-TPA Atamna | 15 (4) | 17 (3) | 19 (2) | 20 (1) | 21 (1) | 22 (1) | 23 (2) | 15/15 |
| GP1-CMAES Bajer | 32 (31) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP1-CMAES Bajer 2013instances | 33 (37) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP5-CMAES Bajer | 9.2 (8) | 15 (18) | 19 (17) | 19 (14) | 19 (20) | 20 (10) | 46 (55) | 0/15 |
| GP5-CMAES Bajer 2013instances | 6.1 (3) | 8.5 (3) | 12 (8) | 13 (8) | 13 (13) | 14 (11) | 96 (122) | 0/15 |
| IPOPCMAv3p61 Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| STEPif Posik | 0.82 (0.3) | 0.89 (0.2) | 1.1 (0.3) | 1.1 (0.3) | 1.2 (0.2) | 1.3 (0.1) | 1.4 (0.1) | 15/15 |
| STEPifeg Posik | 0.77 (0.2) | 0.84 (0.3) | 1.00 (0.2) | 1.1 (0.3) | 1.2 (0.3) | 1.3 (0.2) | 1.4 (0.1) | 15/15 |
| STEPrr Posik | 0.69 (0.1)↑0 | 0.76 (0.1)↑0 | 0.87 (0.1)↑1 | 0.94 (0.1) | 1.0 (0.1) | 1.2 (0.1) | 1.4 (0.1) | 15/15 |
| Δ fopt f3, 10-D |
1e1 1739 |
1e0 3600 |
1e-1 3609 |
1e-2 3636 |
1e-3 3642 |
1e-5 3646 |
1e-7 3651 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | 8.5 (10) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 1.0 (0.2) | 5.7 (4) | 35 (43) | 35 (42) | 35 (42) | 35 (42) | 35 (42) | 15/15 |
| R-SHADE-10e2 Tanabe | 0.71 (0.4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 4.2 (0.7) | 4.0 (0.6) | 5.7 (5) | 5.9 (5) | 6.1 (5) | 6.4 (5) | 6.7 (5) | 15/15 |
| RL-SHADE-10e2 Tanabe | 1.5 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 14 (2) | 12 (0.8) | 14 (0.7) | 14 (0.7) | 15 (0.7) | 16 (0.7) | 17 (0.6) | 15/15 |
| SOO Derbel | 197 (345) | 3919 (6251) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| BrentSTEPif Posik | 0.15 (0.0)↑0 | 0.16 (0.0)↑0 | 0.19 (0.0)↑0 | 0.19 (0.0)↑0 | 0.19 (0.0)↑0 | 0.19 (0.0)↑0 | 0.19 (0.0)↑0 | 15/15 |
| BrentSTEPifeg Posik | 0.16 (0.0)↑0 | 0.16 (0.0)↑0 | 0.19 (0.0)↑0 | 0.19 (0.0)↑0 | 0.19 (0.0)↑0 | 0.19 (0.0)↑0 | 0.19 (0.0)↑0 | 15/15 |
| BrentSTEPqi Posik | 0.16 (0.1)↑0 | 0.14 (0.0)↑0 | 0.18 (0.0)↑0 | 0.18 (0.0)↑0 | 0.18 (0.0)↑0 | 0.18 (0.0)↑0 | 0.18 (0.0)↑0 | 15/15 |
| BrentSTEPrr Posik | 0.15 (0.0)↑0 | 0.14 (0.0)↑0 | 0.17 (0.0)↑0 | 0.17 (0.0)↑0 | 0.17 (0.0)↑0 | 0.18 (0.0)↑0 | 0.19 (0.0)↑0 | 15/15 |
| CMA-CSA Atamna | 3.9 (3) | 1132 (1115) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| CMA-MSR Atamna | 4.1 (2) | 20 (9) | 35 (40) | 36 (41) | 37 (44) | 39 (46) | 41 (50) | 15/15 |
| CMA-TPA Atamna | 2.7 (3) | 278 (496) | 3905 (4240) | 3876 (5314) | 3870 (3169) | 3867 (3715) | 3862 (5633) | 1/15 |
| GP1-CMAES Bajer | 4.5 (5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP1-CMAES Bajer 2013instances | 4.9 (7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2518 | 0/15 |
| GP5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2526 | 0/15 |
| IPOPCMAv3p61 Bajer | 3.0 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 4.7 (5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF1-CMAES Bajer 2013instances | 21 (21) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| STEPif Posik | 0.16 (0.0)↑0 | 0.17 (0.0)↑0 | 0.18 (0.0)↑0 | 0.19 (0.0)↑0 | 0.19 (0.0)↑0 | 0.20 (0.0)↑0 | 0.20 (0.0)↑0 | 15/15 |
| STEPifeg Posik | 0.15 (0.0)↑0 | 0.15 (0.0)↑0 | 0.16 (0.0)↑0 | 0.17 (0.0)↑0 | 0.18 (0.0)↑0 | 0.19 (0.0)↑0 | 0.19 (0.0)↑0 | 15/15 |
| STEPrr Posik | 0.13 (0.0)↑0 | 0.14 (0.0)↑0 | 0.15 (0.0)↑0 | 0.16 (0.0)↑0 | 0.17 (0.0)↑0 | 0.18 (0.0)↑0 | 0.20 (0.0)↑0 | 15/15 |
| Δ fopt f4, 10-D |
1e1 2234 |
1e0 3626 |
1e-1 3660 |
1e-2 3695 |
1e-3 3707 |
1e-5 3744 |
1e-7 28767 |
#succ 12/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 0.90 (0.2) | 35 (43) | 264 (241) | 261 (225) | 261 (231) | 258 (269) | 34 (30) | 10/15 |
| R-SHADE-10e2 Tanabe | 0.69 (0.5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 3.6 (0.6) | 5.5 (3) | 7.6 (5) | 7.8 (5) | 8.0 (5) | 8.3 (5) | 1.1 (0.7) | 15/15 |
| RL-SHADE-10e2 Tanabe | 3.2 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 12 (2) | 13 (0.7) | 15 (0.6) | 16 (0.6) | 16 (0.6) | 17 (0.6) | 2.3 (0.1) | 15/15 |
| SOO Derbel | 677 (1024) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| BrentSTEPif Posik | 0.14 (0.0)↑0 | 0.28 (0.1)↑0 | 0.37 (0.1)↑0 | 0.36 (0.1)↑0 | 0.36 (0.1)↑0 | 0.36 (0.1)↑0 | 0.05 (0.0)↑0 | 15/15 |
| BrentSTEPifeg Posik | 0.14 (0.0)↑0 | 0.27 (0.1)↑0 | 0.35 (0.1)↑0 | 0.35 (0.1)↑0 | 0.35 (0.1)↑0 | 0.35 (0.1)↑0 | 0.05 (0.0)↑0 | 15/15 |
| BrentSTEPqi Posik | 0.16 (0.0)↑0 | 0.24 (0.1)↑0 | 0.32 (0.1)↑0 | 0.32 (0.1)↑0 | 0.32 (0.1)↑0 | 0.32 (0.1)↑0 | 0.05 (0.0)↑0 | 15/15 |
| BrentSTEPrr Posik | 0.13 (0.0)↑0 | 0.22 (0.1)↑0 | 0.28 (0.1)↑0 | 0.29 (0.1)↑0 | 0.30 (0.1)↑0 | 0.34 (0.1)↑0 | 0.06 (0.0)↑0 | 15/15 |
| CMA-CSA Atamna | 7.7 (8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| CMA-MSR Atamna | 10 (6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| CMA-TPA Atamna | 4.9 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| GP1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2516 | 0/15 |
| GP5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2516 | 0/15 |
| IPOPCMAv3p61 Bajer | 7.8 (9) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 8.0 (7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| STEPif Posik | 0.14 (0.0)↑0 | 0.35 (0.1)↑0 | 0.47 (0.1)↑0 | 0.61 (0.1)↑0 | 0.77 (0.1)↑1 | 0.87 (0.1) | 0.12 (0.0)↑0 | 15/15 |
| STEPifeg Posik | 0.14 (0.0)↑0 | 0.34 (0.1)↑0 | 0.46 (0.1)↑0 | 0.59 (0.1)↑0 | 0.73 (0.1)↑0 | 0.84 (0.1)↑1 | 0.11 (0.0)↑0 | 15/15 |
| STEPrr Posik | 0.13 (0.0)↑0 | 0.29 (0.1)↑0 | 0.42 (0.1)↑0 | 0.54 (0.1)↑0 | 0.68 (0.1)↑0 | 0.82 (0.1)↑0 | 0.12 (0.0)↑0 | 15/15 |
| Δ fopt f5, 10-D |
1e1 20 |
1e0 20 |
1e-1 20 |
1e-2 20 |
1e-3 20 |
1e-5 20 |
1e-7 20 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.7 (0.2) | 1.9 (0.2) | 2.0 (0.1) | 2.0 (0.1) | 2.0 (0.1) | 2.0 (0.1) | 2.0 (0.1) | 15/15 |
| R-DE-10e2 Tanabe | 17 (5) | 29 (10) | 47 (30) | 71 (28) | 750 (475) | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 24 (2) | 45 (4) | 65 (8) | 85 (10) | 104 (10) | 145 (9) | 185 (8) | 15/15 |
| R-SHADE-10e2 Tanabe | 12 (2) | 19 (3) | 26 (4) | 32 (6) | 37 (6) | 57 (28) | 183 (184) | 2/15 |
| R-SHADE-10e5 Tanabe | 47 (14) | 91 (19) | 134 (23) | 178 (26) | 223 (22) | 314 (26) | 403 (25) | 15/15 |
| RL-SHADE-10e2 Tanabe | 14 (3) | 20 (4) | 27 (6) | 34 (8) | 42 (7) | 77 (54) | 372 (362) | 0/15 |
| RL-SHADE-10e5 Tanabe | 131 (9) | 241 (16) | 336 (13) | 420 (8) | 502 (13) | 655 (11) | 799 (13) | 15/15 |
| SOO Derbel | 36 (0.0) | 108 (0.0) | 219 (0.0) | 395 (0.0) | 623 (0.0) | 1175 (0.0) | 1884 (0.0) | 15/15 |
| BrentSTEPif Posik | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 15/15 |
| BrentSTEPifeg Posik | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 15/15 |
| BrentSTEPqi Posik | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 15/15 |
| BrentSTEPrr Posik | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 15/15 |
| CMA-CSA Atamna | 4.8 (2) | 6.1 (2) | 6.2 (2) | 6.2 (2) | 6.2 (2) | 6.2 (2) | 6.2 (2) | 15/15 |
| CMA-MSR Atamna | 3.9 (1) | 5.3 (2) | 5.4 (2) | 5.4 (2) | 5.4 (2) | 5.4 (2) | 5.4 (2) | 15/15 |
| CMA-TPA Atamna | 4.2 (2) | 4.9 (2) | 5.0 (2) | 5.0 (2) | 5.0 (2) | 5.0 (2) | 5.0 (2) | 15/15 |
| GP1-CMAES Bajer | 5.8 (3) | 38 (45) | 59 (65) | 59 (64) | 59 (94) | 59 (77) | 59 (64) | 13/15 |
| GP1-CMAES Bajer 2013instances | 5.4 (3) | 35 (35) | 41 (37) | 42 (37) | 42 (37) | 42 (37) | 42 (37) | 15/15 |
| GP5-CMAES Bajer | 3.5 (1) | 5.1 (2) | 6.0 (2) | 6.1 (2) | 6.1 (2) | 6.1 (2) | 6.1 (2) | 15/15 |
| GP5-CMAES Bajer 2013instances | 3.0 (1) | 5.2 (2) | 5.4 (4) | 5.5 (4) | 5.5 (4) | 5.5 (4) | 5.5 (4) | 15/15 |
| IPOPCMAv3p61 Bajer | 13 (10) | 25 (17) | 30 (17) | 30 (17) | 30 (17) | 30 (17) | 30 (17) | 15/15 |
| IPOPCMAv3p61 Bajer 2013instances | 12 (4) | 23 (15) | 28 (13) | 30 (13) | 30 (13) | 30 (13) | 30 (13) | 15/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 11 (0.1) | 12 (0.2) | 12 (0.4) | 12 (0.4) | 12 (0.4) | 12 (0.4) | 12 (0.4) | 15/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.6 (0.1) | 3.0 (0.2) | 3.0 (0.2) | 3.0 (0.2) | 3.0 (0.2) | 3.0 (0.2) | 3.0 (0.2) | 15/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.7 (0.2) | 3.0 (0.2) | 3.1 (0.4) | 3.1 (0.4) | 3.1 (0.4) | 3.1 (0.4) | 3.1 (0.4) | 15/15 |
| RF1-CMAES Bajer | 13 (8) | 34 (21) | 36 (21) | 38 (20) | 38 (19) | 38 (19) | 38 (19) | 15/15 |
| RF1-CMAES Bajer 2013instances | 18 (13) | 31 (20) | 34 (19) | 34 (18) | 35 (17) | 35 (17) | 35 (17) | 15/15 |
| RF5-CMAES Bajer | 41 (33) | 89 (73) | 113 (69) | 117 (83) | 118 (103) | 118 (95) | 118 (103) | 11/15 |
| RF5-CMAES Bajer 2013instances | 18 (12) | 62 (71) | 80 (73) | 106 (126) | 121 (137) | 121 (120) | 121 (126) | 10/15 |
| STEPif Posik | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 15/15 |
| STEPifeg Posik | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 15/15 |
| STEPrr Posik | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 15/15 |
| Δ fopt f6, 10-D |
1e1 412 |
1e0 623 |
1e-1 826 |
1e-2 1039 |
1e-3 1292 |
1e-5 1841 |
1e-7 2370 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | 3.0 (2) | 12 (13) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 3.8 (1) | 6.5 (2) | 10 (4) | 19 (11) | 48 (44) | 269 (269) | 1232 (1059) | 4/15 |
| R-SHADE-10e2 Tanabe | 3.1 (3) | 12 (10) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.9 (0.4) | 3.5 (0.3) | 4.1 (0.3) | 4.2 (0.3) | 4.2 (0.4) | 4.1 (0.3) | 4.1 (0.3) | 15/15 |
| RL-SHADE-10e2 Tanabe | 11 (15) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 16 (3) | 18 (1) | 17 (1) | 16 (0.9) | 15 (0.6) | 14 (0.5) | 13 (0.4) | 15/15 |
| SOO Derbel | 2254 (2008) | 2.3e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| BrentSTEPif Posik | 705 (920) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| BrentSTEPifeg Posik | 291 (289) | 2075 (2609) | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| BrentSTEPqi Posik | 225 (214) | 467 (564) | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| BrentSTEPrr Posik | 372 (403) | 889 (1161) | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| CMA-CSA Atamna | 1.9 (0.4) | 1.9 (0.3) | 1.9 (0.3) | 1.9 (0.3) | 1.8 (0.2) | 1.7 (0.1) | 1.6 (0.1) | 15/15 |
| CMA-MSR Atamna | 1.5 (0.3) | 1.7 (0.4) | 1.7 (0.3) | 1.8 (0.3) | 1.7 (0.4) | 1.6 (0.3) | 1.6 (0.2) | 15/15 |
| CMA-TPA Atamna | 1.8 (0.4) | 1.7 (0.4) | 1.7 (0.4) | 1.7 (0.4) | 1.6 (0.4) | 1.5 (0.4) | 1.5 (0.4) | 15/15 |
| GP1-CMAES Bajer | 3.5 (3) | 29 (36) | 45 (48) | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP1-CMAES Bajer 2013instances | 3.0 (2) | 9.0 (8) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2516 | 0/15 |
| GP5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2516 | 0/15 |
| IPOPCMAv3p61 Bajer | 1.6 (0.5) | 1.7 (0.3) | 1.7 (0.3) | 1.8 (0.4) | 2.1 (1.0) | ∞ | ∞2502 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 1.7 (0.5) | 1.8 (0.6) | 1.8 (0.5) | 2.0 (0.4) | 2.4 (1) | ∞ | ∞2502 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | 87 (134) | 59 (70) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF1-CMAES Bajer 2013instances | 43 (35) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2518 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2518 | 0/15 |
| STEPif Posik | 199 (192) | 486 (492) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPifeg Posik | 85 (124) | 477 (441) | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| STEPrr Posik | 81 (110) | 170 (186) | 692 (1266) | ∞ | ∞ | ∞ | ∞8e4 | 0/15 |
| Δ fopt f7, 10-D |
1e1 172 |
1e0 1611 |
1e-1 4195 |
1e-2 5099 |
1e-3 5141 |
1e-5 5141 |
1e-7 5389 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 45 (56) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | 4.6 (3) | 9.2 (7) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 7.2 (4) | 7.5 (10) | 17 (17) | 242 (238) | 354 (388) | 354 (480) | 338 (420) | 6/15 |
| R-SHADE-10e2 Tanabe | 3.9 (3) | 4.5 (4) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 3.9 (2) | 1.9 (2) | 1.6 (1) | 1.7 (1) | 1.7 (1) | 1.7 (1) | 1.7 (1) | 15/15 |
| RL-SHADE-10e2 Tanabe | 3.7 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 19 (6) | 5.0 (0.7) | 2.8 (0.3) | 3.0 (0.2) | 3.0 (0.3) | 3.0 (0.3) | 3.0 (0.3) | 15/15 |
| SOO Derbel | 6.6 (4) | 14 (22) | 66 (118) | 496 (401) | 1376 (2465) | 1376 (1671) | 2676 (3758) | 1/15 |
| BrentSTEPif Posik | 879 (1068) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPifeg Posik | 1097 (1095) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPqi Posik | 929 (1125) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPrr Posik | 892 (876) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| CMA-CSA Atamna | 2.2 (1.0) | 1.2 (0.6) | 0.68 (0.6) | 0.78 (0.4) | 0.78 (0.4) | 0.78 (0.4) | 0.76 (0.4) | 15/15 |
| CMA-MSR Atamna | 1.9 (0.7) | 1.6 (1) | 0.88 (0.3) | 0.86 (0.3) | 0.86 (0.3) | 0.86 (0.3) | 0.83 (0.2)↑0 | 15/15 |
| CMA-TPA Atamna | 1.7 (0.5) | 1.2 (1) | 0.85 (0.4) | 0.77 (0.3) | 0.78 (0.3) | 0.78 (0.3) | 0.88 (0.4) | 15/15 |
| GP1-CMAES Bajer | 1.5 (0.8) | 1.3 (1) | 2.2 (1) | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| GP1-CMAES Bajer 2013instances | 1.6 (0.8) | 0.99 (0.5) | 4.4 (5) | 7.4 (11) | 7.3 (7) | 7.3 (10) | ∞2514 | 0/15 |
| GP5-CMAES Bajer | 0.93 (0.6) | 0.65 (0.4) | 8.5 (8) | ∞ | ∞ | ∞ | ∞2526 | 0/15 |
| GP5-CMAES Bajer 2013instances | 1.0 (0.5) | 1.1 (1) | ∞ | ∞ | ∞ | ∞ | ∞2516 | 0/15 |
| IPOPCMAv3p61 Bajer | 2.4 (0.6) | 2.5 (2) | 8.9 (10) | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.6 (0.5) | 1.6 (2) | 4.1 (5) | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 10 (8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 42 (42) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 12 (12) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | 11 (9) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2516 | 0/15 |
| RF1-CMAES Bajer 2013instances | 13 (12) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2516 | 0/15 |
| RF5-CMAES Bajer | 24 (27) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2526 | 0/15 |
| RF5-CMAES Bajer 2013instances | 31 (27) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2526 | 0/15 |
| STEPif Posik | 166 (155) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPifeg Posik | 280 (302) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPrr Posik | 216 (305) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| Δ fopt f8, 10-D |
1e1 326 |
1e0 921 |
1e-1 1114 |
1e-2 1217 |
1e-3 1267 |
1e-5 1315 |
1e-7 1343 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | 6.6 (7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 6.9 (3) | 749 (1121) | 3953 (4937) | 1.2e4 (1e4) | 1.2e4 (2e4) | ∞ | ∞1e6 | 0/15 |
| R-SHADE-10e2 Tanabe | 2.8 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 4.5 (0.9) | 7.9 (2) | 8.4 (2) | 8.5 (2) | 8.7 (1) | 9.3 (1) | 10 (1) | 15/15 |
| RL-SHADE-10e2 Tanabe | 22 (41) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 27 (3) | 21 (1) | 21 (0.9) | 21 (1) | 21 (0.8) | 24 (0.9) | 26 (0.7) | 15/15 |
| SOO Derbel | 33 (40) | 1854 (2410) | 1.3e4 (1e4) | 1.2e4 (1e4) | 1.1e4 (1e4) | 1.1e4 (1e4) | 1.1e4 (1e4) | 1/15 |
| BrentSTEPif Posik | 75 (93) | 729 (606) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPifeg Posik | 22 (24) | 73 (94) | 355 (411) | 527 (767) | 1077 (1319) | ∞ | ∞9e4 | 0/15 |
| BrentSTEPqi Posik | 15 (12) | 75 (102) | 239 (312) | 1084 (1019) | 1045 (1111) | ∞ | ∞9e4 | 0/15 |
| BrentSTEPrr Posik | 21 (22) | 68 (113) | 97 (90) | 1058 (1136) | ∞ | ∞ | ∞9e4 | 0/15 |
| CMA-CSA Atamna | 3.1 (2) | 5.1 (4) | 5.0 (4) | 4.9 (3) | 4.9 (3) | 5.0 (3) | 5.1 (3) | 15/15 |
| CMA-MSR Atamna | 2.7 (2) | 5.4 (4) | 5.2 (4) | 5.1 (3) | 5.1 (3) | 5.2 (3) | 5.4 (3) | 15/15 |
| CMA-TPA Atamna | 3.4 (4) | 5.4 (4) | 5.2 (3) | 5.1 (3) | 5.1 (3) | 5.2 (3) | 5.3 (3) | 15/15 |
| GP1-CMAES Bajer | 4.3 (3) | 41 (39) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP1-CMAES Bajer 2013instances | 3.1 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP5-CMAES Bajer | 110 (127) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| GP5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2516 | 0/15 |
| IPOPCMAv3p61 Bajer | 2.5 (1.0) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.1 (0.7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 23 (33) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | 5.1 (8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF1-CMAES Bajer 2013instances | 5.8 (5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| STEPif Posik | 7.5 (9) | 71 (98) | 199 (202) | 1086 (1115) | ∞ | ∞ | ∞9e4 | 0/15 |
| STEPifeg Posik | 3.6 (4) | 110 (100) | 273 (322) | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| STEPrr Posik | 2.8 (3) | 110 (110) | 354 (452) | 504 (538) | 1019 (845) | ∞ | ∞9e4 | 0/15 |
| Δ fopt f9, 10-D |
1e1 200 |
1e0 648 |
1e-1 857 |
1e-2 993 |
1e-3 1065 |
1e-5 1138 |
1e-7 1185 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | 7.3 (6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 10 (6) | 5126 (6566) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| R-SHADE-10e2 Tanabe | 8.3 (8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 7.1 (1) | 15 (11) | 14 (7) | 13 (7) | 13 (6) | 13 (6) | 14 (6) | 15/15 |
| RL-SHADE-10e2 Tanabe | 74 (70) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 44 (5) | 51 (3) | 42 (3) | 39 (2) | 38 (2) | 39 (2) | 41 (2) | 15/15 |
| SOO Derbel | 9.2 (5) | 1658 (1641) | 1.7e4 (2e4) | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| BrentSTEPif Posik | 247 (256) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| BrentSTEPifeg Posik | 47 (34) | 956 (1415) | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| BrentSTEPqi Posik | 37 (24) | 905 (1028) | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| BrentSTEPrr Posik | 37 (30) | 875 (1174) | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| CMA-CSA Atamna | 3.3 (0.5) | 5.0 (1) | 4.7 (0.9) | 4.4 (0.8) | 4.4 (0.7) | 4.4 (0.8) | 4.5 (0.7) | 15/15 |
| CMA-MSR Atamna | 4.0 (0.9) | 5.3 (3) | 4.9 (3) | 4.6 (2) | 4.5 (2) | 4.6 (2) | 4.8 (2) | 15/15 |
| CMA-TPA Atamna | 3.7 (3) | 4.7 (2) | 4.7 (1) | 4.5 (1) | 4.4 (1.0) | 4.4 (0.9) | 4.4 (0.8) | 15/15 |
| GP1-CMAES Bajer | 4.1 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP1-CMAES Bajer 2013instances | 4.3 (2) | 57 (49) | 44 (39) | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP5-CMAES Bajer | 85 (67) | 55 (48) | 43 (51) | 37 (30) | ∞ | ∞ | ∞2516 | 0/15 |
| GP5-CMAES Bajer 2013instances | 84 (104) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2526 | 0/15 |
| IPOPCMAv3p61 Bajer | 4.0 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 3.5 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | 10 (16) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF1-CMAES Bajer 2013instances | 16 (23) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| STEPif Posik | 37 (64) | 2159 (1962) | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| STEPifeg Posik | 46 (70) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| STEPrr Posik | 22 (66) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| Δ fopt f10, 10-D |
1e1 1835 |
1e0 2172 |
1e-1 2455 |
1e-2 2728 |
1e-3 2802 |
1e-5 4543 |
1e-7 4739 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.9 (3) | 4.0 (3) | 4.7 (3) | 5.0 (3) | 5.5 (3) | 4.1 (2) | 4.7 (2) | 15/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 8.0 (0.6) | 7.9 (0.5) | 8.0 (0.5) | 7.9 (0.5) | 8.6 (0.4) | 6.3 (0.3) | 7.0 (0.3) | 15/15 |
| SOO Derbel | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| BrentSTEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞7e4 | 0/15 |
| BrentSTEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞7e4 | 0/15 |
| BrentSTEPqi Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞8e4 | 0/15 |
| BrentSTEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| CMA-CSA Atamna | 1.5 (0.2) | 1.4 (0.2) | 1.4 (0.2) | 1.3 (0.1) | 1.3 (0.1) | 0.88 (0.1)↑0 | 0.90 (0.1) | 15/15 |
| CMA-MSR Atamna | 1.5 (0.3) | 1.6 (0.1) | 1.5 (0.1) | 1.4 (0.1) | 1.5 (0.1) | 1.00 (0.1) | 1.0 (0.1) | 15/15 |
| CMA-TPA Atamna | 1.5 (0.3) | 1.5 (0.2) | 1.5 (0.1) | 1.4 (0.1) | 1.4 (0.1) | 0.93 (0.1) | 0.94 (0.1)↑1 | 15/15 |
| GP1-CMAES Bajer | 6.6 (8) | 17 (15) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP1-CMAES Bajer 2013instances | 4.0 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP5-CMAES Bajer | 0.59 (0.2)↑1 | 0.71 (0.2)↑1 | 0.77 (0.5) | 0.73 (0.5) | 0.74 (0.4) | 0.52 (0.3) | 3.8 (3) | 0/15 |
| GP5-CMAES Bajer 2013instances | 0.82 (0.7) | 0.97 (0.8) | 1.0 (0.7) | 0.96 (0.6) | 0.96 (0.7) | 0.62 (0.5) | 2.6 (3) | 0/15 |
| IPOPCMAv3p61 Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 20 (19) | 17 (16) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| STEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| STEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| STEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| Δ fopt f11, 10-D |
1e1 266 |
1e0 1041 |
1e-1 2602 |
1e-2 2954 |
1e-3 3338 |
1e-5 4092 |
1e-7 4843 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 3897 (3765) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 5.7 (3) | 3.2 (3) | 2.2 (2) | 2.7 (2) | 3.3 (2) | 4.1 (3) | 4.9 (3) | 15/15 |
| RL-SHADE-10e2 Tanabe | 55 (34) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 40 (8) | 13 (2) | 6.2 (0.6) | 6.3 (0.6) | 6.3 (0.5) | 6.2 (0.5) | 6.2 (0.5) | 15/15 |
| SOO Derbel | 1.2e4 (9529) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| BrentSTEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞8e4 | 0/15 |
| BrentSTEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞7e4 | 0/15 |
| BrentSTEPqi Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞8e4 | 0/15 |
| BrentSTEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| CMA-CSA Atamna | 6.8 (0.6) | 2.0 (0.1) | 0.87 (0.1)↑1 | 0.82 (0.1)↑0 | 0.78 (0.1)↑0 | 0.71 (0.0)↑0 | 0.67 (0.0)↑0 | 15/15 |
| CMA-MSR Atamna | 7.3 (0.9) | 2.3 (0.3) | 1.0 (0.1) | 0.97 (0.1) | 0.92 (0.1)↑1 | 0.84 (0.1)↑0 | 0.80 (0.1)↑0 | 15/15 |
| CMA-TPA Atamna | 6.6 (0.8) | 2.1 (0.3) | 0.93 (0.1) | 0.89 (0.1)↑0 | 0.84 (0.1)↑0 | 0.75 (0.0)↑0 | 0.69 (0.0)↑0 | 15/15 |
| GP1-CMAES Bajer | 46 (73) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP1-CMAES Bajer 2013instances | 27 (16) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP5-CMAES Bajer | 13 (11) | 18 (15) | 14 (11) | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP5-CMAES Bajer 2013instances | 7.9 (5) | 6.7 (7) | 4.6 (7) | 4.1 (3) | 3.7 (4) | 3.0 (4) | 7.7 (5) | 0/15 |
| IPOPCMAv3p61 Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| STEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞6e4 | 0/15 |
| STEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞6e4 | 0/15 |
| STEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| Δ fopt f12, 10-D |
1e1 515 |
1e0 896 |
1e-1 1240 |
1e-2 1390 |
1e-3 1569 |
1e-5 3660 |
1e-7 5154 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | 7.0 (6) | 8.3 (13) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 25 (18) | 172 (191) | 251 (328) | 1378 (1397) | 9232 (1e4) | ∞ | ∞1e6 | 0/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 10 (13) | 14 (18) | 18 (17) | 20 (16) | 21 (14) | 12 (7) | 10 (5) | 15/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 32 (3) | 22 (4) | 21 (4) | 22 (5) | 23 (4) | 12 (2) | 10 (1) | 15/15 |
| SOO Derbel | 12 (5) | 26 (25) | 101 (123) | 210 (296) | 662 (684) | 4066 (3963) | ∞1e6 | 0/15 |
| BrentSTEPif Posik | 353 (443) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPifeg Posik | 262 (296) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| BrentSTEPqi Posik | 42 (49) | 83 (89) | 148 (122) | 634 (778) | ∞ | ∞ | ∞6e4 | 0/15 |
| BrentSTEPrr Posik | 62 (57) | 346 (492) | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| CMA-CSA Atamna | 4.2 (5) | 4.6 (4) | 4.9 (3) | 5.1 (3) | 5.1 (2) | 2.7 (1) | 2.2 (0.8) | 15/15 |
| CMA-MSR Atamna | 4.9 (3) | 5.4 (4) | 5.3 (3) | 5.4 (3) | 5.3 (3) | 2.7 (1) | 2.2 (0.9) | 15/15 |
| CMA-TPA Atamna | 3.6 (3) | 4.2 (3) | 4.6 (2) | 4.7 (2) | 4.6 (2) | 2.4 (1) | 1.9 (0.8) | 15/15 |
| GP1-CMAES Bajer | 3.9 (3) | 4.5 (4) | 5.2 (8) | 6.2 (9) | ∞ | ∞ | ∞2502 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.9 (3) | 3.8 (4) | 6.6 (7) | 26 (30) | 23 (33) | ∞ | ∞2502 | 0/15 |
| GP5-CMAES Bajer | 14 (16) | 19 (16) | 29 (40) | 26 (34) | ∞ | ∞ | ∞2506 | 0/15 |
| GP5-CMAES Bajer 2013instances | 21 (16) | 19 (26) | 30 (33) | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| IPOPCMAv3p61 Bajer | 3.2 (2) | 5.5 (7) | 29 (22) | 26 (37) | ∞ | ∞ | ∞2502 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.8 (2) | 5.5 (5) | 5.1 (6) | 13 (18) | 23 (29) | ∞ | ∞2502 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | 4.0 (3) | 7.5 (8) | 14 (8) | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF1-CMAES Bajer 2013instances | 4.2 (4) | 5.9 (6) | 10 (12) | 13 (13) | ∞ | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| STEPif Posik | 99 (124) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| STEPifeg Posik | 74 (83) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| STEPrr Posik | 20 (22) | 53 (52) | 84 (83) | ∞ | ∞ | ∞ | ∞2e4 | 0/15 |
| Δ fopt f13, 10-D |
1e1 387 |
1e0 596 |
1e-1 797 |
1e-2 1014 |
1e-3 4587 |
1e-5 6208 |
1e-7 7779 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 3.4 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | 9.0 (11) | 25 (26) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 17 (8) | 81 (87) | 2397 (1770) | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| R-SHADE-10e2 Tanabe | 9.2 (11) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 5.2 (1) | 6.2 (2) | 7.0 (2) | 7.5 (2) | 2.4 (0.8) | 3.1 (1) | 5.8 (4) | 15/15 |
| RL-SHADE-10e2 Tanabe | 39 (56) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 27 (2) | 25 (1) | 24 (1) | 23 (1) | 6.0 (0.2) | 5.7 (0.2) | 5.6 (0.1) | 15/15 |
| SOO Derbel | 16 (11) | 195 (346) | 609 (864) | 1475 (1219) | 1004 (876) | ∞ | ∞1e6 | 0/15 |
| BrentSTEPif Posik | 453 (455) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| BrentSTEPifeg Posik | 59 (81) | 216 (174) | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| BrentSTEPqi Posik | 42 (44) | 271 (300) | 1573 (1015) | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| BrentSTEPrr Posik | 49 (74) | 359 (265) | 1569 (1460) | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| CMA-CSA Atamna | 3.2 (2) | 3.3 (2) | 3.6 (2) | 3.7 (3) | 1.0 (0.7) | 1.1 (0.5) | 1.2 (0.5) | 15/15 |
| CMA-MSR Atamna | 2.2 (0.4) | 2.8 (2) | 4.3 (2) | 4.1 (1) | 1.00 (0.3) | 0.98 (0.2) | 1.1 (0.6) | 15/15 |
| CMA-TPA Atamna | 2.5 (2) | 3.7 (2) | 4.4 (2) | 4.3 (2) | 1.1 (0.4) | 1.2 (0.6) | 1.3 (0.4) | 15/15 |
| GP1-CMAES Bajer | 5.5 (5) | 14 (16) | 47 (52) | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.5 (2) | 8.1 (9) | 8.0 (9) | 12 (13) | ∞ | ∞ | ∞2502 | 0/15 |
| GP5-CMAES Bajer | 4.3 (4) | 6.8 (14) | 45 (58) | 35 (36) | 7.8 (7) | ∞ | ∞2516 | 0/15 |
| GP5-CMAES Bajer 2013instances | 1.9 (2) | 8.1 (12) | 10 (9) | 17 (19) | ∞ | ∞ | ∞2506 | 0/15 |
| IPOPCMAv3p61 Bajer | 5.3 (6) | 7.9 (6) | 23 (22) | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 3.1 (3) | 7.0 (4) | 46 (57) | 36 (35) | ∞ | ∞ | ∞2502 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 2.3 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.0 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.0 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | 7.0 (7) | 29 (28) | 46 (40) | 37 (26) | ∞ | ∞ | ∞2502 | 0/15 |
| RF1-CMAES Bajer 2013instances | 7.8 (7) | 29 (35) | 46 (52) | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| STEPif Posik | 21 (23) | 171 (219) | ∞ | ∞ | ∞ | ∞ | ∞8e4 | 0/15 |
| STEPifeg Posik | 23 (41) | 218 (322) | 1591 (1738) | ∞ | ∞ | ∞ | ∞8e4 | 0/15 |
| STEPrr Posik | 27 (41) | 120 (122) | 215 (230) | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| Δ fopt f14, 10-D |
1e1 37 |
1e0 98 |
1e-1 133 |
1e-2 205 |
1e-3 392 |
1e-5 687 |
1e-7 4305 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.8 (0.8) | 4.3 (3) | 13 (18) | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | 1.8 (0.8) | 3.7 (1) | 5.1 (2) | 17 (11) | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 3.2 (2) | 4.9 (0.9) | 6.5 (1) | 10 (2) | 36 (25) | ∞ | ∞1e6 | 0/15 |
| R-SHADE-10e2 Tanabe | 2.8 (2) | 3.7 (1) | 4.3 (0.6) | 7.3 (7) | 19 (28) | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.9 (2) | 6.2 (2) | 8.2 (1) | 8.3 (1) | 6.4 (1) | 8.7 (3) | 3.8 (2) | 15/15 |
| RL-SHADE-10e2 Tanabe | 3.5 (1) | 4.6 (3) | 11 (6) | 35 (24) | 38 (41) | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 10 (8) | 31 (4) | 50 (4) | 48 (3) | 33 (2) | 27 (0.9) | 5.8 (0.3) | 15/15 |
| SOO Derbel | 1.3 (1.0) | 5.3 (2) | 76 (151) | 119 (212) | 510 (873) | ∞ | ∞1e6 | 0/15 |
| BrentSTEPif Posik | 1.4 (0.3) | 22 (7) | 90 (87) | 767 (986) | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPifeg Posik | 1.4 (0.3) | 10 (9) | 14 (11) | 39 (24) | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPqi Posik | 1.3 (0.3) | 5.5 (6) | 7.8 (5) | 27 (20) | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPrr Posik | 1.3 (0.3) | 8.5 (9) | 12 (8) | 30 (16) | 3805 (4402) | ∞ | ∞1e5 | 0/15 |
| CMA-CSA Atamna | 2.7 (2) | 3.2 (0.7) | 4.0 (0.5) | 4.0 (0.6) | 3.3 (0.4) | 3.5 (0.3) | 0.85 (0.0)↑0 | 15/15 |
| CMA-MSR Atamna | 3.1 (1) | 3.4 (0.7) | 4.3 (0.5) | 4.2 (0.4) | 3.4 (0.3) | 3.5 (0.4) | 0.90 (0.1) | 15/15 |
| CMA-TPA Atamna | 3.0 (2) | 3.1 (0.8) | 3.5 (0.5) | 3.5 (0.5) | 3.0 (0.5) | 3.5 (0.3) | 0.92 (0.1) | 15/15 |
| GP1-CMAES Bajer | 1.8 (1) | 2.2 (0.6) | 3.0 (0.8) | 3.6 (0.5) | 4.8 (1) | ∞ | ∞2502 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.0 (1) | 2.2 (1.0) | 3.0 (0.7) | 3.6 (0.8) | 4.4 (1) | ∞ | ∞2502 | 0/15 |
| GP5-CMAES Bajer | 1.7 (0.9) | 1.6 (0.5) | 1.8 (0.5) | 2.2 (0.5) | 20 (19) | ∞ | ∞2514 | 0/15 |
| GP5-CMAES Bajer 2013instances | 1.6 (0.5) | 1.6 (0.4) | 3.3 (1) | 4.0 (6) | 27 (31) | ∞ | ∞2526 | 0/15 |
| IPOPCMAv3p61 Bajer | 2.4 (1) | 3.2 (0.7) | 3.9 (0.8) | 4.2 (0.7) | 3.8 (0.7) | ∞ | ∞2502 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.4 (2) | 3.2 (0.9) | 3.9 (0.7) | 4.2 (0.6) | 3.8 (0.6) | ∞ | ∞2502 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 5.8 (0.8) | 4.1 (3) | 8.9 (6) | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.1 (1) | 4.2 (6) | 55 (59) | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.8 (0.6) | 4.3 (5) | 17 (22) | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | 1.9 (1) | 3.1 (1) | 4.5 (2) | 7.7 (4) | ∞ | ∞ | ∞2502 | 0/15 |
| RF1-CMAES Bajer 2013instances | 2.2 (2) | 3.4 (2) | 5.1 (3) | 8.8 (7) | 94 (110) | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | 2.7 (2) | 40 (49) | 282 (269) | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| RF5-CMAES Bajer 2013instances | 5.8 (4) | 33 (43) | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| STEPif Posik | 1.3 (0.3) | 1.9 (0.9) | 3.7 (3) | 63 (68) | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPifeg Posik | 1.3 (0.3) | 1.6 (0.7) | 2.7 (1) | 19 (16) | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPrr Posik | 1.2 (0.3) | 1.4 (0.6) | 2.1 (1) | 9.3 (7) | 3733 (5040) | ∞ | ∞1e5 | 0/15 |
| Δ fopt f15, 10-D |
1e1 4774 |
1e0 39246 |
1e-1 73643 |
1e-2 74669 |
1e-3 75790 |
1e-5 77814 |
1e-7 79834 |
#succ 12/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.6 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 48 (56) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 4.1 (3) | 175 (223) | 192 (234) | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 9.1 (2) | 33 (39) | 200 (224) | 198 (134) | 195 (162) | ∞ | ∞1e6 | 0/15 |
| SOO Derbel | 2.8 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| BrentSTEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| BrentSTEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| BrentSTEPqi Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| BrentSTEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| CMA-CSA Atamna | 0.95 (0.6) | 1.0 (0.8) | 1.00 (0.7) | 1.0 (0.7) | 1.0 (0.7) | 1.0 (0.7) | 1.0 (0.7) | 15/15 |
| CMA-MSR Atamna | 1.2 (1) | 0.98 (0.5) | 0.92 (0.5) | 0.94 (0.5) | 0.96 (0.5) | 0.99 (0.5) | 1.0 (0.5) | 15/15 |
| CMA-TPA Atamna | 0.82 (0.5) | 1.1 (0.9) | 1.0 (0.5) | 1.0 (0.5) | 1.0 (0.5) | 1.0 (0.5) | 1.0 (0.5) | 15/15 |
| GP1-CMAES Bajer | 1.7 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP1-CMAES Bajer 2013instances | 3.7 (6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2518 | 0/15 |
| GP5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2516 | 0/15 |
| IPOPCMAv3p61 Bajer | 1.8 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.4 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | 2.3 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF1-CMAES Bajer 2013instances | 7.6 (6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| STEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| STEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| STEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| Δ fopt f16, 10-D |
1e1 425 |
1e0 7029 |
1e-1 15779 |
1e-2 45669 |
1e-3 51151 |
1e-5 65798 |
1e-7 71570 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 4.3 (5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | 11 (18) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 7.9 (5) | 199 (255) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| R-SHADE-10e2 Tanabe | 2.5 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 7.5 (5) | 8.7 (10) | 12 (11) | 19 (22) | 39 (46) | 32 (47) | 64 (80) | 3/15 |
| RL-SHADE-10e2 Tanabe | 1.9 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 26 (14) | 28 (31) | 205 (193) | 321 (394) | ∞ | ∞ | ∞1e6 | 0/15 |
| SOO Derbel | 1.1 (0.5) | 0.44 (0.3)↑0 | 0.94 (0.8) | 4.6 (6) | 15 (13) | 71 (107) | 204 (234) | 0/15 |
| BrentSTEPif Posik | 38 (48) | 96 (166) | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| BrentSTEPifeg Posik | 36 (39) | 201 (250) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPqi Posik | 60 (85) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPrr Posik | 18 (39) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| CMA-CSA Atamna | 1.8 (0.6) | 0.82 (0.6) | 1.0 (0.7) | 0.61 (0.6) | 0.59 (0.5) | 0.50 (0.4) | 0.48 (0.4)↑0 | 15/15 |
| CMA-MSR Atamna | 1.5 (0.4) | 1.0 (0.9) | 1.2 (1) | 1.1 (1) | 2.6 (2) | 2.2 (2) | 2.1 (2) | 15/15 |
| CMA-TPA Atamna | 3.1 (3) | 1.0 (0.8) | 1.0 (0.8) | 0.54 (0.4)↑1 | 0.70 (0.6) | 0.58 (0.5) | 0.56 (0.5) | 15/15 |
| GP1-CMAES Bajer | 0.94 (0.3) | 0.71 (0.6) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP1-CMAES Bajer 2013instances | 1.1 (0.4) | 2.4 (2) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP5-CMAES Bajer | 0.36 (0.1)↑0 | 1.1 (1) | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| GP5-CMAES Bajer 2013instances | 0.39 (0.2)↑0 | 1.6 (1) | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| IPOPCMAv3p61 Bajer | 2.0 (0.9) | 0.46 (0.4) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.4 (1) | 0.63 (0.8) | 2.4 (3) | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 1.6 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 5.4 (8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.8 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | 1.4 (0.5) | 1.5 (1) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF1-CMAES Bajer 2013instances | 1.3 (0.8) | 2.4 (3) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | 3.7 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| RF5-CMAES Bajer 2013instances | 3.6 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2528 | 0/15 |
| STEPif Posik | 4.2 (7) | 205 (189) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPifeg Posik | 5.9 (12) | 206 (225) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPrr Posik | 4.5 (7) | 212 (239) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| Δ fopt f17, 10-D |
1e1 26 |
1e0 429 |
1e-1 2203 |
1e-2 6329 |
1e-3 9851 |
1e-5 20190 |
1e-7 26503 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.6 (1.0) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | 1.6 (1) | 11 (9) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 2.4 (2) | 5.0 (3) | 13 (18) | 35 (38) | ∞ | ∞ | ∞1e6 | 0/15 |
| R-SHADE-10e2 Tanabe | 2.9 (3) | 35 (34) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.0 (2) | 2.3 (0.6) | 1.2 (0.3) | 1.2 (0.4) | 2.8 (3) | 7.9 (7) | 19 (32) | 12/15 |
| RL-SHADE-10e2 Tanabe | 2.5 (2) | 11 (12) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 3.3 (5) | 16 (3) | 6.9 (0.6) | 3.5 (0.2) | 2.9 (0.1) | 2.9 (0.0) | 3.1 (4) | 15/15 |
| SOO Derbel | 0.70 (1) | 3.4 (2) | 5.3 (3) | 9.2 (6) | 63 (97) | 356 (333) | ∞1e6 | 0/15 |
| BrentSTEPif Posik | 1.4 (1) | 3320 (4767) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPifeg Posik | 1.4 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPqi Posik | 1.4 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPrr Posik | 1.4 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| CMA-CSA Atamna | 3.5 (2) | 2.1 (0.7) | 1.0 (2) | 0.72 (0.6) | 0.81 (0.7) | 0.86 (0.3) | 1.1 (0.4) | 15/15 |
| CMA-MSR Atamna | 2.1 (2) | 3.1 (5) | 1.3 (1) | 1.4 (1) | 1.2 (0.6) | 1.0 (0.5) | 1.4 (0.6) | 15/15 |
| CMA-TPA Atamna | 2.4 (2) | 0.93 (0.5) | 1.3 (1.0) | 1.2 (1) | 1.1 (0.7) | 0.99 (0.8) | 1.3 (0.6) | 15/15 |
| GP1-CMAES Bajer | 2.0 (2) | 1.6 (1) | 2.8 (4) | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP1-CMAES Bajer 2013instances | 1.7 (0.9) | 0.84 (0.3) | 2.6 (3) | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP5-CMAES Bajer | 1.3 (0.8) | 3.2 (4) | 16 (19) | ∞ | ∞ | ∞ | ∞2516 | 0/15 |
| GP5-CMAES Bajer 2013instances | 1.7 (1) | 6.7 (6) | ∞ | ∞ | ∞ | ∞ | ∞2526 | 0/15 |
| IPOPCMAv3p61 Bajer | 2.7 (2) | 1.1 (0.4) | 0.66 (0.6) | 0.85 (0.5) | 3.8 (4) | ∞ | ∞2502 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.4 (2) | 1.2 (0.4) | 0.64 (0.6) | 0.60 (0.4) | 1.8 (3) | ∞ | ∞2502 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 3.6 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.7 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.8 (0.9) | 17 (20) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | 2.3 (2) | 6.1 (4) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF1-CMAES Bajer 2013instances | 1.8 (2) | 13 (16) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | 1.7 (1) | 21 (22) | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| RF5-CMAES Bajer 2013instances | 1.6 (1) | 21 (28) | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| STEPif Posik | 1.3 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPifeg Posik | 1.3 (1) | 1668 (1902) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPrr Posik | 1.3 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| Δ fopt f18, 10-D |
1e1 238 |
1e0 836 |
1e-1 7012 |
1e-2 15928 |
1e-3 27536 |
1e-5 37234 |
1e-7 42708 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 3.8 (5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | 2.9 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 2.8 (1) | 24 (30) | 1016 (1102) | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| R-SHADE-10e2 Tanabe | 3.5 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 1.9 (0.8) | 2.2 (0.4) | 0.68 (0.2)↑1 | 3.6 (5) | 13 (20) | 401 (611) | ∞1e6 | 0/15 |
| RL-SHADE-10e2 Tanabe | 3.5 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 11 (2) | 14 (2) | 2.7 (0.2) | 1.7 (0.1) | 1.3 (0.1) | 1.7 (0.1) | 2.4 (2) | 15/15 |
| SOO Derbel | 1.8 (1.0) | 4.5 (2) | 4.6 (5) | 22 (31) | 114 (126) | ∞ | ∞1e6 | 0/15 |
| BrentSTEPif Posik | 1179 (1405) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPifeg Posik | 644 (844) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPqi Posik | 808 (992) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| BrentSTEPrr Posik | 607 (615) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| CMA-CSA Atamna | 1.3 (0.4) | 1.0 (0.5) | 0.64 (0.5) | 0.79 (0.5) | 0.70 (0.5) | 0.78 (0.3) | 0.90 (0.3) | 15/15 |
| CMA-MSR Atamna | 1.1 (0.4) | 2.1 (2) | 1.2 (0.9) | 0.77 (0.7) | 0.74 (0.4) | 0.76 (0.3)↑1 | 0.81 (0.5) | 15/15 |
| CMA-TPA Atamna | 1.1 (0.5) | 1.9 (3) | 0.73 (0.5) | 0.82 (0.4) | 0.66 (0.2)↑1 | 0.66 (0.3) | 0.71 (0.3) | 15/15 |
| GP1-CMAES Bajer | 1.0 (0.8) | 2.0 (3) | 1.6 (2) | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP1-CMAES Bajer 2013instances | 0.97 (0.4) | 2.3 (2) | 5.2 (5) | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP5-CMAES Bajer | 1.8 (1) | 13 (9) | ∞ | ∞ | ∞ | ∞ | ∞2516 | 0/15 |
| GP5-CMAES Bajer 2013instances | 1.2 (2) | 13 (13) | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| IPOPCMAv3p61 Bajer | 1.3 (0.5) | 1.8 (2) | 0.73 (0.8) | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 1.3 (0.4) | 1.7 (2) | 1.2 (0.9) | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 3.4 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 5.6 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 15 (17) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | 1.2 (0.6) | 20 (27) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF1-CMAES Bajer 2013instances | 1.1 (0.5) | 20 (19) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | 8.4 (7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| RF5-CMAES Bajer 2013instances | 7.5 (9) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| STEPif Posik | 399 (522) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPifeg Posik | 299 (556) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPrr Posik | 324 (469) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| Δ fopt f19, 10-D |
1e1 1 |
1e0 1 |
1e-1 10609 |
1e-2 9.8e5 |
1e-3 1.4e6 |
1e-5 1.4e6 |
1e-7 1.4e6 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 53 (27) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | 81 (26) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 123 (61) | 4.8e6 (4e6) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| R-SHADE-10e2 Tanabe | 133 (66) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 108 (54) | 3.8e4 (4e4) | 115 (137) | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| RL-SHADE-10e2 Tanabe | 139 (66) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 404 (224) | 7.3e4 (2e4) | 188 (172) | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| SOO Derbel | 1 (0)★3 | 1 (0)★4 | 0.30 (0.1)↑0 | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| BrentSTEPif Posik | 35 (4) | 6.6e5 (8e5) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPifeg Posik | 35 (4) | 1.4e6 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPqi Posik | 35 (4) | 4.5e5 (7e5) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPrr Posik | 35 (4) | 3.3e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| CMA-CSA Atamna | 85 (50) | 1.1e4 (1e4) | 12 (7) | 0.42 (0.2)↑0 | 0.33 (0.2)↑0 | 0.33 (0.2)↑0 | 0.33 (0.2)↑0 | 15/15 |
| CMA-MSR Atamna | 87 (36) | 5820 (1e4) | 21 (21) | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| CMA-TPA Atamna | 73 (50) | 1.2e4 (2e4) | 12 (8) | 0.49 (0.2)↑0 | 0.51 (0.4) | 0.51 (0.7) | 0.51 (0.5) | 13/15 |
| GP1-CMAES Bajer | 68 (31) | 3.7e4 (6e4) | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| GP1-CMAES Bajer 2013instances | 59 (20) | 1.8e4 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| GP5-CMAES Bajer | 45 (8) | 3.6e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞2548 | 0/15 |
| GP5-CMAES Bajer 2013instances | 42 (13) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2528 | 0/15 |
| IPOPCMAv3p61 Bajer | 105 (74) | 3.8e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 92 (41) | 3.8e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 182 (86) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 61 (20) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 67 (23) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | 77 (36) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| RF1-CMAES Bajer 2013instances | 69 (50) | 6979 (7632) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | 67 (36) | 3.6e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞2516 | 0/15 |
| RF5-CMAES Bajer 2013instances | 64 (38) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2516 | 0/15 |
| STEPif Posik | 44 (14) | 1.1e5 (9e4) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPifeg Posik | 45 (14) | 1.2e5 (8e4) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPrr Posik | 45 (14) | 1.1e5 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| Δ fopt f20, 10-D |
1e1 32 |
1e0 15426 |
1e-1 5.5e5 |
1e-2 5.7e5 |
1e-3 5.7e5 |
1e-5 5.8e5 |
1e-7 5.9e5 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 3.7 (0.9) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | 4.9 (2) | 0.96 (1) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 8.7 (2) | 0.21 (0.1)↑0 | 0.46 (0.4)↑1 | 0.45 (0.4)↑1 | 0.44 (0.4)↑1 | 0.44 (0.4)↑1 | 0.43 (0.4)↑1 | 15/15 |
| R-SHADE-10e2 Tanabe | 6.3 (2) | 0.96 (0.9) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 8.0 (2) | 0.71 (0.3)↑1 | 3.4 (4) | 3.3 (4) | 3.3 (5) | 4.0 (6) | 4.0 (6) | 5/15 |
| RL-SHADE-10e2 Tanabe | 7.3 (2) | 0.22 (0.2) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 44 (15) | 2.0 (0.3) | 0.37 (0.2)↑1 | 0.38 (0.2)↑1 | 0.38 (0.2)↑1 | 0.38 (0.2)↑1 | 0.38 (0.3)↑1 | 15/15 |
| SOO Derbel | 75 (0.0) | 2.3 (3e-5) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| BrentSTEPif Posik | 2.0 (0.8) | 3.5 (6) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPifeg Posik | 1.9 (0.7) | 3.2 (3) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPqi Posik | 1.8 (0.6) | 3.4 (4) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPrr Posik | 1.9 (0.8) | 2.8 (3) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| CMA-CSA Atamna | 5.3 (0.8) | 1.8 (1) | 0.39 (0.2)↑0 | 0.39 (0.2)↑0 | 0.39 (0.2)↑0 | 0.40 (0.2)↑0 | 0.40 (0.2)↑0 | 15/15 |
| CMA-MSR Atamna | 5.9 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| CMA-TPA Atamna | 5.1 (2) | 18 (25) | 27 (26) | 26 (29) | 26 (22) | 26 (26) | 25 (23) | 1/15 |
| GP1-CMAES Bajer | 3.7 (0.9) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP1-CMAES Bajer 2013instances | 4.0 (0.9) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP5-CMAES Bajer | 2.6 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| GP5-CMAES Bajer 2013instances | 2.3 (0.5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2526 | 0/15 |
| IPOPCMAv3p61 Bajer | 5.9 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 6.5 (2) | 2.3 (2) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 7.7 (0.7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.9 (0.9) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 3.4 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | 5.2 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF1-CMAES Bajer 2013instances | 5.5 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | 15 (31) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| RF5-CMAES Bajer 2013instances | 21 (30) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| STEPif Posik | 2.0 (0.8) | 0.87 (1) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPifeg Posik | 2.0 (0.9) | 1.4 (2) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPrr Posik | 1.9 (0.6) | 1.9 (3) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| Δ fopt f21, 10-D |
1e1 130 |
1e0 2236 |
1e-1 4392 |
1e-2 4487 |
1e-3 4618 |
1e-5 5074 |
1e-7 11329 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 2.5 (4) | 3.3 (4) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | 3.6 (4) | 1.2 (1.0) | 3.3 (3) | 3.3 (2) | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 5.1 (3) | 61 (62) | 34 (31) | 35 (31) | 38 (36) | 56 (99) | 28 (71) | 13/15 |
| R-SHADE-10e2 Tanabe | 3.3 (3) | 6.5 (8) | 3.3 (2) | 3.3 (5) | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 4.6 (3) | 10 (19) | 10 (20) | 10 (20) | 10 (19) | 9.1 (18) | 4.1 (8) | 15/15 |
| RL-SHADE-10e2 Tanabe | 2.8 (2) | 1.2 (2) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 22 (11) | 57 (135) | 72 (114) | 71 (112) | 69 (130) | 64 (99) | 29 (44) | 13/15 |
| SOO Derbel | 1.9 (1) | 6.7 (7) | 8.5 (16) | 22 (35) | 24 (34) | 47 (58) | 52 (61) | 9/15 |
| BrentSTEPif Posik | 332 (580) | 301 (324) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPifeg Posik | 172 (385) | 308 (251) | 337 (285) | 330 (418) | 320 (358) | 293 (350) | ∞1e5 | 0/15 |
| BrentSTEPqi Posik | 151 (389) | 188 (268) | 331 (439) | 325 (301) | 316 (325) | 292 (187) | ∞1e5 | 0/15 |
| BrentSTEPrr Posik | 159 (390) | 196 (190) | 161 (205) | 158 (165) | 154 (198) | 282 (385) | 127 (104) | 1/15 |
| CMA-CSA Atamna | 7.7 (11) | 166 (244) | 184 (152) | 181 (185) | 176 (221) | 161 (268) | 73 (100) | 7/15 |
| CMA-MSR Atamna | 10 (13) | 331 (645) | 219 (193) | 215 (281) | 209 (269) | 190 (169) | 85 (110) | 7/15 |
| CMA-TPA Atamna | 4.8 (9) | 132 (261) | 118 (166) | 116 (165) | 113 (160) | 103 (146) | 46 (77) | 8/15 |
| GP1-CMAES Bajer | 8.5 (15) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.4 (0.5) | 2.4 (3) | 8.1 (6) | 7.9 (7) | 7.7 (6) | 7.1 (11) | 3.2 (2) | 1/15 |
| GP5-CMAES Bajer | 3.5 (4) | 5.0 (5) | 4.1 (3) | 4.1 (3) | 8.2 (10) | ∞ | ∞2526 | 0/15 |
| GP5-CMAES Bajer 2013instances | 3.7 (5) | 4.8 (5) | 3.9 (5) | 3.8 (3) | 3.9 (5) | ∞ | ∞2506 | 0/15 |
| IPOPCMAv3p61 Bajer | 7.0 (10) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 10 (11) | 4.7 (8) | 8.1 (7) | 8.0 (9) | 7.8 (9) | 7.1 (7) | 3.2 (3) | 1/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 2.7 (2) | 3.3 (4) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.3 (1) | 3.2 (3) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.2 (2) | 1.00 (2) | 1.7 (2) | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | 15 (21) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF1-CMAES Bajer 2013instances | 9.1 (19) | 5.0 (6) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | 16 (18) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| RF5-CMAES Bajer 2013instances | 13 (20) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| STEPif Posik | 111 (243) | 304 (291) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPifeg Posik | 79 (145) | 187 (192) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPrr Posik | 78 (136) | 141 (131) | 103 (105) | 101 (111) | 99 (89) | 91 (76) | 63 (41) | 0/15 |
| Δ fopt f22, 10-D |
1e1 98 |
1e0 2839 |
1e-1 6353 |
1e-2 6620 |
1e-3 6798 |
1e-5 8296 |
1e-7 10351 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 2.4 (2) | 1.3 (2) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | 5.3 (4) | 1.6 (2) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 19 (6) | 19 (20) | 40 (45) | 79 (86) | 83 (80) | 239 (291) | 421 (413) | 2/15 |
| R-SHADE-10e2 Tanabe | 4.4 (3) | 0.95 (1) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 5.7 (3) | 10 (16) | 36 (28) | 35 (27) | 34 (26) | 28 (22) | 22 (17) | 14/15 |
| RL-SHADE-10e2 Tanabe | 5.8 (6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 28 (11) | 85 (176) | 205 (236) | 197 (249) | 192 (161) | 158 (181) | 127 (188) | 7/15 |
| SOO Derbel | 3.2 (3) | 11 (24) | 33 (25) | 85 (96) | 150 (184) | 508 (546) | 650 (903) | 0/15 |
| BrentSTEPif Posik | 958 (1405) | 151 (159) | 222 (287) | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPifeg Posik | 645 (894) | 77 (105) | 49 (82) | 105 (129) | 210 (236) | ∞ | ∞1e5 | 0/15 |
| BrentSTEPqi Posik | 524 (926) | 76 (71) | 107 (73) | 213 (155) | 209 (283) | ∞ | ∞1e5 | 0/15 |
| BrentSTEPrr Posik | 643 (1012) | 66 (91) | 105 (143) | 213 (192) | 209 (176) | ∞ | ∞1e5 | 0/15 |
| CMA-CSA Atamna | 19 (32) | 327 (570) | 1309 (1962) | 1257 (1522) | 1224 (1233) | 1003 (1270) | 804 (617) | 1/15 |
| CMA-MSR Atamna | 45 (81) | 583 (585) | 1826 (1696) | 1753 (2271) | 1707 (2517) | 1399 (1747) | 1121 (1142) | 1/15 |
| CMA-TPA Atamna | 454 (14) | 307 (570) | 1269 (1203) | 1218 (1838) | 1186 (1457) | 972 (1738) | 779 (858) | 1/15 |
| GP1-CMAES Bajer | 14 (26) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP1-CMAES Bajer 2013instances | 3.7 (3) | 1.9 (3) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP5-CMAES Bajer | 8.0 (13) | 1.6 (2) | 2.7 (3) | 2.7 (3) | 5.5 (5) | ∞ | ∞2516 | 0/15 |
| GP5-CMAES Bajer 2013instances | 12 (15) | 1.6 (2) | 2.9 (3) | 5.7 (7) | 5.5 (5) | ∞ | ∞2516 | 0/15 |
| IPOPCMAv3p61 Bajer | 9.1 (13) | 12 (12) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 16 (13) | 13 (22) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 4.2 (3) | 1.3 (2) | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 3.0 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 3.4 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | 17 (26) | 3.7 (4) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF1-CMAES Bajer 2013instances | 13 (14) | 5.9 (8) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | 59 (83) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| RF5-CMAES Bajer 2013instances | 18 (20) | 5.9 (8) | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| STEPif Posik | 632 (1370) | 98 (63) | 104 (145) | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPifeg Posik | 308 (510) | 38 (63) | 50 (57) | 215 (144) | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPrr Posik | 553 (860) | 60 (63) | 38 (55) | 212 (298) | ∞ | ∞ | ∞1e5 | 0/15 |
| Δ fopt f23, 10-D |
1e1 3.0 |
1e0 915 |
1e-1 16425 |
1e-2 1.8e5 |
1e-3 2.0e5 |
1e-5 2.1e5 |
1e-7 2.1e5 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.5 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | 1.6 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | 2.0 (2) | 204 (220) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| R-SHADE-10e2 Tanabe | 1.4 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.8 (3) | 21 (13) | 8.8 (10) | 18 (26) | 34 (48) | 33 (36) | 33 (41) | 2/15 |
| RL-SHADE-10e2 Tanabe | 1.3 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 1.5 (2) | 68 (30) | 27 (34) | 24 (32) | 22 (21) | 21 (25) | 21 (25) | 3/15 |
| SOO Derbel | 1.7 (2) | 2.3 (1) | 2.0 (2) | 14 (13) | 72 (63) | ∞ | ∞1e6 | 0/15 |
| BrentSTEPif Posik | 2.3 (2) | 12 (20) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPifeg Posik | 2.3 (2) | 13 (15) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPqi Posik | 2.3 (2) | 13 (14) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPrr Posik | 2.3 (2) | 11 (19) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| CMA-CSA Atamna | 2.8 (4) | 23 (19) | 7.0 (9) | 7.5 (8) | 8.7 (9) | 8.5 (8) | 8.3 (11) | 6/15 |
| CMA-MSR Atamna | 4.4 (7) | 2.9 (4) | 1.4 (0.8) | 0.43 (0.4)↑1 | 0.41 (0.4)↑1 | 0.44 (0.4)↑1 | 0.47 (0.4)↑1 | 15/15 |
| CMA-TPA Atamna | 2.3 (2) | 12 (26) | 4.9 (5) | 3.8 (5) | 3.5 (5) | 3.4 (6) | 3.4 (2) | 10/15 |
| GP1-CMAES Bajer | 1.8 (2) | 2.7 (4) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.0 (2) | 2.7 (2) | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| GP5-CMAES Bajer | 1.9 (2) | 0.79 (1) | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| GP5-CMAES Bajer 2013instances | 1.7 (2) | 0.92 (1) | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| IPOPCMAv3p61 Bajer | 2.1 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.1 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 1.5 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.9 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.2 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | 1.7 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2506 | 0/15 |
| RF1-CMAES Bajer 2013instances | 2.3 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2506 | 0/15 |
| RF5-CMAES Bajer | 2.3 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2548 | 0/15 |
| RF5-CMAES Bajer 2013instances | 1.9 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2548 | 0/15 |
| STEPif Posik | 2.3 (2) | 6.4 (8) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPifeg Posik | 2.3 (2) | 4.6 (6) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPrr Posik | 2.3 (2) | 5.7 (6) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| Δ fopt f24, 10-D |
1e1 98761 |
1e0 1.0e6 |
1e-1 7.5e7 |
1e-2 7.5e7 |
1e-3 7.5e7 |
1e-5 7.5e7 |
1e-7 7.5e7 |
#succ 1/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e5 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-SHADE-10e5 Tanabe | 4.6 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 24 (21) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| SOO Derbel | 3.1 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| BrentSTEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| BrentSTEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| BrentSTEPqi Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| BrentSTEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞8e4 | 0/15 |
| CMA-CSA Atamna | 20 (25) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| CMA-MSR Atamna | 42 (57) | 6.4 (6) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| CMA-TPA Atamna | 72 (83) | 6.8 (10) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| GP1-CMAES Bajer | 0.37 (0.4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| GP1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| GP5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2536 | 0/15 |
| GP5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2528 | 0/15 |
| IPOPCMAv3p61 Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2504 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞500 | 0/15 |
| RF1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2502 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2514 | 0/15 |
| STEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| STEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| STEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
Previous dimension | Dimension = 20 | Next dimension
| Δ fopt f1, 20-D |
1e1 43 |
1e0 43 |
1e-1 43 |
1e-2 43 |
1e-3 43 |
1e-5 43 |
1e-7 43 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 4.6 (2) | 63 (72) | 110 (110) | 112 (142) | 352 (455) | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | 7.0 (2) | 19 (10) | 39 (31) | 164 (138) | 344 (209) | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 21 (3) | 44 (3) | 68 (3) | 91 (4) | 113 (7) | 160 (6) | 206 (4) | 15/15 |
| R-SHADE-10e2 Tanabe | 10 (1) | 19 (2) | 31 (6) | 57 (37) | 346 (452) | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 27 (5) | 59 (9) | 89 (11) | 119 (15) | 149 (18) | 208 (19) | 264 (18) | 15/15 |
| RL-SHADE-10e2 Tanabe | 15 (14) | 88 (53) | 691 (477) | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 119 (15) | 272 (18) | 395 (16) | 503 (15) | 599 (17) | 782 (16) | 960 (10) | 15/15 |
| SOO Derbel | 15 (7) | 56 (7) | 111 (17) | 189 (17) | 279 (11) | 533 (22) | 847 (24) | 15/15 |
| BrentSTEPif Posik | 1.9 (0.1) | 2.3 (0.1) | 2.5 (0.2) | 2.5 (0.2) | 2.5 (0.2) | 2.5 (0.2) | 2.5 (0.2) | 15/15 |
| BrentSTEPifeg Posik | 1.9 (0.1) | 2.3 (0.1) | 2.5 (0.2) | 2.5 (0.2) | 2.5 (0.2) | 2.5 (0.2) | 2.5 (0.2) | 15/15 |
| BrentSTEPqi Posik | 1.9 (0.1) | 2.3 (0.1) | 2.5 (0.2) | 2.5 (0.2) | 2.5 (0.2) | 2.5 (0.2) | 2.5 (0.2) | 15/15 |
| BrentSTEPrr Posik | 1.9 (0.1) | 2.3 (0.1) | 2.5 (0.2) | 2.5 (0.2) | 2.5 (0.2) | 2.5 (0.2) | 2.5 (0.2) | 15/15 |
| CMA-CSA Atamna | 7.7 (1) | 14 (1) | 20 (2) | 26 (2) | 32 (3) | 45 (4) | 57 (4) | 15/15 |
| CMA-MSR Atamna | 9.2 (1) | 16 (0.9) | 23 (2) | 30 (2) | 38 (3) | 53 (3) | 68 (4) | 15/15 |
| CMA-TPA Atamna | 6.4 (1) | 11 (2) | 15 (1) | 19 (2) | 24 (2) | 32 (2) | 41 (3) | 15/15 |
| GP1-CMAES Bajer | 4.9 (0.5) | 8.3 (0.8) | 13 (2) | 16 (2) | 20 (2) | 31 (3) | 47 (4) | 15/15 |
| GP1-CMAES Bajer 2013instances | 5.1 (1.0) | 9.2 (2) | 14 (2) | 17 (3) | 21 (3) | 32 (4) | 48 (5) | 15/15 |
| GP5-CMAES Bajer | 2.7 (0.3) | 3.9 (0.3) | 5.4 (0.8) | 6.9 (0.6) | 8.2 (0.8) | 68 (47) | 393 (409) | 0/15 |
| GP5-CMAES Bajer 2013instances | 2.8 (0.2) | 3.9 (0.4) | 5.2 (0.5) | 6.7 (0.6) | 7.9 (0.6) | 54 (44) | 567 (543) | 0/15 |
| IPOPCMAv3p61 Bajer | 8.5 (2) | 15 (2) | 21 (3) | 27 (2) | 33 (3) | 46 (6) | 59 (5) | 15/15 |
| IPOPCMAv3p61 Bajer 2013instances | 8.6 (1) | 15 (2) | 21 (2) | 27 (2) | 34 (2) | 46 (3) | 58 (2) | 15/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 10 (0.2) | 11 (0.7) | 14 (1) | 15 (2) | 17 (2) | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 4.5 (0.9) | 38 (27) | 78 (112) | 343 (326) | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 4.2 (0.5) | 20 (23) | 26 (17) | 63 (43) | 346 (285) | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | 7.0 (1) | 13 (3) | 19 (3) | 25 (5) | 31 (5) | 46 (8) | 61 (9) | 15/15 |
| RF1-CMAES Bajer 2013instances | 6.9 (1) | 12 (1) | 18 (3) | 24 (4) | 30 (3) | 43 (5) | 61 (11) | 15/15 |
| RF5-CMAES Bajer | 7.5 (3) | 119 (180) | 496 (699) | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer 2013instances | 6.8 (3) | 69 (63) | 1669 (1310) | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| STEPif Posik | 2.1 (0.1) | 2.8 (0.1) | 4.3 (0.6) | 6.0 (0.7) | 7.4 (1) | 8.8 (0.6) | 10 (0.6) | 15/15 |
| STEPifeg Posik | 2.1 (0.1) | 2.8 (0.1) | 4.1 (0.3) | 5.6 (0.5) | 6.7 (0.8) | 8.7 (1.0) | 10 (0.7) | 15/15 |
| STEPrr Posik | 2.1 (0.1) | 2.8 (0.1) | 3.6 (0.1) | 4.4 (0.2) | 5.1 (0.1) | 6.7 (0.1) | 8.3 (0.1) | 15/15 |
| Δ fopt f2, 20-D |
1e1 385 |
1e0 386 |
1e-1 387 |
1e-2 388 |
1e-3 390 |
1e-5 391 |
1e-7 393 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | 77 (69) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 11 (0.6) | 13 (0.7) | 16 (0.7) | 19 (0.9) | 21 (0.9) | 26 (1) | 31 (0.9) | 15/15 |
| R-SHADE-10e2 Tanabe | 38 (38) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 18 (2) | 21 (2) | 25 (3) | 28 (3) | 31 (3) | 37 (3) | 43 (3) | 15/15 |
| RL-SHADE-10e2 Tanabe | 76 (74) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 74 (2) | 84 (2) | 94 (2) | 104 (2) | 114 (2) | 132 (2) | 150 (2) | 15/15 |
| SOO Derbel | 2646 (2606) | 3896 (2610) | 6477 (8600) | 6476 (9033) | 8380 (1e4) | 1.1e4 (2e4) | 3.5e4 (5e4) | 2/15 |
| BrentSTEPif Posik | 0.70 (0.1)↑0 | 0.79 (0.1)↑0 | 0.80 (0.1)↑0 | 0.90 (0.1)↑1 | 0.94 (0.1) | 1.00 (0.1) | 1.1 (0.1) | 15/15 |
| BrentSTEPifeg Posik | 0.66 (0.1)↑0 | 0.74 (0.1)↑0 | 0.80 (0.1)↑0 | 0.90 (0.0)↑1 | 0.94 (0.1) | 1.0 (0.1) | 1.1 (0.1) | 15/15 |
| BrentSTEPqi Posik | 0.40 (0.0)★4↑0 | 0.44 (0.0)★4↑0 | 0.47 (0.0)★4↑0 | 0.52 (0.0)★4↑0 | 0.57 (0.1)★4↑0 | 0.69 (0.1)★4↑0 | 0.86 (0.1)★2 | 15/15 |
| BrentSTEPrr Posik | 0.59 (0.1)↑0 | 0.65 (0.1)↑0 | 0.69 (0.1)↑0 | 0.79 (0.1)↑0 | 0.87 (0.1)↑0 | 1.0 (0.1) | 1.1 (0.1) | 15/15 |
| CMA-CSA Atamna | 23 (2) | 27 (2) | 29 (2) | 30 (1) | 31 (2) | 32 (1) | 34 (2) | 15/15 |
| CMA-MSR Atamna | 27 (3) | 32 (4) | 35 (2) | 36 (2) | 37 (1) | 38 (1) | 39 (2) | 15/15 |
| CMA-TPA Atamna | 25 (3) | 30 (3) | 33 (3) | 35 (2) | 36 (2) | 37 (1) | 37 (2) | 15/15 |
| GP1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP5-CMAES Bajer | 193 (299) | 195 (198) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP5-CMAES Bajer 2013instances | 46 (42) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| IPOPCMAv3p61 Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| STEPif Posik | 0.96 (0.2) | 1.1 (0.1) | 1.2 (0.2) | 1.2 (0.1) | 1.3 (0.3) | 1.4 (0.3) | 1.6 (0.2) | 15/15 |
| STEPifeg Posik | 0.83 (0.1)↑0 | 1.0 (0.2) | 1.2 (0.2) | 1.2 (0.2) | 1.4 (0.3) | 1.4 (0.2) | 1.6 (0.2) | 15/15 |
| STEPrr Posik | 0.69 (0.1)↑0 | 0.78 (0.0)↑0 | 0.88 (0.1)↑1 | 0.95 (0.1) | 1.1 (0.1) | 1.2 (0.1) | 1.4 (0.1) | 15/15 |
| Δ fopt f3, 20-D |
1e1 5066 |
1e0 7626 |
1e-1 7635 |
1e-2 7637 |
1e-3 7643 |
1e-5 7646 |
1e-7 7651 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 2.4 (0.5) | 26 (32) | 194 (197) | 194 (203) | 194 (183) | 194 (236) | 194 (200) | 11/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 7.7 (0.4) | 7.1 (0.3) | 7.7 (0.2) | 7.9 (0.2) | 8.1 (0.2) | 8.4 (0.2) | 8.7 (0.2) | 15/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 27 (2) | 23 (0.7) | 24 (0.5) | 25 (0.5) | 25 (0.5) | 26 (0.5) | 26 (0.5) | 15/15 |
| SOO Derbel | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | 0.14 (0.0)↑0 | 0.18 (0.0)↑0 | 0.22 (0.1)↑0 | 0.22 (0.1)↑0 | 0.22 (0.1)↑0 | 0.22 (0.1)↑0 | 0.22 (0.1)↑0 | 15/15 |
| BrentSTEPifeg Posik | 0.14 (0.0)↑0 | 0.18 (0.1)↑0 | 0.22 (0.1)↑0 | 0.22 (0.1)↑0 | 0.22 (0.1)↑0 | 0.22 (0.1)↑0 | 0.22 (0.1)↑0 | 15/15 |
| BrentSTEPqi Posik | 0.14 (0.0)↑0 | 0.16 (0.0)↑0 | 0.20 (0.1)↑0 | 0.20 (0.1)↑0 | 0.20 (0.1)↑0 | 0.20 (0.1)↑0 | 0.20 (0.1)↑0 | 15/15 |
| BrentSTEPrr Posik | 0.14 (0.0)↑0 | 0.16 (0.0)↑0 | 0.19 (0.0)↑0 | 0.20 (0.0)↑0 | 0.20 (0.0)↑0 | 0.21 (0.0)↑0 | 0.21 (0.0)↑0 | 15/15 |
| CMA-CSA Atamna | 10 (7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| CMA-MSR Atamna | 6.4 (2) | 38 (20) | 70 (70) | 73 (72) | 76 (75) | 81 (80) | 86 (86) | 15/15 |
| CMA-TPA Atamna | 8.8 (7) | 1756 (1565) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| GP1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5022 | 0/15 |
| GP5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5034 | 0/15 |
| IPOPCMAv3p61 Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| STEPif Posik | 0.16 (0.0)↑0 | 0.18 (0.0)↑0 | 0.23 (0.0)↑0 | 0.24 (0.0)↑0 | 0.24 (0.0)↑0 | 0.24 (0.0)↑0 | 0.24 (0.0)↑0 | 15/15 |
| STEPifeg Posik | 0.15 (0.0)↑0 | 0.17 (0.0)↑0 | 0.23 (0.1)↑0 | 0.23 (0.0)↑0 | 0.23 (0.0)↑0 | 0.24 (0.0)↑0 | 0.24 (0.0)↑0 | 15/15 |
| STEPrr Posik | 0.12 (0.0)↑0 | 0.15 (0.0)↑0 | 0.19 (0.0)↑0 | 0.20 (0.0)↑0 | 0.21 (0.0)↑0 | 0.22 (0.0)↑0 | 0.23 (0.0)↑0 | 15/15 |
| Δ fopt f4, 20-D |
1e1 4722 |
1e0 7628 |
1e-1 7666 |
1e-2 7686 |
1e-3 7700 |
1e-5 7758 |
1e-7 1.4e5 |
#succ 9/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 3.9 (2) | 1952 (2614) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 9.4 (0.7) | 8.3 (0.6) | 12 (5) | 12 (5) | 12 (5) | 13 (5) | 0.72 (0.3) | 15/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 32 (1) | 25 (0.5) | 27 (0.5) | 28 (0.4) | 28 (0.4) | 28 (0.4) | 1.6 (0.0) | 15/15 |
| SOO Derbel | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | 0.22 (0.1)↑0 | 0.36 (0.1)↑0 | 0.42 (0.1)↑0 | 0.42 (0.1)↑0 | 0.42 (0.1)↑0 | 0.42 (0.1)↑0 | 0.02 (3e-3)↑0 | 15/15 |
| BrentSTEPifeg Posik | 0.21 (0.0)↑0 | 0.35 (0.1)↑0 | 0.40 (0.1)↑0 | 0.40 (0.1)↑0 | 0.40 (0.1)↑0 | 0.40 (0.1)↑0 | 0.02 (4e-3)↑0 | 15/15 |
| BrentSTEPqi Posik | 0.21 (0.0)↑0 | 0.30 (0.0)↑0 | 0.34 (0.1)↑0 | 0.34 (0.1)↑0 | 0.34 (0.1)↑0 | 0.35 (0.1)↑0 | 0.02 (2e-3)↑0 | 15/15 |
| BrentSTEPrr Posik | 0.18 (0.0)↑0 | 0.29 (0.0)↑0 | 0.31 (0.0)↑0 | 0.32 (0.0)↑0 | 0.34 (0.0)↑0 | 0.37 (0.0)↑0 | 0.03 (5e-3)↑0 | 15/15 |
| CMA-CSA Atamna | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| CMA-MSR Atamna | 5792 (6375) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| CMA-TPA Atamna | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| GP1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5046 | 0/15 |
| GP5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5022 | 0/15 |
| GP5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5022 | 0/15 |
| IPOPCMAv3p61 Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| STEPif Posik | 0.22 (0.0)↑0 | 0.35 (0.1)↑0 | 0.52 (0.1)↑0 | 0.72 (0.1)↑0 | 0.81 (0.1)↑1 | 0.95 (0.2) | 0.05 (0.0)↑0 | 15/15 |
| STEPifeg Posik | 0.21 (0.0)↑0 | 0.35 (0.1)↑0 | 0.52 (0.1)↑0 | 0.70 (0.1)↑0 | 0.79 (0.1)↑1 | 0.94 (0.2) | 0.05 (0.0)↑0 | 15/15 |
| STEPrr Posik | 0.19 (0.0)↑0 | 0.30 (0.0)↑0 | 0.46 (0.1)↑0 | 0.60 (0.0)↑0 | 0.72 (0.1)↑0 | 0.86 (0.1)↑1 | 0.05 (4e-3)↑0 | 15/15 |
| Δ fopt f5, 20-D |
1e1 41 |
1e0 41 |
1e-1 41 |
1e-2 41 |
1e-3 41 |
1e-5 41 |
1e-7 41 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.8 (0.1) | 2.0 (0.1) | 2.1 (0.1) | 2.4 (0.3) | 2.4 (0.3) | 2.4 (0.3) | 2.4 (0.3) | 15/15 |
| R-DE-10e2 Tanabe | 20 (14) | 46 (31) | 112 (79) | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 46 (4) | 77 (6) | 109 (7) | 139 (10) | 172 (9) | 233 (10) | 297 (9) | 15/15 |
| R-SHADE-10e2 Tanabe | 15 (2) | 23 (2) | 29 (2) | 36 (4) | 45 (5) | 732 (659) | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 117 (18) | 212 (19) | 308 (24) | 400 (19) | 489 (20) | 679 (25) | 862 (26) | 15/15 |
| RL-SHADE-10e2 Tanabe | 17 (3) | 30 (25) | 34 (24) | 37 (24) | 41 (25) | 65 (51) | 141 (123) | 3/15 |
| RL-SHADE-10e5 Tanabe | 268 (14) | 438 (21) | 595 (28) | 747 (29) | 892 (24) | 1170 (28) | 1428 (30) | 15/15 |
| SOO Derbel | 123 (0.0) | 309 (0.0) | 573 (0.0) | 919 (0.0) | 1336 (0.0) | 2415 (0.0) | 3989 (0.0) | 15/15 |
| BrentSTEPif Posik | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 15/15 |
| BrentSTEPifeg Posik | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 15/15 |
| BrentSTEPqi Posik | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 15/15 |
| BrentSTEPrr Posik | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 15/15 |
| CMA-CSA Atamna | 4.8 (1) | 5.7 (1) | 5.9 (1) | 5.9 (1) | 5.9 (1) | 5.9 (1) | 5.9 (1) | 15/15 |
| CMA-MSR Atamna | 4.9 (0.9) | 5.4 (1) | 5.5 (1) | 5.5 (1) | 5.5 (1) | 5.5 (1) | 5.5 (1) | 15/15 |
| CMA-TPA Atamna | 4.2 (1) | 4.9 (1) | 4.9 (1) | 4.9 (1) | 4.9 (1) | 4.9 (1) | 4.9 (1) | 15/15 |
| GP1-CMAES Bajer | 10 (6) | 54 (81) | 77 (78) | 85 (72) | 85 (78) | 85 (94) | 85 (104) | 12/15 |
| GP1-CMAES Bajer 2013instances | 12 (7) | 69 (62) | 90 (118) | 91 (115) | 91 (123) | 91 (104) | 91 (109) | 11/15 |
| GP5-CMAES Bajer | 3.3 (0.6) | 4.7 (2) | 5.3 (2) | 5.5 (2) | 5.5 (2) | 5.5 (2) | 5.5 (2) | 15/15 |
| GP5-CMAES Bajer 2013instances | 3.3 (0.7) | 4.4 (1) | 4.6 (1) | 4.7 (1) | 4.8 (2) | 4.8 (2) | 4.8 (2) | 15/15 |
| IPOPCMAv3p61 Bajer | 15 (4) | 29 (10) | 33 (9) | 34 (9) | 34 (10) | 34 (10) | 34 (10) | 15/15 |
| IPOPCMAv3p61 Bajer 2013instances | 16 (7) | 31 (16) | 34 (15) | 35 (15) | 36 (15) | 36 (15) | 36 (15) | 15/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 11 (0.2) | 11 (0.3) | 11 (0.3) | 11 (0.3) | 11 (0.3) | 11 (0.3) | 11 (0.3) | 15/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.7 (0.1) | 2.9 (0.1) | 2.9 (0.1) | 3.0 (0.2) | 3.0 (0.2) | 3.0 (0.2) | 3.0 (0.2) | 15/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.7 (0.1) | 2.9 (0.2) | 3.0 (0.2) | 3.0 (0.2) | 3.0 (0.2) | 3.4 (0.2) | 3.4 (0.2) | 15/15 |
| RF1-CMAES Bajer | 18 (10) | 44 (21) | 49 (23) | 50 (22) | 51 (22) | 51 (22) | 51 (22) | 15/15 |
| RF1-CMAES Bajer 2013instances | 21 (13) | 44 (24) | 48 (26) | 49 (26) | 50 (26) | 50 (26) | 50 (26) | 15/15 |
| RF5-CMAES Bajer | 53 (35) | 192 (187) | 356 (244) | 903 (973) | 907 (641) | 907 (883) | 907 (912) | 2/15 |
| RF5-CMAES Bajer 2013instances | 42 (37) | 97 (80) | 167 (143) | 224 (132) | 262 (277) | 262 (207) | 262 (349) | 6/15 |
| STEPif Posik | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 15/15 |
| STEPifeg Posik | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 15/15 |
| STEPrr Posik | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 1.5 (0.0) | 15/15 |
| Δ fopt f6, 20-D |
1e1 1296 |
1e0 2343 |
1e-1 3413 |
1e-2 4255 |
1e-3 5220 |
1e-5 6728 |
1e-7 8409 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | 23 (28) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 13 (5) | 18 (9) | 29 (16) | 116 (114) | 321 (414) | 951 (849) | 3363 (4162) | 1/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 4.2 (0.5) | 4.0 (0.5) | 3.8 (0.5) | 3.9 (0.4) | 3.9 (0.4) | 4.1 (0.4) | 4.1 (0.2) | 15/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 18 (0.7) | 13 (0.7) | 11 (0.4) | 10 (0.2) | 10 (0.3) | 10 (0.2) | 9.3 (0.1) | 15/15 |
| SOO Derbel | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPifeg Posik | 962 (663) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPqi Posik | 749 (774) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/7 |
| BrentSTEPrr Posik | 811 (682) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| CMA-CSA Atamna | 1.6 (0.3) | 1.3 (0.2) | 1.1 (0.2) | 1.1 (0.2) | 1.1 (0.1) | 1.1 (0.1) | 1.1 (0.1) | 15/15 |
| CMA-MSR Atamna | 1.5 (0.8) | 1.9 (1.0) | 2.4 (1) | 3.9 (4) | 5.7 (5) | 11 (7) | 13 (2) | 15/15 |
| CMA-TPA Atamna | 1.6 (0.4) | 1.3 (0.3) | 1.2 (0.3) | 1.3 (0.3) | 1.4 (0.3) | 1.5 (0.3) | 1.6 (0.4) | 15/15 |
| GP1-CMAES Bajer | 7.6 (10) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP1-CMAES Bajer 2013instances | 8.5 (8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5010 | 0/15 |
| GP5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5024 | 0/15 |
| IPOPCMAv3p61 Bajer | 1.4 (0.3) | 1.1 (0.2) | 1.1 (0.2) | 1.3 (0.6) | 4.8 (4) | ∞ | ∞5006 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 1.5 (0.2) | 1.2 (0.1) | 1.1 (0.1) | 1.9 (2) | 14 (15) | ∞ | ∞5006 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | 18 (26) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF1-CMAES Bajer 2013instances | 56 (69) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| STEPif Posik | 644 (608) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPifeg Posik | 193 (206) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPrr Posik | 277 (276) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| Δ fopt f7, 20-D |
1e1 1351 |
1e0 4274 |
1e-1 9503 |
1e-2 16523 |
1e-3 16524 |
1e-5 16524 |
1e-7 16969 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | 11 (14) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 12 (6) | 1951 (2346) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| R-SHADE-10e2 Tanabe | 11 (11) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.0 (0.4) | 29 (36) | 72 (87) | 1762 (1695) | 1761 (1785) | 1761 (2633) | 1715 (1886) | 1/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 11 (0.7) | 5.3 (0.3) | 3.0 (0.2) | 2.2 (0.1) | 2.2 (0.1) | 2.2 (0.1) | 2.2 (0.1) | 15/15 |
| SOO Derbel | 59 (64) | 1603 (1891) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPqi Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| CMA-CSA Atamna | 1.7 (1) | 2.3 (0.7) | 1.7 (0.6) | 1.1 (0.4) | 1.1 (0.4) | 1.1 (0.4) | 1.0 (0.4) | 15/15 |
| CMA-MSR Atamna | 2.1 (2) | 4.2 (2) | 2.4 (1) | 1.6 (0.7) | 1.6 (0.7) | 1.6 (0.7) | 1.5 (0.6) | 15/15 |
| CMA-TPA Atamna | 2.1 (1) | 2.7 (1) | 1.6 (0.7) | 1.0 (0.5) | 1.0 (0.5) | 1.0 (0.5) | 1.0 (0.4) | 15/15 |
| GP1-CMAES Bajer | 2.8 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5022 | 0/15 |
| GP1-CMAES Bajer 2013instances | 3.0 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5010 | 0/15 |
| GP5-CMAES Bajer | 1.6 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5046 | 0/15 |
| GP5-CMAES Bajer 2013instances | 1.6 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5022 | 0/15 |
| IPOPCMAv3p61 Bajer | 1.3 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5020 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 1.3 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5008 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | 16 (13) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5034 | 0/15 |
| RF1-CMAES Bajer 2013instances | 54 (74) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5022 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5022 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5034 | 0/15 |
| STEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| Δ fopt f8, 20-D |
1e1 2039 |
1e0 3871 |
1e-1 4040 |
1e-2 4148 |
1e-3 4219 |
1e-5 4371 |
1e-7 4484 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 594 (560) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 11 (3) | 14 (7) | 15 (7) | 15 (7) | 15 (7) | 16 (7) | 16 (7) | 15/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 26 (1) | 21 (0.9) | 22 (0.9) | 23 (0.9) | 23 (0.9) | 24 (0.7) | 25 (0.8) | 15/15 |
| SOO Derbel | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | 401 (496) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPifeg Posik | 76 (86) | 358 (396) | 689 (826) | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPqi Posik | 30 (41) | 325 (341) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/8 |
| BrentSTEPrr Posik | 79 (90) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| CMA-CSA Atamna | 3.4 (0.7) | 3.4 (0.4) | 3.6 (0.4) | 3.7 (0.4) | 3.8 (0.4) | 3.8 (0.4) | 3.8 (0.3) | 15/15 |
| CMA-MSR Atamna | 3.6 (0.9) | 4.6 (3) | 4.8 (3) | 4.8 (3) | 4.8 (3) | 4.8 (3) | 4.9 (3) | 15/15 |
| CMA-TPA Atamna | 3.1 (0.7) | 3.5 (0.4) | 3.8 (0.4) | 3.9 (0.5) | 3.9 (0.4) | 3.9 (0.4) | 3.9 (0.4) | 15/15 |
| GP1-CMAES Bajer | 35 (37) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5022 | 0/15 |
| GP5-CMAES Bajer 2013instances | 12 (13) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5010 | 0/15 |
| IPOPCMAv3p61 Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5008 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| STEPif Posik | 87 (111) | 327 (655) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPifeg Posik | 51 (53) | 94 (124) | 219 (155) | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPrr Posik | 61 (70) | 141 (141) | 304 (291) | 606 (684) | ∞ | ∞ | ∞2e5 | 0/15 |
| Δ fopt f9, 20-D |
1e1 1716 |
1e0 3102 |
1e-1 3277 |
1e-2 3379 |
1e-3 3455 |
1e-5 3594 |
1e-7 3727 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 3021 (2984) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 16 (5) | 20 (3) | 22 (3) | 23 (3) | 23 (3) | 24 (3) | 24 (3) | 15/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 33 (2) | 29 (1) | 30 (1) | 31 (1) | 32 (1) | 33 (1) | 34 (1) | 15/15 |
| SOO Derbel | 4999 (7286) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPqi Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/5 |
| BrentSTEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| CMA-CSA Atamna | 3.8 (0.5) | 4.1 (0.3) | 4.3 (0.3) | 4.4 (0.3) | 4.4 (0.3) | 4.5 (0.3) | 4.5 (0.2) | 15/15 |
| CMA-MSR Atamna | 3.8 (0.7) | 4.5 (0.7) | 4.8 (0.6) | 4.8 (0.6) | 4.8 (0.6) | 4.8 (0.6) | 4.8 (0.6) | 15/15 |
| CMA-TPA Atamna | 3.8 (0.8) | 5.5 (3) | 5.8 (3) | 5.8 (3) | 5.8 (3) | 5.8 (3) | 5.8 (3) | 15/15 |
| GP1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5010 | 0/15 |
| GP5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5020 | 0/15 |
| IPOPCMAv3p61 Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| STEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| Δ fopt f10, 20-D |
1e1 7413 |
1e0 8661 |
1e-1 10735 |
1e-2 13641 |
1e-3 14920 |
1e-5 17073 |
1e-7 17476 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 16 (5) | 22 (7) | 25 (5) | 26 (8) | 29 (8) | 32 (7) | 40 (11) | 9/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 5.5 (0.7) | 5.5 (0.6) | 5.0 (0.5) | 4.3 (0.3) | 4.3 (0.4) | 4.3 (0.3) | 4.8 (0.3) | 15/15 |
| SOO Derbel | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPqi Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞9e4 | 0/15 |
| CMA-CSA Atamna | 1.2 (0.2) | 1.2 (0.1) | 1.0 (0.1) | 0.86 (0.1)↑0 | 0.81 (0.0)↑0 | 0.74 (0.0)↑0 | 0.76 (0.0)↑0 | 15/15 |
| CMA-MSR Atamna | 1.3 (0.2) | 1.3 (0.3) | 1.2 (0.1) | 0.99 (0.1) | 0.93 (0.1) | 0.86 (0.0)↑0 | 0.88 (0.0)↑0 | 15/15 |
| CMA-TPA Atamna | 1.4 (0.2) | 1.4 (0.2) | 1.2 (0.1) | 1.0 (0.1) | 0.95 (0.1)↑0 | 0.86 (0.0)↑0 | 0.86 (0.0)↑0 | 15/15 |
| GP1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP5-CMAES Bajer | 1.4 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP5-CMAES Bajer 2013instances | 3.4 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| IPOPCMAv3p61 Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| STEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞7e4 | 0/15 |
| Δ fopt f11, 20-D |
1e1 1002 |
1e0 2228 |
1e-1 6278 |
1e-2 8586 |
1e-3 9762 |
1e-5 12285 |
1e-7 14831 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 7.6 (4) | 13 (7) | 8.2 (3) | 8.4 (2) | 10 (2) | 11 (2) | 12 (2) | 15/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 27 (5) | 15 (2) | 6.2 (0.8) | 5.2 (0.6) | 5.1 (0.4) | 4.9 (0.4) | 4.8 (0.3) | 15/15 |
| SOO Derbel | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPqi Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞8e4 | 0/15 |
| CMA-CSA Atamna | 4.6 (0.4) | 2.3 (0.1) | 0.86 (0.0)↑0 | 0.67 (0.0)↑0 | 0.63 (0.0)↑0 | 0.55 (0.0)↑0 | 0.50 (0.0)↑0 | 15/15 |
| CMA-MSR Atamna | 4.7 (0.3) | 2.6 (0.2) | 1.0 (0.1) | 0.80 (0.1)↑0 | 0.74 (0.0)↑0 | 0.65 (0.0)↑0 | 0.58 (0.0)↑0 | 15/15 |
| CMA-TPA Atamna | 4.5 (0.4) | 2.3 (0.1) | 0.89 (0.0)↑0 | 0.69 (0.0)↑0 | 0.65 (0.0)↑0 | 0.57 (0.0)↑0 | 0.51 (0.0)↑0 | 15/15 |
| GP1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5020 | 0/15 |
| GP5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5008 | 0/15 |
| IPOPCMAv3p61 Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5008 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5008 | 0/15 |
| STEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| STEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞7e4 | 0/15 |
| Δ fopt f12, 20-D |
1e1 1042 |
1e0 1938 |
1e-1 2740 |
1e-2 3156 |
1e-3 4140 |
1e-5 12407 |
1e-7 13827 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 31 (43) | 219 (521) | 467 (784) | 8876 (1e4) | 6767 (7005) | ∞ | ∞2e6 | 0/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 8.5 (1.0) | 18 (12) | 23 (17) | 26 (16) | 25 (12) | 12 (5) | 13 (4) | 15/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 37 (1) | 24 (2) | 22 (7) | 24 (6) | 22 (4) | 10 (1) | 10 (1) | 15/15 |
| SOO Derbel | 1109 (1293) | 1284 (1586) | 1597 (2120) | 2610 (3940) | 3190 (3849) | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPqi Posik | 173 (190) | 1151 (1272) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| BrentSTEPrr Posik | 676 (719) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| CMA-CSA Atamna | 3.6 (3) | 3.5 (3) | 3.8 (3) | 3.9 (2) | 3.5 (1) | 1.4 (0.4) | 1.5 (0.4) | 15/15 |
| CMA-MSR Atamna | 3.7 (3) | 3.3 (3) | 3.5 (3) | 3.6 (2) | 3.2 (1) | 1.3 (0.4) | 1.4 (0.4) | 15/15 |
| CMA-TPA Atamna | 3.8 (3) | 4.1 (3) | 3.8 (2) | 3.8 (2) | 3.3 (2) | 1.4 (0.6) | 1.4 (0.6) | 15/15 |
| GP1-CMAES Bajer | 4.3 (5) | 5.2 (4) | 26 (29) | 23 (37) | ∞ | ∞ | ∞5006 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.4 (2) | 2.7 (3) | 6.1 (8) | 23 (27) | 18 (23) | ∞ | ∞5006 | 0/15 |
| GP5-CMAES Bajer | 21 (24) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5020 | 0/15 |
| GP5-CMAES Bajer 2013instances | 21 (29) | 18 (27) | 26 (25) | 23 (33) | ∞ | ∞ | ∞5020 | 0/15 |
| IPOPCMAv3p61 Bajer | 2.3 (0.2) | 8.3 (9) | 13 (19) | 23 (29) | 18 (18) | ∞ | ∞5006 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 3.8 (3) | 5.1 (8) | 27 (28) | 23 (20) | ∞ | ∞ | ∞5006 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | 4.8 (3) | 8.2 (8) | 27 (30) | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF1-CMAES Bajer 2013instances | 3.0 (2) | 11 (9) | 26 (35) | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| STEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| STEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| STEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e4 | 0/15 |
| Δ fopt f13, 20-D |
1e1 652 |
1e0 2021 |
1e-1 2751 |
1e-2 3507 |
1e-3 18749 |
1e-5 24455 |
1e-7 30201 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 23 (27) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 45 (63) | 114 (182) | 641 (641) | 8016 (5988) | ∞ | ∞ | ∞2e6 | 0/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 12 (7) | 8.0 (4) | 10 (5) | 12 (3) | 3.4 (1.0) | 5.2 (1) | 25 (27) | 0/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 38 (1.0) | 17 (0.6) | 17 (1) | 17 (0.7) | 3.7 (0.1) | 3.6 (0.1) | 3.6 (0.1) | 15/15 |
| SOO Derbel | 1926 (2053) | 4491 (4991) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPifeg Posik | 137 (162) | 193 (173) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPqi Posik | 103 (103) | 182 (167) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPrr Posik | 120 (183) | 221 (218) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| CMA-CSA Atamna | 3.2 (3) | 4.2 (4) | 4.0 (3) | 4.5 (3) | 0.93 (0.5) | 1.1 (0.5) | 1.3 (0.8) | 15/15 |
| CMA-MSR Atamna | 4.3 (4) | 3.3 (3) | 4.9 (3) | 4.2 (2) | 0.87 (0.4) | 1.0 (0.4) | 1.5 (0.6) | 15/15 |
| CMA-TPA Atamna | 4.7 (5) | 4.7 (4) | 5.0 (2) | 5.4 (2) | 1.1 (0.4) | 1.3 (0.5) | 1.5 (0.5) | 15/15 |
| GP1-CMAES Bajer | 5.7 (4) | 17 (33) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP1-CMAES Bajer 2013instances | 22 (28) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5046 | 0/15 |
| GP5-CMAES Bajer | 2.5 (2) | 5.0 (6) | ∞ | ∞ | ∞ | ∞ | ∞5022 | 0/15 |
| GP5-CMAES Bajer 2013instances | 5.5 (9) | 4.9 (4) | 13 (14) | ∞ | ∞ | ∞ | ∞5022 | 0/15 |
| IPOPCMAv3p61 Bajer | 6.4 (6) | 11 (10) | 26 (28) | 21 (27) | ∞ | ∞ | ∞5006 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 8.3 (8) | 7.9 (12) | 26 (36) | 21 (28) | 4.0 (6) | ∞ | ∞5006 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 23 (23) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | 4.6 (8) | 11 (15) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF1-CMAES Bajer 2013instances | 8.1 (8) | 6.4 (6) | 27 (30) | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| STEPif Posik | 64 (57) | 282 (431) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPifeg Posik | 44 (48) | 102 (104) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPrr Posik | 57 (48) | 109 (69) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| Δ fopt f14, 20-D |
1e1 75 |
1e0 239 |
1e-1 304 |
1e-2 451 |
1e-3 932 |
1e-5 1648 |
1e-7 15661 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 2.9 (1) | 14 (13) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | 4.5 (3) | 6.4 (5) | 23 (28) | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 9.4 (3) | 10 (2) | 13 (1) | 30 (7) | ∞ | ∞ | ∞2e6 | 0/15 |
| R-SHADE-10e2 Tanabe | 4.8 (1) | 3.8 (0.8) | 4.8 (0.9) | 66 (69) | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 8.2 (2) | 9.4 (2) | 13 (2) | 13 (2) | 11 (2) | 58 (38) | 1861 (2139) | 0/15 |
| RL-SHADE-10e2 Tanabe | 5.8 (2) | 40 (38) | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 40 (9) | 51 (4) | 61 (2) | 55 (2) | 34 (2) | 28 (0.7) | 3.9 (0.1) | 15/15 |
| SOO Derbel | 5.7 (3) | 55 (112) | 713 (807) | 2525 (3634) | ∞ | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | 1.5 (0.8) | 12 (12) | 50 (83) | 864 (1653) | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPifeg Posik | 1.5 (0.7) | 11 (14) | 17 (10) | 46 (8) | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPqi Posik | 1.5 (0.5) | 5.0 (3) | 8.5 (2) | 37 (15) | ∞ | ∞ | ∞2e5 | 0/4 |
| BrentSTEPrr Posik | 1.4 (0.6) | 7.1 (6) | 12 (7) | 34 (13) | ∞ | ∞ | ∞2e5 | 0/15 |
| CMA-CSA Atamna | 4.2 (1) | 2.9 (0.4) | 3.7 (0.4) | 4.1 (0.5) | 3.3 (0.4) | 3.9 (0.3) | 0.67 (0.1)↑0 | 15/15 |
| CMA-MSR Atamna | 4.2 (1) | 2.8 (0.5) | 3.4 (0.5) | 3.6 (0.3) | 2.9 (0.2) | 3.9 (0.4) | 0.73 (0.1)↑0 | 15/15 |
| CMA-TPA Atamna | 3.5 (2) | 2.3 (0.4) | 2.8 (0.4) | 3.1 (0.5) | 2.8 (0.3) | 3.8 (0.4) | 0.71 (0.1)↑0 | 15/15 |
| GP1-CMAES Bajer | 2.7 (0.8) | 2.4 (0.6) | 3.0 (0.6) | 3.4 (0.5) | 3.9 (0.6) | ∞ | ∞5006 | 0/15 |
| GP1-CMAES Bajer 2013instances | 3.0 (0.8) | 2.3 (0.6) | 2.9 (0.6) | 3.5 (0.8) | 4.0 (0.6) | ∞ | ∞5006 | 0/15 |
| GP5-CMAES Bajer | 2.4 (0.9) | 1.7 (0.7) | 1.9 (0.7) | 20 (23) | ∞ | ∞ | ∞5046 | 0/15 |
| GP5-CMAES Bajer 2013instances | 2.1 (0.4) | 1.7 (0.3) | 1.9 (0.5) | 8.0 (7) | 79 (84) | ∞ | ∞5020 | 0/15 |
| IPOPCMAv3p61 Bajer | 4.3 (1) | 2.9 (0.3) | 3.7 (0.4) | 4.1 (0.5) | 3.9 (0.3) | ∞ | ∞5006 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 3.7 (0.7) | 2.8 (0.4) | 3.6 (0.3) | 4.3 (0.3) | 4.1 (0.3) | ∞ | ∞5006 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 6.9 (1) | 10 (10) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 3.1 (1) | 5.4 (4) | 12 (8) | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 3.3 (1) | 9.4 (9) | 24 (26) | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | 3.2 (1) | 2.8 (0.8) | 3.5 (0.9) | 4.5 (2) | 11 (10) | ∞ | ∞5006 | 0/15 |
| RF1-CMAES Bajer 2013instances | 3.5 (0.9) | 3.2 (1) | 4.0 (1) | 4.9 (2) | 15 (22) | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer | 5.0 (5) | 88 (131) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer 2013instances | 3.7 (2) | 300 (445) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| STEPif Posik | 1.3 (0.5) | 1.6 (0.8) | 3.5 (3) | 79 (96) | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPifeg Posik | 1.3 (0.5) | 1.4 (0.7) | 2.8 (1) | 23 (19) | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPrr Posik | 1.3 (0.4) | 1.2 (0.5) | 2.0 (0.9) | 14 (10) | ∞ | ∞ | ∞2e5 | 0/15 |
| Δ fopt f15, 20-D |
1e1 30378 |
1e0 1.5e5 |
1e-1 3.1e5 |
1e-2 3.2e5 |
1e-3 3.2e5 |
1e-5 4.5e5 |
1e-7 4.6e5 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 52 (58) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 8.3 (0.9) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| SOO Derbel | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPqi Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/11 |
| BrentSTEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| CMA-CSA Atamna | 0.83 (0.5) | 0.99 (0.3) | 0.64 (0.3) | 0.65 (0.3) | 0.65 (0.3) | 0.49 (0.3)↑0 | 0.49 (0.3)↑0 | 15/15 |
| CMA-MSR Atamna | 0.98 (0.3) | 0.95 (0.3) | 0.54 (0.2)↑1 | 0.55 (0.2)↑1 | 0.56 (0.2)↑1 | 0.43 (0.1)↑1 | 0.45 (0.1)↑1 | 15/15 |
| CMA-TPA Atamna | 0.94 (0.5) | 1.1 (0.5) | 0.63 (0.2)↑1 | 0.64 (0.2)↑1 | 0.64 (0.2)↑1 | 0.48 (0.2)↑0 | 0.49 (0.2)↑0 | 15/15 |
| GP1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5034 | 0/15 |
| GP5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5048 | 0/15 |
| IPOPCMAv3p61 Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| STEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| Δ fopt f16, 20-D |
1e1 1384 |
1e0 27265 |
1e-1 77015 |
1e-2 1.4e5 |
1e-3 1.9e5 |
1e-5 2.0e5 |
1e-7 2.2e5 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 11 (12) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 236 (305) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| R-SHADE-10e2 Tanabe | 22 (28) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 27 (21) | 246 (246) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RL-SHADE-10e2 Tanabe | 6.8 (5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 73 (20) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| SOO Derbel | 1.6 (0.5) | 0.96 (0.6) | 14 (18) | 204 (226) | ∞ | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | 178 (184) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPifeg Posik | 123 (161) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPqi Posik | 98 (80) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/13 |
| BrentSTEPrr Posik | 119 (124) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| CMA-CSA Atamna | 1.9 (0.5) | 0.64 (0.6) | 0.84 (0.4) | 1.2 (0.8) | 1.4 (1) | 1.5 (1) | 1.4 (1) | 15/15 |
| CMA-MSR Atamna | 0.80 (0.2)↑1 | 0.84 (0.6) | 1.1 (0.7) | 1.3 (0.7) | 3.3 (6) | 4.7 (6) | 4.3 (7) | 12/15 |
| CMA-TPA Atamna | 1.2 (0.7) | 0.78 (0.4) | 0.80 (0.6) | 0.67 (0.4) | 0.63 (0.2)↑1 | 0.66 (0.2)↑1 | 0.62 (0.2)↑1 | 15/15 |
| GP1-CMAES Bajer | 0.64 (0.1)↑0 | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP1-CMAES Bajer 2013instances | 0.90 (0.2)↑1 | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP5-CMAES Bajer | 0.68 (1) | 2.7 (2) | ∞ | ∞ | ∞ | ∞ | ∞5022 | 0/15 |
| GP5-CMAES Bajer 2013instances | 0.57 (0.7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5022 | 0/15 |
| IPOPCMAv3p61 Bajer | 1.6 (0.6) | 0.52 (0.7) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 1.4 (0.4) | 0.63 (0.5) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 3.4 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 5.1 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 11 (11) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | 0.83 (0.2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF1-CMAES Bajer 2013instances | 0.79 (0.2)↑1 | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer | 2.9 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5008 | 0/15 |
| RF5-CMAES Bajer 2013instances | 1.0 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5008 | 0/15 |
| STEPif Posik | 12 (10) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPifeg Posik | 15 (13) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPrr Posik | 14 (13) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| Δ fopt f17, 20-D |
1e1 63 |
1e0 1030 |
1e-1 4005 |
1e-2 12242 |
1e-3 30677 |
1e-5 56288 |
1e-7 80472 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 2.2 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | 2.1 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 4.1 (2) | 12 (10) | 37 (25) | 2397 (1675) | ∞ | ∞ | ∞2e6 | 0/15 |
| R-SHADE-10e2 Tanabe | 3.7 (2) | 29 (33) | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 3.7 (2) | 3.4 (1) | 3.9 (1) | 18 (27) | 45 (49) | ∞ | ∞2e6 | 0/15 |
| RL-SHADE-10e2 Tanabe | 3.9 (0.5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 13 (8) | 18 (2) | 8.1 (0.4) | 3.7 (0.2) | 2.0 (0.1) | 1.6 (0.1) | 7.1 (12) | 13/15 |
| SOO Derbel | 1.3 (1) | 16 (8) | 87 (79) | 1159 (1675) | ∞ | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | 488 (1563) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPifeg Posik | 493 (1588) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPqi Posik | 1.7 (0.6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/3 |
| BrentSTEPrr Posik | 476 (1506) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| CMA-CSA Atamna | 3.0 (2) | 1.0 (0.3) | 1.4 (2) | 1.2 (0.6) | 0.74 (0.4) | 0.88 (0.5) | 0.88 (0.3) | 15/15 |
| CMA-MSR Atamna | 2.7 (0.7) | 6.5 (8) | 3.5 (2) | 1.9 (1) | 0.97 (0.6) | 0.88 (0.4) | 0.81 (0.2) | 15/15 |
| CMA-TPA Atamna | 2.7 (0.7) | 1.4 (0.6) | 1.5 (0.9) | 0.94 (0.6) | 0.74 (0.3)↑1 | 0.71 (0.4) | 0.80 (0.3) | 15/15 |
| GP1-CMAES Bajer | 1.9 (1.0) | 8.3 (11) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP1-CMAES Bajer 2013instances | 1.4 (0.8) | 3.4 (5) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP5-CMAES Bajer | 2.1 (1) | 15 (16) | ∞ | ∞ | ∞ | ∞ | ∞5034 | 0/15 |
| GP5-CMAES Bajer 2013instances | 1.6 (1.0) | 11 (11) | ∞ | ∞ | ∞ | ∞ | ∞5022 | 0/15 |
| IPOPCMAv3p61 Bajer | 2.3 (1) | 1.1 (0.4) | 0.81 (0.7) | 0.61 (0.6) | 1.2 (1.0) | ∞ | ∞5006 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.0 (0.8) | 0.99 (0.4) | 0.93 (0.7) | 1.1 (1) | ∞ | ∞ | ∞5006 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 7.3 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.6 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.7 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | 1.8 (1) | 6.7 (9) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF1-CMAES Bajer 2013instances | 1.9 (1.0) | 4.2 (5) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer | 1.7 (1) | 69 (62) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer 2013instances | 2.7 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| STEPif Posik | 7.1 (8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPifeg Posik | 230 (10) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPrr Posik | 3.8 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| Δ fopt f18, 20-D |
1e1 621 |
1e0 3972 |
1e-1 19561 |
1e-2 28555 |
1e-3 67569 |
1e-5 1.3e5 |
1e-7 1.5e5 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | 8.4 (6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 6.2 (3) | 324 (433) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| R-SHADE-10e2 Tanabe | 5.6 (7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 3.1 (0.8) | 2.0 (0.8) | 30 (36) | 1050 (665) | ∞ | ∞ | ∞2e6 | 0/15 |
| RL-SHADE-10e2 Tanabe | 11 (11) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 17 (2) | 7.0 (0.3) | 2.1 (0.0) | 2.1 (0.1) | 1.9 (3) | 8.0 (8) | 41 (42) | 3/15 |
| SOO Derbel | 5.0 (2) | 27 (19) | 241 (291) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/14 |
| BrentSTEPqi Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/4 |
| BrentSTEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| CMA-CSA Atamna | 0.96 (0.3) | 0.72 (0.3)↑1 | 0.81 (0.4)↑1 | 1.1 (0.4) | 0.83 (0.3) | 1.1 (0.3) | 1.0 (0.3) | 15/15 |
| CMA-MSR Atamna | 2.8 (0.4) | 2.8 (2) | 1.4 (1) | 2.0 (1.0) | 1.2 (0.5) | 0.83 (0.3) | 0.87 (0.4) | 15/15 |
| CMA-TPA Atamna | 1.5 (0.5) | 1.2 (0.9) | 0.77 (0.4) | 0.96 (0.1) | 0.57 (0.3)↑0 | 0.58 (0.5) | 0.74 (0.3) | 15/15 |
| GP1-CMAES Bajer | 0.88 (0.3) | 18 (14) | 3.7 (6) | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP1-CMAES Bajer 2013instances | 0.93 (0.4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP5-CMAES Bajer | 4.4 (8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5022 | 0/15 |
| GP5-CMAES Bajer 2013instances | 2.8 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5020 | 0/15 |
| IPOPCMAv3p61 Bajer | 1.1 (0.4) | 1.2 (2) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 1.1 (0.4) | 0.90 (0.7) | 3.7 (5) | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | 1.7 (0.9) | 18 (17) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF1-CMAES Bajer 2013instances | 1.0 (0.3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer | 26 (34) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer 2013instances | 53 (83) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| STEPif Posik | 4561 (6691) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| Δ fopt f19, 20-D |
1e1 1 |
1e0 1 |
1e-1 3.4e5 |
1e-2 4.7e6 |
1e-3 6.2e6 |
1e-5 6.7e6 |
1e-7 6.7e6 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 417 (246) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | 191 (87) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 670 (230) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| R-SHADE-10e2 Tanabe | 371 (140) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 344 (80) | 1.1e6 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RL-SHADE-10e2 Tanabe | 453 (193) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 1800 (497) | 3.3e5 (7e4) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| SOO Derbel | 1 (0)★2 | 1 (0)★2 | 3.2 (3) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | 603 (71) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPifeg Posik | 161 (66) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPqi Posik | 171 (175) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/8 |
| BrentSTEPrr Posik | 151 (84) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| CMA-CSA Atamna | 221 (53) | 3.3e4 (4e4) | 0.82 (0.6) | 0.56 (0.8) | 2.4 (3) | 4.5 (4) | 4.5 (6) | 1/15 |
| CMA-MSR Atamna | 212 (78) | 3.5e4 (5e4) | 1.2 (0.4) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| CMA-TPA Atamna | 177 (38) | 1.9e4 (2e4) | 1.6 (0.7) | 1.2 (0.9) | 4.7 (4) | 4.3 (4) | 4.3 (4) | 1/15 |
| GP1-CMAES Bajer | 140 (43) | 1.1e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP1-CMAES Bajer 2013instances | 153 (48) | 3.6e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP5-CMAES Bajer | 102 (16) | 7.3e4 (6e4) | ∞ | ∞ | ∞ | ∞ | ∞5048 | 0/15 |
| GP5-CMAES Bajer 2013instances | 97 (15) | 1.6e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞5020 | 0/15 |
| IPOPCMAv3p61 Bajer | 222 (36) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5008 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 229 (70) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5008 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 507 (14) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 185 (178) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 165 (142) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | 198 (46) | 7.4e4 (8e4) | ∞ | ∞ | ∞ | ∞ | ∞5008 | 0/15 |
| RF1-CMAES Bajer 2013instances | 177 (30) | 3.7e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞5008 | 0/15 |
| RF5-CMAES Bajer | 180 (52) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5048 | 0/15 |
| RF5-CMAES Bajer 2013instances | 182 (108) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5034 | 0/15 |
| STEPif Posik | 176 (212) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPifeg Posik | 164 (174) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPrr Posik | 166 (182) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| Δ fopt f20, 20-D |
1e1 82 |
1e0 46150 |
1e-1 3.1e6 |
1e-2 5.5e6 |
1e-3 5.5e6 |
1e-5 5.6e6 |
1e-7 5.6e6 |
#succ 14/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 4.5 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | 5.0 (2) | 0.63 (0.6) | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 14 (2) | 0.50 (0.1)↑1 | 0.18 (0.2)↑0 | 0.57 (0.7) | 0.57 (0.5) | 0.56 (0.7) | 0.56 (0.6) | 7/15 |
| R-SHADE-10e2 Tanabe | 6.7 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 10 (3) | 1.3 (0.3) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RL-SHADE-10e2 Tanabe | 11 (5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 68 (18) | 3.3 (0.5) | 0.38 (0.4) | 0.52 (0.7) | 0.52 (0.5) | 0.52 (0.5) | 0.61 (0.6) | 6/15 |
| SOO Derbel | 39 (6e-3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | 1.7 (0.9) | 2.8 (3) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPifeg Posik | 1.7 (0.9) | 0.83 (1) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPqi Posik | 1.3 (0.6) | 5.7 (8) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/4 |
| BrentSTEPrr Posik | 1.6 (0.7) | 2.1 (3) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| CMA-CSA Atamna | 4.9 (1) | 2.5 (1) | 0.35 (0.2)↑0 | 0.29 (0.0)↑0 | 0.29 (0.0)↑0 | 0.29 (0.0)↑0 | 0.30 (0.0)↑0 | 15/15 |
| CMA-MSR Atamna | 5.1 (1.0) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| CMA-TPA Atamna | 4.0 (0.7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| GP1-CMAES Bajer | 3.2 (0.4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP1-CMAES Bajer 2013instances | 3.2 (0.6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP5-CMAES Bajer | 2.2 (0.5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5036 | 0/15 |
| GP5-CMAES Bajer 2013instances | 2.3 (0.5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5022 | 0/15 |
| IPOPCMAv3p61 Bajer | 5.4 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 5.4 (0.8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 7.5 (0.4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 4.0 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 4.5 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | 4.5 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF1-CMAES Bajer 2013instances | 4.9 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer | 13 (7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer 2013instances | 15 (26) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| STEPif Posik | 1.8 (1) | 1.0 (1) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPifeg Posik | 1.8 (0.7) | 0.73 (1) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPrr Posik | 1.6 (0.4) | 0.74 (1) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| Δ fopt f21, 20-D |
1e1 561 |
1e0 6541 |
1e-1 14103 |
1e-2 14318 |
1e-3 14643 |
1e-5 15567 |
1e-7 17589 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 0.83 (0.9) | 0.57 (0.9) | 1.2 (1) | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | 1.9 (2) | 4.5 (4) | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 18 (20) | 75 (156) | 57 (103) | 108 (133) | 138 (164) | 169 (206) | 187 (188) | 7/15 |
| R-SHADE-10e2 Tanabe | 4.0 (4) | 4.4 (6) | 2.1 (2) | 2.1 (2) | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 3.0 (1) | 6.6 (9) | 6.5 (8) | 6.5 (8) | 6.4 (7) | 6.1 (7) | 5.5 (6) | 15/15 |
| RL-SHADE-10e2 Tanabe | 3.9 (5) | 4.4 (4) | 2.1 (2) | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 16 (4) | 150 (153) | 118 (114) | 116 (112) | 114 (123) | 107 (116) | 95 (97) | 10/15 |
| SOO Derbel | 2.7 (3) | 98 (158) | 100 (125) | 162 (140) | 232 (318) | 1893 (1446) | ∞2e6 | 0/15 |
| BrentSTEPif Posik | 91 (178) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPifeg Posik | 91 (178) | 430 (520) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPqi Posik | 153 (141) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/4 |
| BrentSTEPrr Posik | 96 (178) | 137 (210) | 211 (216) | 208 (178) | 203 (188) | 192 (167) | ∞2e5 | 0/15 |
| CMA-CSA Atamna | 113 (143) | 159 (169) | 95 (143) | 94 (104) | 92 (114) | 87 (158) | 77 (94) | 7/15 |
| CMA-MSR Atamna | 24 (5) | 278 (424) | 449 (505) | 442 (494) | 433 (537) | 407 (509) | 360 (470) | 3/15 |
| CMA-TPA Atamna | 63 (83) | 248 (286) | 115 (153) | 114 (147) | 111 (163) | 105 (106) | 93 (94) | 6/15 |
| GP1-CMAES Bajer | 5.0 (8) | 5.4 (6) | 5.0 (5) | 5.0 (5) | 4.9 (5) | 4.7 (6) | 4.2 (4) | 1/15 |
| GP1-CMAES Bajer 2013instances | 2.5 (4) | 2.2 (3) | 5.0 (5) | 5.0 (6) | 4.9 (5) | 4.6 (6) | 4.1 (5) | 1/15 |
| GP5-CMAES Bajer | 3.1 (5) | 2.3 (3) | 2.4 (3) | 2.4 (3) | 4.9 (5) | ∞ | ∞5022 | 0/15 |
| GP5-CMAES Bajer 2013instances | 2.3 (2) | 11 (13) | ∞ | ∞ | ∞ | ∞ | ∞5046 | 0/15 |
| IPOPCMAv3p61 Bajer | 6.1 (7) | 5.1 (5) | 5.1 (6) | 5.0 (4) | 4.9 (5) | 4.6 (5) | 4.1 (4) | 1/15 |
| IPOPCMAv3p61 Bajer 2013instances | 4.8 (7) | 2.5 (2) | 5.1 (6) | 5.1 (6) | 5.0 (5) | 4.7 (8) | 4.2 (4) | 1/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 2.6 (2) | 2.2 (2) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.2 (2) | 2.3 (2) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 0.46 (0.3)↑1 | 0.67 (0.7) | 1.0 (2) | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | 5.8 (5) | 11 (16) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF1-CMAES Bajer 2013instances | 7.4 (9) | 2.4 (3) | 2.5 (3) | 2.5 (2) | 2.5 (2) | 4.7 (4) | 4.2 (6) | 1/15 |
| RF5-CMAES Bajer | 5.7 (7) | 11 (11) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer 2013instances | 7.3 (14) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| STEPif Posik | 103 (178) | 102 (64) | 68 (84) | 67 (63) | 66 (74) | 190 (203) | 170 (171) | 0/15 |
| STEPifeg Posik | 65 (155) | 137 (112) | 210 (288) | 207 (150) | 203 (359) | 191 (187) | ∞2e5 | 0/15 |
| STEPrr Posik | 82 (178) | 130 (153) | 100 (87) | 99 (103) | 97 (119) | 92 (78) | ∞2e5 | 0/15 |
| Δ fopt f22, 20-D |
1e1 467 |
1e0 5580 |
1e-1 23491 |
1e-2 24163 |
1e-3 24948 |
1e-5 26847 |
1e-7 1.3e5 |
#succ 12/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 1.0 (1) | 2.9 (4) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | 3.8 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 41 (94) | 101 (172) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| R-SHADE-10e2 Tanabe | 3.5 (3) | 1.7 (2) | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 14 (2) | 29 (39) | 1200 (1660) | 1167 (1552) | 1130 (1844) | 1051 (894) | 209 (223) | 1/15 |
| RL-SHADE-10e2 Tanabe | 3.9 (4) | 5.3 (4) | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 247 (7) | 362 (412) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| SOO Derbel | 90 (7) | 117 (182) | 1257 (1384) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | 129 (214) | 233 (224) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPifeg Posik | 129 (218) | 77 (120) | 124 (121) | 124 (151) | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPqi Posik | 297 (437) | 133 (138) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/5 |
| BrentSTEPrr Posik | 131 (214) | 61 (70) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| CMA-CSA Atamna | 22 (27) | 145 (232) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| CMA-MSR Atamna | 254 (6) | 249 (569) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| CMA-TPA Atamna | 162 (11) | 216 (191) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| GP1-CMAES Bajer | 8.0 (11) | 2.7 (4) | ∞ | ∞ | ∞ | ∞ | ∞5008 | 0/15 |
| GP1-CMAES Bajer 2013instances | 6.9 (11) | 1.4 (1) | ∞ | ∞ | ∞ | ∞ | ∞5008 | 0/15 |
| GP5-CMAES Bajer | 4.7 (6) | 6.1 (11) | ∞ | ∞ | ∞ | ∞ | ∞5020 | 0/15 |
| GP5-CMAES Bajer 2013instances | 3.9 (6) | 3.9 (5) | ∞ | ∞ | ∞ | ∞ | ∞5022 | 0/15 |
| IPOPCMAv3p61 Bajer | 9.3 (13) | 3.8 (6) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 4.9 (6) | 13 (14) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 3.2 (2) | 0.63 (0.6) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 1.4 (1) | 2.7 (3) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 1.2 (1) | 2.6 (3) | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | 13 (21) | 2.7 (4) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF1-CMAES Bajer 2013instances | 3.5 (6) | 6.2 (7) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer | 6.8 (9) | 13 (13) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer 2013instances | 11 (19) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| STEPif Posik | 120 (242) | 107 (147) | 126 (132) | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPifeg Posik | 212 (322) | 83 (129) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPrr Posik | 132 (214) | 77 (66) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| Δ fopt f23, 20-D |
1e1 3.0 |
1e0 1614 |
1e-1 67457 |
1e-2 3.7e5 |
1e-3 4.9e5 |
1e-5 8.1e5 |
1e-7 8.4e5 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | 2.1 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | 2.4 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | 2.3 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| R-SHADE-10e2 Tanabe | 2.3 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | 2.3 (2) | 95 (96) | 12 (14) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RL-SHADE-10e2 Tanabe | 1.9 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | 1.8 (2) | 116 (27) | 75 (47) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| SOO Derbel | 1.7 (2) | 3.9 (2) | 1.1 (0.8) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | 3.0 (2) | 37 (39) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPifeg Posik | 3.0 (2) | 60 (55) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPrr Posik | 3.0 (2) | 54 (40) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| CMA-CSA Atamna | 6.5 (5) | 93 (45) | 13 (15) | 16 (8) | 58 (46) | 35 (39) | 34 (50) | 1/15 |
| CMA-MSR Atamna | 7.3 (7) | 2.0 (4) | 0.79 (0.6) | 0.74 (0.2)↑1 | 0.73 (0.1)↑1 | 0.49 (0.1)↑0 | 0.51 (0.1)↑0 | 15/15 |
| CMA-TPA Atamna | 7.0 (11) | 23 (45) | 4.8 (9) | 3.0 (3) | 9.3 (15) | 5.6 (6) | 5.5 (4) | 5/15 |
| GP1-CMAES Bajer | 1.9 (2) | 1.2 (0.4) | 1.1 (0.8) | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP1-CMAES Bajer 2013instances | 2.7 (2) | 1.6 (0.9) | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP5-CMAES Bajer | 2.5 (2) | 0.93 (1) | ∞ | ∞ | ∞ | ∞ | ∞5020 | 0/15 |
| GP5-CMAES Bajer 2013instances | 2.2 (4) | 0.84 (0.8) | ∞ | ∞ | ∞ | ∞ | ∞5010 | 0/15 |
| IPOPCMAv3p61 Bajer | 2.0 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5008 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | 2.2 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5020 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | 2.0 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | 2.1 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | 2.2 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | 1.9 (1) | 45 (33) | ∞ | ∞ | ∞ | ∞ | ∞5010 | 0/15 |
| RF1-CMAES Bajer 2013instances | 1.7 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5010 | 0/15 |
| RF5-CMAES Bajer | 2.7 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5084 | 0/15 |
| RF5-CMAES Bajer 2013instances | 2.4 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5086 | 0/15 |
| STEPif Posik | 3.0 (2) | 11 (16) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPifeg Posik | 3.0 (2) | 6.5 (6) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPrr Posik | 3.0 (2) | 5.2 (4) | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| Δ fopt f24, 20-D |
1e1 1.3e6 |
1e0 7.5e6 |
1e-1 5.2e7 |
1e-2 5.2e7 |
1e-3 5.2e7 |
1e-5 5.2e7 |
1e-7 5.2e7 |
#succ 3/15 |
|---|---|---|---|---|---|---|---|---|
| MATSUMOTO Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| R-DE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-DE-10e5 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| R-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| R-SHADE-10e5 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RL-SHADE-10e2 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2000 | 0/15 |
| RL-SHADE-10e5 Tanabe | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| SOO Derbel | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BrentSTEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| BrentSTEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| CMA-CSA Atamna | 6.0 (8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| CMA-MSR Atamna | 4.1 (7) | 1.8 (2) | 0.55 (0.8) | 0.55 (0.7) | 0.55 (0.8) | 0.55 (0.6) | 0.55 (0.9) | 1/15 |
| CMA-TPA Atamna | 6.2 (8) | 3.9 (4) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| GP1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5010 | 0/15 |
| GP1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| GP5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5048 | 0/15 |
| GP5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5026 | 0/15 |
| IPOPCMAv3p61 Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5008 | 0/15 |
| IPOPCMAv3p61 Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5008 | 0/15 |
| LHD-10xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| LHD-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RAND-2xDefault-MATSuMoTo Brockhoff | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1000 | 0/15 |
| RF1-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF1-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5006 | 0/15 |
| RF5-CMAES Bajer | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5010 | 0/15 |
| RF5-CMAES Bajer 2013instances | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5034 | 0/15 |
| STEPif Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPifeg Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| STEPrr Posik | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
Previous dimension | Dimension = 40 | First dimension
| Δ fopt f1, 40-D |
1e1 83 |
1e0 83 |
1e-1 83 |
1e-2 83 |
1e-3 83 |
1e-5 83 |
1e-7 83 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 10 (1.0) | 16 (2) | 22 (1) | 28 (1) | 34 (2) | 46 (2) | 58 (3) | 15/15 |
| CMA-MSR Atamna | 10 (1) | 16 (1) | 23 (1) | 29 (1) | 35 (2) | 48 (2) | 60 (2) | 15/15 |
| CMA-TPA Atamna | 6.7 (0.6)★4 | 11 (0.9)★4 | 14 (1)★4 | 18 (1)★4 | 22 (1)★4 | 31 (1)★4 | 39 (2)★4 | 15/15 |
| Δ fopt f2, 40-D |
1e1 796 |
1e0 797 |
1e-1 799 |
1e-2 799 |
1e-3 800 |
1e-5 802 |
1e-7 804 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 37 (4) | 43 (4)★2 | 47 (4)★3 | 51 (4)★3 | 54 (4)★3 | 57 (2)★4 | 59 (2)★4 | 15/15 |
| CMA-MSR Atamna | 45 (6) | 53 (6) | 58 (5) | 62 (4) | 64 (3) | 67 (2) | 68 (2) | 15/15 |
| CMA-TPA Atamna | 41 (6) | 50 (5) | 56 (5) | 61 (5) | 65 (4) | 67 (3) | 68 (2) | 15/15 |
| Δ fopt f3, 40-D |
1e1 15526 |
1e0 15602 |
1e-1 15612 |
1e-2 15641 |
1e-3 15646 |
1e-5 15651 |
1e-7 15656 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| CMA-MSR Atamna | 11 (3)★4 | 66 (71)★4 | 142 (158)★4 | 144 (137)★4 | 147 (149)★4 | 154 (234)★4 | 160 (205)★4 | 12/15 |
| CMA-TPA Atamna | 1829 (1608) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Δ fopt f4, 40-D |
1e1 15536 |
1e0 15601 |
1e-1 15659 |
1e-2 15678 |
1e-3 15703 |
1e-5 15733 |
1e-7 2.8e5 |
#succ 6/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| CMA-MSR Atamna | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| CMA-TPA Atamna | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Δ fopt f5, 40-D |
1e1 98 |
1e0 116 |
1e-1 120 |
1e-2 121 |
1e-3 121 |
1e-5 121 |
1e-7 121 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 4.6 (0.6) | 4.5 (0.4) | 4.4 (0.4) | 4.4 (0.4) | 4.4 (0.4) | 4.4 (0.4) | 4.4 (0.4) | 15/15 |
| CMA-MSR Atamna | 3.9 (0.6) | 3.7 (0.7) | 3.6 (0.7) | 3.5 (0.6) | 3.5 (0.6) | 3.5 (0.6) | 3.5 (0.6) | 15/15 |
| CMA-TPA Atamna | 3.8 (0.9) | 3.6 (0.5) | 3.5 (0.6) | 3.5 (0.6) | 3.5 (0.6) | 3.5 (0.6) | 3.5 (0.6) | 15/15 |
| Δ fopt f6, 40-D |
1e1 3507 |
1e0 5523 |
1e-1 7168 |
1e-2 9470 |
1e-3 11538 |
1e-5 15007 |
1e-7 19222 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 1.6 (0.2) | 1.5 (0.1) | 1.4 (0.1) | 1.3 (0.1)★3 | 1.3 (0.1)★4 | 1.3 (0.1)★4 | 1.3 (0.1)★4 | 15/15 |
| CMA-MSR Atamna | 3.7 (2) | 7.4 (4) | 28 (23) | 43 (1) | 36 (1) | 31 (2) | 27 (1) | 15/15 |
| CMA-TPA Atamna | 1.6 (0.5) | 1.6 (0.4) | 1.8 (0.5) | 1.9 (0.4) | 2.0 (0.5) | 2.5 (0.6) | 2.8 (0.8) | 15/15 |
| Δ fopt f7, 40-D |
1e1 10698 |
1e0 17839 |
1e-1 41037 |
1e-2 66294 |
1e-3 66294 |
1e-5 66294 |
1e-7 68145 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 1.2 (1) | 2.8 (0.2) | 1.5 (0.5) | 0.97 (0.3) | 0.97 (0.3) | 0.97 (0.3) | 0.95 (0.3) | 15/15 |
| CMA-MSR Atamna | 3.0 (2) | 3.9 (1) | 2.1 (0.6) | 1.4 (0.4) | 1.4 (0.4) | 1.4 (0.4) | 1.4 (0.4) | 15/15 |
| CMA-TPA Atamna | 3.9 (1) | 3.7 (0.2) | 1.8 (0.6) | 1.2 (0.4) | 1.2 (0.4) | 1.2 (0.4) | 1.2 (0.4) | 15/15 |
| Δ fopt f8, 40-D |
1e1 7080 |
1e0 10655 |
1e-1 11012 |
1e-2 11265 |
1e-3 11430 |
1e-5 11701 |
1e-7 11969 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 5.4 (0.7) | 5.5 (3) | 5.6 (3) | 5.6 (3) | 5.7 (3) | 5.6 (3) | 5.6 (3) | 15/15 |
| CMA-MSR Atamna | 5.8 (0.5) | 5.5 (1) | 5.6 (1) | 5.6 (1) | 5.6 (1) | 5.6 (1) | 5.6 (1) | 15/15 |
| CMA-TPA Atamna | 5.7 (0.6) | 5.8 (2) | 5.9 (2) | 5.9 (2) | 5.9 (2) | 5.9 (2) | 5.8 (2) | 15/15 |
| Δ fopt f9, 40-D |
1e1 6122 |
1e0 12982 |
1e-1 13300 |
1e-2 13496 |
1e-3 13651 |
1e-5 13909 |
1e-7 14142 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 6.3 (0.6) | 4.2 (0.3) | 4.4 (0.3) | 4.4 (0.3) | 4.5 (0.3) | 4.5 (0.3) | 4.5 (0.3) | 15/15 |
| CMA-MSR Atamna | 6.9 (0.3) | 4.6 (0.2) | 4.8 (0.2) | 4.8 (0.2) | 4.8 (0.2) | 4.8 (0.2) | 4.8 (0.2) | 15/15 |
| CMA-TPA Atamna | 6.4 (0.9) | 4.8 (3) | 4.9 (3) | 4.9 (3) | 4.9 (3) | 4.9 (3) | 4.9 (3) | 15/15 |
| Δ fopt f10, 40-D |
1e1 25536 |
1e0 29762 |
1e-1 35676 |
1e-2 51579 |
1e-3 56007 |
1e-5 65128 |
1e-7 70824 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 1.2 (0.1) | 1.2 (0.1)★2 | 1.1 (0.1)★3 | 0.79 (0.1)★4↑0 | 0.77 (0.0)★4↑0 | 0.70 (0.0)★4↑0 | 0.67 (0.0)★4↑0 | 15/15 |
| CMA-MSR Atamna | 1.3 (0.2) | 1.4 (0.1) | 1.3 (0.1) | 0.95 (0.1) | 0.93 (0.0)↑0 | 0.83 (0.0)↑0 | 0.78 (9e-3)↑0 | 15/15 |
| CMA-TPA Atamna | 1.3 (0.2) | 1.4 (0.2) | 1.3 (0.1) | 0.94 (0.1) | 0.91 (0.0)↑0 | 0.84 (0.0)↑0 | 0.78 (0.0)↑0 | 15/15 |
| Δ fopt f11, 40-D |
1e1 2368 |
1e0 4855 |
1e-1 11681 |
1e-2 25315 |
1e-3 29749 |
1e-5 38949 |
1e-7 48211 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 5.0 (0.2) | 2.6 (0.1) | 1.2 (0.0) | 0.57 (0.0)↑0 | 0.51 (0.0)↑0 | 0.42 (0.0)↑0 | 0.37 (7e-3)↑0 | 15/15 |
| CMA-MSR Atamna | 4.9 (0.2) | 2.8 (0.1) | 1.3 (0.0) | 0.64 (0.0)↑0 | 0.57 (0.0)↑0 | 0.48 (0.0)↑0 | 0.42 (0.0)↑0 | 15/15 |
| CMA-TPA Atamna | 4.6 (0.2)★2 | 2.5 (0.1)★2 | 1.1 (0.0) | 0.56 (0.0)↑0 | 0.50 (9e-3)↑0 | 0.41 (1e-2)↑0 | 0.36 (9e-3)↑0 | 15/15 |
| Δ fopt f12, 40-D |
1e1 4169 |
1e0 7452 |
1e-1 9174 |
1e-2 10751 |
1e-3 13146 |
1e-5 22758 |
1e-7 25192 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 1.1 (0.0) | 1.1 (1) | 1.8 (1) | 1.9 (0.7) | 1.9 (0.6) | 1.4 (0.4) | 1.4 (0.3) | 15/15 |
| CMA-MSR Atamna | 2.0 (2) | 2.4 (1) | 2.7 (1.0) | 2.6 (0.8) | 2.5 (0.7) | 1.8 (0.4) | 1.8 (0.4) | 15/15 |
| CMA-TPA Atamna | 1.7 (2) | 1.7 (2) | 1.9 (1) | 2.0 (0.9) | 1.9 (0.7) | 1.4 (0.4) | 1.4 (0.4) | 15/15 |
| Δ fopt f13, 40-D |
1e1 2029 |
1e0 6916 |
1e-1 8734 |
1e-2 11861 |
1e-3 71936 |
1e-5 98467 |
1e-7 1.2e5 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 2.5 (4) | 2.5 (2) | 4.6 (3) | 6.0 (4) | 1.2 (0.5) | 1.3 (0.5) | 1.7 (0.9) | 15/15 |
| CMA-MSR Atamna | 2.8 (3) | 4.3 (3) | 5.4 (3) | 5.3 (3) | 1.4 (0.7) | 1.2 (0.5) | 1.4 (0.6) | 15/15 |
| CMA-TPA Atamna | 2.3 (3) | 2.1 (2) | 5.7 (4) | 6.1 (3) | 1.2 (0.4) | 1.2 (0.5) | 1.5 (0.9) | 15/15 |
| Δ fopt f14, 40-D |
1e1 304 |
1e0 616 |
1e-1 777 |
1e-2 1105 |
1e-3 2207 |
1e-5 4825 |
1e-7 57711 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 2.8 (0.5) | 2.6 (0.4) | 3.1 (0.3) | 3.8 (0.3) | 3.6 (0.3) | 4.0 (0.4) | 0.59 (0.0)★↑0 | 15/15 |
| CMA-MSR Atamna | 2.4 (0.5) | 2.1 (0.3) | 2.4 (0.3) | 2.8 (0.3) | 2.5 (0.2) | 3.6 (0.2) | 0.65 (0.0)↑0 | 15/15 |
| CMA-TPA Atamna | 2.2 (0.4) | 2.0 (0.2) | 2.2 (0.2)★2 | 2.7 (0.3) | 2.6 (0.2) | 3.6 (0.3) | 0.63 (0.0)↑0 | 15/15 |
| Δ fopt f15, 40-D |
1e1 1.9e5 |
1e0 7.9e5 |
1e-1 1.0e6 |
1e-2 1.1e6 |
1e-3 1.1e6 |
1e-5 1.1e6 |
1e-7 1.1e6 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 0.91 (0.3) | 0.65 (0.2)↑0 | 0.66 (0.2)↑1 | 0.67 (0.2)↑1 | 0.67 (0.2)↑1 | 0.69 (0.2)↑1 | 0.70 (0.2)↑1 | 15/15 |
| CMA-MSR Atamna | 0.81 (0.3) | 0.81 (0.2) | 0.72 (0.2)↑0 | 0.74 (0.2)↑0 | 0.76 (0.2)↑0 | 0.80 (0.2)↑0 | 0.83 (0.2)↑0 | 15/15 |
| CMA-TPA Atamna | 0.62 (0.3) | 0.69 (0.3) | 0.66 (0.2)↑0 | 0.67 (0.2)↑0 | 0.67 (0.2)↑0 | 0.69 (0.2)↑0 | 0.70 (0.2)↑0 | 15/15 |
| Δ fopt f16, 40-D |
1e1 5244 |
1e0 72122 |
1e-1 3.2e5 |
1e-2 7.1e5 |
1e-3 1.4e6 |
1e-5 2.0e6 |
1e-7 2.0e6 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 1.0 (0.3) | 1.3 (0.7) | 0.69 (0.4) | 0.51 (0.3)↑1 | 0.34 (0.2)↑0 | 0.44 (0.3)↑1 | 0.47 (0.3)↑1 | 15/15 |
| CMA-MSR Atamna | 0.43 (0.1)★2↑1 | 1.3 (0.7) | 1.2 (0.4) | 1.3 (1) | 1.1 (0.8) | 1.0 (0.6) | 1.2 (0.6) | 14/15 |
| CMA-TPA Atamna | 1.3 (2) | 0.93 (0.4) | 0.50 (0.4)↑0 | 0.52 (0.3)↑1 | 0.31 (0.1)↑0 | 0.32 (0.2)↑0 | 0.33 (0.2)↑0 | 15/15 |
| Δ fopt f17, 40-D |
1e1 399 |
1e0 4220 |
1e-1 14158 |
1e-2 34948 |
1e-3 51958 |
1e-5 1.3e5 |
1e-7 2.7e5 |
#succ 14/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 1.3 (0.6) | 0.56 (0.1)↑0 | 0.95 (1) | 1.1 (0.5) | 1.3 (0.9) | 0.82 (0.3) | 0.60 (0.0)↑1 | 15/15 |
| CMA-MSR Atamna | 0.96 (0.4) | 7.3 (8) | 3.0 (2) | 1.4 (0.9) | 1.4 (1.0) | 1.00 (0.5) | 0.67 (0.3)↑1 | 15/15 |
| CMA-TPA Atamna | 0.93 (0.3) | 5.0 (6) | 1.9 (2) | 1.1 (0.9) | 1.1 (0.5) | 0.82 (0.4) | 0.64 (0.3) | 15/15 |
| Δ fopt f18, 40-D |
1e1 1442 |
1e0 16998 |
1e-1 47068 |
1e-2 1.3e5 |
1e-3 1.9e5 |
1e-5 6.7e5 |
1e-7 9.5e5 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 1.0 (0.3) | 0.47 (0.7)★ | 0.98 (0.4) | 0.65 (0.2)↑1 | 0.67 (0.2)↑1 | 0.53 (0.5) | 0.40 (0.4)↑1 | 15/15 |
| CMA-MSR Atamna | 13 (23) | 1.8 (2) | 1.7 (1) | 1.0 (0.5) | 0.95 (0.5) | 1.0 (0.3) | 1.1 (2) | 13/15 |
| CMA-TPA Atamna | 1.5 (0.3) | 0.91 (0.2) | 0.87 (0.3)↑1 | 0.57 (0.2)↑0 | 0.59 (0.0)↑0 | 0.34 (0.1)↑0 | 0.30 (0.1)↑0 | 15/15 |
| Δ fopt f19, 40-D |
1e1 1 |
1e0 1 |
1e-1 1.4e6 |
1e-2 1.7e7 |
1e-3 2.6e7 |
1e-5 4.5e7 |
1e-7 4.5e7 |
#succ 8/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 435 (112) | 1.4e5 (2e5) | 1.0 (0.6) | 3.5 (4) | ∞ | ∞ | ∞4e6 | 0/15 |
| CMA-MSR Atamna | 428 (46) | 2.2e5 (2e5) | 1.4 (0.6) | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| CMA-TPA Atamna | 317 (78)★ | 1.4e5 (2e5) | 1.0 (0.5) | 3.6 (5) | ∞ | ∞ | ∞4e6 | 0/15 |
| Δ fopt f20, 40-D |
1e1 222 |
1e0 1.3e5 |
1e-1 1.6e8 |
1e-2 ∞ |
1e-3 ∞ |
1e-5 ∞ |
1e-7 ∞ |
#succ 0/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 4.2 (0.5) | 4.3 (2)★4 | 0.04 (0.0)★4 | 5.8e7 (8e7) | 5.8e7 (4e7) | 5.8e7 (5e7) | 5.9e7 (5e7) | 1/15 |
| CMA-MSR Atamna | 3.3 (0.6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| CMA-TPA Atamna | 2.7 (0.3)★2 | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Δ fopt f21, 40-D |
1e1 1044 |
1e0 21144 |
1e-1 1.0e5 |
1e-2 1.0e5 |
1e-3 1.0e5 |
1e-5 1.0e5 |
1e-7 1.0e5 |
#succ 26/30 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 4.3 (11) | 233 (376) | 158 (122) | 158 (146) | 158 (247) | 157 (126) | 156 (142) | 2/15 |
| CMA-MSR Atamna | 229 (4) | 312 (773) | 66 (74) | 66 (74) | 66 (81) | 66 (105) | 65 (64) | 5/15 |
| CMA-TPA Atamna | 3.6 (9) | 224 (414) | 153 (135) | 152 (146) | 152 (146) | 151 (255) | 150 (150) | 2/15 |
| Δ fopt f22, 40-D |
1e1 3090 |
1e0 35442 |
1e-1 6.5e5 |
1e-2 6.5e5 |
1e-3 6.5e5 |
1e-5 6.5e5 |
1e-7 6.5e5 |
#succ 8/30 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 87 (183) | 139 (159) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| CMA-MSR Atamna | 77 (1) | 106 (140) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| CMA-TPA Atamna | 1.6 (3) | 80 (107) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Δ fopt f23, 40-D |
1e1 7.0 |
1e0 11925 |
1e-1 75453 |
1e-2 6.6e5 |
1e-3 1.3e6 |
1e-5 3.2e6 |
1e-7 3.4e6 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 13 (9) | 5.7 (4) | 5.7 (7) | 3.7 (6) | 46 (31) | 18 (22) | 17 (27) | 1/15 |
| CMA-MSR Atamna | 12 (6) | 0.11 (0.0)★4↑0 | 1.8 (2) | 1.5 (0.8) | 1.6 (0.4)★2 | 0.75 (0.2)↑0 | 0.79 (0.2)↑0 | 15/15 |
| CMA-TPA Atamna | 13 (9) | 5.7 (9) | 4.6 (5) | 2.6 (3) | 14 (16) | 5.6 (11) | 5.4 (5) | 3/15 |
| Δ fopt f24, 40-D |
1e1 5.8e6 |
1e0 9.8e7 |
1e-1 3.0e8 |
1e-2 3.0e8 |
1e-3 3.0e8 |
1e-5 3.0e8 |
1e-7 3.0e8 |
#succ 1/15 |
|---|---|---|---|---|---|---|---|---|
| CMA-CSA Atamna | 4.5 (9) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| CMA-MSR Atamna | 1.9 (3) | 0.28 (0.4) | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| CMA-TPA Atamna | 4.5 (7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |