Last dimension | Dimension = 2 | Next dimension
| Δ fopt f1, 2-D |
1e1 2.0 |
1e0 6.0 |
1e-1 6.0 |
1e-2 6.0 |
1e-3 6.0 |
1e-5 6.0 |
1e-7 6.0 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 75 (134) | 96 (160) | 163 (171) | 200 (256) | 230 (193) | 320 (273) | 369 (250) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 5.0 (3) | 2.0 (0.7) | 2.1 (0.3) | 2.2 (0.3) | 2.2 (0.3) | 2.2 (0.3) | 2.2 (0.3) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 4.1 (2) | 2.1 (1) | 2.5 (2) | 2.7 (0.8) | 2.8 (2) | 2.8 (2) | 2.8 (1) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 2.1 (2) | 1.2 (0.7) | 1.9 (0.8) | 2.5 (0.8) | 3.2 (0.7) | 4.4 (1) | 6.0 (1) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 2.3 (2) | 3.9 (3) | 16 (11) | 26 (8) | 29 (10) | 30 (12) | 30 (9) | 15/15 |
| GNN-CMA-ES bbob Faury | 4.0 (5) | 5.3 (6) | 10 (8) | 14 (5) | 20 (7) | 29 (8) | 39 (9) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.8 (6) | 3.0 (4) | 8.0 (4) | 12 (7) | 16 (7) | 25 (9) | 37 (7) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 2.6 (2) | 1.3 (0.1) | 1.3 (0) | 1.3 (0) | 1.3 (0) | 1.3 (0) | 1.3 (0) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 5.8 (5) | 4.2 (5) | 5.3 (3) | 6.5 (4) | 7.9 (5) | 10 (3) | 13 (4) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 5.0 (4) | 2.0 (1.0) | 2.2 (0.9) | 2.6 (0.2) | 2.7 (0.3) | 2.7 (0.3) | 2.7 (0.3) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 6.7e5 (1e6) | 9.2e5 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 6.7e5 (1e6) | 9.2e5 (8e5) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 3.6e5 (5e5) | 6.7e5 (5e5) | 2.2e6 (2e6) | 4.7e6 (5e6) | 4.7e6 (4e6) | 4.7e6 (5e6) | 4.7e6 (5e6) | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 6.9 (12) | 23 (26) | 212 (180) | 1643 (794) | 1.2e4 (1e4) | 1.5e6 (2e6) | ∞2e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 5.6 (4) | 23 (33) | 339 (253) | 2211 (1253) | 9240 (1e4) | 1.2e6 (9e5) | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 3.6e5 (2e6) | 6.7e5 (1e6) | 2.2e6 (4e6) | 4.7e6 (7e6) | 4.7e6 (4e6) | 4.7e6 (3e6) | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 2.0 (0.9) | 3.8e5 (3e5) | 6.7e5 (8e5) | 6.7e5 (5e5) | 6.7e5 (6e5) | 7.1e5 (1e6) | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 29 (75) | 106 (192) | 579 (714) | 6250 (1e4) | 4.9e4 (3e4) | 4.7e6 (6e6) | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 16 (30) | 62 (84) | 934 (999) | 9967 (7132) | 6.8e4 (9e4) | ∞ | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 6.0 (16) | 3.8e5 (1e6) | 6.7e5 (1e6) | 6.7e5 (1e6) | 6.7e5 (1e6) | 7.6e5 (1e6) | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.3 (0.9) | 2.4e4 (103) | 2.9e5 (8e5) | 3.8e5 (6e5) | 3.8e5 (8e5) | 6.0e5 (2e6) | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 1.9 (4) | 2.4e4 (236) | 2.9e5 (4e5) | 3.8e5 (3e5) | 3.8e5 (4e5) | 1.4e6 (1e6) | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 2.3 (4) | 4.5 (5) | 22 (30) | 292 (392) | 2780 (3558) | 5.3e5 (8e5) | 4.7e6 (5e6) | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 2.3 (3) | 7.5 (12) | 45 (42) | 557 (784) | 5587 (2955) | 5.7e5 (7e5) | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1.7 (2) | 11 (13) | 96 (135) | 666 (965) | 5788 (6540) | 1.1e6 (2e6) | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 2.8 (3) | 8.7 (7) | 70 (93) | 448 (522) | 7081 (7223) | 5.4e5 (8e5) | ∞2e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 2.5 (2) | 1.2 (0) | 1.2 (0) | 1.2 (0)★2 | 1.2 (0)★4 | 1.2 (0)★4 | 1.2 (0)★4 | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 7.0 (6) | 5.8 (4) | 8.6 (4) | 11 (7) | 13 (7) | 20 (8) | 29 (14) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 8.5 (9) | 4.6 (3) | 5.8 (2) | 7.1 (3) | 8.3 (3) | 11 (2) | 13 (2) | 15/15 |
| Δ fopt f2, 2-D |
1e1 16 |
1e0 19 |
1e-1 25 |
1e-2 25 |
1e-3 26 |
1e-5 28 |
1e-7 29 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 49 (71) | 88 (164) | 107 (49) | 136 (77) | 157 (175) | 267 (274) | 630 (752) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 1.8 (0.5) | 1.9 (0.7) | 1.6 (0.6) | 1.8 (1.0) | 1.9 (0.6) | 2.1 (1) | 2.4 (0.9) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 3.8 (4) | 7.2 (7) | 6.8 (6) | 10 (6) | 11 (5) | 18 (11) | 75 (77) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.6 (0.3) | 3.6 (4) | 6.3 (10) | 21 (15) | 112 (146) | 1.3e4 (2e4) | 1.0e5 (6e4) | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 14 (3) | 16 (6) | 15 (4) | 22 (15) | 64 (40) | 203 (171) | 225 (155) | 15/15 |
| GNN-CMA-ES bbob Faury | 68 (158) | 145 (135) | 146 (167) | 167 (172) | 182 (169) | 188 (278) | 197 (323) | 14/15 |
| IPOP-CMA-ES-2019 bbob Faury | 9.5 (5) | 11 (4) | 10 (2) | 11 (2) | 11 (2) | 13 (2) | 14 (3) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 2.7 (2) | 3.9 (1) | 3.3 (1) | 3.6 (0.7) | 3.6 (0.8) | 3.7 (0.7) | 4.0 (0.8) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3.4 (1) | 3.5 (1) | 3.1 (0.8) | 3.5 (0.6) | 3.6 (0.5) | 3.9 (0.4) | 4.2 (0.5) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 1.6 (0.8) | 1.9 (0.6) | 1.5 (0.4) | 1.6 (0.5) | 1.7 (0.4) | 2.0 (0.5) | 2.2 (0.5) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 5.0e5 (5e5) | 6.8e5 (7e5) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 5.0e5 (9e5) | 6.8e5 (7e5) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 2.5e5 (4e5) | 4.2e5 (1e6) | 5.3e5 (9e5) | 1.1e6 (1e6) | 1.1e6 (8e5) | ∞ | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 742 (705) | 7699 (7649) | 5.5e4 (5e4) | 1.2e6 (1e6) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 871 (918) | 5774 (5047) | 4.8e4 (6e4) | 1.1e6 (1e6) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 2.5e5 (5e5) | 4.2e5 (7e5) | 5.2e5 (6e5) | 1.1e6 (2e6) | 1.1e6 (8e5) | ∞ | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1.4e5 (2e5) | 2.1e5 (3e5) | 1.6e5 (2e5) | 1.7e5 (1e5) | 3.3e5 (6e5) | ∞ | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 1989 (1807) | 2.7e4 (3e4) | 1.9e5 (3e5) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 2960 (4274) | 1.6e4 (1e4) | 2.1e5 (2e5) | 1.2e6 (7e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 1.4e5 (1e5) | 2.1e5 (3e5) | 1.6e5 (3e5) | 1.9e5 (1e5) | 1.1e6 (9e5) | ∞ | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 4.6e4 (9e4) | 4.1e4 (1e5) | 5.8e4 (8e4) | 1.1e5 (2e5) | 1.1e6 (5e5) | ∞ | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 4.6e4 (9e4) | 4.0e4 (5e4) | 5.6e4 (8e4) | 7.7e4 (1e5) | 1.1e6 (2e6) | ∞ | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 187 (271) | 1179 (1777) | 8951 (1e4) | 1.2e5 (1e5) | 1.1e6 (2e6) | ∞ | ∞2e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 252 (281) | 2475 (2237) | 1.3e4 (6695) | 9.1e4 (1e5) | 1.1e6 (2e6) | ∞ | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 214 (229) | 1982 (2137) | 2.1e4 (2e4) | 8.7e4 (1e5) | 3.5e5 (4e5) | ∞ | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 202 (149) | 2378 (2652) | 1.8e4 (2e4) | 1.0e5 (1e5) | 3.4e5 (4e5) | ∞ | ∞2e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.6 (0.4) | 1.5 (0.4) | 1.3 (0.4) | 1.4 (0.5) | 1.6 (0.5) | 1.7 (0.5) | 1.8 (0.4) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 6.3 (3) | 8.8 (3) | 7.8 (2) | 9.3 (5) | 10 (5) | 12 (5) | 16 (13) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2.5 (1) | 2.8 (1) | 2.6 (1) | 3.0 (1) | 3.3 (0.9) | 3.5 (0.7) | 3.9 (0.7) | 15/15 |
| Δ fopt f3, 2-D |
1e1 15 |
1e0 271 |
1e-1 445 |
1e-2 446 |
1e-3 450 |
1e-5 454 |
1e-7 464 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 53 (107) | 6.6 (4) | 6.3 (4) | 7.3 (4) | 7.7 (5) | 9.5 (5) | 11 (5) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 18 (21) | 6.8 (12) | 17 (23) | 17 (23) | 17 (21) | 17 (9) | 16 (22) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 24 (45) | 11 (15) | 20 (25) | 20 (25) | 19 (21) | 19 (25) | 19 (21) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 4.2 (8) | 1.7 (3) | 3.5 (5) | 3.6 (3) | 3.8 (3) | 9.1 (14) | 298 (329) | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 4.7 (3) | 1.6 (0.7) | 1.4 (1) | 1.5 (0.7) | 1.6 (1) | 1.6 (1) | 2.1 (1) | 15/15 |
| GNN-CMA-ES bbob Faury | 3.1 (2) | 2.3 (3) | 7.3 (12) | 7.5 (8) | 7.7 (11) | 8.0 (6) | 8.2 (12) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 6.0 (12) | 2.9 (4) | 6.6 (7) | 7.4 (8) | 7.6 (8) | 7.9 (9) | 8.1 (9) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 10 (10) | 3.2 (3) | 12 (23) | 12 (17) | 12 (18) | 12 (22) | 12 (14) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 14 (16) | 7.9 (9) | 25 (24) | 25 (23) | 25 (30) | 24 (30) | 203 (224) | 1/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 1.9 (1) | 0.93 (1) | 4.4 (10) | 4.4 (10) | 4.4 (4) | 4.4 (8) | 4.3 (4) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 2.0e5 (2e5) | 1.0e5 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 2.0e5 (4e5) | 1.0e5 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 6.7e4 (1e5) | 4.8e4 (6e4) | 6.3e4 (5e4) | 6.3e4 (6e4) | 6.3e4 (6e4) | ∞ | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 37 (47) | 213 (178) | 1889 (1580) | 9584 (9919) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 39 (44) | 286 (286) | 1311 (1178) | 1.5e4 (1e4) | 6.6e4 (7e4) | ∞ | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 6.7e4 (1e5) | 4.8e4 (6e4) | 6.3e4 (6e4) | 6.3e4 (6e4) | 6.2e4 (2e5) | ∞ | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 3.4 (5) | 4409 (1e4) | 1.2e4 (2e4) | 1.3e4 (2e4) | 3.2e4 (4e4) | ∞ | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 54 (46) | 1023 (1177) | 8641 (9892) | 6.4e4 (9e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 107 (92) | 542 (1056) | 4792 (5100) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 7.9 (20) | 6025 (1e4) | 1.2e4 (1e4) | 1.3e4 (1e4) | 6.4e4 (1e5) | ∞ | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 4.9 (5) | 452 (23) | 1240 (4541) | 1810 (2606) | 1.5e4 (2e4) | ∞ | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 4.5 (8) | 248 (16) | 1366 (2604) | 2531 (974) | 1.5e4 (2e4) | ∞ | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 5.0 (6) | 35 (17) | 316 (294) | 1679 (1891) | 6.3e4 (9e4) | ∞ | ∞2e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 9.2 (9) | 82 (100) | 493 (236) | 3060 (2478) | 3.1e4 (4e4) | ∞ | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 6.5 (5) | 77 (147) | 1220 (1044) | 4910 (4570) | 6.6e4 (5e4) | ∞ | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 7.3 (11) | 81 (110) | 919 (996) | 8230 (1e4) | 6.7e4 (9e4) | ∞ | ∞2e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 11 (11) | 2.8 (3) | 8.5 (18) | 8.5 (18) | 8.4 (9) | 8.3 (18) | 8.2 (15) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 52 (89) | 17 (15) | 68 (94) | 68 (74) | 68 (70) | 67 (61) | 66 (89) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 24 (22) | 11 (11) | 25 (33) | 25 (27) | 25 (34) | 25 (33) | 187 (148) | 0/15 |
| Δ fopt f4, 2-D |
1e1 22 |
1e0 344 |
1e-1 459 |
1e-2 496 |
1e-3 523 |
1e-5 544 |
1e-7 566 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 18 (26) | 5.5 (5) | 10 (11) | 10 (11) | 10 (10) | 11 (13) | 12 (11) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 18 (21) | 12 (10) | 27 (40) | 25 (37) | 23 (31) | 23 (16) | 22 (31) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 35 (69) | 21 (25) | 55 (52) | 51 (56) | 49 (53) | 47 (40) | 45 (27) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.3 (2) | 1.2 (1) | 5.4 (5) | 5.0 (5) | 4.8 (5) | 5.7 (6) | 895 (834) | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 4.6 (4) | 1.2 (0.5) | 1.6 (1) | 1.6 (0.6) | 1.7 (0.9) | 1.8 (1.0) | 3.3 (4) | 15/15 |
| GNN-CMA-ES bbob Faury | 1.9 (2) | 5.2 (6) | 37 (39) | 55 (91) | 52 (40) | 51 (60) | 50 (52) | 7/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1.9 (1) | 5.7 (4) | 95 (121) | 89 (51) | 85 (115) | 83 (103) | 80 (90) | 5/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 11 (9) | 4.7 (5) | 14 (16) | 13 (12) | 12 (12) | 12 (9) | 12 (14) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 14 (16) | 3.0 (4) | 15 (21) | 14 (18) | 13 (19) | 13 (18) | 468 (1104) | 1/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 3.3 (0.2) | 0.55 (1) | 0.59 (1)★ | 0.56 (1)★2 | 0.56 (1)★2 | 0.56 (0.2)★2 | 0.56 (0.9)★2 | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1.4e5 (2e5) | 8.1e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.4e5 (3e5) | 8.1e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 4.6e4 (7e4) | 3.8e4 (5e4) | 6.1e4 (9e4) | 5.6e4 (6e4) | 5.7e4 (3e4) | ∞ | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 34 (24) | 449 (370) | 3807 (3545) | 2.7e4 (1e4) | 5.4e4 (3e4) | ∞ | ∞2e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 32 (47) | 444 (668) | 2274 (2428) | 6.0e4 (7e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 4.6e4 (1e5) | 3.8e4 (2e4) | 6.1e4 (1e5) | 5.7e4 (4e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 3.3 (7) | 3833 (7267) | 1.2e4 (1e4) | 1.2e4 (2e4) | 5.6e4 (6e4) | ∞ | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 137 (108) | 1540 (1546) | 1.1e4 (7058) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 137 (145) | 1329 (1174) | 1.9e4 (3e4) | 5.8e4 (1e5) | 5.5e4 (6e4) | ∞ | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 6.7 (17) | 3760 (5337) | 1.2e4 (2e4) | 1.7e4 (2e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 5.0 (5) | 935 (1496) | 1286 (2323) | 3051 (3399) | 5.4e4 (6e4) | ∞ | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 5.7 (9) | 277 (258) | 1371 (1281) | 3942 (3433) | 2.5e4 (2e4) | ∞ | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 7.7 (8) | 67 (85) | 395 (538) | 2712 (3473) | 5.4e4 (5e4) | ∞ | ∞2e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 6.0 (7) | 111 (117) | 642 (927) | 4370 (5187) | 5.5e4 (7e4) | ∞ | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 11 (10) | 155 (226) | 1178 (924) | 1.3e4 (2e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 9.3 (5) | 128 (155) | 954 (837) | 7203 (6027) | ∞ | ∞ | ∞2e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 11 (16) | 4.8 (4) | 20 (25) | 18 (23) | 17 (18) | 17 (23) | 16 (16) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 36 (29) | 24 (37) | 72 (104) | 67 (41) | 63 (93) | 61 (79) | 59 (45) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 16 (18) | 4.9 (5) | 18 (20) | 17 (18) | 16 (12) | 17 (20) | 647 (518) | 0/15 |
| Δ fopt f5, 2-D |
1e1 4.0 |
1e0 4.0 |
1e-1 4.0 |
1e-2 4.0 |
1e-3 4.0 |
1e-5 4.0 |
1e-7 4.0 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 35 (41) | 136 (322) | 136 (76) | 136 (323) | 136 (64) | 136 (331) | 136 (323) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 2.6 (0.8) | 4.8 (2) | 5.2 (1) | 5.2 (0.5) | 5.2 (0.8) | 5.2 (0.8) | 5.2 (1) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 2.9 (0.5) | 4.4 (1) | 4.9 (1) | 4.9 (0.8) | 4.9 (0.8) | 4.9 (1) | 4.9 (1) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 2.0 (0.8) | 3.1 (1) | 3.5 (1) | 3.5 (1) | 3.5 (1) | 3.5 (1) | 3.5 (0.8) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 3.1 (3) | 44 (16) | 86 (39) | 115 (66) | 129 (89) | 130 (94) | 130 (97) | 15/15 |
| GNN-CMA-ES bbob Faury | 4.1 (4) | 6.2 (5) | 6.6 (5) | 6.7 (6) | 6.7 (6) | 6.7 (6) | 6.7 (5) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.1 (4) | 6.5 (4) | 7.0 (5) | 7.0 (5) | 7.0 (3) | 7.0 (5) | 7.0 (5) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 2.2 (0.6) | 4.0 (0.8) | 4.0 (0.6) | 4.0 (0.4) | 4.0 (0.4) | 4.0 (0.8) | 4.0 (0.4) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 4.6 (3) | 6.6 (4) | 6.7 (4) | 6.7 (5) | 6.7 (4) | 6.7 (5) | 6.7 (2) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 5.1 (0.6) | 5.2 (0.6) | 5.2 (0.4) | 5.2 (0.4) | 5.2 (0.5) | 5.2 (0.4) | 5.2 (0.5) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 1.3 (0.8) | 3.1 (3) | 3.1 (3) | 3.1 (3) | 3.1 (3) | 3.1 (3) | 3.1 (3) | 15/15 |
| RS-10 bbob Brockhoff Hansen | 1.1 (1) | 3.0 (3) | 3.6 (4) | 3.6 (4) | 3.6 (4) | 3.6 (4) | 3.6 (2) | 15/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 0.92 (0.8) | 1.5 (2) | 1.5 (1) | 1.5 (2) | 1.5 (2) | 1.5 (2) | 1.5 (0.8) | 15/15 |
| RS-20 bbob Brockhoff Hansen | 1.4 (0.6) | 2.1 (2) | 2.1 (2) | 2.1 (2) | 2.1 (2) | 2.1 (2) | 2.1 (2) | 15/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 3.6 (4) | 334 (303) | 4.0e4 (6e4) | 7.4e6 (8e6) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 2.7 (2) | 26 (22) | 39 (44) | 44 (43) | 44 (46) | 44 (51) | 44 (48) | 15/15 |
| RS-6 bbob Brockhoff Hansen | 1.3 (0.9) | 16 (15) | 29 (30) | 29 (15) | 29 (35) | 29 (35) | 29 (24) | 15/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.5 (0) | 3.5 (0.5) | 3.7 (0.8) | 3.8 (0.8) | 3.8 (0.8) | 3.8 (0.8) | 3.8 (0.5) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 3.2 (1) | 5.6 (3) | 5.6 (2) | 5.6 (2) | 5.6 (2) | 5.6 (2) | 5.6 (2) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 5.2 (2) | 7.5 (4) | 7.7 (4) | 7.7 (4) | 7.7 (4) | 7.7 (4) | 7.7 (4) | 15/15 |
| Δ fopt f6, 2-D |
1e1 13 |
1e0 23 |
1e-1 41 |
1e-2 54 |
1e-3 67 |
1e-5 95 |
1e-7 124 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 36 (67) | 45 (22) | 36 (29) | 36 (25) | 35 (21) | 38 (15) | 36 (15) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 4.0 (5) | 3.9 (3) | 3.1 (2) | 3.4 (2) | 3.1 (2) | 2.9 (1) | 2.8 (1) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 6.3 (6) | 7.9 (6) | 6.6 (3) | 6.4 (2) | 6.8 (2) | 6.1 (2) | 14 (13) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 39 (146) | 214 (673) | 240 (217) | 579 (809) | 682 (550) | 1632 (1725) | 1.1e4 (9369) | 1/15 |
| DE-scipy-2019 bbob Varelas Dahito | 2.4 (2) | 5.8 (5) | 7.5 (2) | 8.4 (3) | 8.5 (2) | 8.6 (5) | 20 (35) | 15/15 |
| GNN-CMA-ES bbob Faury | 2.4 (3) | 3.1 (1) | 3.3 (1) | 3.5 (1) | 3.4 (1.0) | 3.5 (0.4) | 3.6 (0.7) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.3 (3) | 3.4 (2) | 3.0 (1) | 3.1 (1) | 3.2 (1) | 3.5 (1) | 3.7 (0.6) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 4.5 (4) | 4.9 (4) | 3.7 (2) | 3.2 (2) | 3.1 (2) | 2.9 (2) | 2.7 (1.0) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 1.7 (1) | 1.8 (1) | 1.3 (0.6) | 1.2 (0.5) | 1.3 (0.9) | 1.2 (0.2) | 1.5 (2) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 3.5 (3) | 3.3 (2) | 2.8 (2) | 2.6 (2) | 2.5 (1) | 2.2 (0.9) | 2.6 (1) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 2.2e6 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 2.2e6 (2e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 4.2e5 (7e5) | 1.2e6 (2e6) | 6.8e5 (5e5) | 5.2e5 (8e5) | 4.2e5 (1e6) | 3.0e5 (8e5) | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 7.8 (9) | 70 (107) | 683 (925) | 6097 (1e4) | 3.0e4 (4e4) | ∞ | ∞2e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 6.6 (10) | 52 (57) | 502 (520) | 5402 (5062) | 2.5e4 (3e4) | ∞ | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 4.2e5 (5e5) | 1.2e6 (2e6) | 6.8e5 (9e5) | 5.2e5 (7e5) | 4.2e5 (4e5) | ∞ | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 7.7e4 (3e5) | 2.4e5 (4e5) | 2.0e5 (5e5) | 1.5e5 (2e5) | 1.2e5 (1e5) | ∞ | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 39 (49) | 239 (242) | 1280 (845) | 2.1e4 (2e4) | 4.3e5 (3e5) | ∞ | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 41 (41) | 294 (309) | 1355 (652) | 1.4e4 (2e4) | 1.3e5 (1e5) | ∞ | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 7.7e4 (4e4) | 2.4e5 (5e5) | 2.0e5 (2e5) | 1.5e5 (2e5) | 1.2e5 (8e4) | ∞ | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.1e4 (4e4) | 5.8e4 (1e5) | 9.8e4 (1e5) | 7.5e4 (8e4) | 6.3e4 (9e4) | 3.0e5 (1e5) | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 1.1e4 (39) | 5.8e4 (4e4) | 9.8e4 (2e5) | 7.4e4 (8e4) | 6.3e4 (4e4) | ∞ | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 2.8 (7) | 10 (12) | 72 (88) | 742 (964) | 6473 (5104) | ∞ | ∞2e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 3.2 (3) | 12 (16) | 100 (137) | 1159 (1364) | 1.1e4 (5025) | ∞ | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 4.7 (6) | 29 (41) | 153 (131) | 1031 (1045) | 1.4e4 (2e4) | ∞ | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 2.4 (3) | 24 (32) | 114 (107) | 2158 (2147) | 1.7e4 (3e4) | ∞ | ∞2e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 3.4 (3) | 2.9 (2) | 2.0 (1) | 1.7 (1) | 1.7 (1) | 1.5 (0.7) | 1.4 (1) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 5.6 (4) | 6.5 (2) | 5.0 (4) | 4.8 (4) | 4.4 (3) | 5.9 (6) | 12 (10) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2.1 (2) | 2.0 (2) | 1.6 (0.8) | 1.4 (0.5) | 1.3 (0.3) | 1.4 (0.5) | 2.0 (1) | 15/15 |
| Δ fopt f7, 2-D |
1e1 3.0 |
1e0 21 |
1e-1 60 |
1e-2 193 |
1e-3 217 |
1e-5 217 |
1e-7 241 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 54 (117) | 25 (25) | 18 (20) | 7.3 (7) | 8.0 (10) | 8.0 (8) | 8.7 (10) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 26 (42) | 24 (26) | 75 (44) | 156 (156) | 450 (512) | 450 (254) | 2137 (2620) | 2/15 |
| CG-scipy-2019 bbob Varelas Dahito | 18 (15) | 15 (17) | 91 (98) | 138 (132) | 372 (692) | 372 (377) | 725 (683) | 8/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 2.5 (2) | 3.4 (8) | 6.8 (4) | 5.7 (2) | 8.4 (12) | 8.4 (11) | 7.6 (5) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 3.5 (2) | 2.5 (3) | 3.3 (2) | 2.7 (2) | 5.0 (3) | 5.0 (5) | 18 (28) | 14/15 |
| GNN-CMA-ES bbob Faury | 4.6 (8) | 2.6 (3) | 2.1 (2) | 0.80 (0.7) | 0.79 (0.3) | 0.79 (0.5) | 0.92 (0.2) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.6 (5) | 2.3 (3) | 2.4 (2) | 0.82 (0.7) | 0.84 (0.6) | 0.84 (0.6) | 0.92 (0.5) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 13 (11) | 18 (20) | 66 (141) | 146 (152) | 467 (431) | 467 (525) | 1360 (2211) | 3/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 95 (95) | 39 (54) | 134 (343) | 88 (119) | 160 (227) | 160 (236) | 144 (282) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 12 (36) | 8.1 (12) | 8.8 (8) | 8.7 (10) | 15 (25) | 15 (23) | 14 (9) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1.0e6 (7e5) | 3.8e5 (4e5) | 2.2e5 (2e5) | 1.5e5 (2e5) | 1.3e5 (1e5) | 1.3e5 (2e5) | 1.2e5 (6e4) | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.0e6 (2e6) | 3.8e5 (6e5) | 2.2e5 (6e5) | 1.5e5 (3e5) | 1.3e5 (1e5) | 1.3e5 (3e5) | 1.2e5 (2e5) | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 5.8e5 (1e6) | 1.9e5 (3e5) | 1.3e5 (2e5) | 4.1e4 (5e4) | 3.7e4 (2e4) | 3.7e4 (2e4) | 3.3e4 (5e4) | 3/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 11 (23) | 18 (30) | 92 (144) | 162 (309) | 631 (787) | 631 (534) | 1910 (2434) | 1/15 |
| RS-10 bbob Brockhoff Hansen | 18 (15) | 30 (38) | 107 (99) | 224 (308) | 544 (656) | 544 (645) | 4032 (6767) | 3/15 |
| RS-1 bbob Brockhoff Hansen | 5.8e5 (1e6) | 1.9e5 (2e5) | 1.3e5 (2e5) | 4.1e4 (5e4) | 3.7e4 (3e4) | 3.7e4 (4e4) | 3.3e4 (4e4) | 3/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 4.8e4 (119) | 2.4e4 (5e4) | 2.2e4 (4e4) | 1.2e4 (5195) | 1.4e4 (2e4) | 1.4e4 (2e4) | 1.3e4 (2e4) | 6/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 42 (34) | 48 (42) | 265 (384) | 604 (437) | 2814 (3594) | 2814 (4571) | 1.8e4 (2e4) | 0/15 |
| RS-20 bbob Brockhoff Hansen | 107 (98) | 104 (79) | 278 (376) | 887 (1198) | 1748 (1735) | 1748 (1754) | 1.2e4 (7088) | 2/15 |
| RS-2 bbob Brockhoff Hansen | 4.8e4 (2e5) | 2.4e4 (5e4) | 2.3e4 (2e4) | 1.2e4 (2e4) | 1.4e4 (2e4) | 1.4e4 (1e4) | 1.3e4 (2e4) | 6/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 5.1 (12) | 6825 (72) | 1.2e4 (2e4) | 5221 (5191) | 4706 (4658) | 4706 (6952) | 4344 (8419) | 9/15 |
| RS-3 bbob Brockhoff Hansen | 7.7 (4) | 6818 (3) | 1.2e4 (2e4) | 5190 (5185) | 4648 (4623) | 4648 (6945) | 4396 (6258) | 10/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 2.4 (2) | 3.2 (3) | 21 (22) | 53 (68) | 100 (99) | 100 (121) | 319 (341) | 11/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 3.0 (3) | 5.0 (5) | 18 (24) | 34 (36) | 102 (97) | 102 (137) | 667 (511) | 11/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 4.0 (4) | 10 (11) | 42 (31) | 69 (43) | 174 (234) | 174 (217) | 1367 (977) | 11/15 |
| RS-6 bbob Brockhoff Hansen | 6.4 (6) | 8.4 (10) | 32 (54) | 79 (50) | 244 (211) | 244 (211) | 1767 (1715) | 9/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 15 (18) | 18 (22) | 72 (66) | 297 (354) | 577 (265) | 577 (996) | 520 (546) | 13/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 33 (23) | 49 (43) | 130 (171) | 233 (367) | 632 (1210) | 632 (813) | 1057 (1514) | 8/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 147 (172) | 64 (60) | 73 (144) | 65 (116) | 141 (286) | 141 (196) | 127 (222) | 15/15 |
| Δ fopt f8, 2-D |
1e1 5.0 |
1e0 12 |
1e-1 37 |
1e-2 46 |
1e-3 86 |
1e-5 94 |
1e-7 112 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 16 (21) | 29 (70) | 37 (77) | 54 (68) | 46 (45) | 60 (60) | 76 (61) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 10 (18) | 9.1 (11) | 4.2 (3) | 3.8 (3) | 2.2 (0.9) | 2.1 (1) | 1.8 (1) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 5.1 (5) | 7.0 (5) | 3.8 (3) | 3.8 (2) | 2.2 (1) | 2.3 (1.0) | 2.1 (0.6) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.9 (0.7) | 484 (928) | 356 (481) | 485 (515) | 4386 (2619) | ∞ | ∞2e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 6.3 (7) | 11 (8) | 6.4 (2) | 8.4 (2) | 4.9 (1) | 5.0 (2) | 4.8 (2) | 15/15 |
| GNN-CMA-ES bbob Faury | 3.3 (3) | 3.1 (2) | 2.8 (2) | 4.3 (2) | 2.7 (1) | 3.1 (1) | 3.2 (1.0) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 4.1 (4) | 7.0 (9) | 7.9 (5) | 8.0 (3) | 4.8 (2) | 5.0 (0.9) | 4.8 (2) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 3.1 (1) | 3.8 (4) | 2.1 (1) | 2.1 (0.9) | 1.2 (0.5) | 1.2 (0.4) | 1.0 (0.3) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 4.5 (2) | 5.0 (4) | 2.5 (1) | 2.5 (1) | 1.4 (0.7) | 1.5 (0.6) | 1.4 (0.4) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 3.4 (5) | 7.2 (15) | 6.9 (5) | 7.5 (4) | 4.3 (3) | 4.3 (2) | 3.8 (2) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 8.0e5 (7e5) | 6.7e5 (1e6) | 2.2e5 (1e5) | 6.1e5 (6e5) | 3.3e5 (2e5) | 3.0e5 (8e5) | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 8.0e5 (8e5) | 6.7e5 (7e5) | 2.2e5 (3e5) | 6.1e5 (3e5) | 3.3e5 (2e5) | 3.0e5 (4e5) | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 2.0e5 (5e5) | 2.5e5 (1e5) | 1.1e5 (2e5) | 1.7e5 (2e5) | 1.5e5 (2e5) | 1.5e5 (1e5) | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 28 (54) | 145 (193) | 284 (358) | 2268 (4586) | 1.6e4 (1e4) | 3.0e5 (4e5) | ∞2e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 27 (26) | 120 (90) | 320 (307) | 3647 (5159) | 1.7e4 (1e4) | 3.0e5 (4e5) | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 2.0e5 (2e5) | 2.5e5 (6e5) | 1.1e5 (1e5) | 1.7e5 (2e5) | 1.5e5 (2e5) | 1.5e5 (2e5) | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 2.9e4 (1e5) | 2.6e4 (4e4) | 2.0e4 (3e4) | 3.8e4 (8e4) | 2.1e4 (5e4) | 9.6e4 (7e4) | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 98 (90) | 386 (397) | 900 (896) | 9913 (1e4) | 7.5e4 (1e5) | ∞ | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 71 (76) | 351 (368) | 1139 (1814) | 7891 (8225) | 3.6e4 (2e4) | ∞ | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.9e4 (4) | 2.6e4 (4e4) | 2.0e4 (4e4) | 3.8e4 (5e4) | 2.1e4 (3e4) | 1.4e5 (1e5) | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 3.3 (5) | 13 (15) | 35 (37) | 228 (286) | 774 (772) | 1.5e5 (2e5) | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 5.3 (9) | 11 (14) | 32 (39) | 270 (209) | 1630 (1849) | 1.5e5 (1e5) | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 3.8 (4) | 18 (17) | 79 (134) | 416 (278) | 2453 (2029) | 3.1e5 (5e5) | ∞2e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 7.8 (9) | 28 (25) | 47 (51) | 734 (818) | 3957 (4584) | 9.4e4 (8e4) | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 9.2 (14) | 20 (22) | 102 (90) | 1329 (1445) | 5287 (4798) | ∞ | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 13 (15) | 45 (72) | 121 (66) | 1209 (1455) | 8354 (4776) | ∞ | ∞2e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 4.3 (3) | 4.8 (3) | 2.4 (2) | 2.4 (1) | 1.4 (0.6) | 1.4 (0.6) | 1.2 (0.5) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 5.0 (4) | 8.0 (6) | 6.6 (3) | 6.8 (4) | 4.3 (2) | 4.5 (3) | 4.6 (3) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3.1 (4) | 3.9 (3) | 2.1 (1) | 2.1 (1) | 1.2 (0.9) | 1.3 (0.8) | 1.2 (0.5) | 15/15 |
| Δ fopt f9, 2-D |
1e1 1 |
1e0 18 |
1e-1 30 |
1e-2 44 |
1e-3 68 |
1e-5 81 |
1e-7 92 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 1 (0) | 2.3 (3) | 11 (12) | 29 (29) | 33 (42) | 50 (45) | 71 (47) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 38 (70) | 5.4 (6) | 4.7 (4) | 3.7 (2) | 2.6 (2) | 2.3 (1) | 2.1 (1) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 20 (12) | 4.9 (4) | 4.7 (3) | 3.9 (2) | 2.8 (1) | 2.6 (1) | 2.5 (1.0) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 8.9 (4) | 34 (119) | 33 (18) | 59 (82) | 8104 (1e4) | 1.2e4 (9599) | ∞2e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 36 (26) | 5.5 (4) | 7.4 (3) | 8.0 (3) | 6.2 (1) | 5.9 (2) | 5.2 (2) | 15/15 |
| GNN-CMA-ES bbob Faury | 1 (0) | 2.8 (2) | 4.3 (3) | 5.0 (3) | 4.0 (2) | 4.2 (2) | 4.3 (2) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1 (0) | 3.5 (3) | 7.7 (7) | 7.5 (4) | 5.4 (3) | 5.5 (2) | 5.5 (2) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 16 (4) | 2.6 (1) | 2.7 (0.8) | 2.3 (0.9) | 1.6 (0.6) | 1.4 (0.4) | 1.3 (0.3) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 17 (11) | 2.6 (2) | 2.7 (1) | 2.2 (1) | 1.5 (0.6) | 1.5 (0.6) | 1.5 (0.5) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 34 (20) | 11 (17) | 11 (13) | 10 (8) | 6.6 (5) | 6.0 (3) | 5.5 (4) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1 (0) | 0.67 (0.5) | 3.2 (2) | 1.7e4 (3e4) | 4.1e5 (1e6) | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.9 (2) | 0.48 (0.4) | 5.2 (4) | 1.4e4 (2e4) | 4.1e5 (5e5) | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1 (0) | 1.6 (1) | 6.4 (5) | 34 (29) | 145 (193) | 9018 (1e4) | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 1 (0) | 63 (104) | 374 (524) | 2952 (5093) | 2.1e4 (2e4) | ∞ | ∞2e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 166 (232) | 70 (94) | 377 (420) | 2445 (2340) | 1.4e4 (2e4) | ∞ | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 3.9 (2) | 1.2 (1) | 6.1 (7) | 25 (36) | 147 (170) | 2.9e4 (5e4) | 3.2e5 (2e5) | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1 (0) | 3.6 (6) | 15 (16) | 174 (137) | 858 (710) | 4.7e4 (3e4) | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 1 (0) | 297 (524) | 1881 (2066) | 1.6e4 (2e4) | 7.1e4 (1e5) | ∞ | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 451 (584) | 359 (435) | 1713 (2661) | 8623 (6320) | 1.3e5 (3e5) | ∞ | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 11 (6) | 3.0 (4) | 12 (13) | 103 (117) | 824 (1039) | 4.8e4 (3e4) | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1 (0) | 5.0 (6) | 33 (36) | 282 (273) | 1621 (1558) | 1.2e5 (2e5) | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 15 (20) | 6.3 (8) | 36 (58) | 286 (369) | 2107 (4214) | ∞ | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1 (0) | 8.5 (7) | 57 (48) | 386 (237) | 2553 (2605) | 1.8e5 (2e5) | ∞2e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1 (0) | 15 (21) | 53 (81) | 401 (425) | 4605 (7030) | 1.1e5 (2e5) | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1 (0) | 27 (49) | 114 (213) | 832 (978) | 5602 (9900) | ∞ | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 61 (38) | 28 (36) | 132 (94) | 921 (1033) | 6546 (4736) | ∞ | ∞2e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 17 (9) | 2.1 (1) | 2.4 (1) | 2.1 (1) | 1.5 (0.7) | 1.4 (0.5) | 1.3 (0.4) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 24 (12) | 5.7 (8) | 7.1 (8) | 6.1 (6) | 4.6 (4) | 4.5 (3) | 6.4 (6) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 21 (5) | 3.4 (3) | 3.3 (2) | 2.6 (1) | 1.8 (0.8) | 1.7 (0.8) | 1.7 (0.6) | 15/15 |
| Δ fopt f10, 2-D |
1e1 30 |
1e0 46 |
1e-1 54 |
1e-2 61 |
1e-3 68 |
1e-5 82 |
1e-7 98 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 371 (22) | 452 (555) | 441 (1062) | 435 (758) | 428 (559) | 537 (1084) | 634 (301) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 1.0 (0.6) | 0.86 (0.3) | 0.87 (0.6) | 0.87 (0.5) | 1.2 (1) | 3.9 (4) | 15 (22) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 2.9 (3) | 3.8 (3) | 4.2 (3) | 4.0 (2) | 5.1 (4) | 19 (13) | 150 (269) | 14/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.8 (0.8) | 3.8 (5) | 16 (25) | 70 (99) | 235 (252) | 1.6e4 (2e4) | ∞2e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 9.0 (5) | 8.9 (3) | 10 (3) | 11 (5) | 25 (15) | 40 (23) | 305 (178) | 12/15 |
| GNN-CMA-ES bbob Faury | 21 (16) | 28 (55) | 29 (48) | 29 (41) | 27 (38) | 23 (32) | 20 (27) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 4.4 (3) | 4.1 (2) | 4.6 (1) | 4.4 (2) | 4.4 (1) | 4.5 (0.7) | 4.3 (0.7) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1 (0.5) | 1.3 (0.8) | 1.5 (0.6) | 1.5 (0.4) | 1.4 (0.4) | 1.6 (0.8) | 7.6 (3) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 1.7 (0.5) | 1.5 (0.6) | 1.5 (0.3) | 1.5 (0.2) | 1.4 (0.3) | 1.4 (0.2) | 1.3 (0.2) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 4.6 (4) | 3.7 (3) | 3.5 (1) | 3.2 (1) | 2.9 (2) | 2.6 (1) | 2.3 (1) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 2.7e5 (3e5) | 6.1e5 (8e5) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 2.7e5 (7e5) | 6.1e5 (7e5) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1.3e5 (2e5) | 1.7e5 (2e5) | 1.5e5 (3e5) | 1.3e5 (2e5) | 1.3e5 (1e5) | ∞ | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 307 (385) | 3911 (2946) | 2.8e4 (2e4) | 2.4e5 (8e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 337 (575) | 3109 (2942) | 2.5e4 (2e4) | 4.7e5 (4e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 1.3e5 (1e5) | 1.7e5 (3e5) | 1.5e5 (3e5) | 1.3e5 (2e5) | 1.3e5 (1e5) | ∞ | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 2.4e4 (5e4) | 5.5e4 (8e4) | 1.0e5 (8e4) | 9.5e4 (9e4) | 4.4e5 (4e5) | ∞ | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 1649 (2610) | 1.4e4 (2e4) | 8.1e4 (5e4) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 1639 (1594) | 1.1e4 (2e4) | 1.2e5 (2e5) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.4e4 (5e4) | 6.6e4 (1e5) | 1.0e5 (2e5) | 9.6e4 (7e4) | 2.0e5 (3e5) | ∞ | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 4800 (2e4) | 7057 (2e4) | 2.1e4 (2e4) | 5.0e4 (6e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 4886 (181) | 7500 (2e4) | 2.3e4 (2e4) | 5.6e4 (1e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 106 (115) | 431 (403) | 4193 (5043) | 5.6e4 (5e4) | 4.4e5 (3e5) | ∞ | ∞2e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 168 (247) | 750 (904) | 3559 (2867) | 4.5e4 (4e4) | 2.1e5 (1e5) | ∞ | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 187 (185) | 689 (585) | 8496 (8280) | 1.1e5 (1e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 90 (125) | 1152 (1748) | 1.1e4 (1e4) | 7.9e4 (1e5) | 4.3e5 (7e5) | ∞ | ∞2e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.82 (0.2) | 0.60 (0.2) | 0.61 (0.1) | 0.59 (0.1) | 0.60 (0.2) | 538 (2523) | 1966 (1481) | 8/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 3.2 (2) | 4.2 (3) | 7.8 (4) | 8.4 (10) | 8.5 (10) | 14 (23) | 100 (244) | 13/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 1.5 (0.8) | 1.4 (0.6) | 1.4 (0.4) | 1.4 (0.4) | 1.4 (0.3) | 1.3 (0.3) | 1.2 (0.2) | 15/15 |
| Δ fopt f11, 2-D |
1e1 35 |
1e0 45 |
1e-1 50 |
1e-2 62 |
1e-3 67 |
1e-5 81 |
1e-7 97 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 47 (131) | 155 (425) | 205 (320) | 261 (674) | 359 (912) | 623 (831) | 1053 (2118) | 14/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 0.90 (0.4) | 0.85 (0.5) | 0.92 (0.5) | 0.82 (0.4) | 0.83 (0.2) | 3.3 (7) | 26 (35) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 2.3 (1) | 3.2 (2) | 3.6 (2) | 4.4 (2) | 5.0 (2) | 17 (17) | 127 (219) | 12/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 2.5 (6) | 6.4 (3) | 19 (46) | 38 (65) | 122 (145) | 7707 (7543) | ∞2e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 8.2 (3) | 8.9 (3) | 11 (5) | 14 (5) | 25 (19) | 89 (116) | 332 (189) | 12/15 |
| GNN-CMA-ES bbob Faury | 17 (33) | 34 (44) | 42 (58) | 37 (53) | 38 (54) | 32 (26) | 28 (24) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 5.5 (2) | 5.2 (2) | 5.6 (1) | 4.9 (1) | 4.8 (0.9) | 4.8 (0.7) | 4.7 (0.6) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.0 (0.9) | 1.6 (0.5) | 1.7 (0.5) | 1.5 (0.2) | 1.4 (0.2) | 2.3 (0.3) | 7.3 (5) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 1.8 (0.8) | 1.7 (0.6) | 1.7 (0.5) | 1.5 (0.3) | 1.5 (0.3) | 1.4 (0.2) | 1.3 (0.2) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 2.7 (3) | 4.1 (2) | 4.1 (2) | 3.4 (2) | 3.3 (2) | 2.9 (1) | 2.5 (1) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 8.0e5 (8e5) | 6.2e5 (8e5) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 8.0e5 (2e6) | 6.2e5 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1.6e5 (1e5) | 1.8e5 (3e5) | 5.6e5 (5e5) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 367 (500) | 2567 (2709) | 3.5e4 (1e5) | 2.2e5 (2e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 359 (507) | 2817 (4287) | 3.4e4 (2e4) | 2.3e5 (3e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 1.6e5 (3e5) | 1.8e5 (2e5) | 5.6e5 (8e5) | 4.7e5 (1e6) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 5.0e4 (4e4) | 1.2e5 (8e4) | 1.6e5 (3e5) | 1.4e5 (2e5) | 4.5e5 (4e5) | ∞ | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 1465 (1476) | 8965 (8135) | 7.5e4 (1e5) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 1600 (1911) | 9942 (1e4) | 1.1e5 (1e5) | 2.3e5 (5e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 5.0e4 (9e4) | 1.2e5 (1e5) | 1.2e5 (1e5) | 1.3e5 (2e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 8887 (1e4) | 2.3e4 (3e4) | 6.3e4 (9e4) | 8.4e4 (4e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 8870 (4e4) | 2.4e4 (3e4) | 6.2e4 (1e5) | 5.6e4 (5e4) | 4.3e5 (3e5) | ∞ | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 59 (82) | 646 (540) | 3477 (4306) | 4.4e4 (6e4) | 1.3e5 (1e5) | ∞ | ∞2e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 108 (106) | 788 (775) | 8106 (1e4) | 4.9e4 (6e4) | 4.4e5 (4e5) | ∞ | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 193 (132) | 1589 (1733) | 1.2e4 (7089) | 6.2e4 (7e4) | 4.4e5 (5e5) | ∞ | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 95 (133) | 763 (820) | 7484 (1e4) | 4.9e4 (5e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.71 (0.2) | 0.64 (0.1) | 0.66 (0.2) | 0.61 (0.2) | 0.62 (0.2) | 3344 (2751) | 9136 (9924) | 5/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 3.0 (2) | 5.0 (4) | 6.3 (5) | 5.8 (4) | 8.6 (5) | 21 (16) | 136 (240) | 14/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 1.8 (1.0) | 1.5 (0.8) | 1.7 (0.3) | 1.5 (0.3) | 1.5 (0.3) | 1.4 (0.3) | 1.4 (0.2) | 15/15 |
| Δ fopt f12, 2-D |
1e1 35 |
1e0 46 |
1e-1 75 |
1e-2 94 |
1e-3 105 |
1e-5 153 |
1e-7 195 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 49 (24) | 64 (44) | 97 (128) | 165 (224) | 319 (399) | 365 (299) | 345 (390) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 11 (23) | 20 (14) | 15 (10) | 13 (33) | 12 (29) | 11 (10) | 19 (35) | 13/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.7 (1) | 2.1 (2) | 1.7 (2) | 2.0 (2) | 2.0 (1) | 4.7 (10) | 15 (34) | 14/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 12 (2) | 11 (32) | 11 (11) | 24 (31) | 57 (91) | 3199 (2229) | ∞2e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 7.5 (3) | 7.3 (2) | 6.9 (2) | 7.6 (3) | 8.1 (5) | 11 (6) | 24 (48) | 10/15 |
| GNN-CMA-ES bbob Faury | 26 (43) | 39 (38) | 33 (42) | 29 (27) | 27 (30) | 21 (19) | 17 (17) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 5.9 (6) | 8.1 (4) | 6.5 (13) | 6.5 (12) | 6.6 (11) | 5.9 (8) | 5.4 (6) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.3 (1) | 1.7 (2) | 1.5 (2) | 1.4 (0.7) | 1.4 (2) | 1.4 (2) | 5.6 (15) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2.0 (3) | 3.2 (4) | 2.8 (3) | 2.6 (3) | 2.5 (3) | 2.1 (2) | 3.0 (5) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 20 (26) | 22 (27) | 15 (18) | 13 (13) | 14 (20) | 11 (11) | 9.3 (14) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 3.7e5 (6e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 3.7e5 (5e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1.1e5 (2e5) | 1.2e5 (2e5) | 7.3e4 (8e4) | 6.1e4 (9e4) | 8.4e4 (6e4) | ∞ | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 354 (241) | 2415 (2320) | 1.8e4 (3e4) | 1.5e5 (2e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 387 (335) | 2247 (1381) | 1.8e4 (3e4) | 9.2e4 (1e5) | 1.3e5 (2e5) | ∞ | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 1.1e5 (2e5) | 1.2e5 (2e5) | 7.4e4 (2e5) | 6.0e4 (1e5) | 8.0e4 (1e5) | ∞ | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 8.6e4 (2e5) | 1.2e5 (1e5) | 7.4e4 (1e5) | 6.3e4 (6e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 1813 (2330) | 1.1e4 (2e4) | 8.5e4 (7e4) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 1917 (1811) | 1.5e4 (2e4) | 1.9e5 (2e5) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 8.6e4 (2e5) | 1.2e5 (2e5) | 7.4e4 (5e4) | 6.2e4 (6e4) | 1.3e5 (2e5) | ∞ | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 2.9e4 (6e4) | 3.9e4 (4e4) | 3.4e4 (6e4) | 3.8e4 (6e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 2.9e4 (7e4) | 3.8e4 (2e5) | 4.1e4 (7e4) | 3.8e4 (9e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 119 (122) | 387 (357) | 2541 (4600) | 3.1e4 (5e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 66 (79) | 460 (409) | 2617 (2609) | 9.4e4 (1e5) | 2.8e5 (2e5) | ∞ | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 157 (138) | 971 (516) | 2938 (4098) | 3.4e4 (7e4) | 2.7e5 (3e5) | ∞ | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 148 (109) | 793 (699) | 4605 (4601) | 1.8e4 (1e4) | 1.3e5 (2e5) | ∞ | ∞2e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.8 (3) | 2.5 (3) | 2.1 (4) | 2.0 (4) | 2.0 (4) | 2.2 (4) | 4.9 (10) | 14/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 2.4 (2) | 3.1 (4) | 21 (3) | 38 (130) | 61 (207) | 80 (9) | 745 (1730) | 9/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 1.9 (2) | 2.2 (0.7) | 1.8 (2) | 1.7 (0.8) | 1.6 (1) | 1.4 (1) | 2.8 (4) | 15/15 |
| Δ fopt f13, 2-D |
1e1 23 |
1e0 35 |
1e-1 46 |
1e-2 60 |
1e-3 71 |
1e-5 95 |
1e-7 122 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 21 (22) | 24 (17) | 68 (138) | 123 (237) | 650 (474) | 7970 (1e4) | 4.9e4 (4e4) | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 17 (26) | 38 (54) | 107 (236) | 107 (186) | 367 (757) | 1133 (2147) | 7572 (7613) | 1/15 |
| CG-scipy-2019 bbob Varelas Dahito | 43 (32) | 179 (519) | 241 (467) | 691 (1201) | 1238 (1461) | 1.4e4 (2e4) | ∞2e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 4.4 (11) | 14 (32) | 20 (31) | 173 (405) | 1292 (1450) | ∞ | ∞2e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 4.3 (2) | 6.3 (3) | 12 (13) | 26 (30) | 95 (95) | 232 (469) | 1472 (2549) | 3/15 |
| GNN-CMA-ES bbob Faury | 2.1 (0.9) | 3.1 (2) | 5.4 (7) | 7.9 (15) | 7.7 (13) | 7.5 (10) | 7.8 (9) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.2 (3) | 4.3 (2) | 4.5 (2) | 4.3 (0.9) | 4.3 (1) | 4.4 (0.8) | 4.4 (0.7) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 4.9 (5) | 4.1 (4) | 4.8 (8) | 5.1 (7) | 6.7 (8) | 10 (11) | 30 (21) | 13/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2.0 (0.9) | 2.1 (2) | 1.9 (1) | 1.6 (0.9) | 1.5 (0.8) | 1.4 (0.6) | 2.0 (3) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 49 (60) | 65 (107) | 94 (121) | 244 (443) | 409 (702) | 704 (1631) | 788 (923) | 11/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 2.4e5 (1e5) | 8.0e5 (5e5) | 6.1e5 (4e5) | 4.7e5 (6e5) | 4.0e5 (6e5) | ∞ | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 80 (80) | 972 (1421) | 2.0e4 (3e4) | 2.4e5 (4e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 97 (156) | 869 (1297) | 3.2e4 (3e4) | 4.9e5 (4e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 2.4e5 (2e5) | 8.0e5 (4e5) | 6.1e5 (6e5) | 4.7e5 (6e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 4.3e4 (7e4) | 5.0e4 (7e4) | 5.2e4 (5e4) | 2.4e5 (1e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 239 (200) | 4089 (5653) | 3.2e5 (4e5) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 197 (116) | 5227 (4515) | 1.4e5 (4e5) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 4.4e4 (4e4) | 5.0e4 (9e4) | 5.1e4 (7e4) | 9.9e4 (9e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.3e4 (9e4) | 1.4e4 (3e4) | 3.2e4 (2e4) | 1.1e5 (9e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 1.3e4 (2e4) | 1.5e4 (743) | 3.2e4 (4e4) | 1.5e5 (2e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 10 (10) | 317 (376) | 8290 (1e4) | 1.6e5 (3e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 16 (28) | 210 (163) | 1.0e4 (1e4) | 4.7e5 (8e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 29 (45) | 1011 (954) | 9515 (9722) | 4.9e5 (5e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 24 (35) | 636 (545) | 1.1e4 (1e4) | 4.9e5 (1e6) | ∞ | ∞ | ∞2e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.98 (0.3) | 0.89 (0.3)★2 | 0.82 (0.3)★3 | 1.4 (2)★2 | 1.3 (2)★2 | 1.1e4 (1) | 4.9e4 (4e4) | 4/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 18 (45) | 54 (55) | 143 (206) | 236 (382) | 569 (377) | 1380 (1696) | 1485 (2976) | 4/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2.1 (1) | 1.9 (0.8) | 1.7 (0.6) | 1.6 (0.3) | 1.5 (0.2) | 1.4 (0.3) | 2.8 (3) | 15/15 |
| Δ fopt f14, 2-D |
1e1 1 |
1e0 7.0 |
1e-1 16 |
1e-2 24 |
1e-3 38 |
1e-5 67 |
1e-7 90 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 21 (48) | 21 (41) | 23 (12) | 26 (25) | 31 (24) | 218 (296) | 1780 (2691) | 7/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 4.7 (4) | 2.3 (2) | 1.9 (0.9) | 1.9 (0.7) | 1.6 (0.4) | 1.4 (0.3) | 22 (30) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 5.0 (4) | 1.9 (1) | 1.6 (1) | 1.9 (1) | 1.8 (1) | 1.9 (0.4) | 20 (14) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 3.3 (3) | 1.2 (0.4) | 0.78 (0.2) | 1.3 (0.7) | 36 (29) | 453 (370) | ∞2e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 2.1 (2) | 2.6 (3) | 7.7 (3) | 8.2 (3) | 6.0 (4) | 4.2 (2) | 26 (33) | 15/15 |
| GNN-CMA-ES bbob Faury | 3.5 (4) | 3.7 (3) | 4.3 (2) | 4.3 (2) | 4.5 (0.8) | 4.8 (1) | 5.6 (3) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 4.3 (4) | 3.2 (3) | 3.6 (2) | 4.1 (2) | 4.7 (1) | 4.8 (1) | 4.7 (0.8) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 3.2 (2) | 1.8 (1) | 1.4 (0.8) | 1.5 (0.6) | 1.3 (0.4) | 1.1 (0.2) | 4.9 (11) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3.8 (6) | 3.5 (2) | 2.2 (0.9) | 1.9 (0.7) | 1.5 (0.3) | 1.2 (0.3) | 1.2 (0.2) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 8.4 (16) | 3.7 (4) | 2.4 (2) | 2.9 (2) | 3.7 (2) | 3.9 (1) | 4.6 (1.0) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 5.0e5 (1e6) | 1.1e6 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 5.0e5 (1e6) | 1.1e6 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 3.1e5 (5e5) | 5.7e5 (6e5) | 5.0e5 (8e5) | 5.4e5 (9e5) | 3.4e5 (5e5) | ∞ | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 3.1 (4) | 14 (21) | 176 (250) | 2645 (3390) | 2.0e4 (3e4) | ∞ | ∞2e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 5.7 (4) | 9.1 (13) | 176 (264) | 2246 (3073) | 4.2e4 (9e4) | 4.2e5 (1e6) | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 3.1e5 (5e5) | 5.7e5 (7e5) | 5.0e5 (4e5) | 5.4e5 (5e5) | 3.4e5 (2e5) | 2.0e5 (3e5) | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 4.3 (4) | 1.9e5 (1e5) | 1.9e5 (3e5) | 1.3e5 (2e5) | 1.1e5 (1e5) | 4.3e5 (1e6) | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 6.9 (10) | 70 (94) | 471 (392) | 9703 (6074) | 3.8e5 (1e5) | ∞ | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 20 (20) | 52 (56) | 689 (732) | 7850 (7086) | 1.1e5 (1e5) | ∞ | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 3.1 (3) | 1.9e5 (2e5) | 1.9e5 (3e5) | 1.3e5 (1e5) | 1.1e5 (1e5) | ∞ | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 3.4 (3) | 6.6 (14) | 6.3e4 (1e5) | 4.2e4 (2e4) | 2.9e4 (7e4) | ∞ | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 3.2 (4) | 11 (30) | 6.3e4 (2e5) | 4.2e4 (1e5) | 3.0e4 (3e4) | 1.3e5 (1e5) | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 2.3 (2) | 1.7 (1) | 21 (20) | 242 (291) | 5901 (4189) | ∞ | ∞2e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 2.1 (2) | 4.8 (7) | 52 (54) | 933 (728) | 8479 (9031) | ∞ | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 2.2 (2) | 6.1 (11) | 43 (65) | 565 (817) | 1.1e4 (1e4) | ∞ | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 3.1 (2) | 6.1 (6) | 31 (34) | 761 (1048) | 8504 (6306) | ∞ | ∞2e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 5.1 (4) | 1.6 (0.6) | 1.2 (0.7) | 1.3 (0.5) | 1.1 (0.3) | 0.96 (0.3) | 194 (16) | 14/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 10 (10) | 5.4 (3) | 4.6 (3) | 4.5 (2) | 4.3 (2) | 4.3 (1) | 19 (14) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 5.1 (8) | 2.9 (2) | 2.1 (1) | 1.9 (0.5) | 1.5 (0.5) | 1.2 (0.4) | 1.2 (0.3) | 15/15 |
| Δ fopt f15, 2-D |
1e1 37 |
1e0 291 |
1e-1 1033 |
1e-2 1066 |
1e-3 1113 |
1e-5 1231 |
1e-7 1412 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 13 (20) | 6.8 (9) | 10 (15) | 10 (15) | 10 (14) | 10 (13) | 9.3 (12) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 14 (14) | 4.1 (3) | 5.7 (9) | 5.5 (7) | 5.3 (5) | 4.8 (7) | 4.2 (6) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 12 (7) | 7.2 (9) | 13 (12) | 13 (11) | 12 (21) | 11 (18) | 10 (16) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 0.71 (1) | 2.3 (4) | 3.6 (6) | 3.5 (5) | 4.6 (7) | 8.7 (13) | 625 (609) | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 2.7 (2) | 1.9 (1) | 0.86 (0.7) | 0.92 (0.5) | 0.91 (0.8) | 0.84 (0.5) | 1.4 (1.0) | 15/15 |
| GNN-CMA-ES bbob Faury | 2.2 (5) | 2.5 (2) | 1.8 (2) | 1.8 (2) | 1.8 (1) | 1.7 (2) | 1.6 (1) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1.3 (0.8) | 2.7 (3) | 2.6 (3) | 2.8 (3) | 2.7 (3) | 2.6 (2) | 2.3 (2) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 3.7 (4) | 3.8 (5) | 4.5 (4) | 4.4 (4) | 4.2 (5) | 3.8 (4) | 3.4 (4) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 7.3 (12) | 7.0 (9) | 6.6 (6) | 6.4 (5) | 6.2 (9) | 5.6 (8) | 117 (98) | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 63 (82) | 43 (86) | 48 (77) | 46 (67) | 44 (72) | 40 (30) | 35 (49) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1.5e5 (3e5) | 9.7e4 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.5e5 (4e5) | 9.6e4 (9e4) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 3.6e4 (5e4) | 4.5e4 (6e4) | 2.7e4 (3e4) | 2.7e4 (4e4) | 2.5e4 (3e4) | ∞ | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 17 (21) | 217 (250) | 1483 (1624) | 1.4e4 (2e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 8.3 (6) | 210 (238) | 709 (728) | 8640 (8960) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 3.6e4 (3e4) | 4.5e4 (8e4) | 2.7e4 (5e4) | 2.6e4 (2e4) | 2.5e4 (3e4) | 2.4e4 (2e4) | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1.4e4 (4e4) | 1.1e4 (3e4) | 5367 (7286) | 5322 (8477) | 5514 (1e4) | ∞ | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 52 (52) | 1307 (1426) | 1.4e4 (1e4) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 59 (96) | 1123 (490) | 3083 (4987) | 2.7e4 (5e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 1.4e4 (1e4) | 1.2e4 (8790) | 5356 (5338) | 5305 (3865) | 1.2e4 (3e4) | ∞ | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 3867 (1e4) | 2460 (4118) | 1813 (1978) | 2886 (1460) | 2.7e4 (4e4) | ∞ | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 3863 (2) | 1528 (3661) | 1774 (1472) | 2078 (3354) | 5388 (3631) | ∞ | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 2.4 (3) | 45 (48) | 68 (108) | 1823 (2860) | 1.2e4 (8086) | ∞ | ∞2e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 3.2 (4) | 54 (84) | 211 (325) | 1990 (1927) | 2.6e4 (2e4) | ∞ | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 5.6 (8) | 90 (110) | 271 (269) | 4485 (5206) | 2.5e4 (4e4) | ∞ | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 5.6 (6) | 97 (110) | 263 (614) | 1498 (1789) | 2.6e4 (4e4) | ∞ | ∞2e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 4.9 (5) | 4.9 (5) | 5.1 (5) | 5.0 (3) | 4.8 (6) | 4.3 (3) | 3.8 (3) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 13 (19) | 28 (44) | 19 (13) | 18 (14) | 18 (29) | 16 (11) | 19 (26) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 4.6 (6) | 7.2 (8) | 7.3 (5) | 7.0 (6) | 6.7 (6) | 6.1 (5) | 100 (116) | 0/15 |
| Δ fopt f16, 2-D |
1e1 9.0 |
1e0 50 |
1e-1 174 |
1e-2 326 |
1e-3 358 |
1e-5 409 |
1e-7 538 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 18 (18) | 32 (82) | 11 (3) | 96 (330) | 91 (15) | 86 (255) | 70 (190) | 14/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 184 (147) | 325 (180) | 713 (808) | 1374 (1095) | ∞ | ∞ | ∞2e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 85 (112) | 184 (162) | 363 (173) | 1048 (1434) | 2598 (2902) | ∞ | ∞2e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 2.9 (5) | 2.7 (2) | 4.1 (5) | 5.9 (6) | 16 (26) | 149 (125) | 1663 (3904) | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 1.1 (1) | 2.3 (2) | 2.5 (2) | 4.2 (5) | 24 (9) | 169 (321) | 2613 (4324) | 0/15 |
| GNN-CMA-ES bbob Faury | 3.7 (6) | 6.3 (17) | 2.7 (2) | 1.6 (3) | 1.6 (3) | 1.8 (3) | 1.5 (2) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.4 (2) | 9.1 (14) | 5.1 (10) | 2.9 (5) | 2.7 (5) | 2.8 (2) | 2.3 (1) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 98 (225) | 175 (258) | 163 (208) | 772 (662) | 4001 (4749) | ∞ | ∞2e5 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 8.1 (10) | 17 (23) | 26 (36) | 22 (28) | 23 (40) | 20 (37) | 18 (28) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 29 (86) | 66 (46) | 48 (76) | 83 (121) | 188 (235) | 857 (1521) | 852 (748) | 4/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1.6e4 (6e4) | 5.6e5 (5e5) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.6e4 (6e4) | 2.7e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 50 (27) | 4.0e4 (1e5) | 3.2e4 (4e4) | 1.7e4 (3e4) | 1.6e4 (3e4) | ∞ | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 10 (10) | 14 (11) | 56 (98) | 512 (874) | 5016 (5613) | ∞ | ∞2e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 5.6 (4) | 16 (19) | 126 (165) | 428 (603) | 4799 (1e4) | ∞ | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 25 (63) | 3.6e4 (7e4) | 3.2e4 (4e4) | 1.7e4 (2e4) | 1.6e4 (1e4) | ∞ | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 5.8 (13) | 2169 (8106) | 847 (2890) | 748 (452) | 2550 (5016) | 7.2e4 (9e4) | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 35 (26) | 63 (54) | 266 (371) | 2573 (4193) | 1.8e4 (3e4) | ∞ | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 35 (60) | 80 (69) | 137 (126) | 1819 (2924) | 1.4e4 (1e4) | ∞ | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.9 (4) | 2864 (6) | 838 (2890) | 696 (1698) | 2934 (2688) | ∞ | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 2.6 (2) | 4.6 (7) | 19 (34) | 71 (54) | 1374 (1472) | 7.2e4 (6e4) | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 2.1 (3) | 8.0 (11) | 25 (27) | 66 (115) | 1000 (975) | ∞ | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 2.5 (4) | 6.4 (6) | 21 (22) | 187 (238) | 1499 (1634) | ∞ | ∞2e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 2.8 (2) | 4.2 (6) | 14 (13) | 118 (234) | 1046 (628) | ∞ | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 2.8 (3) | 8.4 (12) | 20 (17) | 102 (102) | 1229 (1804) | 3.2e4 (4e4) | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 1.7 (2) | 6.6 (3) | 44 (43) | 198 (215) | 1123 (865) | ∞ | ∞2e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 3.1e4 (6e4) | 6.4e4 (7e4) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 101 (204) | 140 (213) | 129 (151) | 720 (862) | 2372 (1919) | ∞ | ∞2e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 6.7 (15) | 16 (19) | 23 (23) | 15 (14) | 19 (13) | 19 (24) | 21 (44) | 14/15 |
| Δ fopt f17, 2-D |
1e1 3.0 |
1e0 61 |
1e-1 133 |
1e-2 275 |
1e-3 396 |
1e-5 1086 |
1e-7 1657 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 27 (80) | 15 (22) | 12 (13) | 10 (8) | 10 (6) | 21 (40) | 15 (20) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 27 (63) | 27 (31) | 174 (189) | 1242 (2418) | ∞ | ∞ | ∞2e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 54 (81) | 24 (24) | 257 (221) | 2227 (1774) | ∞ | ∞ | ∞2e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 15 (30) | 12 (13) | 27 (37) | 50 (55) | 219 (269) | ∞ | ∞2e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 1.7 (2) | 1.1 (0.4) | 3.4 (4) | 38 (45) | 207 (306) | 576 (556) | 828 (980) | 2/15 |
| GNN-CMA-ES bbob Faury | 16 (3) | 1.5 (3) | 1.3 (0.5) | 1.1 (0.8) | 1.6 (2) | 1.4 (1) | 1.3 (0.6) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1.7 (2) | 1.6 (3) | 1.2 (2) | 1.5 (0.9) | 1.3 (1) | 1.6 (2) | 1.4 (1.0) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 11 (9) | 14 (22) | 100 (111) | 374 (211) | 3486 (3872) | ∞ | ∞2e5 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 91 (143) | 101 (90) | 231 (280) | 360 (385) | 384 (507) | ∞ | ∞2e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 15 (23) | 6.2 (8) | 9.5 (6) | 28 (39) | 92 (91) | 594 (648) | 390 (495) | 4/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1.7e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.7e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1.0e5 (2e5) | 4.6e5 (2e5) | 2.1e5 (2e5) | 1.0e5 (2e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 7.0 (11) | 12 (19) | 774 (610) | 5.0e4 (5e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 5.4 (6) | 21 (24) | 579 (671) | 2.2e4 (3e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 1.0e5 (5e5) | 4.6e5 (8e5) | 2.1e5 (9e4) | 1.0e5 (1e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 3.8 (3) | 6.6e4 (1e5) | 6.0e4 (5e4) | 3.1e4 (4e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 20 (23) | 78 (92) | 4472 (5182) | 3.3e4 (4e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 37 (48) | 74 (110) | 1470 (1448) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 4.2 (3) | 6.6e4 (8e4) | 6.0e4 (8e4) | 3.1e4 (4e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.6 (2) | 1.2e4 (2e4) | 1.0e4 (1e4) | 7810 (5473) | 7.2e4 (8e4) | ∞ | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 2.1 (2) | 1.2e4 (2e4) | 1.0e4 (2e4) | 1.1e4 (9717) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.3 (1) | 2.7 (4) | 121 (179) | 5256 (7111) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 2.4 (3) | 4.8 (4) | 167 (102) | 5597 (7909) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1.9 (2) | 4.7 (5) | 151 (201) | 5668 (8451) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 3.0 (3) | 6.1 (7) | 251 (197) | 1.1e4 (9192) | ∞ | ∞ | ∞2e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 21 (32) | 40 (87) | 244 (626) | 2426 (1310) | 3620 (5431) | ∞ | ∞2e5 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 58 (89) | 47 (59) | 338 (231) | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 67 (197) | 98 (97) | 322 (249) | 373 (509) | 466 (494) | ∞ | ∞2e5 | 0/15 |
| Δ fopt f18, 2-D |
1e1 19 |
1e0 134 |
1e-1 666 |
1e-2 1249 |
1e-3 1708 |
1e-5 2438 |
1e-7 2858 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 12 (21) | 18 (29) | 6.5 (8) | 6.1 (6) | 7.1 (5) | 74 (126) | 65 (66) | 13/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 204 (297) | 139 (158) | 269 (406) | 1163 (1150) | 1712 (1436) | ∞ | ∞2e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 42 (56) | 74 (112) | 286 (367) | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 5.1 (6) | 3.7 (3) | 14 (29) | 140 (228) | 806 (1675) | ∞ | ∞2e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 2.0 (2) | 2.0 (0.8) | 1.2 (0.8) | 11 (19) | 107 (280) | 1168 (1600) | ∞2e5 | 0/15 |
| GNN-CMA-ES bbob Faury | 4.1 (8) | 3.2 (5) | 0.89 (1) | 0.61 (0.4) | 0.70 (0.7) | 0.96 (0.5) | 0.91 (0.3) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 5.1 (1) | 3.0 (4) | 0.83 (0.6) | 0.67 (0.4) | 0.56 (0.5) | 0.65 (0.4) | 0.75 (0.5) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 23 (9) | 60 (66) | 129 (254) | 1122 (1225) | ∞ | ∞ | ∞2e5 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 64 (79) | 75 (81) | 54 (94) | 195 (189) | 782 (722) | ∞ | ∞2e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 12 (16) | 12 (14) | 15 (30) | 60 (60) | 388 (284) | ∞ | ∞2e5 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 2.1e5 (3e5) | 2.1e5 (3e5) | 4.2e4 (5e4) | 2.2e4 (3e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 9.1 (8) | 84 (98) | 1430 (1521) | 1.2e4 (9981) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 10 (11) | 62 (83) | 652 (872) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 2.1e5 (6e5) | 2.1e5 (3e5) | 4.2e4 (5e4) | 2.3e4 (1e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 7.0e4 (1e5) | 3.0e4 (2e4) | 1.2e4 (7483) | 1.1e4 (2e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 40 (37) | 284 (321) | 3620 (4453) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 53 (61) | 396 (467) | 3983 (4610) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 7.0e4 (1e5) | 3.0e4 (5e4) | 1.2e4 (1e4) | 1.1e4 (1e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.6e4 (3e4) | 5540 (7479) | 2104 (3029) | 1.1e4 (1e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 1.6e4 (5e4) | 5460 (7467) | 2193 (3022) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.7 (2) | 17 (31) | 252 (330) | 1.1e4 (1e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 2.1 (3) | 17 (28) | 372 (540) | 2.3e4 (3e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 2.7 (3) | 40 (44) | 795 (941) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 4.9 (6) | 22 (20) | 477 (435) | 2.3e4 (3e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 101 (249) | 298 (697) | 2687 (3971) | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 51 (128) | 140 (148) | 550 (720) | ∞ | ∞ | ∞ | ∞2e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 57 (70) | 68 (75) | 52 (63) | 226 (195) | 302 (340) | ∞ | ∞2e5 | 0/15 |
| Δ fopt f19, 2-D |
1e1 1 |
1e0 1 |
1e-1 26 |
1e-2 216 |
1e-3 227 |
1e-5 252 |
1e-7 276 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 1 (0) | 1 (0) | 0.62 (0.8) | 5.1 (4) | 5.7 (9) | 8.6 (7) | 11 (8) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 253 (536) | 864 (1090) | 66 (80) | 55 (39) | 52 (69) | 47 (63) | 43 (50) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 191 (309) | 809 (710) | 104 (109) | 50 (60) | 48 (56) | 43 (52) | 40 (29) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 6.9 (11) | 137 (59) | 38 (23) | 17 (34) | 33 (45) | 236 (253) | 1778 (2492) | 1/15 |
| DE-scipy-2019 bbob Varelas Dahito | 6.3 (7) | 53 (46) | 9.4 (7) | 6.5 (6) | 6.9 (4) | 7.3 (5) | 47 (69) | 10/15 |
| GNN-CMA-ES bbob Faury | 1 (0) | 1 (0) | 11 (22) | 7.4 (7) | 7.4 (8) | 7.2 (8) | 6.8 (7) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1 (0) | 1 (0) | 6.4 (8) | 8.3 (15) | 10 (9) | 11 (14) | 12 (8) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 56 (38) | 285 (432) | 24 (27) | 22 (19) | 21 (21) | 22 (14) | 20 (17) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 38 (92) | 285 (353) | 28 (27) | 18 (22) | 17 (26) | 15 (17) | 14 (21) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 5.9 (10) | 121 (178) | 17 (22) | 28 (58) | 27 (14) | 24 (50) | 23 (28) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 1.2 (2) | 1.3 (2) | 12 (9) | 5.2e4 (8e4) | 1.0e5 (2e5) | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.7 (0.8) | 8.1 (10) | 1.4 (1) | 2.1 (1) | 19 (22) | 5.2e4 (4e4) | 1.0e5 (9e4) | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 2.0 (2) | 1.2 (1) | 3.5 (5) | 50 (67) | 951 (950) | 6/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 62 (83) | 233 (303) | 515 (686) | 4690 (7576) | 3.1e4 (6e4) | 1/15 |
| RS-10 bbob Brockhoff Hansen | 19 (18) | 94 (128) | 34 (48) | 71 (56) | 390 (367) | 7005 (5633) | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 2.2 (2) | 10 (14) | 1.9 (3) | 1.6 (2) | 3.3 (2) | 55 (86) | 1723 (1443) | 7/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 5.3 (3) | 4.2 (5) | 12 (16) | 204 (289) | 6475 (7153) | 2/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 207 (228) | 449 (535) | 1943 (1998) | 1.8e4 (1e4) | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 36 (42) | 354 (302) | 123 (171) | 447 (586) | 1780 (986) | 3.3e4 (5e4) | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 1.7 (1) | 12 (17) | 7.2 (9) | 5.0 (5) | 14 (10) | 167 (175) | 3709 (5092) | 2/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 6.1 (8) | 14 (10) | 49 (44) | 441 (356) | 4624 (5261) | 3/15 |
| RS-3 bbob Brockhoff Hansen | 3.0 (2) | 24 (23) | 9.3 (8) | 12 (13) | 32 (48) | 239 (234) | 8111 (6334) | 1/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 17 (15) | 28 (48) | 102 (107) | 791 (760) | 1.9e4 (2e4) | 2/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 14 (18) | 27 (21) | 99 (63) | 1107 (673) | 3.1e4 (7e4) | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 29 (36) | 79 (92) | 181 (221) | 2214 (2657) | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 6.9 (5) | 57 (46) | 16 (15) | 38 (41) | 230 (248) | 2483 (1081) | 1.1e5 (1e5) | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 8.0e5 (2e6) | 2.8e6 (1e7) | 3.5e5 (6e5) | ∞ | ∞ | ∞ | ∞7e5 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 60 (106) | 232 (351) | 37 (70) | 19 (10) | 18 (28) | 17 (26) | 23 (27) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 19 (22) | 161 (309) | 26 (39) | 22 (18) | 21 (35) | 19 (13) | 17 (14) | 15/15 |
| Δ fopt f20, 2-D |
1e1 4.0 |
1e0 61 |
1e-1 365 |
1e-2 366 |
1e-3 366 |
1e-5 370 |
1e-7 375 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 29 (50) | 24 (48) | 136 (300) | 136 (277) | 137 (285) | 137 (297) | 137 (174) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 3.5 (3) | 9.4 (9) | 4.7 (3) | 4.7 (6) | 4.7 (5) | 4.7 (3) | 4.6 (5) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 2.5 (2) | 24 (17) | 13 (17) | 13 (18) | 13 (14) | 13 (18) | 13 (7) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.3 (0.9) | 5.7 (7) | 2.9 (4) | 2.9 (2) | 3.0 (2) | 3.0 (4) | 213 (227) | 2/15 |
| DE-scipy-2019 bbob Varelas Dahito | 1.4 (2) | 4.3 (4) | 1.6 (1.0) | 1.8 (1) | 1.9 (1) | 1.9 (0.9) | 1.9 (1) | 15/15 |
| GNN-CMA-ES bbob Faury | 4.0 (4) | 5.4 (7) | 7.0 (9) | 8.4 (8) | 8.9 (11) | 9.3 (11) | 10 (11) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.8 (2) | 9.0 (6) | 11 (15) | 15 (14) | 16 (28) | 16 (24) | 16 (25) | 14/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 2.5 (1) | 7.3 (9) | 2.1 (3) | 2.1 (3) | 2.1 (3) | 2.1 (3) | 2.1 (3) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 4.7 (5) | 6.2 (9) | 2.7 (3) | 2.7 (3) | 2.8 (3) | 2.8 (3) | 5.2 (5) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 4.0 (5) | 17 (49) | 11 (17) | 11 (17) | 11 (19) | 11 (19) | 11 (17) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 28 (23) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 9.3 (9) | 85 (74) | 261 (193) | 1666 (1537) | 4.0e4 (8e4) | ∞ | ∞2e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 11 (6) | 119 (231) | 192 (186) | 2874 (1630) | 3.9e4 (3e4) | ∞ | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 54 (53) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1.4 (2) | 329 (548) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 69 (67) | 353 (395) | 1333 (1130) | 1.4e4 (2e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 57 (101) | 375 (440) | 1125 (1180) | 1.1e4 (8348) | 7.7e4 (6e4) | ∞ | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 0.93 (0.9) | 272 (181) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 0.98 (0.7) | 6.4 (7) | 22 (19) | 210 (296) | 2490 (3608) | ∞ | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 0.78 (0.9) | 7.9 (11) | 29 (33) | 243 (243) | 3289 (4979) | ∞ | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.7 (1) | 13 (11) | 51 (91) | 322 (350) | 6386 (6833) | ∞ | ∞2e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 2.4 (2) | 19 (16) | 87 (128) | 414 (579) | 1.1e4 (2e4) | ∞ | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 7.0 (9) | 32 (43) | 83 (72) | 838 (853) | 2.4e4 (6e4) | ∞ | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 4.5 (5) | 21 (27) | 180 (240) | 969 (533) | 6908 (1e4) | ∞ | ∞2e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 2.1 (2) | 6.0 (5) | 14 (11) | 14 (13) | 14 (9) | 14 (13) | 14 (13) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 3.3 (3) | 10 (12) | 8.7 (10) | 8.7 (5) | 8.8 (7) | 8.7 (7) | 8.7 (7) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 6.1 (4) | 4.3 (3) | 4.0 (5) | 4.0 (4) | 4.0 (6) | 4.0 (4) | 4.1 (5) | 15/15 |
| Δ fopt f21, 2-D |
1e1 2.0 |
1e0 51 |
1e-1 174 |
1e-2 276 |
1e-3 290 |
1e-5 324 |
1e-7 330 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 15 (10) | 44 (67) | 62 (127) | 39 (37) | 38 (75) | 35 (67) | 35 (68) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 3.2 (4) | 4.6 (3) | 4.8 (6) | 3.1 (4) | 2.9 (4) | 2.7 (3) | 2.7 (3) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 3.7 (4) | 9.1 (12) | 6.0 (10) | 3.8 (6) | 3.6 (6) | 3.3 (6) | 3.5 (5) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.4 (0.8) | 15 (25) | 21 (35) | 14 (22) | 14 (23) | 13 (21) | 13 (21) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 1.0 (0.6) | 1.2 (2) | 0.98 (1) | 0.83 (1.0) | 0.92 (0.8) | 1.1 (0.7) | 2.3 (2) | 15/15 |
| GNN-CMA-ES bbob Faury | 1.1 (1) | 3.3 (9) | 2.8 (7) | 2.3 (3) | 2.2 (7) | 2.3 (2) | 2.4 (5) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1.3 (0.5) | 5.3 (6) | 7.3 (9) | 4.7 (6) | 4.8 (6) | 4.5 (5) | 4.7 (4) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 2.0 (4) | 2.2 (2) | 1.6 (2) | 1.0 (1) | 1.0 (0.7) | 0.93 (1) | 0.96 (1) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2.5 (3) | 4.2 (5) | 8.1 (4) | 5.1 (10) | 4.9 (10) | 4.4 (9) | 4.3 (5) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 1.3 (1) | 23 (74) | 29 (46) | 18 (44) | 17 (42) | 15 (25) | 15 (28) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1.7 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 0.93 (0.6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 0.93 (0.6) | 2.5e5 (4e5) | 1.6e5 (2e5) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 2.7 (4) | 5.6 (5) | 6.2 (8) | 17 (17) | 35 (21) | 288 (232) | 3530 (3450) | 6/15 |
| RS-10 bbob Brockhoff Hansen | 4.2 (4) | 3.0 (3) | 6.7 (6) | 9.0 (14) | 30 (40) | 358 (396) | 3574 (5320) | 9/15 |
| RS-1 bbob Brockhoff Hansen | 0.97 (1) | 2.5e5 (5e5) | 1.6e5 (3e5) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1.1 (1) | 6038 (2e4) | 7664 (8621) | 1.4e4 (3e4) | 1.9e4 (2e4) | 2.5e4 (4e4) | 3.9e4 (3e4) | 2/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 8.3 (14) | 15 (14) | 33 (36) | 50 (56) | 133 (157) | 1187 (1004) | 1.2e4 (1e4) | 0/15 |
| RS-20 bbob Brockhoff Hansen | 15 (12) | 18 (29) | 30 (38) | 33 (36) | 100 (156) | 1389 (1075) | 1.2e4 (6061) | 2/15 |
| RS-2 bbob Brockhoff Hansen | 1.4 (2) | 6039 (9815) | 7692 (8621) | 1.4e4 (2e4) | 1.9e4 (2e4) | 2.5e4 (2e4) | 3.9e4 (3e4) | 2/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 0.90 (0.8) | 0.80 (1) | 5.7 (11) | 1813 (1813) | 2513 (5177) | 3108 (4633) | 3228 (7650) | 10/15 |
| RS-3 bbob Brockhoff Hansen | 1.3 (2) | 1.0 (1) | 4.1 (12) | 1814 (3623) | 2512 (3454) | 3106 (9262) | 3270 (9117) | 10/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.0 (0.9) | 0.62 (0.7) | 0.76 (0.9) | 2.0 (3) | 4.7 (6) | 35 (24) | 542 (701) | 15/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1.2 (1) | 1.3 (1) | 1.9 (1) | 3.8 (5) | 6.4 (7) | 47 (72) | 786 (1308) | 13/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1.7 (1) | 1.4 (1) | 1.8 (1) | 6.7 (7) | 15 (13) | 87 (144) | 952 (1363) | 12/15 |
| RS-6 bbob Brockhoff Hansen | 1.0 (0.6) | 1.2 (2) | 0.78 (1.0) | 2.8 (2) | 8.8 (11) | 57 (96) | 877 (1296) | 13/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 2.1 (4) | 2.3 (2) | 1.8 (3) | 1.2 (2) | 1.1 (2) | 1.1 (1) | 1.2 (1) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 14 (35) | 12 (12) | 11 (6) | 7.0 (13) | 6.9 (13) | 6.6 (5) | 6.6 (4) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3.3 (7) | 3.4 (6) | 2.6 (6) | 1.6 (1) | 1.6 (3) | 1.4 (1) | 1.4 (3) | 15/15 |
| Δ fopt f22, 2-D |
1e1 5.0 |
1e0 27 |
1e-1 168 |
1e-2 218 |
1e-3 249 |
1e-5 289 |
1e-7 306 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 14 (18) | 191 (646) | 338 (1065) | 262 (819) | 231 (788) | 200 (64) | 191 (644) | 14/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 8.5 (14) | 5.2 (7) | 2.8 (3) | 2.2 (4) | 2.0 (3) | 1.8 (1) | 2.1 (2) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 7.4 (15) | 9.1 (20) | 3.4 (6) | 2.7 (4) | 2.4 (2) | 2.2 (3) | 2.7 (3) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 2.0 (3) | 44 (53) | 79 (246) | 63 (189) | 57 (159) | 53 (15) | 217 (246) | 3/15 |
| DE-scipy-2019 bbob Varelas Dahito | 1.7 (2) | 1.9 (2) | 0.87 (1) | 0.88 (0.9) | 1.1 (0.9) | 1.6 (0.8) | 4.5 (3) | 15/15 |
| GNN-CMA-ES bbob Faury | 1.1 (0.9) | 10 (17) | 4.7 (8) | 4.7 (9) | 9.2 (25) | 14 (20) | 13 (34) | 13/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1.0 (1) | 10 (23) | 12 (28) | 13 (23) | 15 (20) | 21 (32) | 20 (65) | 13/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 5.4 (6) | 7.0 (9) | 3.9 (7) | 3.0 (5) | 2.7 (4) | 2.4 (4) | 2.3 (4) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 7.5 (10) | 12 (14) | 3.7 (6) | 2.9 (5) | 2.6 (4) | 2.3 (4) | 2.2 (3) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 4.8 (5) | 140 (235) | 50 (122) | 39 (108) | 34 (94) | 29 (34) | 28 (77) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 3.5e5 (5e5) | 3.0e5 (6e5) | 1.7e5 (2e5) | 1.3e5 (2e5) | 1.1e5 (2e5) | 9.7e4 (1e5) | 9.2e4 (2e5) | 1/15 |
| RS-0p5 bbob Brockhoff Hansen | 3.5e5 (6e5) | 3.0e5 (7e5) | 1.7e5 (3e5) | 1.3e5 (1e5) | 1.1e5 (1e5) | 9.7e4 (2e5) | 9.2e4 (1e5) | 1/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 2.9e4 (2) | 8.5e4 (2e5) | 3.3e4 (5e4) | 3.7e4 (6e4) | 5.2e4 (7e4) | 9.7e4 (1e5) | 9.2e4 (1e5) | 1/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 4.9 (8) | 11 (11) | 4.8 (3) | 10 (13) | 23 (22) | 378 (433) | 5548 (6697) | 2/15 |
| RS-10 bbob Brockhoff Hansen | 5.0 (4) | 7.1 (7) | 3.2 (5) | 8.6 (11) | 23 (25) | 283 (278) | 1739 (996) | 7/15 |
| RS-1 bbob Brockhoff Hansen | 2.9e4 (10) | 8.5e4 (1e5) | 3.3e4 (4e4) | 3.7e4 (4e4) | 5.2e4 (4e4) | 9.7e4 (5e4) | 9.2e4 (2e5) | 1/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 0.84 (0.7) | 1.1e4 (4e4) | 4330 (2977) | 4594 (4587) | 5357 (8033) | 6083 (1e4) | 7653 (1e4) | 7/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 12 (18) | 40 (42) | 21 (20) | 112 (100) | 248 (171) | 1305 (1212) | 2.0e4 (3e4) | 1/15 |
| RS-20 bbob Brockhoff Hansen | 27 (17) | 38 (34) | 27 (37) | 80 (92) | 190 (181) | 1011 (945) | 1.2e4 (6926) | 1/15 |
| RS-2 bbob Brockhoff Hansen | 1.5 (1) | 1.1e4 (2e4) | 4332 (8934) | 4590 (6882) | 5357 (6024) | 6078 (2e4) | 7623 (8186) | 7/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.5 (3) | 0.98 (1) | 1832 (8929) | 2295 (6881) | 2922 (6025) | 2547 (5196) | 3699 (3552) | 10/15 |
| RS-3 bbob Brockhoff Hansen | 2.1 (0.7) | 7.5 (3) | 1834 (2977) | 2295 (6881) | 2923 (2010) | 2558 (8670) | 3680 (8186) | 10/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.2 (1) | 2.5 (2) | 1.2 (1) | 3.5 (2) | 4.7 (8) | 50 (63) | 441 (539) | 14/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1.9 (3) | 2.4 (3) | 1.3 (2) | 4.1 (6) | 11 (10) | 66 (69) | 442 (480) | 14/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1 (2) | 4.0 (3) | 2.1 (3) | 5.8 (9) | 8.3 (11) | 163 (187) | 1702 (2412) | 13/15 |
| RS-6 bbob Brockhoff Hansen | 1.9 (3) | 3.5 (3) | 1.9 (2) | 6.1 (9) | 10 (9) | 91 (86) | 1017 (1586) | 12/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 6.3 (6) | 3.5 (5) | 1.4 (2) | 1.1 (1) | 1.00 (1) | 0.93 (0.8) | 0.96 (0.9) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 17 (22) | 25 (28) | 6.1 (5) | 4.9 (4) | 4.4 (4) | 4.0 (3) | 6.0 (3) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 17 (47) | 13 (25) | 3.4 (4) | 2.6 (3) | 2.3 (3) | 2.0 (2) | 2.0 (1) | 15/15 |
| Δ fopt f23, 2-D |
1e1 8.0 |
1e0 193 |
1e-1 234 |
1e-2 263 |
1e-3 299 |
1e-5 348 |
1e-7 379 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 4.5 (4) | 3.3 (3) | 13 (22) | 24 (25) | 43 (59) | 60 (64) | 66 (18) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 37 (71) | 31 (40) | 171 (139) | 494 (730) | 1938 (1676) | ∞ | ∞2e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 17 (30) | 16 (16) | 201 (155) | 1449 (1517) | ∞ | ∞ | ∞2e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.3 (2) | 1.4 (1) | 29 (42) | 3362 (2369) | ∞ | ∞ | ∞2e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 1.9 (2) | 7.1 (7) | 51 (70) | 164 (249) | 367 (1033) | 676 (433) | ∞2e5 | 0/15 |
| GNN-CMA-ES bbob Faury | 2.6 (2) | 4.2 (4) | 6.7 (8) | 7.0 (7) | 6.4 (7) | 6.0 (6) | 5.9 (6) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.2 (3) | 4.6 (5) | 7.7 (8) | 7.2 (7) | 7.3 (8) | 6.7 (6) | 6.5 (5) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 14 (26) | 11 (19) | 48 (59) | 96 (179) | 157 (124) | 1342 (3015) | ∞2e5 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2.7 (4) | 0.93 (2) | 0.85 (0.4) | 0.83 (0.4) | 0.79 (0.5) | 8580 (2e4) | ∞2e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 1.7 (2) | 6.7 (12) | 49 (62) | 370 (717) | 493 (777) | 516 (779) | 474 (536) | 8/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1.6 (1) | 8.9 (7) | 664 (813) | 1.1e5 (7e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 3.1 (4) | 11 (12) | 1635 (3185) | 1.1e5 (1e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 2.7 (5) | 10 (9) | 1546 (1131) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 3.8 (6) | 34 (38) | 8107 (5599) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 2.5 (3) | 47 (44) | 5387 (6483) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 1.9 (2) | 10 (13) | 768 (774) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 2.0 (3) | 12 (14) | 993 (884) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 16 (22) | 126 (174) | 3.9e4 (4e4) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 20 (15) | 96 (123) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 1.6 (2) | 10 (20) | 795 (1144) | 1.1e5 (1e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.9 (2) | 10 (17) | 1888 (1577) | 1.1e5 (9e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 1.9 (2) | 9.0 (13) | 1766 (2204) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 2.4 (2) | 8.2 (8) | 1364 (2567) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 2.2 (4) | 11 (14) | 1482 (2024) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1.4 (2) | 15 (17) | 2071 (3149) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 2.4 (3) | 8.3 (17) | 2607 (3217) | 1.1e5 (1e5) | ∞ | ∞ | ∞2e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 6684 (2e4) | 7059 (6193) | 1.7e4 (3e4) | 2.0e4 (2e4) | 1.7e4 (3e4) | 6.7e4 (7e4) | ∞7e5 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 14 (22) | 13 (14) | 221 (404) | 1522 (1817) | 9549 (1e4) | ∞ | ∞2e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3.4 (8) | 0.86 (0.9) | 0.78 (0.9) | 0.77 (0.5) | 0.85 (0.9) | 8291 (2e4) | ∞2e5 | 0/15 |
| Δ fopt f24, 2-D |
1e1 18 |
1e0 857 |
1e-1 8515 |
1e-2 23399 |
1e-3 24113 |
1e-5 24721 |
1e-7 24721 |
#succ 5/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 8.0 (8) | 81 (28) | 9.3 (5) | 4.6 (6) | 4.5 (6) | 4.4 (9) | 4.6 (6) | 13/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 12 (16) | 15 (11) | 15 (15) | 20 (34) | 20 (26) | 19 (19) | 19 (28) | 5/15 |
| CG-scipy-2019 bbob Varelas Dahito | 22 (30) | 24 (29) | 21 (44) | 40 (72) | 38 (35) | 37 (74) | 37 (39) | 3/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 9.4 (22) | 6.2 (9) | 13 (13) | 40 (44) | 122 (137) | ∞ | ∞2e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 1.0 (1) | 6.0 (5) | 3.3 (5) | 2.7 (3) | 2.6 (3) | 2.6 (3) | 2.6 (3) | 15/15 |
| GNN-CMA-ES bbob Faury | 1.5 (1) | 8.0 (22) | 5.5 (11) | 5.9 (3) | 5.7 (7) | 5.6 (3) | 5.6 (5) | 2/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1.9 (1) | 18 (25) | 5.1 (3) | 5.7 (6) | 5.5 (9) | 5.4 (8) | 5.4 (8) | 2/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 4.0 (6) | 4.6 (6) | 2.9 (3) | 5.1 (12) | 5.0 (7) | 4.9 (11) | 4.9 (6) | 11/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 6.6 (8) | 5.0 (4) | 5.1 (7) | 12 (9) | 11 (12) | 11 (6) | ∞2e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 2.2 (3) | 52 (67) | 19 (20) | 22 (22) | 21 (24) | 21 (21) | 21 (36) | 5/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 8.7 (10) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 4.9 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 2.7 (2) | 982 (1788) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 6.5 (11) | 62 (64) | 579 (532) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 4.1 (6) | 88 (113) | 345 (369) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 2.1 (3) | 959 (1193) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1.6 (1) | 1.4 (1) | 30 (33) | 168 (181) | 1185 (1016) | ∞ | ∞2e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 30 (28) | 257 (205) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 23 (32) | 395 (426) | 1625 (2143) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 0.97 (0.9) | 3.4 (3) | 20 (23) | 201 (305) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.2 (1) | 7.9 (13) | 47 (54) | 1218 (1410) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 1.7 (1) | 4.9 (5) | 50 (63) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.6 (2) | 10 (14) | 74 (46) | 372 (302) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1.4 (2) | 19 (22) | 128 (69) | 1271 (748) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 3.6 (4) | 21 (18) | 145 (260) | 1260 (1197) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 3.6 (5) | 27 (30) | 170 (83) | 287 (471) | 1210 (2157) | ∞ | ∞2e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 4.4 (6) | 4.4 (4) | 5.1 (4) | 7.0 (4) | 6.8 (4) | 6.6 (13) | 6.6 (4) | 11/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 8.7 (14) | 10 (14) | 20 (26) | 14 (10) | 14 (15) | 13 (12) | 13 (16) | 7/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 4.2 (9) | 6.5 (5) | 6.0 (11) | 5.6 (7) | 5.4 (7) | 5.3 (9) | ∞2e5 | 0/15 |
Previous dimension | Dimension = 3 | Next dimension
| Δ fopt f1, 3-D |
1e1 4.0 |
1e0 8.0 |
1e-1 8.0 |
1e-2 8.0 |
1e-3 8.0 |
1e-5 8.0 |
1e-7 8.0 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 37 (35) | 45 (39) | 83 (50) | 129 (96) | 171 (111) | 263 (182) | 403 (235) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 3.5 (0.6) | 2.1 (0) | 2.1 (0) | 2.1 (0) | 2.2 (0) | 2.2 (0.2) | 2.2 (0) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 2.5 (1) | 1.7 (1.0) | 2.2 (0.6) | 2.2 (0.6) | 2.2 (0.6) | 2.2 (0.6) | 2.2 (0.6) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.8 (1) | 1.3 (0.4) | 2.0 (0.5) | 2.9 (0.7) | 3.7 (0.9) | 5.3 (1) | 7.3 (2) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 1.8 (2) | 13 (7) | 32 (15) | 45 (20) | 46 (11) | 46 (24) | 46 (18) | 15/15 |
| GNN-CMA-ES bbob Faury | 3.5 (5) | 6.5 (5) | 12 (5) | 18 (6) | 24 (8) | 36 (7) | 48 (7) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.0 (4) | 5.8 (4) | 10 (3) | 16 (6) | 22 (8) | 32 (6) | 45 (7) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.7 (1) | 1.2 (0) | 1.2 (0) | 1.2 (0) | 1.2 (0) | 1.2 (0) | 1.2 (0) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 6.3 (5) | 7.2 (3) | 8.7 (2) | 11 (3) | 12 (2) | 15 (3) | 18 (3) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 2.4 (2) | 2.3 (1) | 3.0 (0.4) | 3.1 (0.2) | 3.1 (0.6) | 3.2 (0.2) | 3.6 (0.2) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 3.0e6 (3e6) | 5.3e6 (1e7) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 3.0e6 (6e6) | 5.3e6 (7e6) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 3.8e5 (4e5) | 5.3e6 (2e6) | 5.3e6 (1e7) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 15 (11) | 190 (271) | 7184 (7866) | 2.2e5 (2e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 16 (20) | 423 (624) | 1.1e4 (2e4) | 2.4e5 (2e5) | 2.5e6 (2e6) | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 3.8e5 (8e5) | 5.3e6 (8e6) | 5.3e6 (8e6) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 5.4e4 (4e5) | 1.5e6 (1e6) | 2.4e6 (3e6) | 2.4e6 (2e6) | 2.5e6 (2e6) | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 65 (67) | 2248 (2173) | 4.9e4 (5e4) | 1.1e6 (6e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 153 (186) | 1227 (776) | 5.1e4 (6e4) | 1.8e6 (9e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 5.4e4 (90) | 1.5e6 (1e6) | 2.4e6 (1e6) | 2.4e6 (1e6) | 2.4e6 (3e6) | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 5.0 (15) | 9.5e4 (3e5) | 7.5e5 (2e6) | 1.5e6 (2e6) | 1.6e6 (1e6) | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 3.5 (5) | 9.4e4 (2e5) | 7.5e5 (1e6) | 1.5e6 (3e6) | 2.5e6 (1e6) | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.9 (2) | 25 (37) | 530 (556) | 2.0e4 (2e4) | 7.1e5 (2e6) | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 2.0 (4) | 21 (32) | 1280 (1799) | 2.9e4 (3e4) | 5.9e5 (8e5) | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 2.2 (3) | 54 (78) | 1744 (2039) | 6.6e4 (8e4) | 5.5e6 (4e6) | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 3.3 (5) | 43 (48) | 1494 (1802) | 3.4e4 (4e4) | 5.3e6 (4e6) | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.9 (0.4) | 1 (0) | 1 (0)★4 | 1 (0)★4 | 1 (0)★4 | 1 (0)★4 | 1 (0)★4 | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 4.8 (3) | 6.3 (3) | 9.4 (5) | 12 (7) | 15 (6) | 25 (9) | 58 (38) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 6.6 (6) | 6.9 (3) | 9.2 (4) | 12 (3) | 14 (4) | 18 (4) | 21 (4) | 15/15 |
| Δ fopt f2, 3-D |
1e1 38 |
1e0 42 |
1e-1 43 |
1e-2 44 |
1e-3 45 |
1e-5 47 |
1e-7 48 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 49 (44) | 58 (25) | 74 (62) | 120 (70) | 150 (89) | 426 (405) | 719 (369) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 1.8 (0.8) | 1.8 (0.7) | 1.9 (0.7) | 2.2 (0.8) | 2.5 (2) | 2.7 (1) | 3.0 (2) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 12 (18) | 33 (24) | 73 (45) | 126 (153) | 192 (96) | 691 (589) | 5570 (4761) | 6/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1118 (2406) | 5.0e4 (7e4) | ∞ | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 14 (4) | 17 (3) | 21 (3) | 28 (16) | 48 (38) | 65 (59) | 82 (72) | 15/15 |
| GNN-CMA-ES bbob Faury | 20 (9) | 39 (58) | 54 (38) | 67 (83) | 70 (48) | 70 (81) | 71 (79) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 7.8 (4) | 10 (2) | 11 (2) | 11 (1) | 12 (1) | 14 (1) | 15 (2) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 2.4 (1.0) | 3.0 (2) | 3.7 (2) | 4.1 (1) | 4.5 (1) | 4.8 (2) | 5.3 (0.9) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 5.2 (3) | 6.0 (2) | 6.6 (4) | 6.7 (3) | 6.8 (2) | 7.1 (3) | 7.4 (3) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 1.3 (0.5) | 1.2 (0.5) | 1.3 (0.4) | 1.5 (0.3) | 1.6 (0.5) | 1.7 (0.2) | 2.2 (0.6) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 3.7e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 5.5e4 (6e4) | 1.0e6 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1.1e6 (3e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 3.6e5 (5e5) | 1.0e6 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 1.3e5 (2e5) | 1.1e6 (2e6) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 1.1e6 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 5.4e4 (8e4) | 2.2e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 5.4e4 (1e5) | 1.1e5 (1e5) | 1.0e6 (1e6) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 2460 (3178) | 7.1e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 7264 (5710) | 1.0e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1.3e4 (2e4) | 3.2e5 (5e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 1.4e4 (6813) | 4.9e5 (5e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.1 (0.2) | 1.1 (0.2) | 1.2 (0.2) | 1.3 (0.3) | 1.5 (0.4) | 1.8 (0.3) | 2.1 (0.6) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 6.1 (8) | 11 (7) | 17 (33) | 35 (71) | 41 (85) | 43 (86) | 77 (101) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 5.6 (6) | 5.9 (4) | 6.3 (5) | 6.5 (5) | 7.1 (3) | 7.5 (2) | 8.0 (4) | 15/15 |
| Δ fopt f3, 3-D |
1e1 38 |
1e0 822 |
1e-1 830 |
1e-2 835 |
1e-3 842 |
1e-5 847 |
1e-7 853 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 29 (56) | 8.5 (9) | 17 (11) | 17 (14) | 18 (11) | 19 (13) | 22 (15) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 59 (61) | 21 (36) | 180 (225) | 179 (184) | 177 (198) | 176 (180) | 175 (302) | 13/15 |
| CG-scipy-2019 bbob Varelas Dahito | 110 (129) | 69 (70) | 372 (301) | 369 (439) | 366 (414) | 364 (349) | 362 (323) | 10/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 7.9 (9) | 6.4 (11) | 40 (79) | 40 (79) | 40 (78) | 73 (91) | ∞3e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 6.5 (2) | 1.4 (0.7) | 2.7 (1) | 2.8 (1) | 2.8 (0.5) | 2.8 (3) | 8.0 (16) | 15/15 |
| GNN-CMA-ES bbob Faury | 7.4 (14) | 3.8 (3) | 14 (26) | 14 (20) | 15 (5) | 15 (9) | 15 (23) | 13/15 |
| IPOP-CMA-ES-2019 bbob Faury | 7.4 (11) | 3.3 (4) | 10 (20) | 10 (8) | 10 (9) | 10 (13) | 10 (14) | 14/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 55 (37) | 23 (25) | 236 (316) | 234 (196) | 232 (276) | 231 (393) | 229 (300) | 12/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 74 (70) | 66 (93) | 297 (424) | 295 (271) | 292 (430) | 291 (436) | ∞3e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 5.4 (11) | 1.3 (2) | 7.4 (11) | 7.4 (6) | 7.4 (6) | 7.4 (11) | 7.3 (6) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1.6e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.6e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 9.0e4 (1e5) | 5.1e4 (7e4) | 5.1e4 (6e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 519 (523) | 5.3e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 426 (497) | 1.6e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 9.0e4 (1e5) | 5.1e4 (6e4) | 5.1e4 (7e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1.3e4 (2e4) | 2.4e4 (2e4) | 5.1e4 (2e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 3484 (3139) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 5415 (7324) | 5.3e4 (5e4) | 5.3e4 (7e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 1.2e4 (4e4) | 2.4e4 (1e4) | 5.2e4 (3e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 5712 (2e4) | 1798 (3877) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 5672 (2e4) | 2153 (3905) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 48 (33) | 2578 (3382) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 66 (76) | 4408 (3258) | 5.4e4 (3e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 80 (118) | 8983 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 95 (214) | 8412 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 31 (32) | 10 (10) | 74 (71) | 74 (62) | 73 (67) | 73 (74) | 72 (75) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 149 (308) | 119 (183) | 1211 (1375) | 1204 (1330) | 1194 (892) | 1187 (869) | 2550 (2823) | 1/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 88 (100) | 47 (49) | 309 (324) | 307 (685) | 305 (394) | 303 (429) | ∞3e5 | 0/15 |
| Δ fopt f4, 3-D |
1e1 40 |
1e0 808 |
1e-1 866 |
1e-2 921 |
1e-3 952 |
1e-5 1015 |
1e-7 1044 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 25 (15) | 8.2 (6) | 21 (20) | 20 (19) | 19 (15) | 19 (18) | 22 (18) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 73 (109) | 66 (109) | 302 (530) | 284 (470) | 275 (227) | 258 (265) | 251 (306) | 10/15 |
| CG-scipy-2019 bbob Varelas Dahito | 140 (112) | 214 (137) | 700 (785) | 658 (1185) | 636 (728) | 597 (478) | 581 (900) | 6/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 8.2 (14) | 17 (20) | 143 (101) | 135 (173) | 766 (365) | ∞ | ∞3e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 10 (5) | 2.1 (2) | 8.2 (3) | 7.9 (17) | 7.7 (3) | 7.9 (16) | 32 (39) | 12/15 |
| GNN-CMA-ES bbob Faury | 12 (17) | 56 (57) | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| IPOP-CMA-ES-2019 bbob Faury | 4.8 (2) | 531 (803) | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 64 (74) | 60 (59) | 416 (357) | 391 (377) | 378 (561) | 355 (502) | 345 (524) | 9/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 71 (99) | 20 (21) | 214 (313) | 201 (277) | 195 (340) | 183 (185) | ∞3e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 3.4 (7) | 1.3 (2) | 6.3 (8) | 6.0 (6) | 5.8 (7) | 5.5 (5) | 5.4 (5) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1.5e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.6e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 8.6e4 (2e5) | 5.2e4 (7e4) | 4.9e4 (5e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 2251 (3185) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 2607 (3333) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 8.6e4 (9e4) | 5.2e4 (2e4) | 5.0e4 (1e5) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1.2e4 (4e4) | 2.6e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 1.2e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 1.4e4 (1e4) | 2.7e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 1.4e4 (3e4) | 2.4e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 5405 (65) | 6849 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 5534 (2e4) | 5729 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 179 (255) | 1.2e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 180 (304) | 5.3e4 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 263 (246) | 1.8e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 358 (581) | 1.6e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 34 (44) | 51 (41) | 484 (934) | 455 (396) | 440 (336) | 413 (366) | 402 (718) | 8/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 180 (148) | 203 (257) | 1582 (2811) | 1487 (1424) | 1439 (2205) | 1350 (1501) | ∞3e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 58 (106) | 35 (30) | 143 (123) | 135 (126) | 130 (204) | 122 (119) | 4082 (8764) | 0/15 |
| Δ fopt f5, 3-D |
1e1 7.0 |
1e0 7.0 |
1e-1 7.0 |
1e-2 7.0 |
1e-3 7.0 |
1e-5 7.0 |
1e-7 7.0 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 19 (15) | 36 (52) | 39 (30) | 40 (28) | 40 (64) | 40 (30) | 40 (30) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 2.6 (0.5) | 3.6 (0.9) | 4.0 (0.7) | 4.0 (0.7) | 4.0 (0.7) | 4.0 (0.7) | 4.0 (0.7) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 2.5 (0.4) | 3.6 (0.9) | 3.9 (0.7) | 3.9 (0.7) | 3.9 (0.7) | 3.9 (0.7) | 3.9 (0.7) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.8 (0.4) | 2.7 (0.9) | 2.9 (0.9) | 2.9 (0.7) | 2.9 (0.8) | 2.9 (0.7) | 2.9 (0.8) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 13 (9) | 69 (15) | 120 (48) | 135 (80) | 135 (75) | 135 (88) | 135 (80) | 15/15 |
| GNN-CMA-ES bbob Faury | 4.1 (4) | 5.6 (5) | 5.9 (4) | 5.9 (4) | 5.9 (3) | 5.9 (3) | 5.9 (4) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.8 (2) | 5.2 (3) | 5.5 (2) | 5.6 (2) | 5.6 (2) | 5.6 (2) | 5.6 (2) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 2.0 (0.6) | 2.8 (0.6) | 3.1 (0.4) | 3.1 (0.4) | 3.1 (0.6) | 3.1 (0.4) | 3.1 (0.6) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 6.1 (7) | 9.2 (7) | 9.4 (16) | 9.4 (10) | 9.4 (15) | 9.4 (2) | 9.4 (16) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 5.1 (0.2) | 5.1 (0.2) | 5.1 (0.2) | 5.1 (0.2) | 5.1 (0.2) | 5.1 (0.1) | 5.1 (0.2) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 2.3 (2) | 6.6 (9) | 6.8 (9) | 7.3 (9) | 7.3 (9) | 7.3 (8) | 7.3 (8) | 15/15 |
| RS-10 bbob Brockhoff Hansen | 1.3 (2) | 4.7 (7) | 6.0 (9) | 6.0 (7) | 6.0 (7) | 6.0 (7) | 6.0 (8) | 15/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 1.3 (1) | 2.1 (2) | 2.1 (3) | 2.1 (2) | 2.1 (3) | 2.1 (2) | 2.1 (3) | 15/15 |
| RS-20 bbob Brockhoff Hansen | 0.75 (0.3) | 2.7 (2) | 2.7 (2) | 2.7 (3) | 2.7 (3) | 2.7 (3) | 2.7 (3) | 15/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 25 (24) | 3.0e4 (5e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 6.5 (10) | 130 (226) | 302 (371) | 327 (311) | 327 (298) | 327 (327) | 327 (365) | 15/15 |
| RS-6 bbob Brockhoff Hansen | 7.0 (13) | 59 (75) | 172 (260) | 172 (254) | 172 (132) | 172 (261) | 172 (245) | 15/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.6 (0.5) | 2.4 (0.7) | 2.5 (0.5) | 2.5 (0.7) | 2.5 (0.5) | 2.5 (0.4) | 2.5 (0.7) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 3.4 (2) | 5.3 (3) | 5.7 (3) | 5.7 (2) | 5.7 (3) | 5.7 (3) | 5.7 (3) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 9.0 (15) | 11 (15) | 11 (15) | 11 (17) | 11 (16) | 11 (4) | 11 (3) | 15/15 |
| Δ fopt f6, 3-D |
1e1 34 |
1e0 56 |
1e-1 90 |
1e-2 117 |
1e-3 149 |
1e-5 215 |
1e-7 265 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 28 (25) | 26 (14) | 24 (10) | 24 (16) | 23 (10) | 25 (12) | 32 (15) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 3.9 (2) | 4.3 (3) | 3.5 (2) | 3.3 (1) | 3.0 (1) | 2.8 (1) | 4.3 (2) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 3.6 (2) | 4.8 (2) | 5.2 (3) | 5.5 (2) | 5.5 (1) | 5.7 (2) | 12 (8) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 170 (372) | 353 (526) | 1040 (2598) | 1723 (2230) | 2140 (3669) | 1762 (2205) | ∞3e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 3.0 (2) | 6.5 (3) | 8.5 (2) | 10 (3) | 10 (5) | 11 (8) | 44 (45) | 15/15 |
| GNN-CMA-ES bbob Faury | 2.3 (1) | 3.6 (2) | 3.3 (0.4) | 3.4 (1) | 3.3 (1.0) | 3.0 (0.7) | 3.2 (0.7) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.9 (2) | 3.7 (2) | 3.1 (1) | 3.3 (1) | 3.0 (0.6) | 3.0 (0.7) | 3.1 (0.5) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 2.3 (2) | 3.2 (3) | 3.0 (3) | 2.7 (2) | 2.4 (1) | 2.4 (1) | 2.5 (1) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2.5 (1) | 2.6 (2) | 2.1 (1) | 2.0 (1) | 1.9 (1) | 1.7 (1) | 7.1 (13) | 13/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 4.0 (4) | 6.0 (10) | 4.5 (5) | 3.9 (5) | 3.4 (1) | 2.8 (0.8) | 3.4 (1) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1.2e6 (2e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.2e6 (8e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1.2e6 (1e6) | 7.5e5 (9e5) | 4.7e5 (9e5) | 3.6e5 (4e5) | 2.9e5 (3e5) | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 55 (43) | 1660 (1327) | 3.8e4 (4e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 56 (39) | 1010 (850) | 5.4e4 (5e4) | 3.6e5 (3e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 1.2e6 (8e5) | 7.5e5 (1e6) | 4.7e5 (1e6) | 3.6e5 (4e5) | 2.9e5 (3e5) | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 2.4e5 (2e5) | 7.5e5 (4e5) | 4.7e5 (6e5) | 3.7e5 (3e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 339 (302) | 1.4e4 (7863) | 8.1e4 (2e5) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 550 (334) | 1.3e4 (1e4) | 1.5e5 (2e5) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.4e5 (3e5) | 7.5e5 (1e6) | 4.7e5 (4e5) | 3.8e5 (4e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 5.9e4 (2e5) | 2.2e5 (2e5) | 2.2e5 (2e5) | 3.6e5 (2e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 5.9e4 (4e4) | 2.1e5 (4e5) | 2.2e5 (3e5) | 3.6e5 (4e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 23 (64) | 147 (125) | 1625 (1011) | 1.1e5 (1e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 11 (9) | 149 (159) | 5376 (7387) | 1.8e5 (2e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 9.4 (12) | 269 (264) | 9062 (1e4) | 3.7e5 (4e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 9.0 (8) | 400 (607) | 6508 (3861) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 5.8 (4) | 4.4 (3) | 3.4 (2) | 3.0 (2) | 2.5 (1) | 2.2 (0.7) | 2.3 (1) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 5.4 (4) | 8.9 (6) | 8.8 (6) | 11 (6) | 13 (17) | 22 (27) | 216 (178) | 8/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 4.3 (3) | 3.0 (2) | 2.4 (2) | 2.2 (1) | 2.0 (1) | 2.0 (1) | 6.5 (11) | 14/15 |
| Δ fopt f7, 3-D |
1e1 11 |
1e0 65 |
1e-1 342 |
1e-2 464 |
1e-3 482 |
1e-5 482 |
1e-7 535 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 16 (20) | 13 (19) | 6.4 (7) | 6.3 (5) | 7.8 (7) | 7.8 (7) | 7.8 (6) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 14 (11) | 97 (70) | 452 (379) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 26 (22) | 63 (61) | 353 (412) | 9413 (7435) | ∞ | ∞ | ∞3e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 4.9 (6) | 6.1 (8) | 8.1 (15) | 127 (210) | 272 (397) | 272 (549) | 245 (274) | 14/15 |
| DE-scipy-2019 bbob Varelas Dahito | 3.6 (3) | 3.3 (2) | 1.6 (1.0) | 33 (80) | 89 (190) | 89 (183) | 160 (242) | 10/15 |
| GNN-CMA-ES bbob Faury | 2.3 (2) | 1.2 (0.7) | 1.3 (2) | 1.3 (2) | 1.3 (1) | 1.3 (2) | 1.3 (1) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.8 (4) | 2.5 (2) | 0.79 (0.6) | 0.76 (0.4) | 0.78 (0.6) | 0.78 (0.6) | 0.77 (0.6) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 16 (11) | 124 (192) | 276 (266) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 165 (290) | 150 (124) | 302 (294) | 681 (553) | 978 (1500) | 978 (1400) | 881 (1071) | 7/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 17 (41) | 24 (18) | 13 (13) | 101 (225) | 143 (294) | 143 (449) | 155 (221) | 14/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1.1e6 (9e5) | 1.8e5 (1e5) | 1.2e5 (1e5) | 9.1e4 (1e5) | 8.7e4 (1e5) | 8.7e4 (5e4) | 7.9e4 (9e4) | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.1e6 (1e6) | 1.8e5 (2e5) | 1.2e5 (1e5) | 9.1e4 (1e5) | 8.7e4 (1e5) | 8.7e4 (7e4) | 7.9e4 (1e5) | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 5.5e5 (7e5) | 1.8e5 (3e5) | 5.7e4 (7e4) | 4.2e4 (2e4) | 4.1e4 (9e4) | 4.1e4 (3e4) | 3.7e4 (7e4) | 2/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 23 (19) | 120 (129) | 1681 (2025) | 1.0e4 (1e4) | 2.0e4 (2e4) | 2.0e4 (2e4) | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 20 (21) | 115 (114) | 1297 (2026) | 1.9e4 (3e4) | 8.7e4 (1e5) | 8.7e4 (2e5) | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 5.5e5 (3e5) | 1.8e5 (2e5) | 5.7e4 (6e4) | 4.2e4 (5e4) | 4.1e4 (7e4) | 4.1e4 (5e4) | 3.7e4 (4e4) | 2/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 6.8e4 (2e5) | 4.0e4 (3e4) | 1.3e4 (2e4) | 1.8e4 (3e4) | 1.8e4 (2e4) | 1.8e4 (2e4) | 1.8e4 (1e4) | 1/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 216 (383) | 1392 (1636) | 1.1e4 (1e4) | 9.6e4 (8e4) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 250 (277) | 1231 (921) | 1.1e4 (2e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 6.8e4 (1e5) | 4.0e4 (5e4) | 1.3e4 (3e4) | 1.8e4 (2e4) | 1.8e4 (4e4) | 1.8e4 (5e4) | 1.7e4 (3e4) | 1/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 15 (7) | 8057 (3086) | 5891 (8825) | 6281 (9646) | 8001 (2e4) | 8001 (1e4) | 1.4e4 (2e4) | 0/15 |
| RS-3 bbob Brockhoff Hansen | 13 (40) | 8197 (1e4) | 5921 (6581) | 6187 (1e4) | 8756 (1e4) | 8756 (1e4) | 1.4e4 (1e4) | 2/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 3.4 (6) | 16 (23) | 101 (163) | 2851 (3113) | 7020 (8473) | 7020 (6078) | 3.9e4 (4e4) | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 5.1 (3) | 23 (32) | 144 (162) | 4762 (4463) | 1.3e4 (1e4) | 1.3e4 (1e4) | 7.9e4 (5e4) | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 7.1 (9) | 45 (55) | 359 (314) | 5009 (8692) | 9927 (2e4) | 9927 (1e4) | 8.4e4 (1e5) | 0/15 |
| RS-6 bbob Brockhoff Hansen | 6.8 (5) | 36 (83) | 207 (246) | 6487 (1e4) | 2.6e4 (5e4) | 2.6e4 (4e4) | 7.9e4 (8e4) | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 24 (29) | 136 (185) | 414 (435) | 9546 (1e4) | 9190 (4824) | 9190 (7002) | 8279 (4907) | 1/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 32 (39) | 112 (86) | 1477 (1834) | 9562 (9698) | ∞ | ∞ | ∞3e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 138 (117) | 455 (628) | 360 (858) | 2019 (1175) | 9158 (2e4) | 9158 (5602) | 8251 (9252) | 1/15 |
| Δ fopt f8, 3-D |
1e1 27 |
1e0 45 |
1e-1 152 |
1e-2 179 |
1e-3 188 |
1e-5 198 |
1e-7 208 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 13 (14) | 40 (83) | 54 (62) | 85 (141) | 138 (60) | 310 (421) | 520 (504) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 3.0 (3) | 3.7 (2) | 1.4 (1.0) | 1.4 (0.6) | 1.4 (0.6) | 1.4 (0.3) | 1.3 (0.3) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.5 (0.8) | 2.9 (2) | 1.6 (0.3) | 1.7 (0.6) | 1.9 (0.6) | 2.3 (0.8) | 2.4 (1) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 0.61 (0.3)★ | 174 (434) | 96 (140) | 1112 (1224) | 6982 (9630) | ∞ | ∞3e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 8.3 (5) | 13 (8) | 6.0 (3) | 6.5 (3) | 6.3 (0.9) | 6.4 (3) | 6.1 (3) | 15/15 |
| GNN-CMA-ES bbob Faury | 2.9 (1) | 5.0 (4) | 2.7 (1) | 3.1 (2) | 3.3 (1) | 3.7 (1) | 4.0 (1) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.2 (1) | 6.5 (5) | 3.5 (2) | 3.7 (2) | 3.8 (2) | 4.1 (2) | 4.4 (2) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.2 (0.5) | 2.0 (2) | 0.86 (0.5) | 0.86 (0.3) | 0.87 (0.4) | 0.88 (0.4) | 0.87 (0.4) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2.7 (0.9) | 3.4 (3) | 1.5 (0.8) | 1.4 (0.6) | 1.4 (0.6) | 1.5 (0.5) | 1.5 (0.4) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 2.5 (2) | 5.9 (10) | 3.0 (3) | 3.0 (2) | 3.3 (3) | 3.3 (3) | 3.3 (3) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 7.2e5 (9e5) | 4.3e5 (5e5) | 2.8e5 (3e5) | 2.4e5 (2e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 7.2e5 (9e5) | 4.3e5 (6e5) | 2.8e5 (3e5) | 2.3e5 (2e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 7.2e5 (6e5) | 4.3e5 (1e6) | 1.3e5 (1e5) | 2.4e5 (4e5) | 2.3e5 (3e5) | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 320 (300) | 1.1e4 (2e4) | 6.5e4 (8e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 372 (219) | 1.6e4 (3e4) | 8.9e4 (1e5) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 7.2e5 (1e6) | 4.3e5 (3e5) | 1.3e5 (2e5) | 2.4e5 (2e5) | 2.3e5 (2e5) | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 2.8e4 (8e4) | 3.0e4 (5e4) | 2.0e4 (5e4) | 7.3e4 (1e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 5055 (5691) | 1.1e5 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 3454 (2980) | 6.6e4 (6e4) | 2.8e5 (3e5) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.8e4 (6e4) | 3.3e4 (1e5) | 2.3e4 (3e4) | 4.1e4 (4e4) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 26 (31) | 304 (211) | 2621 (2444) | 5.4e4 (4e4) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 19 (8) | 264 (288) | 1742 (1662) | 5.2e4 (5e4) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 19 (20) | 542 (312) | 4977 (5333) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 54 (67) | 1413 (1765) | 1.0e4 (9459) | 2.4e5 (5e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 90 (128) | 1284 (1234) | 1.7e4 (2e4) | 1.1e5 (2e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 132 (200) | 2746 (5649) | 4.8e4 (4e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.9 (1) | 3.2 (3) | 1.2 (0.9) | 1.2 (0.7) | 1.2 (0.6) | 1.2 (0.5) | 1.1 (0.7) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 3.3 (3) | 11 (15) | 5.8 (5) | 6.3 (3) | 7.0 (5) | 7.7 (4) | 19 (13) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2.8 (2) | 4.8 (2) | 1.8 (0.7) | 1.7 (0.6) | 1.7 (0.6) | 1.8 (0.6) | 1.9 (0.7) | 15/15 |
| Δ fopt f9, 3-D |
1e1 21 |
1e0 65 |
1e-1 127 |
1e-2 149 |
1e-3 159 |
1e-5 169 |
1e-7 178 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 1.1 (1) | 3.8 (2) | 16 (18) | 43 (78) | 70 (104) | 155 (265) | 330 (372) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 2.9 (1) | 2.4 (2) | 1.6 (1.0) | 1.6 (0.7) | 1.6 (0.7) | 1.5 (0.5) | 1.5 (0.6) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 2.3 (1) | 2.2 (2) | 2.1 (0.8) | 2.2 (1) | 2.4 (0.6) | 2.7 (1) | 2.8 (1) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.1 (2) | 17 (56) | 25 (13) | 1141 (1418) | 3946 (4520) | 1.2e4 (1e4) | ∞3e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 12 (6) | 10 (6) | 7.4 (2) | 7.5 (3) | 7.1 (3) | 6.8 (2) | 6.5 (2) | 15/15 |
| GNN-CMA-ES bbob Faury | 3.3 (2) | 4.4 (3) | 4.2 (2) | 4.4 (2) | 4.6 (2) | 4.8 (1) | 5.1 (1) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.3 (1) | 5.6 (6) | 4.4 (4) | 4.5 (3) | 4.6 (3) | 5.0 (3) | 5.2 (2) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.4 (0.3) | 1.1 (0.4) | 0.81 (0.4) | 0.85 (0.6) | 0.86 (0.3) | 0.87 (0.5) | 0.87 (0.5) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2.8 (0.8) | 2.5 (2) | 1.7 (0.8) | 1.6 (0.7) | 1.6 (0.6) | 1.6 (0.3) | 1.7 (0.5) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 3.8 (1) | 4.9 (4) | 4.4 (3) | 4.5 (3) | 4.7 (2) | 4.7 (1) | 4.7 (2) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 0.37 (0.3) | 2.3 (2) | 153 (226) | 1.3e5 (1e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 0.31 (0.2) | 2.4 (3) | 112 (145) | 2.8e5 (5e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 0.80 (1) | 4.3 (6) | 121 (200) | 2048 (1534) | 2.7e5 (3e5) | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 510 (504) | 4641 (6255) | 1.7e5 (2e5) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 399 (305) | 6174 (7178) | 8.0e4 (1e5) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 0.79 (0.7) | 13 (23) | 154 (239) | 2561 (3512) | 4.1e4 (3e4) | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 4.1 (4) | 52 (49) | 875 (1007) | 2.2e4 (2e4) | 2.7e5 (3e5) | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 3059 (3563) | 6.6e4 (6e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 2828 (2053) | 4.9e4 (5e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 4.9 (4) | 57 (64) | 512 (481) | 3.7e4 (6e4) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 15 (16) | 170 (189) | 2213 (2098) | 6.6e4 (6e4) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 14 (16) | 192 (260) | 3134 (3531) | 9.0e4 (1e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 38 (39) | 487 (450) | 4660 (4452) | 3.0e5 (5e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 72 (96) | 817 (1314) | 1.7e4 (3e4) | 3.0e5 (4e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 97 (85) | 1694 (2214) | 2.5e4 (2e4) | 1.4e5 (1e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 98 (120) | 1291 (873) | 2.5e4 (3e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.7 (0.9) | 2.2 (1) | 1.5 (0.8) | 1.4 (0.8) | 1.4 (0.6) | 1.4 (0.7) | 1.3 (0.5) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 2.7 (2) | 4.5 (3) | 4.3 (4) | 4.9 (4) | 5.5 (4) | 12 (10) | 32 (35) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3.2 (2) | 2.1 (1) | 1.5 (0.7) | 1.5 (0.4) | 1.5 (0.5) | 1.6 (0.4) | 1.7 (0.3) | 15/15 |
| Δ fopt f10, 3-D |
1e1 114 |
1e0 152 |
1e-1 168 |
1e-2 180 |
1e-3 194 |
1e-5 218 |
1e-7 242 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 105 (143) | 317 (377) | 536 (508) | 796 (589) | 1085 (845) | 2077 (1895) | 4516 (5046) | 4/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 0.55 (0.2) | 0.47 (0.2) | 0.48 (0.2) | 0.49 (0.2) | 0.52 (0.2) | 0.95 (1) | 13 (15) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 5.1 (3) | 8.7 (6) | 27 (11) | 35 (38) | 95 (147) | 401 (322) | 1943 (2469) | 3/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 548 (1048) | 1.3e4 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 6.6 (3) | 7.2 (3) | 8.5 (1) | 10 (4) | 11 (9) | 33 (33) | 230 (354) | 11/15 |
| GNN-CMA-ES bbob Faury | 9.4 (11) | 16 (21) | 18 (15) | 18 (23) | 18 (10) | 16 (11) | 15 (19) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.0 (0.8) | 2.7 (0.5) | 2.7 (0.3) | 2.8 (0.3) | 2.9 (0.5) | 2.9 (0.5) | 3.0 (0.4) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 0.77 (0.2) | 0.92 (0.4) | 1.0 (0.3) | 1.0 (0.3) | 1.1 (0.3) | 2.0 (2) | 9.2 (10) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 1.4 (1) | 1.4 (0.8) | 1.9 (1) | 2.1 (2) | 2.0 (1) | 1.9 (1) | 1.8 (1) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 3.4 (1) | 3.0 (1) | 3.1 (1) | 3.1 (1) | 3.0 (1) | 2.8 (1.0) | 2.7 (1) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 1.2e4 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 1.7e4 (2e4) | 2.9e5 (5e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 4.2e4 (9e4) | 8.7e4 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 1.8e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 3.8e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 4.2e4 (5e4) | 8.7e4 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 8155 (2e4) | 3.1e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 7458 (7272) | 3.4e4 (7e4) | 2.5e5 (2e5) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1738 (1167) | 2.7e4 (3e4) | 2.6e5 (2e5) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 2382 (2736) | 5.9e4 (8e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 4696 (3785) | 8.7e4 (7e4) | 2.6e5 (3e5) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 2997 (2794) | 6.1e4 (9e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.38 (0.3) | 0.34 (0.2) | 0.34 (0.2) | 0.38 (0.2) | 0.39 (0.2) | 1.3e4 (9043) | 1.5e4 (3e4) | 8/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 9.4 (8) | 18 (24) | 38 (37) | 53 (54) | 84 (124) | 884 (1084) | 2934 (1842) | 1/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 1.9 (0.9) | 1.9 (1.0) | 1.9 (0.7) | 2.1 (1) | 2.1 (1) | 2.1 (1) | 2.0 (1.0) | 15/15 |
| Δ fopt f11, 3-D |
1e1 67 |
1e0 105 |
1e-1 227 |
1e-2 263 |
1e-3 277 |
1e-5 302 |
1e-7 327 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 23 (22) | 54 (54) | 43 (37) | 56 (33) | 76 (62) | 155 (113) | 242 (190) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 0.60 (0.4) | 0.46 (0.2) | 0.25 (0.1) | 0.24 (0.1) | 0.26 (0.1) | 2.4 (6) | 45 (74) | 13/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.8 (0.9) | 2.2 (1) | 1.8 (0.9) | 1.8 (0.5) | 2.6 (2) | 14 (14) | 629 (567) | 3/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 2.7 (3) | 11 (15) | 137 (82) | 670 (610) | 7385 (8227) | ∞ | ∞3e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 8.8 (5) | 8.9 (2) | 5.1 (1) | 7.9 (7) | 47 (94) | 143 (157) | 1381 (1354) | 2/15 |
| GNN-CMA-ES bbob Faury | 16 (19) | 20 (18) | 12 (10) | 11 (8) | 12 (6) | 11 (8) | 10 (7) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.9 (2) | 3.3 (1) | 1.8 (0.4) | 1.8 (0.3) | 1.8 (0.4) | 2.0 (0.2) | 2.1 (0.2) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.2 (0.7) | 1.1 (0.3) | 0.70 (0.3) | 0.88 (1.0) | 1.1 (0.7) | 1.9 (2) | 27 (68) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3.7 (4) | 3.6 (2) | 1.9 (1) | 1.9 (0.8) | 1.8 (1) | 1.8 (0.8) | 1.7 (1) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 4.3 (5) | 5.1 (4) | 2.6 (2) | 2.5 (2) | 2.5 (2) | 2.6 (1) | 2.5 (1.0) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 2.9e5 (5e5) | 4.0e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 2.9e5 (2e5) | 4.0e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1.8e5 (1e5) | 4.0e5 (5e5) | 1.9e5 (1e5) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 681 (810) | 1.7e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 906 (489) | 1.7e4 (3e4) | 9.3e4 (5e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 1.8e5 (8e4) | 4.0e5 (3e5) | 1.9e5 (2e5) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 2.3e4 (4e4) | 1.1e5 (2e5) | 1.9e5 (2e5) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 7064 (5871) | 8.8e4 (6e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 7578 (1e4) | 4.0e5 (8e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.5e4 (2e4) | 1.2e5 (9e4) | 1.9e5 (2e5) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 3355 (401) | 2.0e4 (3e4) | 3.1e4 (2e4) | 1.7e5 (1e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 3288 (1e4) | 2.0e4 (3e4) | 3.1e4 (2e4) | 1.6e5 (1e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 67 (75) | 1323 (2346) | 1.7e4 (3e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 122 (127) | 1492 (1164) | 2.5e4 (4e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 252 (315) | 3694 (6245) | 4.1e4 (5e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 159 (145) | 3400 (5911) | 4.1e4 (5e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.51 (0.2) | 0.38 (0.1) | 0.20 (0.1) | 0.20 (0.0) | 0.21 (0.1) | 438 (1529) | 2124 (4721) | 7/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 4.9 (7) | 7.0 (5) | 5.7 (3) | 7.8 (5) | 12 (14) | 256 (252) | 6294 (1e4) | 1/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3.3 (3) | 4.3 (1) | 2.3 (2) | 2.0 (2) | 2.0 (2) | 2.0 (0.4) | 1.9 (1) | 15/15 |
| Δ fopt f12, 3-D |
1e1 65 |
1e0 168 |
1e-1 338 |
1e-2 401 |
1e-3 445 |
1e-5 696 |
1e-7 790 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 1719 (3208) | 1629 (2060) | 1727 (2869) | 2612 (2810) | 4427 (5056) | 6224 (3370) | 1.1e4 (1e4) | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 7.7 (7) | 4.2 (4) | 2.6 (2) | 2.4 (2) | 2.3 (2) | 11 (6) | 76 (111) | 10/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.6 (0.6) | 1.6 (0.9) | 2.1 (3) | 2.3 (2) | 2.5 (3) | 30 (44) | 312 (779) | 7/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.5 (1) | 2.6 (7) | 3.8 (10) | 8.1 (18) | 45 (72) | ∞ | ∞3e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 18 (11) | 11 (6) | 7.0 (2) | 7.2 (2) | 7.4 (3) | 6.4 (3) | 194 (198) | 7/15 |
| GNN-CMA-ES bbob Faury | 17 (33) | 13 (16) | 8.5 (9) | 8.9 (10) | 8.5 (7) | 6.2 (6) | 6.9 (8) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 7.6 (12) | 6.9 (7) | 5.1 (6) | 5.6 (7) | 5.4 (8) | 4.4 (5) | 4.7 (8) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.7 (1) | 1.3 (1) | 1.0 (1) | 1.0 (0.9) | 1.0 (0.6) | 0.88 (0.6) | 24 (4) | 14/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 5.0 (6) | 3.4 (2) | 2.2 (2) | 2.0 (2) | 2.1 (2) | 1.9 (1.0) | 60 (142) | 10/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 12 (23) | 10 (10) | 6.8 (6) | 6.2 (5) | 6.0 (5) | 4.5 (4) | 4.5 (4) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 3.2e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 6.9e5 (8e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 6.6e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 3.1e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 8.4e4 (9e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 1.5e5 (5e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.2e5 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 6.6e5 (6e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1.5e5 (2e5) | 2.6e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 1.5e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 2.8 (3) | 1.9 (3) | 1.3 (2) | 1.2 (1) | 1.2 (1) | 0.87 (1) | 3.8 (9) | 13/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 11 (15) | 16 (22) | 24 (45) | 27 (19) | 45 (88) | 449 (978) | 647 (1073) | 6/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 5.9 (4) | 3.9 (3) | 2.5 (2) | 2.6 (2) | 2.4 (1) | 1.9 (2) | 101 (201) | 10/15 |
| Δ fopt f13, 3-D |
1e1 49 |
1e0 85 |
1e-1 108 |
1e-2 136 |
1e-3 215 |
1e-5 281 |
1e-7 365 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 50 (51) | 251 (469) | 5203 (7230) | 1.8e4 (2e4) | ∞ | ∞ | ∞6e5 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 1.2 (0.4) | 0.98 (0.2) | 1.1 (0.2) | 1.0 (0.2) | 1.0 (0.9) | 315 (415) | 1.2e4 (1e4) | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 11 (12) | 27 (37) | 77 (71) | 217 (379) | 825 (744) | 4926 (6684) | ∞3e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.5 (1) | 4.3 (5) | 12 (12) | 59 (87) | ∞ | ∞ | ∞3e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 7.4 (4) | 9.4 (2) | 19 (19) | 46 (68) | 117 (102) | 507 (463) | 1.2e4 (1e4) | 0/15 |
| GNN-CMA-ES bbob Faury | 4.0 (4) | 4.9 (6) | 7.7 (13) | 9.2 (17) | 8.1 (9) | 7.6 (9) | 6.8 (10) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.7 (1) | 3.0 (0.5) | 3.3 (0.6) | 3.4 (0.7) | 2.6 (0.4) | 2.6 (0.3) | 2.6 (0.2)★2 | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 4.1 (5) | 263 (12) | 224 (52) | 187 (609) | 133 (391) | 265 (505) | 2537 (4107) | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3.8 (3) | 2.9 (2) | 2.5 (2) | 2.4 (1) | 1.6 (0.9) | 1.9 (1) | 122 (276) | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 23 (29) | 69 (162) | 205 (535) | 397 (683) | 325 (457) | 1513 (2204) | 1894 (2228) | 3/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 5145 (4526) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 8441 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1.7e5 (2e5) | 2.6e5 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 1.1e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 8.9e4 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 1.7e5 (3e5) | 5.0e5 (7e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.1e4 (3e4) | 1.5e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 9864 (3e4) | 7.2e4 (8e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1005 (2245) | 7.3e4 (6e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 922 (858) | 1.5e5 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1427 (1783) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 1735 (2172) | 5.3e5 (7e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.99 (0.2) | 0.80 (0.1)★2 | 0.82 (0.1)★2 | 0.79 (0.1)★3 | 0.60 (0.1)★4 | 6.5e4 (9e4) | ∞8e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 16 (30) | 38 (50) | 76 (87) | 199 (330) | 249 (348) | 2027 (1855) | ∞3e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 4.0 (3) | 3.3 (2) | 3.1 (2) | 3.1 (2) | 2.3 (0.9) | 3.3 (3) | 471 (823) | 0/15 |
| Δ fopt f14, 3-D |
1e1 2.0 |
1e0 17 |
1e-1 28 |
1e-2 43 |
1e-3 71 |
1e-5 110 |
1e-7 194 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 19 (39) | 19 (27) | 24 (19) | 30 (22) | 29 (13) | 195 (218) | 3526 (3197) | 2/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 3.5 (3) | 1.4 (1) | 1.5 (0.8) | 1.6 (0.4) | 1.2 (0.4) | 1.2 (0.2) | 63 (121) | 13/15 |
| CG-scipy-2019 bbob Varelas Dahito | 5.1 (4) | 1.6 (1.0) | 1.6 (0.9) | 1.6 (0.6) | 1.6 (0.6) | 2.9 (2) | 88 (124) | 14/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 2.3 (2) | 0.76 (0.3) | 0.70 (0.2)★ | 1.0 (0.5) | 55 (62) | 1.9e4 (3e4) | ∞3e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 2.3 (4) | 3.0 (3) | 10 (4) | 9.4 (4) | 6.5 (3) | 4.7 (2) | 82 (210) | 15/15 |
| GNN-CMA-ES bbob Faury | 3.0 (6) | 3.4 (2) | 4.5 (1) | 4.8 (1) | 4.6 (1) | 5.0 (2) | 4.5 (4) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1.5 (2) | 3.2 (2) | 4.3 (2) | 4.3 (2) | 3.9 (1) | 4.2 (0.8) | 3.4 (0.9) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 4.0 (4) | 1.3 (0.6) | 1.4 (0.6) | 1.3 (0.4) | 1.1 (0.4) | 1.1 (0.3) | 11 (10) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 11 (9) | 3.5 (2) | 3.0 (1) | 2.6 (1) | 2.2 (0.9) | 2.0 (0.7) | 1.4 (0.3) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 2.6 (4) | 1.9 (2) | 1.9 (1) | 3.3 (1) | 3.7 (2) | 4.8 (1) | 4.3 (2) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 5.5e5 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 5.5e5 (8e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 3.8e5 (1e6) | 1.1e6 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 6.7 (9) | 78 (35) | 2786 (3498) | 1.4e5 (2e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 8.6 (14) | 99 (145) | 3375 (3455) | 7.5e4 (8e4) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 3.8e5 (8e5) | 1.1e6 (7e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 8.1 (24) | 2.0e5 (2e5) | 4.3e5 (2e5) | 4.6e5 (5e5) | 6.0e5 (6e5) | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 40 (65) | 810 (882) | 2.4e4 (3e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 85 (72) | 798 (759) | 2.6e4 (1e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 8.2 (2) | 2.0e5 (3e5) | 4.3e5 (5e5) | 4.8e5 (3e5) | 6.2e5 (9e5) | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.5 (2) | 27 (47) | 9.4e4 (2e5) | 8.3e4 (2e5) | 3.1e5 (4e5) | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 1.3 (1) | 95 (53) | 9.4e4 (3e5) | 8.4e4 (2e5) | 5.9e5 (7e5) | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.2 (1) | 6.3 (7) | 199 (193) | 1.5e4 (2e4) | 6.0e5 (9e5) | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1.7 (2) | 10 (12) | 330 (231) | 1.4e4 (1e4) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 2.0 (2) | 25 (29) | 856 (950) | 3.0e4 (3e4) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 3.3 (3) | 20 (13) | 529 (431) | 4.0e4 (4e4) | ∞ | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 3.6 (3) | 1.1 (0.5) | 1.1 (0.4) | 1.1 (0.3) | 0.87 (0.2)★ | 0.87 (0.2)★ | 2280 (3374) | 6/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 8.1 (8) | 4.8 (3) | 4.9 (2) | 7.6 (2) | 6.9 (7) | 35 (33) | 529 (482) | 3/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 11 (10) | 5.4 (3) | 4.2 (2) | 3.4 (1) | 2.6 (1.0) | 2.3 (0.7) | 1.7 (0.3) | 15/15 |
| Δ fopt f15, 3-D |
1e1 121 |
1e0 1372 |
1e-1 6285 |
1e-2 8282 |
1e-3 8429 |
1e-5 8787 |
1e-7 9041 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 17 (16) | 18 (23) | 18 (14) | 14 (22) | 13 (15) | 13 (16) | 13 (16) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 25 (21) | 27 (22) | 22 (19) | 17 (16) | 17 (14) | 16 (16) | 15 (15) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 37 (52) | 33 (54) | 81 (127) | 61 (107) | 60 (80) | 58 (94) | 56 (67) | 6/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 3.8 (3) | 3.6 (5) | 7.9 (13) | 6.0 (10) | 5.9 (6) | 19 (29) | ∞3e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 2.5 (2) | 1.6 (1) | 1.1 (2) | 0.81 (1) | 0.80 (1) | 0.78 (0.7) | 1.2 (2) | 15/15 |
| GNN-CMA-ES bbob Faury | 1.2 (0.9) | 1.4 (0.9) | 1.1 (2) | 0.86 (1) | 0.86 (1) | 0.86 (0.9) | 0.87 (1.0) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.0 (3) | 1.2 (1) | 1.2 (0.4) | 0.90 (2) | 0.91 (2) | 0.90 (2) | 0.90 (0.7) | 14/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 9.2 (7) | 12 (12) | 18 (14) | 14 (15) | 13 (13) | 13 (17) | 13 (14) | 14/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 13 (7) | 20 (29) | 26 (28) | 20 (32) | 19 (39) | 18 (39) | ∞3e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 30 (68) | 16 (19) | 28 (37) | 21 (40) | 21 (16) | 20 (24) | 19 (31) | 12/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1.6e5 (7e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.6e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 9.9e4 (2e5) | 3.1e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 198 (207) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 143 (202) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 9.9e4 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 3.0e4 (6e4) | 3.1e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 729 (622) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 2020 (2212) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.9e4 (7e4) | 3.1e4 (7e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 675 (54) | 3673 (4886) | 3208 (3103) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 90 (251) | 3982 (3331) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 18 (20) | 1049 (2256) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 21 (39) | 2019 (1043) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 40 (41) | 3520 (3468) | 6960 (5728) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 32 (24) | 7015 (4809) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 5.0 (5) | 14 (20) | 13 (10) | 10 (9) | 10 (11) | 9.1 (12) | 8.9 (11) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 59 (80) | 67 (81) | 221 (396) | 168 (79) | 165 (214) | 158 (192) | 154 (75) | 2/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 27 (31) | 27 (33) | 54 (43) | 41 (32) | 40 (52) | 39 (39) | ∞3e5 | 0/15 |
| Δ fopt f16, 3-D |
1e1 41 |
1e0 319 |
1e-1 582 |
1e-2 789 |
1e-3 1864 |
1e-5 3204 |
1e-7 3361 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 11 (3) | 8.6 (18) | 39 (125) | 30 (66) | 20 (29) | 30 (45) | 45 (59) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 147 (160) | 686 (709) | 3780 (4889) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 133 (204) | 528 (451) | 3796 (2721) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 0.98 (0.9) | 1.0 (1) | 4.0 (6) | 34 (38) | 110 (198) | 1332 (1639) | ∞3e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 0.91 (1) | 3.9 (3) | 5.1 (2) | 27 (17) | 70 (129) | ∞ | ∞3e5 | 0/15 |
| GNN-CMA-ES bbob Faury | 1.9 (2) | 1.7 (2) | 2.1 (2) | 1.7 (0.9) | 0.86 (0.5) | 0.57 (0.3) | 0.58 (0.5) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.7 (1) | 3.7 (4) | 3.9 (5) | 3.6 (4) | 1.9 (1) | 1.2 (0.6) | 1.3 (1) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 37 (56) | 81 (121) | 1163 (1037) | 5485 (9031) | ∞ | ∞ | ∞3e5 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 18 (29) | 13 (17) | 33 (31) | 60 (67) | 58 (36) | 60 (58) | 152 (196) | 1/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 8.4 (5) | 21 (30) | 92 (201) | 334 (333) | 209 (239) | ∞ | ∞3e5 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 4.0e4 (5e4) | 1.3e5 (2e5) | 7.2e4 (6e4) | 5.3e4 (4e4) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 4.4e4 (4e4) | 1.3e5 (2e5) | 7.2e4 (7e4) | 5.3e4 (1e5) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 15 (7) | 1.9e4 (3e4) | 2.1e4 (4e4) | 2.7e4 (2e4) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 5.3 (7) | 98 (88) | 1365 (1479) | 2.8e4 (6e4) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 8.3 (7) | 75 (102) | 1093 (880) | 2.6e4 (3e4) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 46 (84) | 1.9e4 (2e4) | 2.1e4 (2e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1.7 (1) | 11 (13) | 702 (3124) | 1.3e4 (1e4) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 44 (37) | 590 (819) | 2.4e4 (3e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 46 (48) | 559 (619) | 1.6e4 (8756) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 1.5 (1) | 27 (48) | 829 (2071) | 4853 (5975) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.4 (0.8) | 13 (15) | 192 (275) | 7298 (9209) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 1.1 (2) | 13 (14) | 197 (236) | 5536 (4414) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 2.1 (3) | 5.1 (6) | 373 (523) | 9693 (2e4) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1.4 (2) | 13 (7) | 212 (170) | 1.2e4 (9715) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1.5 (2) | 14 (19) | 271 (198) | 8159 (1e4) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 2.5 (3) | 13 (11) | 285 (291) | 2.6e4 (4e4) | 2.3e4 (3e4) | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 2.0e4 (3e4) | 3.2e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 48 (46) | 139 (143) | 712 (1124) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 15 (18) | 14 (11) | 23 (18) | 78 (82) | 88 (61) | 100 (106) | 218 (102) | 0/15 |
| Δ fopt f17, 3-D |
1e1 4.0 |
1e0 78 |
1e-1 282 |
1e-2 491 |
1e-3 1134 |
1e-5 2347 |
1e-7 3469 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 31 (70) | 22 (31) | 30 (32) | 37 (62) | 38 (60) | 95 (207) | ∞6e5 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 96 (260) | 198 (225) | 2214 (3509) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 141 (177) | 199 (170) | 1489 (1525) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 82 (212) | 163 (327) | 445 (867) | 8639 (8933) | ∞ | ∞ | ∞3e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 1.9 (3) | 3.7 (2) | 8.6 (12) | 375 (523) | 621 (820) | 1793 (1374) | ∞3e5 | 0/15 |
| GNN-CMA-ES bbob Faury | 2.4 (6) | 2.4 (4) | 1.9 (2) | 1.8 (2) | 1.2 (0.8) | 1.1 (0.5) | 0.94 (0.5) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.4 (5) | 2.1 (3) | 1.7 (2) | 1.7 (1) | 0.87 (0.7) | 1.0 (0.7) | 0.98 (0.6) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 36 (45) | 57 (108) | 418 (288) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 13 (26) | 274 (357) | 1584 (2121) | 8987 (8707) | ∞ | ∞ | ∞3e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 46 (112) | 62 (47) | 119 (211) | 612 (424) | 630 (342) | ∞ | ∞3e5 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 5.4e4 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 5.4e4 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 723 (2) | 5.4e5 (5e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 8.2 (12) | 203 (180) | 2.8e4 (4e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 14 (13) | 253 (262) | 1.6e5 (3e5) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 382 (1426) | 5.4e5 (9e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1.9 (6) | 2.6e4 (4e4) | 6.9e4 (6e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 32 (73) | 2252 (1775) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 160 (125) | 2323 (2800) | 1.6e5 (1e5) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.3 (7) | 2.7e4 (5e4) | 7.0e4 (8e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.8 (2) | 3028 (9724) | 1.4e4 (2e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 1.1 (0.9) | 3808 (3579) | 1.4e4 (3e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.3 (3) | 14 (14) | 3944 (4924) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1.4 (1) | 25 (27) | 7215 (9487) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 2.3 (3) | 81 (91) | 2.2e4 (2e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 3.2 (5) | 85 (132) | 1.7e4 (2e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 23 (42) | 134 (92) | 1705 (1300) | 9878 (1e4) | ∞ | ∞ | ∞3e5 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 79 (126) | 316 (369) | 1.6e4 (2e4) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 72 (102) | 325 (353) | 1912 (2028) | 8855 (5957) | ∞ | ∞ | ∞3e5 | 0/15 |
| Δ fopt f18, 3-D |
1e1 40 |
1e0 145 |
1e-1 1289 |
1e-2 3084 |
1e-3 3523 |
1e-5 4738 |
1e-7 5527 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 6.8 (9) | 334 (2087) | 159 (266) | 181 (187) | 324 (310) | 1792 (2661) | ∞6e5 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 50 (52) | 2751 (2734) | ∞ | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 117 (156) | 813 (1020) | 3351 (2038) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 36 (71) | 193 (340) | 745 (583) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 2.1 (2) | 3.8 (1) | 7.6 (11) | 281 (252) | 368 (432) | ∞ | ∞3e5 | 0/15 |
| GNN-CMA-ES bbob Faury | 1.1 (0.7) | 2.8 (2) | 0.80 (1) | 0.50 (0.4) | 0.70 (0.5) | 0.68 (0.4) | 0.66 (0.4) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1.8 (3) | 5.4 (12) | 1.4 (1) | 0.76 (0.6) | 0.75 (0.6) | 0.78 (0.4) | 0.75 (0.4) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 46 (42) | 572 (591) | ∞ | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 89 (115) | 747 (895) | 759 (654) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 21 (50) | 37 (54) | 47 (45) | 431 (608) | 1255 (1001) | ∞ | ∞3e5 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 2.1e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 2.1e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 5.0e4 (4e4) | 2.9e5 (6e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 16 (20) | 2385 (2024) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 17 (21) | 6221 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 5.0e4 (8e4) | 2.9e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 2.7e4 (4e4) | 4.4e4 (9e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 234 (360) | 2.6e4 (5e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 235 (207) | 2.3e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.7e4 (4e4) | 3.5e4 (5e4) | 3.3e4 (5e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 5360 (2e4) | 6916 (1e4) | 3.4e4 (4e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 5360 (2e4) | 5676 (5849) | 1.6e4 (2e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.8 (0.8) | 334 (401) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 3.6 (5) | 625 (650) | 1.6e4 (2e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 7.8 (7) | 795 (1019) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 6.8 (12) | 925 (1150) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 81 (129) | 1653 (2221) | ∞ | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 129 (166) | 1289 (737) | ∞ | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 138 (173) | 647 (690) | 1574 (2003) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| Δ fopt f19, 3-D |
1e1 1 |
1e0 1 |
1e-1 109 |
1e-2 6764 |
1e-3 7367 |
1e-5 7399 |
1e-7 7441 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 1 (0) | 1 (0) | 1.3 (2) | 4.5 (4) | 4.5 (3) | 5.0 (7) | 6.2 (8) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 245 (510) | 2039 (3714) | 144 (159) | 34 (30) | 76 (81) | 75 (99) | 75 (126) | 6/15 |
| CG-scipy-2019 bbob Varelas Dahito | 189 (532) | 1764 (2032) | 218 (297) | 19 (22) | 97 (126) | 97 (74) | 96 (126) | 2/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 10 (6) | 189 (224) | 16 (14) | 3.7 (3) | 6.3 (9) | 105 (197) | 607 (505) | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 8.6 (9) | 278 (227) | 29 (34) | 1.8 (1) | 3.0 (1) | 3.0 (1) | 22 (28) | 5/15 |
| GNN-CMA-ES bbob Faury | 1 (0) | 1 (0) | 67 (90) | 2.5 (3) | 2.7 (4) | 2.7 (4) | 3.0 (3) | 11/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1 (0) | 1 (0) | 55 (60) | 3.4 (4) | 6.6 (5) | 6.6 (3) | 6.6 (4) | 7/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 228 (471) | 1376 (2097) | 51 (71) | 17 (22) | 54 (42) | 54 (51) | 54 (36) | 8/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 211 (391) | 554 (590) | 99 (104) | 12 (11) | 46 (44) | 46 (38) | 46 (65) | 9/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 43 (105) | 1232 (1886) | 672 (1376) | 92 (147) | 114 (60) | 114 (61) | 113 (163) | 4/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 2.8 (2) | 3.9 (5) | 401 (434) | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.3 (0.5) | 24 (43) | 2.3 (2) | 4.0 (7) | 604 (1439) | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 12 (17) | 2.9 (3) | 24 (17) | 440 (301) | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 7460 (5728) | 2010 (1996) | 2907 (5522) | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 59 (52) | 5581 (6764) | 5126 (9615) | 1808 (1757) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 2.3 (2) | 38 (44) | 11 (9) | 2.6 (3) | 12 (13) | 788 (1298) | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 57 (71) | 14 (12) | 157 (192) | 5677 (4156) | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 3.7e4 (3e4) | 6447 (4879) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 311 (435) | 2.5e4 (1e4) | 3.7e4 (3e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.3 (2) | 61 (78) | 63 (82) | 18 (26) | 118 (113) | 2777 (1723) | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 130 (153) | 90 (79) | 407 (595) | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 3.0 (3) | 208 (346) | 205 (244) | 94 (92) | 330 (194) | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 308 (362) | 161 (290) | 992 (1339) | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 548 (652) | 286 (347) | 1793 (2828) | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 1679 (2001) | 418 (374) | 2837 (2138) | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 17 (20) | 1784 (1834) | 1258 (1678) | 470 (573) | 2817 (3872) | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 2.8e6 (8e6) | 8.1e7 (1e8) | 7.4e5 (8e5) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 150 (294) | 684 (906) | 4743 (2e4) | 182 (670) | 303 (393) | 304 (562) | 1226 (1742) | 1/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 57 (93) | 608 (1036) | 71 (109) | 21 (24) | 46 (82) | 47 (62) | 47 (80) | 8/15 |
| Δ fopt f20, 3-D |
1e1 8.0 |
1e0 385 |
1e-1 2291 |
1e-2 2398 |
1e-3 2481 |
1e-5 2573 |
1e-7 2776 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 16 (20) | 12 (6) | 87 (209) | 83 (82) | 81 (125) | 78 (73) | 73 (121) | 12/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 6.0 (5) | 4.0 (3) | 4.5 (4) | 4.3 (4) | 4.1 (4) | 4.0 (4) | 3.7 (4) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.8 (0.8) | 7.2 (6) | 28 (43) | 27 (44) | 26 (31) | 25 (38) | 23 (23) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.1 (0.6) | 0.99 (2) | 10 (16) | 10 (8) | 9.3 (15) | 9.0 (15) | 448 (375) | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 3.0 (3) | 1.9 (1) | 1.1 (0.8) | 1.1 (0.8) | 1.0 (0.8) | 1.0 (0.8) | 0.94 (0.4) | 15/15 |
| GNN-CMA-ES bbob Faury | 4.9 (4) | 4.3 (7) | 3.7 (5) | 3.7 (4) | 3.7 (5) | 3.7 (3) | 3.5 (3) | 14/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1.9 (2) | 4.3 (6) | 7.6 (11) | 7.5 (6) | 7.4 (9) | 7.3 (9) | 6.9 (12) | 12/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.5 (1) | 1.5 (0.9) | 4.5 (4) | 4.3 (4) | 4.2 (4) | 4.0 (3) | 3.7 (2) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 4.6 (4) | 1.7 (1) | 4.9 (7) | 4.6 (9) | 4.5 (9) | 4.3 (5) | 6.1 (7) | 2/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 8.3 (8) | 3.3 (6) | 6.6 (10) | 6.4 (10) | 6.2 (10) | 5.9 (9) | 5.5 (9) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 18 (10) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 44 (51) | 565 (486) | 6109 (7741) | 1.8e4 (3e4) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 30 (48) | 404 (258) | 8835 (2e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 12 (24) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 0.64 (0.4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 466 (462) | 3063 (2755) | 2.0e4 (2e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 344 (344) | 5131 (3709) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 0.89 (1) | 5.5e4 (5e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.4 (2) | 15 (12) | 319 (225) | 1.8e4 (2e4) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 0.99 (1) | 16 (22) | 412 (421) | 5785 (8805) | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 2.5 (2) | 37 (43) | 545 (762) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 5.7 (5) | 82 (110) | 1074 (1080) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 12 (12) | 164 (171) | 5902 (8184) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 4.8 (7) | 98 (115) | 3768 (2730) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 2.1 (1.0) | 2.9 (4) | 10 (12) | 10 (12) | 10 (16) | 9.2 (15) | 8.6 (10) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 4.2 (2) | 4.9 (4) | 18 (23) | 17 (24) | 17 (22) | 16 (16) | 21 (35) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 7.3 (11) | 1.9 (3) | 3.3 (3) | 3.2 (3) | 3.1 (3) | 3.0 (3) | 3.7 (5) | 1/15 |
| Δ fopt f21, 3-D |
1e1 6.0 |
1e0 184 |
1e-1 425 |
1e-2 439 |
1e-3 458 |
1e-5 469 |
1e-7 482 |
#succ 14/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 15 (19) | 32 (75) | 396 (1072) | 384 (685) | 369 (1322) | 361 (989) | 353 (625) | 12/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 2.3 (3) | 3.1 (4) | 2.6 (3) | 2.5 (3) | 2.5 (4) | 2.5 (4) | 2.5 (3) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 11 (27) | 8.7 (12) | 8.8 (7) | 8.6 (9) | 8.3 (8) | 8.2 (6) | 8.3 (7) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 38 (140) | 23 (25) | 18 (14) | 17 (24) | 17 (23) | 16 (24) | 16 (18) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 1.4 (0.8) | 1.4 (1) | 1.6 (2) | 1.9 (2) | 2.1 (2) | 2.3 (2) | 4.8 (6) | 15/15 |
| GNN-CMA-ES bbob Faury | 2.2 (2) | 5.1 (9) | 3.7 (5) | 3.7 (5) | 3.7 (4) | 3.8 (5) | 3.9 (4) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1.9 (2) | 8.6 (9) | 6.7 (8) | 6.8 (8) | 6.7 (8) | 7.3 (8) | 7.4 (12) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 3.1 (6) | 1.5 (1) | 2.9 (6) | 2.8 (6) | 2.7 (6) | 2.7 (5) | 2.6 (5) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 10 (12) | 6.3 (7) | 4.9 (7) | 4.8 (7) | 4.6 (6) | 4.5 (6) | 4.4 (6) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 2.6 (3) | 14 (44) | 12 (18) | 12 (19) | 11 (23) | 11 (18) | 11 (17) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 5.7e5 (8e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 5.7e5 (9e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 7.7e4 (1e5) | 6.5e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 10 (13) | 23 (34) | 41 (39) | 401 (294) | 2042 (2028) | 2.8e4 (2e4) | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 9.2 (14) | 21 (21) | 56 (89) | 259 (363) | 1610 (1660) | 9.0e4 (6e4) | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 7.7e4 (1e5) | 6.5e4 (6e4) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1.5 (2) | 6021 (8152) | 1.4e4 (1e4) | 1.4e4 (1e4) | 2.6e4 (3e4) | 2.6e4 (2e4) | 8.8e4 (4e4) | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 86 (118) | 214 (191) | 501 (664) | 3794 (3269) | 1.5e4 (1e4) | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 58 (64) | 121 (125) | 337 (378) | 2622 (3134) | 1.4e4 (2e4) | 9.3e4 (1e5) | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 1.4 (1) | 5966 (8166) | 1.4e4 (2e4) | 1.4e4 (2e4) | 2.6e4 (5e4) | 2.6e4 (3e4) | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.2 (1) | 3.0 (4) | 2570 (5296) | 3433 (5132) | 3551 (7001) | 1.1e4 (8451) | 8.8e4 (6e4) | 0/15 |
| RS-3 bbob Brockhoff Hansen | 1.1 (1) | 10 (28) | 2574 (5294) | 3427 (3419) | 3850 (6549) | 1.0e4 (1e4) | 4.2e4 (6e4) | 1/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.4 (1) | 1.4 (1) | 4.5 (3) | 18 (29) | 63 (74) | 3090 (3319) | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1.1 (2) | 1.8 (2) | 4.6 (6) | 31 (80) | 186 (285) | 7865 (1e4) | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 2.6 (4) | 4.0 (5) | 16 (17) | 70 (56) | 233 (136) | 1.1e4 (1e4) | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 2.8 (2) | 4.1 (2) | 22 (8) | 68 (97) | 365 (263) | 6056 (4553) | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 2.4 (3) | 3.7 (7) | 3.5 (6) | 3.4 (6) | 3.3 (5) | 3.3 (3) | 3.3 (5) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 17 (19) | 5.4 (9) | 17 (24) | 17 (23) | 17 (20) | 22 (19) | 22 (31) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 6.5 (14) | 4.9 (6) | 3.7 (5) | 3.7 (4) | 3.5 (3) | 3.5 (5) | 3.4 (5) | 15/15 |
| Δ fopt f22, 3-D |
1e1 18 |
1e0 170 |
1e-1 354 |
1e-2 362 |
1e-3 384 |
1e-5 401 |
1e-7 414 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 15 (13) | 319 (993) | 160 (85) | 158 (480) | 150 (64) | 147 (78) | 145 (424) | 14/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 3.5 (4) | 2.6 (2) | 2.9 (4) | 2.9 (4) | 2.8 (4) | 2.8 (4) | 2.9 (3) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 6.2 (9) | 7.3 (15) | 8.9 (11) | 8.8 (12) | 8.4 (9) | 8.4 (9) | 12 (10) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 16 (0.8) | 18 (49) | 17 (20) | 18 (35) | 18 (33) | 21 (30) | 144 (117) | 5/15 |
| DE-scipy-2019 bbob Varelas Dahito | 0.96 (1) | 1.9 (2) | 1.6 (1) | 2.2 (0.7) | 2.4 (0.7) | 2.9 (1) | 13 (12) | 15/15 |
| GNN-CMA-ES bbob Faury | 4.2 (11) | 3.7 (3) | 10 (22) | 16 (28) | 18 (28) | 17 (25) | 17 (40) | 13/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1.6 (2) | 12 (29) | 26 (107) | 26 (63) | 25 (119) | 24 (59) | 23 (40) | 12/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 2.7 (4) | 2.6 (0.6) | 2.6 (2) | 2.5 (5) | 2.4 (5) | 2.4 (2) | 2.4 (5) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 5.5 (8) | 3.7 (4) | 3.5 (6) | 3.5 (3) | 3.3 (6) | 3.2 (3) | 3.1 (5) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 5.2 (12) | 13 (7) | 23 (70) | 23 (17) | 21 (16) | 21 (61) | 20 (50) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 4.6e5 (5e5) | 2.5e5 (5e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 4.6e5 (7e5) | 2.5e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1.1e5 (2e5) | 7.1e4 (8e4) | 5.5e4 (6e4) | 5.4e4 (4e4) | 1.1e5 (2e5) | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 7.9 (7) | 21 (20) | 54 (104) | 388 (468) | 1606 (2882) | 5.2e4 (4e4) | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 11 (16) | 30 (49) | 83 (126) | 478 (406) | 2667 (3891) | 1.1e5 (7e4) | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 1.1e5 (4e5) | 7.1e4 (2e5) | 5.5e4 (3e4) | 5.4e4 (3e4) | 1.1e5 (2e5) | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 7.2 (21) | 8833 (2e4) | 5702 (1e4) | 1.3e4 (2e4) | 1.6e4 (3e4) | 2.1e4 (2e4) | 3.4e4 (2e4) | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 57 (85) | 214 (294) | 440 (427) | 4602 (3062) | 1.9e4 (1e4) | 5.2e4 (3e4) | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 130 (135) | 126 (67) | 498 (474) | 3412 (4445) | 1.3e4 (1e4) | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 16 (53) | 8829 (8825) | 5655 (1e4) | 1.3e4 (1e4) | 1.6e4 (3e4) | 2.1e4 (3e4) | 1.1e5 (7e4) | 1/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.5 (2) | 1262 (4) | 1313 (2136) | 3030 (4150) | 2913 (4056) | 5576 (6166) | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 1.4 (2) | 1263 (4) | 1328 (4238) | 3028 (4148) | 2893 (9806) | 4827 (4136) | 3.4e4 (3e4) | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.5 (2) | 2.4 (5) | 3.4 (5) | 21 (35) | 77 (99) | 3721 (4889) | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 2.1 (1) | 4.4 (3) | 10 (14) | 53 (49) | 163 (125) | 4677 (7278) | 1.0e5 (8e4) | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 2.5 (0.9) | 5.4 (5) | 15 (13) | 58 (51) | 358 (243) | 2.5e4 (3e4) | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 2.7 (3) | 4.6 (4) | 15 (21) | 79 (76) | 367 (465) | 1.1e4 (1e4) | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 3.6 (3) | 1.4 (0.9) | 1.6 (2) | 1.6 (1) | 1.6 (0.9) | 1.6 (2) | 1.7 (1) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 22 (55) | 7.7 (10) | 15 (22) | 15 (17) | 15 (20) | 21 (16) | 40 (32) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3.5 (3) | 6.2 (12) | 3.4 (3) | 3.3 (5) | 3.2 (3) | 3.1 (5) | 3.0 (4) | 15/15 |
| Δ fopt f23, 3-D |
1e1 3.0 |
1e0 407 |
1e-1 906 |
1e-2 1215 |
1e-3 2214 |
1e-5 2293 |
1e-7 2393 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 9.0 (12) | 5.6 (12) | 76 (47) | 92 (190) | 149 (140) | 213 (530) | 209 (415) | 8/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 104 (123) | 53 (75) | 287 (261) | 3510 (4880) | ∞ | ∞ | ∞3e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 96 (192) | 46 (38) | 4760 (1e4) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 3.2 (3) | 0.73 (0.9) | 30 (52) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 4.7 (5) | 10 (11) | 94 (210) | 158 (187) | 250 (475) | 1840 (1343) | ∞3e5 | 0/15 |
| GNN-CMA-ES bbob Faury | 3.6 (3) | 4.9 (4) | 5.3 (4) | 4.5 (5) | 2.5 (3) | 2.6 (2) | 2.6 (2) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.5 (2) | 4.7 (5) | 6.2 (7) | 4.8 (5) | 2.7 (3) | 2.7 (3) | 2.7 (3) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 16 (34) | 17 (20) | 114 (82) | 404 (370) | 435 (581) | 1925 (2813) | ∞3e5 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3.3 (4) | 0.72 (0.2) | 1.4 (2) | 1.2 (1) | 0.73 (0.7) | 1853 (2093) | ∞3e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 6.5 (6) | 8.3 (14) | 287 (678) | 822 (1016) | ∞ | ∞ | ∞3e5 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 2.7 (4) | 21 (20) | 2.3e4 (2e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 3.0 (3) | 17 (15) | 1.0e4 (2e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 3.2 (5) | 21 (23) | 1.5e4 (8927) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 9.4 (9) | 74 (141) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 16 (13) | 91 (88) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 1.9 (3) | 15 (18) | 1.6e4 (1e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 2.8 (3) | 18 (26) | 1.5e4 (2e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 73 (104) | 812 (673) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 77 (114) | 610 (865) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.9 (4) | 13 (20) | 8403 (8321) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 3.2 (3) | 18 (13) | 4.9e4 (3e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 4.5 (6) | 11 (14) | 2.4e4 (2e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 2.4 (2) | 20 (26) | 8337 (5821) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 2.8 (3) | 18 (21) | 2.3e4 (2e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 3.3 (3) | 16 (19) | 1.6e4 (3e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 2.9 (3) | 22 (18) | 1.6e4 (1e4) | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 617 (72) | 1539 (3469) | 4106 (7141) | ∞ | ∞ | ∞ | ∞4e5 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 19 (20) | 27 (30) | 4863 (2320) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 5.4 (7) | 0.64 (0.7) | 1.1 (2) | 1.1 (2) | 0.65 (1) | ∞ | ∞3e5 | 0/15 |
| Δ fopt f24, 3-D |
1e1 97 |
1e0 10391 |
1e-1 1.0e5 |
1e-2 3.6e5 |
1e-3 3.6e5 |
1e-5 3.6e5 |
1e-7 3.6e5 |
#succ 2/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 15 (4) | 52 (159) | 12 (12) | 11 (9) | 11 (18) | 11 (10) | 11 (15) | 2/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 18 (12) | 13 (21) | 42 (57) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 27 (55) | 21 (18) | 43 (72) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 12 (15) | 13 (10) | ∞ | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 5.1 (4) | 3.8 (8) | 4.2 (8) | 3.7 (2) | 3.7 (6) | 3.7 (7) | 3.7 (2) | 3/15 |
| GNN-CMA-ES bbob Faury | 2.0 (3) | 3.8 (7) | ∞ | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1.6 (0.8) | 8.4 (13) | 4.2 (5) | ∞ | ∞ | ∞ | ∞3e4 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 7.4 (9) | 8.7 (8) | 21 (19) | 12 (21) | 12 (21) | 12 (13) | 12 (18) | 1/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 8.3 (10) | 11 (15) | 43 (47) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 47 (92) | 23 (20) | 44 (55) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 483 (704) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 345 (424) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 8.6 (9) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 89 (143) | 903 (1047) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 118 (78) | 4198 (3825) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 10 (9) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 2.4 (2) | 16 (15) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 907 (1465) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 1078 (1618) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.9 (3) | 25 (25) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 4.5 (3) | 80 (71) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 5.4 (8) | 60 (77) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 7.3 (10) | 247 (222) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 12 (10) | 335 (509) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 22 (29) | 685 (1174) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 16 (32) | 396 (356) | ∞ | ∞ | ∞ | ∞ | ∞3e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 6.4 (6) | 10 (10) | 44 (14) | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 72 (168) | 32 (31) | ∞ | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 6.2 (5) | 14 (15) | ∞ | ∞ | ∞ | ∞ | ∞3e5 | 0/15 |
Previous dimension | Dimension = 5 | Next dimension
| Δ fopt f1, 5-D |
1e1 11 |
1e0 12 |
1e-1 12 |
1e-2 12 |
1e-3 12 |
1e-5 12 |
1e-7 12 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 28 (46) | 64 (60) | 104 (52) | 162 (131) | 205 (119) | 290 (129) | 397 (154) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 1.9 (0.3) | 2.0 (0.3) | 2.1 (0.3) | 2.1 (0.3) | 2.1 (0.3) | 2.1 (0.3) | 2.1 (0.3) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.7 (0.8) | 2.1 (0.6) | 2.2 (0.3) | 2.2 (0.4) | 2.2 (0.3) | 2.2 (0.6) | 2.3 (0.6) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.1 (0.3) | 1.4 (0.3) | 2.2 (0.4) | 3.1 (0.4) | 4.0 (0.5) | 5.8 (0.7) | 7.7 (1) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 5.7 (4) | 35 (19) | 62 (26) | 69 (25) | 70 (28) | 70 (34) | 70 (36) | 15/15 |
| GNN-CMA-ES bbob Faury | 3.0 (2) | 12 (3) | 19 (5) | 27 (6) | 34 (6) | 47 (7) | 60 (7) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.2 (3) | 10 (3) | 17 (5) | 23 (6) | 29 (6) | 41 (7) | 54 (6) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.3 (0.6) | 1.2 (0.2) | 1.3 (0.2) | 1.3 (0.1) | 1.3 (0.2) | 1.3 (0.2) | 1.3 (0.2) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 8.7 (9) | 19 (14) | 24 (15) | 28 (13) | 31 (10) | 35 (11) | 40 (12) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 2.9 (1) | 3.3 (0.6) | 3.7 (0.1) | 3.7 (0.1) | 3.7 (0.1) | 3.8 (0.2) | 3.8 (0.2) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1.8e6 (2e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.8e6 (2e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 9.1e5 (8e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 200 (248) | 8.1e4 (8e4) | 6.0e6 (5e6) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 254 (271) | 4.7e4 (5e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 9.1e5 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 7.0e4 (2e5) | 1.7e6 (3e6) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 5917 (3436) | 8.4e5 (9e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 3386 (3302) | 1.8e6 (2e6) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 7.0e4 (1e5) | 1.7e6 (3e6) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 3.8 (6) | 2.8e5 (4e5) | 1.2e6 (1e6) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 12 (23) | 2.5e5 (3e5) | 1.3e6 (1e6) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 6.1 (5) | 788 (620) | 1.8e5 (2e5) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 6.7 (8) | 2075 (2660) | 2.5e5 (3e5) | 6.1e6 (2e6) | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 21 (16) | 4782 (3203) | 6.3e5 (8e5) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 15 (8) | 4054 (3842) | 1.4e6 (1e6) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.85 (0) | 0.83 (0)★2 | 0.83 (0)★4 | 0.83 (0)★4 | 0.83 (0)★4 | 0.83 (0)★4 | 0.83 (0)★4 | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 6.3 (7) | 14 (20) | 21 (23) | 28 (29) | 34 (15) | 56 (43) | 127 (136) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 7.9 (6) | 15 (10) | 19 (9) | 22 (5) | 25 (9) | 30 (7) | 35 (9) | 15/15 |
| Δ fopt f2, 5-D |
1e1 83 |
1e0 87 |
1e-1 88 |
1e-2 89 |
1e-3 90 |
1e-5 92 |
1e-7 94 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 47 (26) | 87 (56) | 102 (59) | 129 (77) | 161 (70) | 304 (227) | 1049 (764) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 2.1 (0.6) | 2.2 (0.6) | 2.3 (0.7) | 2.5 (1) | 2.7 (1) | 3.2 (1) | 3.6 (1) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 59 (77) | 153 (223) | 327 (392) | 628 (881) | 1198 (1976) | 2.4e4 (2e4) | ∞5e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 2077 (2889) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 17 (2) | 23 (3) | 27 (3) | 30 (4) | 35 (10) | 39 (17) | 99 (70) | 15/15 |
| GNN-CMA-ES bbob Faury | 35 (26) | 58 (48) | 80 (85) | 86 (32) | 89 (45) | 90 (93) | 90 (91) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 8.3 (2) | 10 (2) | 11 (1) | 11 (1) | 12 (1) | 14 (1) | 15 (1) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 3.7 (1) | 5.0 (1) | 5.7 (1) | 5.9 (1) | 6.1 (1) | 6.7 (2) | 7.1 (2) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 11 (12) | 15 (16) | 22 (18) | 23 (17) | 23 (17) | 23 (15) | 23 (18) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 0.92 (0.4) | 1.1 (0.3) | 1.3 (0.1) | 1.3 (0.0) | 1.3 (0.2) | 1.6 (0.4) | 2.0 (0.1) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.3 (0.7) | 1.3 (0.6) | 1.4 (0.7) | 1.5 (0.4) | 1.7 (0.5) | 1.8 (0.8) | 2.0 (0.7) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 10 (13) | 12 (15) | 15 (13) | 17 (13) | 19 (13) | 26 (21) | 84 (134) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 12 (3) | 12 (4) | 13 (6) | 13 (5) | 13 (5) | 14 (5) | 14 (5) | 15/15 |
| Δ fopt f3, 5-D |
1e1 716 |
1e0 1622 |
1e-1 1637 |
1e-2 1642 |
1e-3 1646 |
1e-5 1650 |
1e-7 1654 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 3.9 (5) | 14 (10) | 26 (13) | 26 (13) | 27 (16) | 28 (13) | 30 (10) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 97 (142) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 160 (94) | 4347 (3856) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 9.0 (11) | 481 (617) | 2188 (687) | 2181 (1702) | 2176 (2631) | 4541 (1515) | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 2.2 (1) | 6.3 (10) | 19 (14) | 19 (46) | 19 (46) | 19 (37) | 47 (94) | 13/15 |
| GNN-CMA-ES bbob Faury | 2.2 (1) | 16 (24) | 67 (141) | 67 (154) | 67 (91) | 68 (145) | 68 (144) | 5/15 |
| IPOP-CMA-ES-2019 bbob Faury | 0.73 (0.4) | 8.7 (8) | 70 (77) | 70 (69) | 70 (124) | 70 (85) | 71 (76) | 5/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 60 (75) | 4415 (2929) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 133 (205) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 1.4 (1.0) | 16 (22) | 72 (117) | 72 (131) | 72 (143) | 71 (115) | 71 (67) | 14/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 2.9e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.9e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 6466 (5808) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 5998 (9179) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1820 (2054) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 5847 (7712) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 6988 (7023) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 1.1e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 31 (34) | 958 (1030) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 336 (265) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 200 (240) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Δ fopt f4, 5-D |
1e1 809 |
1e0 1633 |
1e-1 1688 |
1e-2 1758 |
1e-3 1817 |
1e-5 1886 |
1e-7 1903 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 4.0 (2) | 18 (22) | 39 (44) | 38 (28) | 37 (42) | 38 (35) | 39 (42) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 132 (149) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 550 (356) | 4543 (6362) | 4395 (4894) | 4220 (4485) | 4083 (5097) | 3934 (5774) | 3899 (2696) | 1/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 20 (32) | 1349 (1627) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 2.5 (1) | 13 (27) | 34 (17) | 32 (92) | 32 (79) | 30 (82) | 184 (189) | 4/15 |
| GNN-CMA-ES bbob Faury | 2.2 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.1 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 169 (108) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 108 (116) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 0.44 (1)★ | 3.4 (5) | 29 (38) | 28 (32) | 27 (31) | 26 (33) | 26 (30) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 8.8e4 (6e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1.9e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 1.8e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 7094 (7806) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 7572 (9209) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 4157 (5832) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 8.9e4 (8e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 2.1e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 4.2e4 (5e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 82 (111) | 4550 (4288) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 1163 (666) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 126 (81) | 2190 (1761) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Δ fopt f5, 5-D |
1e1 10 |
1e0 10 |
1e-1 10 |
1e-2 10 |
1e-3 10 |
1e-5 10 |
1e-7 10 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 27 (18) | 29 (18) | 29 (19) | 29 (18) | 29 (20) | 29 (18) | 29 (18) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 2.6 (0.3) | 3.9 (0.3) | 4.2 (0.5) | 4.2 (0.5) | 4.2 (0.5) | 4.2 (0.5) | 4.2 (0.5) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 2.5 (0.3) | 3.7 (0.9) | 3.9 (0.3) | 3.9 (0.9) | 3.9 (0.9) | 3.9 (0.9) | 3.9 (0.7) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 2.2 (0.6) | 3.0 (0.7) | 3.3 (1) | 3.3 (1) | 3.3 (1) | 3.3 (1) | 3.3 (1.0) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 50 (23) | 181 (59) | 288 (199) | 304 (208) | 304 (166) | 304 (225) | 304 (204) | 15/15 |
| GNN-CMA-ES bbob Faury | 5.5 (3) | 7.7 (2) | 7.9 (2) | 7.9 (3) | 7.9 (2) | 7.9 (1) | 7.9 (2) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 4.5 (3) | 6.1 (3) | 6.4 (2) | 6.5 (2) | 6.5 (3) | 6.5 (4) | 6.5 (2) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 2.2 (0.3) | 2.7 (0.3) | 2.8 (0.5) | 2.8 (0.5) | 2.8 (0.5) | 2.8 (0.5) | 2.8 (0.3) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 20 (25) | 23 (28) | 23 (27) | 23 (35) | 23 (34) | 23 (23) | 23 (35) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 6.5 (0.4) | 6.5 (0.3) | 6.5 (0.4) | 6.5 (0.4) | 6.5 (0.3) | 6.5 (0.4) | 6.5 (0.4) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 15 (13) | 69 (30) | 80 (74) | 83 (71) | 83 (57) | 83 (68) | 83 (70) | 15/15 |
| RS-10 bbob Brockhoff Hansen | 13 (18) | 49 (57) | 53 (56) | 70 (54) | 70 (116) | 70 (108) | 70 (116) | 15/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 7.9 (7) | 18 (20) | 18 (15) | 18 (20) | 18 (14) | 18 (21) | 18 (20) | 15/15 |
| RS-20 bbob Brockhoff Hansen | 5.4 (6) | 14 (20) | 20 (22) | 20 (26) | 20 (27) | 20 (15) | 20 (14) | 15/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 4430 (5495) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 125 (197) | 7737 (1e4) | 1.6e4 (9909) | 1.7e4 (2e4) | 1.7e4 (2e4) | 1.7e4 (2e4) | 1.7e4 (2e4) | 15/15 |
| RS-6 bbob Brockhoff Hansen | 115 (99) | 5387 (4937) | 1.7e4 (2e4) | 1.8e4 (2e4) | 2.0e4 (2e4) | 2.0e4 (2e4) | 2.0e4 (1e4) | 15/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.5 (0.2) | 2.7 (0.3) | 2.8 (0.5) | 2.8 (0.5) | 2.8 (0.5) | 2.8 (0.3) | 2.8 (0.3) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 4.8 (3) | 6.5 (3) | 6.5 (3) | 6.5 (3) | 6.5 (2) | 6.5 (2) | 6.5 (2) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 12 (8) | 14 (8) | 14 (8) | 14 (8) | 14 (4) | 14 (6) | 14 (8) | 15/15 |
| Δ fopt f6, 5-D |
1e1 114 |
1e0 214 |
1e-1 281 |
1e-2 404 |
1e-3 580 |
1e-5 1038 |
1e-7 1332 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 16 (14) | 16 (9) | 16 (8) | 16 (6) | 14 (5) | 12 (4) | 16 (5) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 4.3 (1) | 3.4 (2) | 3.3 (2) | 3.2 (2) | 2.6 (2) | 2.4 (2) | 2.8 (2) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 5.7 (4) | 5.1 (3) | 5.4 (2) | 4.7 (2) | 4.4 (1) | 3.3 (1) | 5.3 (5) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 41 (49) | 155 (223) | 900 (1492) | 2099 (2536) | 3766 (3000) | 6843 (6475) | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 5.1 (3) | 7.4 (3) | 11 (3) | 11 (6) | 10 (4) | 18 (8) | 287 (380) | 3/15 |
| GNN-CMA-ES bbob Faury | 2.4 (0.7) | 2.0 (0.4) | 2.3 (0.8) | 2.1 (0.6) | 1.7 (0.4) | 1.3 (0.2) | 1.3 (0.2) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.1 (0.9) | 1.8 (0.4) | 2.0 (0.5) | 1.7 (0.3) | 1.5 (0.3) | 1.2 (0.1) | 1.2 (0.1) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.9 (2) | 2.1 (2) | 2.3 (1) | 2.2 (1) | 1.8 (0.8) | 1.4 (0.5) | 1.3 (0.4) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 10 (9) | 11 (6) | 14 (20) | 21 (39) | 25 (28) | 33 (24) | 5357 (8446) | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 6.3 (7) | 8.3 (9) | 7.5 (7) | 6.5 (5) | 5.3 (4) | 3.4 (1.0) | 3.2 (2) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 6810 (9123) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 5782 (9158) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 2.1e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 1.3e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 2.3e4 (2e4) | 3.3e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 3.2e4 (2e4) | 3.3e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 3333 (1e4) | 2.4e4 (6e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 169 (216) | 7.5e4 (8e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 303 (291) | 1.1e5 (6e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 329 (304) | 1.0e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 2.6 (0.8) | 2.1 (0.9) | 2.0 (0.7) | 1.8 (0.8) | 1.5 (0.5) | 1.1 (0.4) | 1.3 (0.7) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 5.1 (7) | 7.1 (5) | 8.0 (4) | 12 (16) | 12 (13) | 295 (339) | ∞5e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 8.6 (13) | 6.6 (7) | 5.8 (6) | 4.5 (4) | 3.3 (3) | 2.2 (3) | 28 (18) | 0/15 |
| Δ fopt f7, 5-D |
1e1 24 |
1e0 324 |
1e-1 1171 |
1e-2 1451 |
1e-3 1572 |
1e-5 1572 |
1e-7 1597 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 27 (25) | 8.4 (6) | 20 (24) | 19 (27) | 24 (26) | 24 (26) | 24 (26) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 298 (527) | 2.2e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 344 (658) | 6985 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 5.4 (9) | 29 (48) | 198 (185) | 1536 (2062) | ∞ | ∞ | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 12 (8) | 3.4 (2) | 17 (11) | 267 (286) | 503 (879) | 503 (475) | 700 (714) | 2/15 |
| GNN-CMA-ES bbob Faury | 4.1 (2) | 2.0 (2) | 1.4 (1) | 1.4 (0.7) | 1.6 (1) | 1.6 (2) | 1.6 (1) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.1 (3) | 1.1 (1) | 0.71 (0.3) | 0.66 (0.3) | 0.71 (0.3) | 0.71 (0.5) | 0.73 (0.3) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 329 (456) | 3982 (7420) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 1054 (1423) | 2488 (4364) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 48 (135) | 219 (458) | 255 (218) | 1519 (1465) | 4473 (4135) | 4473 (3022) | 4403 (2505) | 1/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 8.3e5 (2e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 8.3e5 (7e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 5.7e5 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 1977 (2539) | 3.8e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 989 (839) | 5.1e4 (5e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 5.7e5 (7e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 7.8e4 (2e5) | 2.4e4 (3e4) | 2.9e4 (2e4) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 3.7e4 (5e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 3.6e4 (3e4) | 1.1e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 7.6e4 (1e5) | 2.0e4 (3e4) | 3.0e4 (4e4) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 81 (182) | 7968 (2e4) | 1.9e4 (3e4) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 125 (424) | 1.0e4 (5e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 34 (31) | 599 (456) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 31 (37) | 747 (865) | 6.4e4 (6e4) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 103 (107) | 3407 (5217) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 84 (112) | 3911 (4583) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 348 (371) | 4954 (4599) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 618 (712) | 2.2e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 4594 (3040) | 6722 (8874) | 6097 (8113) | 4921 (3446) | 4542 (7395) | 4542 (1e4) | 4471 (5088) | 1/15 |
| Δ fopt f8, 5-D |
1e1 73 |
1e0 273 |
1e-1 336 |
1e-2 372 |
1e-3 391 |
1e-5 410 |
1e-7 422 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 19 (10) | 283 (689) | 385 (337) | 524 (543) | 696 (556) | 1600 (946) | 4373 (2962) | 2/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 2.7 (2) | 1.9 (2) | 1.7 (0.7) | 1.7 (1) | 1.6 (1) | 1.6 (1) | 1.6 (1) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.6 (1) | 1.8 (0.7) | 2.2 (2) | 2.4 (2) | 2.6 (2) | 2.9 (2) | 3.1 (1) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 2.1 (6) | 26 (58) | 36 (54) | 1416 (1106) | 3126 (2791) | ∞ | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 13 (5) | 10 (1) | 10 (3) | 9.3 (3) | 8.9 (3) | 8.5 (3) | 8.3 (5) | 15/15 |
| GNN-CMA-ES bbob Faury | 3.4 (1) | 2.9 (0.8) | 3.5 (0.6) | 3.7 (0.5) | 3.9 (0.5) | 4.1 (0.3) | 4.4 (0.3) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.9 (0.8) | 3.9 (3) | 4.1 (3) | 4.3 (2) | 4.4 (3) | 4.6 (3) | 4.8 (2) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.2 (0.8) | 0.77 (0.4) | 0.81 (0.2) | 0.81 (0.5) | 0.81 (0.5) | 0.82 (0.4) | 0.82 (0.4) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 4.9 (4) | 3.5 (3) | 3.2 (3) | 3.3 (2) | 3.2 (2) | 3.2 (2) | 3.3 (2) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 2.7 (2) | 4.3 (7) | 4.3 (4) | 4.3 (4) | 4.4 (4) | 4.5 (4) | 4.7 (5) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 1.0e6 (9e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 3.1e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 8.5e4 (1e5) | 2.7e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 8.6e4 (2e5) | 2.6e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 9902 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 8365 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.0e4 (8785) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 2.7e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 6.5e4 (9e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 7.2e4 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.4 (0.9) | 1.2 (1) | 1.2 (1) | 1.1 (0.5) | 1.1 (1.0) | 1.1 (0.7) | 1.1 (0.9) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 3.3 (2) | 11 (21) | 15 (20) | 22 (22) | 27 (29) | 82 (88) | 457 (528) | 7/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3.6 (2) | 2.6 (2) | 2.5 (1) | 2.4 (0.8) | 2.4 (1) | 2.5 (1) | 2.5 (0.9) | 15/15 |
| Δ fopt f9, 5-D |
1e1 35 |
1e0 127 |
1e-1 214 |
1e-2 263 |
1e-3 300 |
1e-5 335 |
1e-7 369 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 4.3 (5) | 15 (8) | 92 (56) | 261 (225) | 478 (299) | 1368 (641) | 6094 (6705) | 1/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 4.1 (2) | 3.3 (3) | 2.3 (2) | 2.0 (2) | 1.8 (1) | 1.7 (1) | 1.6 (0.9) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 3.0 (0.6) | 3.6 (3) | 3.5 (1) | 3.6 (2) | 3.6 (2) | 3.7 (2) | 3.7 (2) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 4.0 (9) | 10 (3) | 30 (46) | 3472 (3673) | 1.1e4 (1e4) | 2.2e4 (3e4) | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 34 (10) | 25 (8) | 18 (9) | 15 (4) | 13 (4) | 12 (6) | 12 (4) | 15/15 |
| GNN-CMA-ES bbob Faury | 5.4 (1) | 5.2 (3) | 5.2 (1) | 5.0 (1) | 4.8 (1) | 4.8 (1) | 4.7 (1) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 6.0 (1) | 8.3 (6) | 6.8 (4) | 6.2 (4) | 5.8 (5) | 5.7 (3) | 5.7 (3) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.6 (0.4) | 1.4 (1) | 1.1 (0.8) | 1.1 (0.5) | 0.97 (0.5) | 0.92 (0.4) | 0.86 (0.4) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 6.0 (3) | 6.5 (7) | 5.4 (5) | 4.6 (3) | 4.2 (3) | 3.9 (3) | 3.6 (2) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 4.3 (3) | 10 (7) | 8.1 (7) | 7.4 (6) | 6.8 (5) | 6.6 (5) | 6.3 (5) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 6.6 (3) | 673 (730) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 3.4 (4) | 1436 (3057) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 22 (27) | 6453 (6732) | 1.1e5 (1e5) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 26 (30) | 2950 (2031) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 742 (546) | 1.3e5 (1e5) | 3.4e5 (4e5) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 659 (898) | 2.8e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 4970 (4409) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 3390 (3066) | 5.7e5 (8e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 2.0e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 7.5e4 (6e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 6.8e4 (8e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 1.1e5 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 2.9 (0.8) | 2.5 (3) | 1.7 (2) | 1.5 (2) | 1.4 (0.6) | 1.3 (0.8) | 1.2 (0.7) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 7.0 (7) | 16 (21) | 16 (24) | 21 (22) | 28 (20) | 107 (93) | 480 (726) | 5/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 6.7 (3) | 4.1 (2) | 3.2 (2) | 2.8 (2) | 2.6 (1) | 2.6 (1) | 2.5 (0.4) | 15/15 |
| Δ fopt f10, 5-D |
1e1 349 |
1e0 500 |
1e-1 574 |
1e-2 607 |
1e-3 626 |
1e-5 829 |
1e-7 880 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 233 (560) | 1096 (1695) | 5390 (6098) | 2.4e4 (2e4) | ∞ | ∞ | ∞1e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 0.40 (0.2) | 0.30 (0.1) | 0.28 (0.1) | 0.30 (0.1) | 0.33 (0.1) | 0.70 (0.9) | 18 (31) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 10 (11) | 27 (32) | 65 (63) | 230 (423) | 811 (774) | 8682 (7019) | ∞5e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1686 (1831) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 12 (3) | 12 (2) | 13 (3) | 13 (3) | 17 (9) | 37 (24) | 714 (857) | 2/15 |
| GNN-CMA-ES bbob Faury | 5.8 (5) | 6.8 (6) | 8.0 (6) | 8.7 (8) | 8.8 (9) | 6.9 (6) | 6.7 (7) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.0 (0.5) | 1.7 (0.3) | 1.7 (0.2) | 1.7 (0.2) | 1.8 (0.2) | 1.5 (0.2) | 1.6 (0.2) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 0.93 (0.4) | 0.88 (0.2) | 0.85 (0.3) | 0.86 (0.2) | 0.87 (0.1) | 1.0 (0.7) | 11 (19) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 5.0 (4) | 4.7 (5) | 5.3 (5) | 5.3 (2) | 5.2 (5) | 4.0 (3) | 3.8 (2) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 5.3 (2) | 4.2 (1) | 3.8 (1) | 3.8 (0.9) | 3.8 (1.0) | 3.0 (0.5) | 3.0 (0.8) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.28 (0.1) | 0.21 (0.1) | 0.20 (0.1) | 0.21 (0.1) | 0.23 (0.1) | 0.25 (0.2)★ | 888 (2126) | 7/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 21 (20) | 69 (65) | 239 (266) | 650 (504) | 1354 (1454) | ∞ | ∞5e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3.1 (2) | 2.7 (2) | 2.4 (2) | 2.5 (2) | 2.5 (2) | 2.0 (1) | 1.9 (1) | 15/15 |
| Δ fopt f11, 5-D |
1e1 143 |
1e0 202 |
1e-1 763 |
1e-2 977 |
1e-3 1177 |
1e-5 1467 |
1e-7 1673 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 31 (19) | 52 (27) | 30 (16) | 35 (15) | 45 (16) | 67 (39) | 103 (24) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 0.41 (0.2) | 0.37 (0.1) | 0.13 (0.1) | 0.12 (0.1) | 0.12 (0.1) | 1.6 (1) | 34 (36) | 5/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.5 (0.7) | 2.1 (2) | 0.81 (0.4) | 0.74 (0.4) | 0.89 (0.3) | 12 (15) | 4215 (3742) | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 6.8 (9) | 448 (928) | 4591 (6500) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 14 (4) | 18 (5) | 8.7 (8) | 13 (4) | 24 (25) | 317 (350) | ∞5e5 | 0/15 |
| GNN-CMA-ES bbob Faury | 19 (21) | 25 (21) | 8.6 (6) | 7.3 (5) | 6.5 (3) | 5.4 (2) | 4.9 (1) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.8 (0.8) | 3.2 (0.4) | 0.97 (0.2) | 0.84 (0.1) | 0.76 (0.1) | 0.71 (0.1) | 0.72 (0.1)★ | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 0.90 (0.3) | 0.96 (0.3) | 0.40 (0.2) | 0.43 (0.1) | 0.72 (0.5) | 2.0 (2) | 164 (238) | 4/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 8.7 (10) | 16 (15) | 8.3 (4) | 7.3 (12) | 7.5 (12) | 10 (20) | 8.8 (3) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 10 (8) | 11 (4) | 3.3 (0.6) | 2.6 (0.4) | 2.3 (0.6) | 1.9 (0.5) | 1.7 (0.4) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 2.3e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 1.3e4 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 1.2e4 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 2.3e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 9577 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 1.6e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 1.2e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1914 (6058) | 5.9e4 (8e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 2807 (508) | 4.5e4 (5e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 712 (1701) | 3.7e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 472 (450) | 4.4e4 (6e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1096 (1138) | 3.7e5 (5e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 869 (617) | 1.7e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.33 (0.1) | 0.28 (0.1) | 0.09 (0.0) | 0.08 (0.0) | 0.09 (0.0) | 149 (502) | 1735 (2838) | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 4.6 (6) | 8.0 (8) | 4.0 (2) | 4.7 (3) | 7.2 (7) | 216 (228) | ∞5e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 8.2 (7) | 10 (7) | 3.1 (2) | 2.9 (2) | 2.4 (1) | 2.3 (2) | 2.0 (0.8) | 15/15 |
| Δ fopt f12, 5-D |
1e1 108 |
1e0 268 |
1e-1 371 |
1e-2 413 |
1e-3 461 |
1e-5 1303 |
1e-7 1494 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 6200 (1e4) | 1.0e4 (7461) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 7.9 (8) | 4.5 (3) | 4.0 (2) | 3.8 (3) | 3.7 (2) | 5.5 (16) | 20 (40) | 10/15 |
| CG-scipy-2019 bbob Varelas Dahito | 4.2 (5) | 4.4 (7) | 4.6 (7) | 5.2 (5) | 5.5 (7) | 31 (82) | 240 (179) | 9/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 0.81 (0.3) | 1.1 (1) | 2.8 (5) | 14 (19) | 619 (608) | ∞ | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 50 (20) | 29 (9) | 25 (7) | 25 (8) | 23 (5) | 12 (15) | 701 (367) | 4/15 |
| GNN-CMA-ES bbob Faury | 8.8 (11) | 11 (11) | 13 (10) | 14 (10) | 14 (9) | 6.1 (5) | 5.7 (5) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 6.9 (3) | 4.8 (2) | 5.0 (4) | 5.4 (4) | 5.6 (4) | 2.5 (2) | 2.6 (1) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.1 (1) | 0.98 (0.4) | 1.1 (1) | 1.2 (0.9) | 1.2 (0.9) | 1.1 (3) | 10 (33) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 9.3 (9) | 7.4 (9) | 6.9 (8) | 8.1 (6) | 10 (11) | 7.2 (3) | 205 (338) | 7/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 8.9 (15) | 7.2 (7) | 7.0 (7) | 7.3 (8) | 7.3 (6) | 3.3 (3) | 3.3 (3) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 3.3 (0.7) | 1.9 (3) | 1.6 (3) | 1.6 (3) | 1.5 (2) | 0.77 (1) | 112 (379) | 12/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 59 (127) | 106 (162) | 127 (186) | 832 (2147) | 985 (2111) | 618 (772) | 2.5e4 (3e4) | 1/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 12 (9) | 7.2 (5) | 6.2 (3) | 6.5 (4) | 6.1 (4) | 3.0 (3) | 177 (179) | 8/15 |
| Δ fopt f13, 5-D |
1e1 132 |
1e0 195 |
1e-1 250 |
1e-2 319 |
1e-3 1310 |
1e-5 1752 |
1e-7 2255 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 5123 (1e4) | 3.3e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 0.95 (0.1) | 0.90 (0.1) | 0.91 (0.1) | 0.87 (0.0) | 0.68 (0.7) | 1189 (1529) | ∞5e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 4.9 (5) | 19 (26) | 85 (117) | 129 (247) | 172 (295) | 4017 (1928) | ∞5e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.9 (2) | 4.7 (5) | 9.1 (13) | 244 (244) | ∞ | ∞ | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 16 (3) | 20 (9) | 34 (20) | 49 (17) | 48 (38) | 272 (181) | ∞5e5 | 0/15 |
| GNN-CMA-ES bbob Faury | 3.1 (2) | 4.7 (3) | 6.3 (3) | 6.8 (5) | 2.3 (2) | 2.5 (2) | 2.7 (3) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.6 (1) | 3.0 (0.7) | 3.2 (0.6) | 3.3 (0.4) | 0.92 (0.2) | 1.0 (0.2)★2 | 1.00 (0.1)★3 | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 2.7 (3) | 4.1 (5) | 10 (13) | 14 (20) | 7.8 (21) | 25 (10) | ∞5e5 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 5.2 (8) | 7.1 (6) | 8.8 (6) | 11 (20) | 5.3 (9) | 9.0 (9) | 3213 (7927) | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 22 (19) | 94 (61) | 260 (354) | 366 (571) | 250 (408) | 517 (689) | 674 (1244) | 3/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 5.4e5 (9e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.79 (0.1) | 0.75 (0.1) | 0.75 (0.0)★2 | 0.73 (0.0)★4 | 2190 (2880) | ∞ | ∞4e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 15 (21) | 39 (30) | 148 (167) | 288 (317) | 179 (219) | 953 (915) | ∞5e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 5.6 (5) | 6.7 (5) | 5.6 (4) | 5.1 (4) | 2.1 (0.7) | 6.1 (5) | ∞5e5 | 0/15 |
| Δ fopt f14, 5-D |
1e1 10 |
1e0 41 |
1e-1 58 |
1e-2 90 |
1e-3 139 |
1e-5 251 |
1e-7 476 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 14 (20) | 21 (24) | 26 (18) | 27 (17) | 30 (16) | 324 (131) | ∞1e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 1.7 (1) | 0.88 (0.3) | 1.2 (0.4) | 1.1 (0.2) | 0.95 (0.1) | 0.81 (0.1) | 276 (216) | 1/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.8 (0.9) | 1.1 (0.5) | 1.3 (0.5) | 1.5 (0.3) | 1.8 (0.4) | 6.9 (6) | 3291 (4573) | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.2 (0.8) | 0.61 (0.2) | 0.67 (0.1) | 0.87 (0.3) | 83 (81) | ∞ | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 2.7 (3) | 7.3 (4) | 14 (4) | 11 (3) | 7.9 (3) | 7.0 (5) | 1722 (1089) | 0/15 |
| GNN-CMA-ES bbob Faury | 2.5 (4) | 3.0 (1) | 3.8 (1) | 3.9 (0.8) | 3.9 (0.6) | 3.7 (0.4) | 3.0 (0.3) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1.4 (2) | 2.7 (0.8) | 3.7 (1) | 3.6 (1) | 3.6 (0.5) | 3.4 (0.7) | 2.6 (0.3) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.1 (0.9) | 0.82 (0.4) | 0.93 (0.4) | 1.00 (0.2) | 0.96 (0.2) | 1.0 (0.2) | 93 (104) | 3/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 7.7 (14) | 6.8 (5) | 6.8 (3) | 5.1 (3) | 3.7 (1) | 2.8 (2) | 1.9 (0.8) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 3.3 (3) | 2.4 (1) | 2.3 (1) | 2.8 (0.9) | 4.3 (2) | 6.2 (2) | 4.8 (1) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 7.5e5 (8e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 7.5e5 (5e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 3.6e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 12 (18) | 4093 (4494) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 16 (21) | 5372 (5743) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 3.4e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 7.7 (24) | 1.8e5 (2e5) | 5.7e5 (8e5) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 526 (1009) | 1.0e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 782 (846) | 2.3e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 9.5 (28) | 1.8e5 (2e5) | 5.7e5 (4e5) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.4 (1) | 9298 (3e4) | 1.3e5 (2e5) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 1.4 (2) | 1.0e4 (3109) | 1.4e5 (3e5) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.0 (2) | 82 (125) | 2.9e4 (2e4) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 2.4 (3) | 161 (198) | 7.9e4 (1e5) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 2.2 (2) | 530 (627) | 3.9e5 (3e5) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 2.6 (4) | 267 (212) | 8.6e4 (1e5) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.4 (0.4) | 0.77 (0.3) | 0.83 (0.3) | 0.83 (0.2) | 0.74 (0.1)★ | 0.66 (0.2)★ | 3666 (5877) | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 7.3 (4) | 5.4 (7) | 6.3 (3) | 7.4 (4) | 10 (10) | 315 (402) | 1.5e4 (2e4) | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 7.1 (6) | 4.8 (3) | 4.7 (2) | 3.8 (1) | 3.0 (0.7) | 2.4 (0.3) | 1.7 (0.3) | 15/15 |
| Δ fopt f15, 5-D |
1e1 511 |
1e0 9310 |
1e-1 19369 |
1e-2 19743 |
1e-3 20073 |
1e-5 20769 |
1e-7 21359 |
#succ 14/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 29 (55) | 224 (279) | 226 (401) | 221 (343) | 218 (203) | 211 (292) | 205 (156) | 3/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 103 (156) | 781 (967) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 279 (415) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 33 (59) | 144 (170) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 6.8 (4) | 4.9 (7) | 7.1 (8) | 7.0 (8) | 6.9 (8) | 6.7 (7) | 21 (22) | 2/15 |
| GNN-CMA-ES bbob Faury | 2.7 (2) | 1.5 (1) | 1.4 (0.6) | 1.4 (0.7) | 1.4 (0.7) | 1.4 (0.6) | 1.4 (0.5) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1.6 (2) | 0.95 (0.5) | 0.91 (1) | 0.91 (0.8) | 0.91 (0.5) | 0.91 (1) | 0.91 (1) | 14/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 74 (92) | 773 (819) | 372 (516) | 365 (304) | 359 (255) | 347 (217) | 337 (334) | 1/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 278 (215) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 90 (158) | 387 (1006) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 1.4e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 7.1e4 (7e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 6.4e4 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 6.7e4 (8e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 5922 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 8538 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 4061 (4005) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 6092 (5407) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1.4e4 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 9318 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 27 (37) | 186 (174) | 384 (445) | 377 (304) | 371 (417) | 358 (253) | 348 (380) | 1/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 1088 (1199) | 804 (821) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 386 (376) | 799 (806) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Δ fopt f16, 5-D |
1e1 120 |
1e0 612 |
1e-1 2662 |
1e-2 10163 |
1e-3 10449 |
1e-5 11644 |
1e-7 12095 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 5.2 (2) | 136 (318) | 658 (844) | 697 (622) | 1411 (1053) | 1271 (1224) | ∞1e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 352 (587) | 1.2e4 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 541 (419) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 0.65 (0.7) | 11 (15) | 41 (44) | 694 (750) | ∞ | ∞ | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 2.2 (3) | 28 (15) | 36 (58) | 29 (44) | 335 (503) | ∞ | ∞5e5 | 0/15 |
| GNN-CMA-ES bbob Faury | 2.8 (1.0) | 2.4 (2) | 1.6 (1) | 0.59 (0.2) | 0.67 (0.4) | 0.63 (0.2) | 0.64 (0.4) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.0 (1) | 3.5 (2) | 1.8 (1) | 0.64 (0.6) | 0.70 (0.3) | 0.66 (0.5) | 0.67 (0.5) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 67 (98) | 3837 (3483) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 20 (28) | 95 (114) | 471 (331) | 727 (959) | 707 (1818) | ∞ | ∞5e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 27 (37) | 104 (166) | 569 (295) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1.7e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.6e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 8.6 (5) | 1.7e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 43 (45) | 6155 (9696) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 31 (44) | 7557 (6039) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 13 (15) | 1.4e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 2.7 (4) | 347 (397) | 2.8e4 (4e4) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 1012 (1060) | 1.2e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 1181 (1308) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 3.9 (4) | 415 (470) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 3.8 (4) | 743 (1612) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 2.4 (2) | 292 (258) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 2.7 (3) | 553 (595) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 2.6 (3) | 288 (250) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 3.1 (4) | 429 (487) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 2.3 (4) | 556 (560) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 7074 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞7e5 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 277 (266) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 35 (30) | 198 (221) | 842 (626) | 708 (578) | ∞ | ∞ | ∞5e5 | 0/15 |
| Δ fopt f17, 5-D |
1e1 5.0 |
1e0 215 |
1e-1 899 |
1e-2 2861 |
1e-3 3669 |
1e-5 6351 |
1e-7 7934 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 21 (35) | 45 (79) | 338 (556) | 424 (977) | 1810 (2454) | ∞ | ∞1e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 152 (183) | 923 (1808) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 243 (242) | 2131 (1646) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1202 (2027) | 2326 (2806) | 8105 (7693) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 4.5 (5) | 4.0 (1) | 92 (178) | 738 (274) | 1910 (2829) | ∞ | ∞5e5 | 0/15 |
| GNN-CMA-ES bbob Faury | 4.1 (5) | 1.8 (0.6) | 1.2 (2) | 1.0 (1) | 1.1 (0.8) | 1.1 (0.6) | 1.1 (0.5) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 5.0 (5) | 1.0 (0.7) | 0.89 (1.0) | 0.64 (1) | 0.56 (0.8) | 0.92 (0.5) | 1.1 (0.5) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 49 (77) | 410 (488) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 140 (334) | 7243 (8928) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 163 (335) | 538 (902) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 2.5e5 (5e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 2.5e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 72 (242) | 3.4e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 79 (110) | 2.4e4 (5e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 101 (77) | 4.7e4 (9e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 30 (83) | 3.4e5 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 2.9 (5) | 9.3e4 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 2580 (4502) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 2824 (4440) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.9 (2) | 9.3e4 (1e5) | 8.1e4 (2e5) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 2.8 (1) | 5436 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 3.7 (3) | 4585 (7005) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.4 (1) | 362 (362) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 4.0 (6) | 802 (833) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 3.7 (5) | 1805 (2071) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 5.4 (5) | 3091 (4277) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 35 (64) | 1530 (3221) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 472 (712) | 7861 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 180 (422) | 7714 (5860) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Δ fopt f18, 5-D |
1e1 103 |
1e0 378 |
1e-1 3968 |
1e-2 8451 |
1e-3 9280 |
1e-5 10905 |
1e-7 12469 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 10 (18) | 128 (242) | 429 (1054) | 1659 (2664) | ∞ | ∞ | ∞1e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 378 (304) | 1.9e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 682 (1092) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 375 (704) | 4341 (3388) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 2.7 (3) | 5.5 (3) | 159 (305) | 387 (650) | 756 (539) | ∞ | ∞5e5 | 0/15 |
| GNN-CMA-ES bbob Faury | 1.3 (0.5) | 3.3 (4) | 0.84 (0.9) | 0.69 (0.3) | 0.75 (0.5) | 0.84 (0.4) | 0.97 (0.4) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 0.91 (0.6) | 1.4 (2) | 0.56 (0.7) | 0.43 (0.4) | 0.45 (0.5) | 0.68 (0.2) | 0.83 (0.3) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 114 (134) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 218 (215) | 2.0e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 199 (284) | 1590 (2727) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 3.2e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 3.2e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1.9e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 622 (923) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 872 (1105) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 1.9e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1.2e4 (2e4) | 1.9e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 2.2e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 1.3e4 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 1.4e4 (2e4) | 9.7e4 (8e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 33 (95) | 5.7e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 23 (45) | 5.8e4 (6e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 10 (12) | 1.7e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 19 (15) | 6.5e4 (7e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 43 (37) | 1.9e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 45 (59) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 170 (263) | 3.7e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 1462 (2601) | 2.0e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 476 (611) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Δ fopt f19, 5-D |
1e1 1 |
1e0 1 |
1e-1 242 |
1e-2 1.0e5 |
1e-3 1.2e5 |
1e-5 1.2e5 |
1e-7 1.2e5 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 1 (0) | 1 (0) | 3.5 (5)★3 | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 471 (550) | 1.8e4 (2e4) | 1888 (2432) | 67 (64) | ∞ | ∞ | ∞5e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1195 (1405) | 1.7e4 (2e4) | 3034 (2915) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 29 (46) | 1477 (1331) | 594 (739) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 29 (19) | 3531 (2946) | 358 (473) | 21 (16) | 61 (60) | 61 (31) | 60 (68) | 1/15 |
| GNN-CMA-ES bbob Faury | 1 (0) | 1 (0) | 204 (259) | 2.3 (2) | 2.0 (1) | 2.0 (3) | 2.0 (0.8) | 3/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1 (0) | 1 (0) | 109 (113) | 1.6 (2) | 1.4 (0.6) | 1.4 (1) | 1.8 (1) | 3/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 692 (885) | 1.3e4 (2e4) | 1418 (1921) | 67 (38) | ∞ | ∞ | ∞5e5 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 334 (425) | 7596 (9500) | 1953 (1412) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 146 (425) | 8.3e4 (1e5) | 1.4e4 (2e4) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 212 (260) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 2.0 (2) | 324 (382) | 209 (321) | 703 (727) | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 1218 (1385) | 706 (560) | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 609 (746) | 3.4e6 (2e6) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 1.7 (1) | 571 (690) | 1473 (1734) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 3.3e4 (4e4) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 2.2e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 4.1 (3) | 1286 (814) | 2.5e4 (3e4) | 679 (1156) | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | 1.5e5 (2e5) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 8.0 (8) | 7785 (1e4) | 2.9e5 (2e5) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 77 (75) | 5.2e5 (7e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 5.1e6 (4e6) | 5.7e7 (6e7) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 712 (349) | 7418 (1e4) | 2107 (1781) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 958 (832) | 1.8e4 (2e4) | 5222 (6522) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Δ fopt f20, 5-D |
1e1 16 |
1e0 851 |
1e-1 38111 |
1e-2 51362 |
1e-3 54470 |
1e-5 54861 |
1e-7 55313 |
#succ 14/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 12 (14) | 21 (27) | 111 (219) | 82 (70) | 78 (51) | 77 (68) | 77 (143) | 3/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 7.7 (3) | 6.3 (9) | 4.2 (4) | 3.1 (2) | 2.9 (3) | 2.9 (3) | 2.9 (3) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 2.0 (0.8) | 17 (19) | 192 (158) | 142 (136) | 134 (90) | 133 (105) | 132 (88) | 1/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 0.93 (0.3) | 4.7 (5) | 95 (126) | 70 (93) | 66 (38) | 66 (72) | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 12 (7) | 3.2 (2) | 1.4 (0.9) | 1.0 (0.9) | 0.95 (0.8) | 0.95 (2) | 1.0 (2) | 15/15 |
| GNN-CMA-ES bbob Faury | 3.9 (2) | 5.1 (6) | 1.7 (1) | 1.3 (1) | 1.2 (1) | 1.4 (1) | 1.4 (3) | 8/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.4 (3) | 6.2 (7) | 3.1 (5) | 2.3 (2) | 2.2 (2) | 2.2 (2) | 2.2 (1) | 5/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.5 (0.6) | 2.4 (2) | 9.3 (14) | 6.9 (7) | 6.5 (6) | 6.4 (5) | 6.4 (7) | 12/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 7.8 (6) | 3.3 (4) | 7.4 (9) | 5.5 (9) | 5.2 (3) | 5.2 (5) | 10 (11) | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 10 (5) | 3.3 (6) | 58 (115) | 43 (85) | 41 (47) | 40 (43) | 40 (47) | 3/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 11 (16) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 1078 (1025) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 833 (1510) | 8.6e4 (8e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 21 (26) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1.5 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 3.8e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 2.6e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 1.6 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.4 (2) | 818 (740) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 2.5 (2) | 1048 (1426) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 9.4 (8) | 3727 (5584) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 25 (22) | 1.4e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 50 (39) | 1.8e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 79 (90) | 4.0e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.7 (1) | 2.6 (2) | 9.0 (7) | 6.7 (7) | 6.3 (5) | 6.3 (15) | 6.2 (7) | 11/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 4.4 (3) | 28 (35) | 59 (61) | 44 (77) | 41 (20) | 41 (24) | 40 (53) | 3/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 8.2 (5) | 2.1 (3) | 5.0 (6) | 3.7 (4) | 3.5 (3) | 3.4 (4) | 4.2 (3) | 0/15 |
| Δ fopt f21, 5-D |
1e1 41 |
1e0 1157 |
1e-1 1674 |
1e-2 1692 |
1e-3 1705 |
1e-5 1729 |
1e-7 1757 |
#succ 14/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 24 (53) | 840 (795) | 749 (599) | 741 (592) | 735 (1182) | 726 (1111) | 715 (723) | 7/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 1.8 (2) | 1.0 (1) | 1.8 (1) | 1.8 (2) | 1.8 (2) | 1.8 (2) | 1.8 (2) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 3.0 (3) | 3.2 (5) | 4.8 (6) | 4.8 (4) | 4.8 (8) | 4.8 (5) | 4.9 (7) | 14/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 7.2 (11) | 6.1 (5) | 14 (17) | 14 (25) | 13 (30) | 13 (28) | 13 (29) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 2.9 (2) | 1.7 (3) | 1.7 (2) | 1.9 (2) | 2.0 (1) | 2.1 (0.9) | 10 (11) | 14/15 |
| GNN-CMA-ES bbob Faury | 2.3 (2) | 5.4 (5) | 6.6 (11) | 6.7 (3) | 6.8 (4) | 6.8 (9) | 6.9 (11) | 14/15 |
| IPOP-CMA-ES-2019 bbob Faury | 16 (37) | 4.1 (7) | 18 (25) | 18 (30) | 18 (20) | 18 (15) | 18 (51) | 10/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 4.5 (4) | 1.1 (1) | 1.7 (1) | 1.6 (1) | 1.6 (0.9) | 1.6 (1) | 1.6 (1) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3.5 (4) | 2.9 (6) | 6.5 (11) | 6.5 (15) | 6.4 (11) | 6.4 (14) | 6.3 (14) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 5.1 (10) | 14 (29) | 17 (40) | 17 (22) | 17 (27) | 17 (39) | 17 (25) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 4.9e5 (5e5) | 6.1e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 4.9e5 (8e5) | 6.1e4 (6e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1.4e5 (1e5) | 6.1e4 (3e4) | 4.2e4 (1e5) | 4.3e4 (7e4) | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 76 (75) | 518 (1057) | 1.4e4 (2e4) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 119 (130) | 482 (531) | 7245 (1e4) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 1.4e5 (4e5) | 6.1e4 (8e4) | 4.2e4 (6e4) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 4.9 (3) | 6499 (8654) | 1.9e4 (2e4) | 1.9e4 (2e4) | 4.1e4 (7e4) | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 2468 (3362) | 1.2e4 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 3880 (3954) | 1.1e4 (1e4) | 4.3e4 (3e4) | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 5.1 (10) | 6538 (2e4) | 1.9e4 (2e4) | 1.9e4 (3e4) | 2.0e4 (5e4) | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 2.7 (2) | 715 (2358) | 1559 (3072) | 3220 (2647) | 4.4e4 (5e4) | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 2.0 (3) | 733 (1189) | 1538 (2997) | 3412 (3705) | 1.3e4 (2e4) | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.8 (2) | 7.7 (12) | 97 (153) | 889 (894) | 1.3e4 (2e4) | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 3.3 (3) | 14 (15) | 210 (202) | 4066 (5097) | 4.3e4 (5e4) | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 14 (14) | 31 (37) | 405 (561) | 4.3e4 (5e4) | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 11 (14) | 28 (23) | 676 (732) | 9561 (8961) | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 2.0 (2) | 1.1 (1) | 1.8 (0.9) | 1.8 (3) | 1.8 (3) | 1.8 (2) | 1.8 (3) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 37 (110) | 18 (20) | 47 (91) | 46 (94) | 46 (60) | 71 (90) | 122 (103) | 5/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 10 (10) | 5.1 (7) | 5.9 (7) | 5.9 (5) | 5.8 (7) | 5.8 (7) | 5.7 (6) | 15/15 |
| Δ fopt f22, 5-D |
1e1 71 |
1e0 386 |
1e-1 938 |
1e-2 980 |
1e-3 1008 |
1e-5 1040 |
1e-7 1068 |
#succ 14/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 68 (129) | 691 (1297) | 557 (747) | 535 (710) | 521 (498) | 508 (974) | 499 (486) | 11/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 2.9 (6) | 2.9 (2) | 2.6 (3) | 2.5 (3) | 2.5 (4) | 2.5 (2) | 2.9 (4) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 4.9 (8) | 7.3 (11) | 11 (13) | 11 (16) | 11 (10) | 11 (15) | 32 (41) | 6/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 10 (32) | 12 (9) | 9.4 (12) | 9.4 (12) | 10 (12) | 11 (11) | 12 (11) | 10/15 |
| DE-scipy-2019 bbob Varelas Dahito | 3.2 (3) | 5.5 (7) | 4.0 (4) | 4.2 (1.0) | 4.4 (3) | 4.5 (5) | 25 (28) | 13/15 |
| GNN-CMA-ES bbob Faury | 10 (10) | 15 (10) | 36 (39) | 40 (60) | 39 (54) | 39 (45) | 38 (37) | 10/15 |
| IPOP-CMA-ES-2019 bbob Faury | 4.6 (9) | 14 (35) | 43 (81) | 41 (41) | 47 (63) | 46 (64) | 45 (83) | 8/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 3.0 (5) | 2.9 (5) | 2.5 (2) | 2.4 (2) | 2.4 (2) | 2.4 (2) | 2.7 (2) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 5.9 (8) | 12 (21) | 10 (17) | 9.3 (16) | 9.0 (4) | 8.8 (4) | 8.6 (15) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 11 (24) | 12 (8) | 5.9 (7) | 5.8 (7) | 5.8 (7) | 5.6 (5) | 5.5 (6) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 4.6e5 (5e5) | 1.8e5 (2e5) | 7.5e4 (7e4) | 7.1e4 (5e4) | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 4.6e5 (6e5) | 1.8e5 (1e5) | 7.5e4 (9e4) | 7.1e4 (1e5) | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1.9e5 (4e5) | 8.4e4 (7e4) | 7.5e4 (1e5) | 7.1e4 (5e4) | 7.0e4 (8e4) | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 73 (113) | 1478 (2202) | 1.3e4 (3e4) | 7.3e4 (1e5) | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 93 (135) | 1280 (1614) | 1.6e4 (3e4) | 7.2e4 (1e5) | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 1.9e5 (2e5) | 8.4e4 (1e5) | 7.5e4 (7e4) | 7.1e4 (1e5) | 7.0e4 (6e4) | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 5188 (2e4) | 1.6e4 (4e4) | 1.5e4 (2e4) | 3.3e4 (7e4) | 7.0e4 (7e4) | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 5083 (7059) | 5.7e4 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 4744 (3269) | 6.2e4 (7e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 5145 (308) | 1.9e4 (2e4) | 1.5e4 (2e4) | 3.5e4 (2e4) | 7.0e4 (6e4) | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 6.6 (4) | 59 (66) | 2117 (2672) | 4195 (5982) | 8963 (7700) | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 2.7 (4) | 89 (223) | 2040 (5340) | 5113 (5560) | 1.7e4 (8035) | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 2.7 (5) | 23 (35) | 119 (171) | 4103 (4338) | 3.6e4 (9e4) | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 5.8 (8) | 40 (50) | 323 (438) | 4454 (6618) | 3.5e4 (5e4) | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 12 (14) | 73 (120) | 742 (1023) | 2.3e4 (1e4) | 7.2e4 (2e5) | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 13 (20) | 106 (154) | 946 (608) | 2.2e4 (2e4) | 7.1e4 (1e5) | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 2.5 (5) | 2.4 (2) | 2.6 (1) | 2.5 (4) | 2.5 (4) | 2.5 (4) | 2.8 (2) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 52 (62) | 41 (41) | 22 (24) | 22 (24) | 27 (28) | 149 (154) | 2260 (1292) | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 8.6 (10) | 9.5 (8) | 11 (14) | 10 (13) | 10 (11) | 10 (10) | 9.4 (9) | 15/15 |
| Δ fopt f23, 5-D |
1e1 3.0 |
1e0 518 |
1e-1 14249 |
1e-2 27890 |
1e-3 31654 |
1e-5 33030 |
1e-7 34256 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 5.3 (5) | 11 (28) | 117 (73) | 512 (386) | 457 (514) | ∞ | ∞1e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 101 (217) | 113 (154) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 39 (115) | 100 (180) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 3.0 (3) | 1.0 (0.6) | 21 (17) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 1.8 (2) | 27 (30) | 61 (42) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| GNN-CMA-ES bbob Faury | 4.4 (4) | 6.9 (7) | 1.8 (4) | 1.00 (1) | 0.91 (0.7) | 1.1 (0.8) | 1.0 (1) | 12/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.3 (5) | 11 (9) | 3.0 (4) | 1.9 (3) | 1.7 (2) | 1.6 (2) | 1.8 (1) | 8/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 85 (188) | 31 (25) | 254 (219) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 4.6 (8) | 1.5 (1) | 1.5 (2) | 10 (8) | 40 (24) | ∞ | ∞5e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 2.6 (3) | 12 (16) | 158 (270) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 2.8 (4) | 41 (63) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 3.3 (4) | 57 (62) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 2.4 (2) | 48 (62) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 10 (11) | 1251 (1965) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 22 (25) | 1529 (2131) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 2.0 (2) | 60 (46) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 2.0 (2) | 49 (45) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 497 (670) | 1.4e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 471 (531) | 3.1e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.0 (1) | 30 (24) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.6 (1) | 37 (34) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 2.7 (4) | 36 (30) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.9 (1) | 33 (18) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 2.2 (2) | 34 (44) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1.5 (2) | 74 (70) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 2.4 (2) | 103 (160) | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 51 (155) | 232 (295) | 565 (325) | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 31 (44) | 103 (108) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3.9 (4) | 0.81 (1.0) | 0.84 (1) | 2.5 (2) | 8.8 (11) | ∞ | ∞5e5 | 0/15 |
| Δ fopt f24, 5-D |
1e1 1622 |
1e0 2.2e5 |
1e-1 6.4e6 |
1e-2 9.6e6 |
1e-3 9.6e6 |
1e-5 1.3e7 |
1e-7 1.3e7 |
#succ 3/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 34 (37) | 66 (86) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 60 (54) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 206 (307) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 21 (23) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 10 (9) | 16 (10) | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| GNN-CMA-ES bbob Faury | 2.4 (3) | 1.0 (0.3) | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1.6 (1) | 1.6 (3) | ∞ | ∞ | ∞ | ∞ | ∞5e4 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 27 (24) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 23 (26) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 57 (34) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 660 (528) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 4.4e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 494 (583) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 63 (83) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 37 (47) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 250 (228) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 163 (138) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 872 (1124) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 2561 (2117) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 4924 (3087) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 7276 (9453) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e6 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 19 (18) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 284 (398) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 81 (68) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞5e5 | 0/15 |
Previous dimension | Dimension = 10 | Next dimension
| Δ fopt f1, 10-D |
1e1 22 |
1e0 23 |
1e-1 23 |
1e-2 23 |
1e-3 23 |
1e-5 23 |
1e-7 23 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 45 (20) | 95 (35) | 137 (58) | 188 (81) | 236 (91) | 341 (101) | 546 (271) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 1.7 (0) | 1.7 (0.1) | 1.9 (0.3) | 1.9 (0.3) | 1.9 (0.3) | 1.9 (0.3) | 1.9 (0.3) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.7 (0.3) | 1.7 (0.1) | 2.1 (2) | 2.1 (0.9) | 2.3 (2) | 2.3 (2) | 2.3 (2) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.1 (0.3) | 1.4 (0.5) | 2.6 (0.4) | 3.6 (0.4) | 4.7 (0.7) | 6.6 (0.7) | 8.7 (0.9) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 30 (19) | 96 (34) | 118 (32) | 122 (54) | 122 (41) | 122 (51) | 123 (52) | 15/15 |
| GNN-CMA-ES bbob Faury | 7.5 (1) | 15 (4) | 24 (5) | 32 (6) | 38 (5) | 51 (6) | 64 (7) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 5.3 (2) | 12 (3) | 19 (2) | 25 (2) | 32 (3) | 45 (4) | 59 (4) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.4 (0.2) | 1.3 (0.2) | 1.3 (0.2) | 1.3 (0.2) | 1.3 (0.2) | 1.3 (0.2) | 1.3 (0.2) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 36 (31) | 69 (38) | 93 (35) | 100 (35) | 122 (94) | 129 (30) | 137 (96) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 3.6 (0.7) | 3.9 (0.3) | 3.9 (0.1) | 4.0 (0.1) | 4.0 (0.1) | 5.3 (5) | 5.3 (3) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 6.4e6 (6e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 1.5e6 (2e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 3.1e6 (3e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 6.4e6 (5e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 7.0e5 (5e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 7.3e5 (8e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 4290 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 6801 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1117 (1693) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 2239 (2475) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1.1e4 (7542) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 1.0e4 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.68 (0)★4 | 0.65 (0)★4 | 0.65 (0)★4 | 0.65 (0)★4 | 0.65 (0)★4 | 0.65 (0)★4 | 0.65 (0)★4 | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 13 (14) | 34 (44) | 47 (46) | 57 (57) | 74 (36) | 208 (309) | 762 (997) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 26 (18) | 40 (17) | 47 (15) | 51 (15) | 55 (13) | 62 (18) | 69 (13) | 15/15 |
| Δ fopt f2, 10-D |
1e1 187 |
1e0 190 |
1e-1 191 |
1e-2 191 |
1e-3 193 |
1e-5 194 |
1e-7 195 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 64 (37) | 81 (49) | 115 (82) | 173 (148) | 276 (294) | 848 (943) | 1836 (1519) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 2.5 (0.9) | 2.7 (0.8) | 3.0 (1) | 3.2 (1) | 3.3 (1) | 3.6 (1) | 3.9 (1) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 112 (56) | 235 (127) | 1345 (976) | 5394 (4225) | ∞ | ∞ | ∞1e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.7e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 32 (4) | 41 (5) | 51 (4) | 63 (27) | 102 (81) | 751 (1327) | ∞1e6 | 0/15 |
| GNN-CMA-ES bbob Faury | 62 (33) | 92 (25) | 110 (42) | 120 (41) | 124 (41) | 127 (32) | 129 (30) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 13 (3) | 15 (2) | 16 (2) | 17 (2) | 18 (2) | 19 (2) | 21 (2) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 6.6 (2) | 8.5 (1) | 10 (1) | 10 (2) | 11 (2) | 12 (2) | 12 (2) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2931 (3113) | 2.3e4 (4e4) | 7.6e4 (7e4) | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 1.1 (0.2) | 1.2 (0.0)★ | 1.2 (0.0)★4 | 1.2 (0.0)★4 | 1.3 (0.0)★2 | 1.8 (0.4) | 1.9 (0.1) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.3 (0.2) | 1.4 (0.4) | 1.6 (0.5) | 1.7 (0.2) | 1.8 (0.5) | 2.0 (0.3) | 2.2 (0.4) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 16 (8) | 20 (9) | 44 (88) | 48 (88) | 52 (90) | 93 (124) | 2125 (2629) | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 19 (7) | 22 (8) | 23 (8) | 23 (8) | 24 (8) | 24 (7) | 25 (6) | 15/15 |
| Δ fopt f3, 10-D |
1e1 1739 |
1e0 3600 |
1e-1 3609 |
1e-2 3636 |
1e-3 3642 |
1e-5 3646 |
1e-7 3651 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 20 (21) | 38 (14) | 52 (24) | 52 (24) | 52 (24) | 53 (24) | 55 (22) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 24 (10) | 65 (114) | 154 (224) | 152 (131) | 152 (119) | 152 (157) | 198 (236) | 6/15 |
| GNN-CMA-ES bbob Faury | 3.7 (2) | 89 (84) | 412 (597) | 410 (324) | 409 (427) | 410 (688) | 410 (419) | 1/15 |
| IPOP-CMA-ES-2019 bbob Faury | 4.1 (3) | 90 (64) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 3.6 (3) | 725 (874) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Δ fopt f4, 10-D |
1e1 2234 |
1e0 3626 |
1e-1 3660 |
1e-2 3695 |
1e-3 3707 |
1e-5 3744 |
1e-7 28767 |
#succ 12/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 24 (18) | 60 (32) | 89 (39) | 88 (43) | 88 (54) | 89 (46) | 12 (5) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 3272 (3241) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 14 (4) | 154 (270) | 510 (444) | 506 (760) | 504 (675) | 499 (478) | 249 (335) | 1/15 |
| GNN-CMA-ES bbob Faury | 11 (8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| IPOP-CMA-ES-2019 bbob Faury | 5.8 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 2.3 (3) | 474 (268) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Δ fopt f5, 10-D |
1e1 20 |
1e0 20 |
1e-1 20 |
1e-2 20 |
1e-3 20 |
1e-5 20 |
1e-7 20 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 37 (26) | 41 (31) | 41 (31) | 41 (33) | 41 (32) | 41 (33) | 41 (31) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 2.6 (0.6) | 3.5 (0.6) | 3.6 (0.6) | 3.7 (0.6) | 3.7 (0.8) | 3.7 (0.6) | 3.7 (0.8) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 3.0 (0.5) | 3.8 (0.5) | 4.0 (0.6) | 4.0 (0.6) | 4.0 (0.5) | 4.0 (0.6) | 4.0 (0.5) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 2.9 (0.8) | 4.0 (0.7) | 4.2 (1) | 4.2 (1) | 4.2 (1) | 4.2 (0.8) | 4.2 (1) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 247 (65) | 685 (386) | 879 (517) | 881 (740) | 881 (622) | 881 (637) | 881 (648) | 15/15 |
| GNN-CMA-ES bbob Faury | 6.0 (2) | 7.8 (3) | 7.9 (3) | 7.9 (1) | 7.9 (4) | 7.9 (2) | 7.9 (2) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 5.7 (1) | 6.8 (2) | 6.9 (0.9) | 6.9 (1) | 6.9 (1) | 6.9 (1) | 6.9 (1) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 2.3 (0) | 3.0 (0.3) | 3.0 (0.3) | 3.0 (0.3) | 3.0 (0.3) | 3.0 (0.3) | 3.0 (0.3) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 79 (88) | 87 (87) | 88 (85) | 88 (71) | 88 (73) | 88 (49) | 88 (75) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 6.9 (0.1) | 6.9 (0.2) | 6.9 (0.1) | 6.9 (0.1) | 6.9 (0.2) | 6.9 (0.1) | 6.9 (0.1) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 1241 (873) | 3.3e4 (4e4) | 6.5e4 (6e4) | 6.6e4 (6e4) | 6.6e4 (6e4) | 6.6e4 (6e4) | 6.6e4 (4e4) | 15/15 |
| RS-10 bbob Brockhoff Hansen | 1765 (2066) | 2.8e4 (2e4) | 4.7e4 (6e4) | 5.3e4 (7e4) | 5.3e4 (7e4) | 5.3e4 (5e4) | 5.3e4 (6e4) | 15/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 160 (222) | 558 (604) | 609 (662) | 609 (587) | 609 (427) | 609 (573) | 609 (648) | 15/15 |
| RS-20 bbob Brockhoff Hansen | 171 (150) | 569 (732) | 657 (680) | 657 (814) | 657 (816) | 657 (889) | 657 (781) | 15/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 5.6e5 (8e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 4.3e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.5 (0.3)★3 | 2.4 (0.8)★ | 2.4 (0.6)★ | 2.5 (0.3)★ | 2.5 (0.5)★ | 2.5 (0.8)★ | 2.5 (0.5)★ | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 8.5 (10) | 10 (11) | 10 (11) | 10 (11) | 10 (2) | 10 (2) | 10 (10) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 49 (75) | 53 (17) | 54 (17) | 54 (86) | 54 (32) | 54 (72) | 54 (40) | 15/15 |
| Δ fopt f6, 10-D |
1e1 412 |
1e0 623 |
1e-1 826 |
1e-2 1039 |
1e-3 1292 |
1e-5 1841 |
1e-7 2370 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 12 (6) | 14 (7) | 16 (6) | 20 (8) | 22 (11) | 31 (18) | 43 (49) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 4.0 (2) | 4.3 (2) | 4.2 (2) | 4.6 (2) | 4.8 (1) | 4.9 (0.9) | 14 (9) | 14/15 |
| CG-scipy-2019 bbob Varelas Dahito | 3.3 (2) | 4.4 (2) | 4.8 (2) | 5.3 (2) | 5.5 (2) | 5.5 (2) | 8.0 (7) | 12/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 39 (59) | 1958 (2610) | 4100 (5562) | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 15 (5) | 26 (6) | 33 (8) | 32 (11) | 32 (11) | 522 (1098) | 6047 (7724) | 0/15 |
| GNN-CMA-ES bbob Faury | 4.1 (2) | 4.4 (2) | 4.2 (2) | 3.9 (2) | 3.5 (2) | 2.9 (1) | 2.6 (0.9) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1.7 (0.2) | 1.7 (0.4) | 1.8 (0.4)★2 | 1.8 (0.4)★2 | 1.7 (0.2)★3 | 1.6 (0.2)★4 | 1.5 (0.1)★4 | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 2.0 (0.9) | 2.7 (1) | 2.8 (0.7) | 2.8 (0.6) | 2.9 (0.5) | 3.0 (0.5) | 3.6 (2) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 1036 (1005) | 1.1e4 (8427) | 1.8e4 (2e4) | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 25 (45) | 58 (62) | 56 (63) | 59 (58) | 58 (61) | 122 (64) | 190 (324) | 12/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 2.6 (0.9) | 2.7 (1) | 2.8 (0.9) | 2.8 (1) | 2.9 (0.8) | 2.8 (1.0) | 3.6 (3) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 18 (5) | 24 (41) | 26 (34) | 140 (299) | 605 (494) | ∞ | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 45 (43) | 49 (44) | 53 (59) | 54 (64) | 72 (87) | 129 (161) | ∞1e6 | 0/15 |
| Δ fopt f7, 10-D |
1e1 172 |
1e0 1611 |
1e-1 4195 |
1e-2 5099 |
1e-3 5141 |
1e-5 5141 |
1e-7 5389 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 19 (15) | 119 (251) | 2062 (2377) | 1737 (2179) | 1723 (3091) | 1723 (2630) | 1644 (1685) | 3/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 45 (103) | 4151 (5928) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 16 (6) | 69 (46) | 236 (211) | 2760 (2354) | 2737 (2140) | 2737 (2723) | 2618 (3944) | 1/15 |
| GNN-CMA-ES bbob Faury | 4.4 (5) | 1.6 (2) | 1.8 (1) | 1.6 (0.8) | 1.6 (0.8) | 1.6 (0.8) | 1.6 (0.8) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.2 (0.9) | 0.85 (0.5) | 0.71 (0.6)★2 | 0.68 (0.4)★3 | 0.68 (0.4)★3 | 0.68 (0.5)★3 | 0.66 (0.5)★3 | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 8.4e4 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 388 (524) | 2744 (3259) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1.7e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.4e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 5.8e4 (7e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 5.8e4 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 3.5e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 6.8e4 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 4.3e5 (8e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 8.3e5 (8e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Δ fopt f8, 10-D |
1e1 326 |
1e0 921 |
1e-1 1114 |
1e-2 1217 |
1e-3 1267 |
1e-5 1315 |
1e-7 1343 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 17 (13) | 200 (342) | 323 (326) | 612 (236) | 1144 (635) | ∞ | ∞2e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 2.6 (1) | 1.9 (0.5) | 1.7 (1) | 1.6 (0.9) | 1.5 (1) | 1.5 (0.6) | 1.5 (0.9) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.2 (1) | 2.1 (2) | 2.4 (2) | 2.6 (0.5) | 2.8 (2) | 3.1 (2) | 3.5 (2) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 24 (10) | 15 (42) | 18 (37) | 5455 (7736) | 1.1e4 (7601) | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 20 (5) | 15 (10) | 14 (12) | 13 (11) | 13 (10) | 12 (10) | 14 (9) | 15/15 |
| GNN-CMA-ES bbob Faury | 2.3 (0.5) | 3.5 (0.4) | 3.7 (0.9) | 3.7 (0.3) | 3.8 (0.8) | 3.9 (0.8) | 4.1 (0.8) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.0 (0.7) | 3.8 (0.9) | 3.8 (0.5) | 3.8 (2) | 3.9 (2) | 4.0 (2) | 4.2 (0.7) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 0.89 (0.6) | 0.84 (0.4) | 0.79 (0.2) | 0.77 (0.3) | 0.76 (0.3) | 0.76 (0.3) | 0.76 (0.3) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 17 (7) | 15 (13) | 13 (12) | 12 (11) | 12 (11) | 13 (11) | 14 (12) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 3.1 (3) | 4.0 (6) | 4.2 (3) | 4.3 (5) | 4.3 (4) | 4.4 (4) | 4.5 (4) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.3 (0.4) | 1.7 (1) | 1.5 (1) | 1.5 (0.7) | 1.4 (1) | 1.4 (1) | 1.4 (1) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 14 (30) | 28 (40) | 55 (52) | 67 (55) | 200 (365) | 1082 (1246) | 1.1e4 (1e4) | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 5.7 (7) | 4.3 (1) | 4.0 (2) | 3.8 (3) | 3.8 (3) | 3.7 (2) | 3.8 (2) | 15/15 |
| Δ fopt f9, 10-D |
1e1 200 |
1e0 648 |
1e-1 857 |
1e-2 993 |
1e-3 1065 |
1e-5 1138 |
1e-7 1185 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 11 (4) | 95 (79) | 342 (104) | 963 (178) | 4469 (6162) | ∞ | ∞2e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 2.8 (1) | 2.5 (2) | 2.0 (2) | 1.8 (1) | 1.7 (0.6) | 1.6 (1) | 1.6 (1) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.1 (0.4) | 3.6 (2) | 3.5 (3) | 3.5 (3) | 3.6 (3) | 3.9 (0.5) | 4.2 (2) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.4 (3) | 14 (23) | 19 (21) | 1.5e4 (3e4) | 1.4e4 (2e4) | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 33 (6) | 26 (28) | 21 (27) | 18 (23) | 17 (22) | 16 (18) | 16 (9) | 15/15 |
| GNN-CMA-ES bbob Faury | 5.5 (6) | 5.4 (2) | 5.1 (2) | 4.9 (2) | 4.8 (2) | 4.8 (1.0) | 4.9 (2) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.7 (2) | 5.9 (1) | 5.4 (1) | 5.1 (2) | 5.0 (0.9) | 5.0 (2) | 5.0 (0.7) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 0.95 (0.8) | 1.3 (0.9) | 1.1 (0.6) | 1.0 (0.5) | 1.0 (0.4) | 0.97 (0.4) | 0.95 (0.4) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 18 (10) | 18 (13) | 16 (10) | 15 (7) | 14 (6) | 14 (6) | 15 (13) | 12/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 3.6 (2) | 9.0 (9) | 7.8 (3) | 7.3 (3) | 7.0 (6) | 7.0 (6) | 6.9 (3) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 3.4e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 7.2e5 (7e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.4 (0.6) | 1.8 (1) | 1.5 (1) | 1.4 (1) | 1.3 (1.0) | 1.2 (0.8) | 1.2 (0.9) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 14 (32) | 103 (119) | 331 (352) | 595 (554) | 904 (1018) | 6005 (8218) | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 6.1 (3) | 4.9 (3) | 4.3 (2) | 3.9 (1) | 3.8 (2) | 3.7 (2) | 3.7 (1) | 14/15 |
| Δ fopt f10, 10-D |
1e1 1835 |
1e0 2172 |
1e-1 2455 |
1e-2 2728 |
1e-3 2802 |
1e-5 4543 |
1e-7 4739 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 5139 (5349) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 0.23 (0.1) | 0.22 (0.1) | 0.21 (0.1) | 0.21 (0.1) | 0.26 (0.1) | 0.28 (0.5) | 7.0 (12) | 11/15 |
| CG-scipy-2019 bbob Varelas Dahito | 11 (5) | 31 (26) | 128 (197) | 737 (966) | 2613 (3647) | ∞ | ∞1e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 8237 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 45 (10) | 51 (7) | 53 (10) | 51 (16) | 64 (20) | 572 (595) | ∞1e6 | 0/15 |
| GNN-CMA-ES bbob Faury | 3.7 (2) | 4.3 (2) | 4.5 (2) | 4.3 (2) | 4.4 (2) | 2.8 (1) | 2.7 (0.9) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1.2 (0.3) | 1.3 (0.2) | 1.2 (0.2) | 1.2 (0.1) | 1.2 (0.1) | 0.81 (0.1) | 0.84 (0.1) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 0.71 (0.2) | 0.84 (0.1) | 0.84 (0.2) | 0.78 (0.1) | 0.79 (0.2) | 0.56 (0.3) | 11 (22) | 12/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 387 (469) | 3151 (3568) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 6.1 (2) | 5.7 (2) | 5.4 (0.7) | 5.1 (0.8) | 5.0 (1) | 3.3 (0.4) | 3.3 (0.6) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.17 (0.1) | 0.16 (0.0) | 0.15 (0.1) | 0.14 (0.1)★ | 0.15 (0.1)★ | 0.10 (0.0)★ | 256 (405) | 3/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 202 (195) | 689 (426) | 6616 (6707) | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 1.9 (1.0) | 2.0 (1.0) | 2.1 (0.9) | 2.0 (0.8) | 1.9 (0.8) | 1.2 (0.4) | 1.2 (0.4) | 2/15 |
| Δ fopt f11, 10-D |
1e1 266 |
1e0 1041 |
1e-1 2602 |
1e-2 2954 |
1e-3 3338 |
1e-5 4092 |
1e-7 4843 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 51 (23) | 42 (19) | 28 (9) | 39 (14) | 49 (10) | 71 (16) | 93 (22) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 0.46 (0.4) | 0.14 (0.1) | 0.07 (0.0) | 0.07 (0.0) | 0.08 (0.0) | 0.56 (1.0) | 29 (36) | 4/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.7 (0.7) | 0.80 (0.3) | 0.43 (0.2) | 0.46 (0.1) | 0.55 (0.2) | 5.1 (2) | ∞1e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 4053 (4679) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 94 (34) | 53 (12) | 29 (9) | 28 (17) | 76 (68) | ∞ | ∞1e6 | 0/15 |
| GNN-CMA-ES bbob Faury | 35 (24) | 14 (8) | 6.8 (3) | 6.6 (2) | 6.1 (2) | 5.2 (2) | 4.5 (1) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 5.9 (0.6) | 1.7 (0.1) | 0.77 (0.0) | 0.74 (0.0) | 0.71 (0.0) | 0.65 (0.0) | 0.62 (0.0)★ | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.0 (0.2) | 0.44 (0.2) | 0.24 (0.1) | 0.26 (0.1) | 0.33 (0.1) | 1.1 (1) | 623 (937) | 1/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 243 (260) | 1.4e4 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 31 (16) | 13 (3) | 6.1 (1) | 5.7 (1) | 5.3 (1.0) | 4.5 (0.8) | 3.9 (0.8) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 2.6e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.5e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 8.6e4 (8e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 5.1e4 (7e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 4.1e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1.2e5 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 5.5e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.29 (0.0) | 0.10 (0.0) | 0.05 (0.0) | 0.05 (0.0) | 0.05 (0.0) | 66 (194) | 819 (715) | 2/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 8.4 (7) | 6.7 (4) | 4.4 (3) | 7.3 (8) | 43 (77) | ∞ | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 26 (6) | 8.6 (4) | 3.9 (2) | 3.9 (2) | 3.4 (2) | 3.0 (2) | 2.6 (2) | 15/15 |
| Δ fopt f12, 10-D |
1e1 515 |
1e0 896 |
1e-1 1240 |
1e-2 1390 |
1e-3 1569 |
1e-5 3660 |
1e-7 5154 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 985 (2913) | 8938 (1e4) | 2.3e4 (2e4) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 3.8 (3) | 2.9 (2) | 2.5 (1) | 2.4 (1) | 2.3 (1) | 1.9 (3) | 45 (153) | 8/15 |
| CG-scipy-2019 bbob Varelas Dahito | 0.46 (0.1) | 1.1 (1) | 2.2 (2) | 2.7 (2) | 3.3 (2) | 110 (150) | 801 (850) | 1/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 0.42 (0.2) | 0.59 (0.7) | 1.0 (1) | 7.5 (8) | ∞ | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 50 (16) | 59 (31) | 49 (16) | 62 (35) | 55 (34) | 41 (31) | 2748 (3157) | 0/15 |
| GNN-CMA-ES bbob Faury | 5.1 (5) | 5.4 (5) | 5.9 (4) | 6.4 (5) | 6.3 (4) | 3.2 (1) | 2.5 (0.8) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.8 (1) | 3.8 (2) | 4.1 (3) | 4.4 (2) | 4.5 (2) | 2.4 (1) | 1.9 (0.9) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 0.34 (0.2) | 0.58 (0.6) | 0.69 (0.5) | 0.73 (0.4) | 0.77 (0.4) | 1.7 (5) | 2.1 (5) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 13 (8) | 31 (22) | 49 (43) | 137 (118) | 227 (346) | 1851 (3074) | ∞1e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 2.3 (3) | 4.7 (5) | 5.2 (4) | 5.3 (4) | 5.5 (4) | 3.1 (2) | 2.6 (2) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 2.5 (3) | 1.9 (2) | 1.6 (1) | 1.6 (1) | 1.5 (1) | 0.99 (0.7) | 3.3 (2) | 11/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 10 (27) | 15 (12) | 81 (199) | 245 (298) | 559 (392) | 2017 (2778) | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 8.7 (8) | 8.7 (4) | 8.4 (3) | 8.0 (3) | 7.4 (2) | 240 (696) | 2735 (3880) | 0/15 |
| Δ fopt f13, 10-D |
1e1 387 |
1e0 596 |
1e-1 797 |
1e-2 1014 |
1e-3 4587 |
1e-5 6208 |
1e-7 7779 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 2.1e4 (2e4) | 4.7e4 (8e4) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 0.79 (0.1) | 0.79 (0.1) | 0.73 (0.1) | 0.70 (0.0) | 58 (109) | 648 (1371) | ∞1e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 3.6 (4) | 8.3 (11) | 15 (31) | 64 (91) | 46 (175) | 235 (261) | ∞1e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 0.78 (0.8) | 2.0 (3) | 6.5 (14) | 2606 (4088) | ∞ | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 30 (10) | 33 (15) | 42 (12) | 105 (86) | 116 (65) | 724 (931) | ∞1e6 | 0/15 |
| GNN-CMA-ES bbob Faury | 2.9 (1) | 4.5 (2) | 4.5 (0.6) | 4.6 (1) | 1.2 (0.2) | 1.2 (0.2) | 1.2 (0.3) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.7 (2) | 3.2 (2) | 3.4 (1) | 3.5 (0.9) | 0.89 (0.2) | 0.93 (0.2)★ | 0.93 (0.3)★2 | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 3.5 (5) | 7.0 (11) | 18 (16) | 17 (24) | 5.0 (6) | 26 (38) | ∞1e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 14 (11) | 11 (7) | 16 (16) | 17 (14) | 5.5 (5) | 70 (49) | ∞1e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 57 (187) | 107 (212) | 198 (213) | 498 (351) | 188 (152) | 419 (329) | 580 (1024) | 3/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.69 (0.1) | 0.67 (0.0) | 0.63 (0.1)★ | 0.62 (0.0)★3 | 4491 (7685) | 3.7e4 (4e4) | ∞8e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 10 (13) | 20 (16) | 86 (73) | 192 (208) | 128 (114) | 2357 (2624) | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 6.0 (5) | 5.9 (6) | 5.4 (5) | 5.8 (4) | 2.3 (2) | 16 (19) | ∞1e6 | 0/15 |
| Δ fopt f14, 10-D |
1e1 37 |
1e0 98 |
1e-1 133 |
1e-2 205 |
1e-3 392 |
1e-5 687 |
1e-7 4305 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 13 (21) | 24 (12) | 26 (10) | 28 (9) | 39 (12) | 1301 (337) | ∞2e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 1.1 (0.3) | 0.71 (0.2) | 0.95 (0.2) | 1.00 (0.1) | 0.73 (0.1) | 0.68 (0.1) | ∞1e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.2 (0.4) | 1.0 (0.2) | 1.2 (0.2) | 1.5 (0.2) | 1.6 (0.3) | 6.7 (4) | ∞1e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 0.66 (0.2) | 0.47 (0.1)★2 | 0.60 (0.1)★2 | 0.87 (0.2) | 686 (628) | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 7.4 (4) | 23 (9) | 25 (11) | 18 (12) | 10 (1) | 21 (21) | ∞1e6 | 0/15 |
| GNN-CMA-ES bbob Faury | 3.1 (2) | 3.8 (1) | 4.7 (1) | 4.5 (1) | 3.4 (0.7) | 3.6 (0.3) | 0.83 (0.1) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.2 (2) | 3.1 (0.8) | 3.7 (0.7) | 3.8 (0.7) | 3.1 (0.6) | 3.2 (0.4) | 0.74 (0.1) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.1 (0.5) | 0.99 (0.4) | 1.1 (0.3) | 1.1 (0.3) | 0.90 (0.1) | 1.1 (0.2) | 1690 (1394) | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 11 (9) | 36 (28) | 42 (31) | 33 (17) | 21 (16) | 14 (11) | 6.6 (3) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 3.8 (2) | 3.0 (1) | 3.0 (1.0) | 4.2 (2) | 5.2 (3) | 9.2 (2) | 2.3 (1.0) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 3.8e6 (4e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 3.8e6 (3e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 7.4e5 (7e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 7850 (8298) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 9350 (8015) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 7.4e5 (7e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1727 (6298) | 1.5e6 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 362 (1024) | 1.5e6 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 25 (72) | 4.7e5 (5e5) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 21 (23) | 6.7e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 12 (12) | 1.2e5 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 18 (18) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 52 (31) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 80 (125) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.76 (0.2) | 0.68 (0.2) | 0.81 (0.2) | 0.80 (0.1) | 0.58 (0.1)★2 | 0.53 (0.1)★3 | ∞1e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 7.0 (11) | 10 (7) | 13 (9) | 15 (10) | 90 (109) | ∞ | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 7.8 (4) | 10 (4) | 8.4 (3) | 6.4 (2) | 4.1 (0.7) | 3.3 (0.6) | 0.86 (0.6) | 15/15 |
| Δ fopt f15, 10-D |
1e1 4774 |
1e0 39246 |
1e-1 73643 |
1e-2 74669 |
1e-3 75790 |
1e-5 77814 |
1e-7 79834 |
#succ 12/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 6178 (5763) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 56 (64) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| GNN-CMA-ES bbob Faury | 1.0 (0.8) | 1.4 (0.8) | 1.2 (0.5) | 1.2 (1) | 1.2 (2) | 1.2 (0.7) | 1.2 (0.8) | 12/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1.1 (1) | 0.95 (0.3) | 1.0 (0.9) | 1.0 (0.8) | 1.0 (0.7) | 1.0 (0.9) | 1.0 (0.9) | 12/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Δ fopt f16, 10-D |
1e1 425 |
1e0 7029 |
1e-1 15779 |
1e-2 45669 |
1e-3 51151 |
1e-5 65798 |
1e-7 71570 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 3.6 (2) | 486 (754) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 0.64 (0.7)★2 | 43 (54) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 97 (79) | 89 (46) | 138 (119) | 311 (384) | ∞ | ∞ | ∞1e6 | 0/15 |
| GNN-CMA-ES bbob Faury | 2.2 (0.8) | 0.99 (0.8) | 1.6 (1) | 0.96 (1) | 1.5 (2) | 1.3 (1) | 1.2 (2) | 10/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.1 (2) | 0.90 (1) | 0.89 (0.7) | 0.60 (0.3) | 0.60 (0.7) | 0.51 (0.3) | 0.54 (0.3) | 14/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 2569 (2006) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 96 (129) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 74 (75) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 5.0e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 6.6e4 (5e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 170 (307) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 7548 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 5513 (3848) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 284 (521) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 31 (34) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 72 (97) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 49 (55) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 31 (40) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 84 (86) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 52 (70) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 101 (163) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 83 (91) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 7236 (4669) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 177 (350) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Δ fopt f17, 10-D |
1e1 26 |
1e0 429 |
1e-1 2203 |
1e-2 6329 |
1e-3 9851 |
1e-5 20190 |
1e-7 26503 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 4.5 (10) | 1872 (4123) | 3807 (4769) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 65 (98) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1044 (2637) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 658 (1343) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 5.3 (5) | 27 (41) | 977 (1490) | 2218 (1858) | 1440 (2311) | ∞ | ∞1e6 | 0/15 |
| GNN-CMA-ES bbob Faury | 2.1 (2) | 1.5 (0.5) | 1.6 (2) | 1.2 (0.7) | 1.2 (0.7) | 1.0 (0.8) | 1.1 (0.5) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.1 (3) | 2.1 (4) | 1.0 (2) | 1.1 (1) | 1.0 (0.8) | 1.0 (0.6) | 1.0 (0.5) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 97 (216) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 751 (1389) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 590 (1002) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1.9e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.9e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 9.7e4 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 3707 (6119) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 2715 (6231) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 7.3e4 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 40 (117) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 1.1e6 (2e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 1.7e6 (4e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 61 (6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 3.5 (9) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 4.1 (11) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 4.2 (8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 7.0 (6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 24 (40) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 16 (23) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 48 (64) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 1953 (5117) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 181 (155) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Δ fopt f18, 10-D |
1e1 238 |
1e0 836 |
1e-1 7012 |
1e-2 15928 |
1e-3 27536 |
1e-5 37234 |
1e-7 42708 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 26 (49) | 4004 (8398) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 4290 (4904) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.9e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 8329 (5150) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 8.0 (4) | 138 (329) | 587 (1107) | 886 (974) | 513 (782) | ∞ | ∞1e6 | 0/15 |
| GNN-CMA-ES bbob Faury | 1.3 (0.7) | 2.4 (3) | 1.2 (1) | 0.89 (0.5) | 0.93 (0.5) | 0.92 (0.3) | 0.93 (0.3) | 15/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1.1 (0.4) | 1.1 (0.6) | 0.46 (0.5) | 0.77 (0.5) | 0.77 (0.6) | 0.74 (0.2) | 0.88 (0.3) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 2557 (3922) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2.9e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 8170 (4417) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 2.8e5 (6e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 2.8e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1.7e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 1.7e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 7.1e4 (7e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 5.5e4 (8e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.1e4 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 1.4e4 (5e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1480 (1498) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 5259 (5137) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 2.6e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 1.3e4 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 6135 (5490) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 6.4e4 (8e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 1.9e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Δ fopt f19, 10-D |
1e1 1 |
1e0 1 |
1e-1 10609 |
1e-2 9.8e5 |
1e-3 1.4e6 |
1e-5 1.4e6 |
1e-7 1.4e6 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 1 (0) | 1 (0) | 0.53 (0.3)★4 | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 4050 (3574) | 2.5e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.9e4 (4e4) | 2.1e6 (3e6) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 120 (128) | 6.0e5 (5e5) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 349 (283) | 2.9e5 (5e5) | 436 (293) | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| GNN-CMA-ES bbob Faury | 1 (0) | 1 (0) | 25 (35) | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| IPOP-CMA-ES-2019 bbob Faury | 1 (0) | 1 (0) | 17 (7) | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 6810 (1e4) | 3.8e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3416 (5384) | 1.5e6 (2e6) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 6700 (4744) | 1.5e7 (2e7) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.9 (2) | 6.3e4 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 6.3e5 (7e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 2.2 (2) | 3.7e5 (5e5) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 6.1 (10) | 1.3e7 (1e7) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 20 (19) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 4354 (3542) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 2.1e7 (3e7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞8e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 1.8e4 (3e4) | 1.9e6 (3e6) | 1419 (1387) | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 1.0e4 (9718) | 1.9e6 (2e6) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Δ fopt f20, 10-D |
1e1 32 |
1e0 15426 |
1e-1 5.5e5 |
1e-2 5.7e5 |
1e-3 5.7e5 |
1e-5 5.8e5 |
1e-7 5.9e5 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 20 (20) | 4.9 (7) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 10 (2) | 2.1 (3) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 2.0 (0.5) | 13 (16) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.00 (0.3)★2 | 2.1 (3) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 32 (16) | 2.4 (4) | 7.7 (4) | 7.5 (5) | 7.4 (7) | 7.3 (10) | 7.2 (7) | 3/15 |
| GNN-CMA-ES bbob Faury | 7.0 (4) | 2.2 (2) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| IPOP-CMA-ES-2019 bbob Faury | 5.2 (2) | 2.5 (2) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.7 (0.5) | 1.1 (1) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 32 (57) | 10 (19) | 27 (44) | 26 (15) | 26 (21) | 25 (19) | 25 (15) | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 11 (3) | 1.1 (1) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 366 (443) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 2.1e6 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 4.6e6 (3e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 472 (576) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 13 (16) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 14 (17) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 43 (32) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 46 (61) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1005 (1282) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 8514 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 3.7e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 4.0e4 (6e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.9 (1) | 2.1 (3) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 11 (7) | 15 (15) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 18 (17) | 1.6 (1) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Δ fopt f21, 10-D |
1e1 130 |
1e0 2236 |
1e-1 4392 |
1e-2 4487 |
1e-3 4618 |
1e-5 5074 |
1e-7 11329 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 61 (11) | 5818 (6712) | 2962 (2278) | 2900 (2899) | 2818 (2925) | 2565 (3057) | 1149 (1369) | 2/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 2.8 (6) | 1.3 (2) | 1.8 (3) | 1.8 (3) | 1.7 (3) | 1.6 (1) | 0.91 (0.9) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 4.7 (9) | 3.3 (5) | 2.5 (5) | 2.5 (3) | 2.4 (5) | 2.3 (1) | 2.0 (3) | 10/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 3.4 (2) | 8.2 (14) | 7.6 (15) | 7.5 (13) | 7.3 (12) | 6.6 (13) | 3.0 (4) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 14 (6) | 5.3 (4) | 4.3 (8) | 4.3 (8) | 4.3 (8) | 4.1 (4) | 9.3 (11) | 8/15 |
| GNN-CMA-ES bbob Faury | 4.9 (11) | 13 (29) | 15 (14) | 15 (13) | 14 (26) | 15 (17) | 6.6 (6) | 10/15 |
| IPOP-CMA-ES-2019 bbob Faury | 5.8 (11) | 17 (23) | 14 (27) | 14 (23) | 14 (15) | 13 (35) | 5.7 (9) | 10/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 3.3 (4) | 1.9 (2) | 1.2 (1) | 1.1 (1) | 1.1 (1.0) | 1.0 (0.9) | 0.51 (0.6) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 21 (18) | 10 (13) | 7.1 (12) | 7.2 (13) | 7.1 (13) | 6.8 (12) | 3.1 (5) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 22 (30) | 13 (14) | 10 (10) | 10 (10) | 10 (11) | 8.8 (11) | 3.9 (5) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 3.7e5 (5e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 3.6e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 1.1e6 (2e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 2.6e4 (4e4) | 6.7e4 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.3e4 (4e4) | 6.3e4 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 164 (250) | 1.0e4 (8012) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 131 (201) | 8643 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 150 (176) | 3896 (3579) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1047 (986) | 3.1e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 2108 (1790) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 3113 (2388) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.3 (2) | 1.2 (2) | 1.9 (4) | 1.9 (3) | 1.9 (1.0) | 1.7 (4) | 0.78 (0.9) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 58 (71) | 27 (48) | 19 (29) | 23 (34) | 31 (36) | 191 (209) | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 15 (26) | 10 (9) | 10 (10) | 10 (10) | 9.5 (7) | 8.6 (9) | 3.9 (3) | 15/15 |
| Δ fopt f22, 10-D |
1e1 98 |
1e0 2839 |
1e-1 6353 |
1e-2 6620 |
1e-3 6798 |
1e-5 8296 |
1e-7 10351 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 3177 (82) | 1942 (1938) | 4411 (3937) | 4234 (1814) | 4124 (1913) | 3382 (3678) | 2714 (6428) | 1/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 6.6 (8) | 2.2 (6) | 5.2 (8) | 5.0 (6) | 4.9 (7) | 4.0 (6) | 6.9 (12) | 5/15 |
| CG-scipy-2019 bbob Varelas Dahito | 8.2 (15) | 3.4 (9) | 8.3 (21) | 8.0 (13) | 7.8 (19) | 6.5 (10) | 67 (85) | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 5.8 (10) | 2.6 (7) | 5.3 (10) | 5.2 (10) | 5.2 (4) | 4.5 (8) | 3.8 (3) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 26 (24) | 5.0 (4) | 5.0 (4) | 5.0 (10) | 4.9 (10) | 4.2 (8) | 1386 (2658) | 0/15 |
| GNN-CMA-ES bbob Faury | 8.9 (16) | 25 (42) | 223 (201) | 214 (174) | 208 (125) | 171 (208) | 137 (106) | 1/15 |
| IPOP-CMA-ES-2019 bbob Faury | 24 (38) | 17 (37) | 110 (75) | 106 (189) | 103 (136) | 84 (90) | 68 (75) | 2/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 4.8 (8) | 1.7 (3) | 4.1 (8) | 4.0 (8) | 3.9 (8) | 3.2 (2) | 4.1 (3) | 11/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 46 (44) | 6.5 (8) | 21 (48) | 24 (16) | 23 (53) | 20 (18) | 16 (14) | 14/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 24 (52) | 6.3 (10) | 8.0 (14) | 7.7 (14) | 7.6 (10) | 6.3 (11) | 5.1 (6) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1.4e6 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 7.4e5 (8e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 7.1e5 (7e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 1.4e6 (2e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 8.1e4 (6e4) | 1.6e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 6.9e4 (8e4) | 2.4e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 651 (777) | 6581 (5293) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 822 (1420) | 8356 (6462) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 923 (1282) | 1.7e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 2177 (2765) | 5.2e4 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 7773 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 6420 (9780) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 4.5 (10) | 1.5 (3) | 2.4 (3) | 2.3 (3) | 2.2 (3) | 1.9 (2) | 3.2 (5) | 12/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 50 (38) | 59 (30) | 93 (127) | 126 (130) | 341 (444) | ∞ | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 62 (81) | 5.7 (5) | 12 (16) | 11 (22) | 11 (15) | 9.1 (13) | 7.3 (14) | 15/15 |
| Δ fopt f23, 10-D |
1e1 3.0 |
1e0 915 |
1e-1 16425 |
1e-2 1.8e5 |
1e-3 2.0e5 |
1e-5 2.1e5 |
1e-7 2.1e5 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 2.4 (2) | 18 (21) | 820 (1310) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 94 (192) | 500 (573) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 115 (194) | 372 (548) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 2.1 (1) | 0.83 (0.9) | 426 (673) | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 1.6 (2) | 186 (231) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| GNN-CMA-ES bbob Faury | 2.6 (2) | 19 (18) | 7.2 (6) | 2.5 (3) | 2.2 (1) | 2.2 (2) | 2.2 (4) | 3/15 |
| IPOP-CMA-ES-2019 bbob Faury | 2.2 (3) | 25 (32) | 8.5 (8) | 7.8 (6) | 7.0 (10) | 6.9 (4) | 6.7 (7) | 1/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 15 (12) | 77 (66) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2.0 (2) | 1.1 (2) | 46 (41) | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 2.3 (3) | 37 (49) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 2.0 (2) | 704 (743) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 2.1 (1) | 538 (671) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1.5 (2) | 232 (167) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 146 (158) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 222 (296) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 2.2 (3) | 350 (147) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 3.0 (2) | 287 (327) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 2.2e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 1.5e5 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 1.3 (2) | 359 (549) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 2.1 (2) | 540 (838) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 1.6 (2) | 429 (442) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.7 (2) | 368 (432) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1.7 (0.8) | 312 (326) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 2.2 (3) | 1897 (1779) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 2.3 (3) | 1733 (1990) | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 10 (7) | 79 (115) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 71 (114) | 948 (594) | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3.2 (2) | 1.8 (2) | 21 (28) | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Δ fopt f24, 10-D |
1e1 98761 |
1e0 1.0e6 |
1e-1 7.5e7 |
1e-2 7.5e7 |
1e-3 7.5e7 |
1e-5 7.5e7 |
1e-7 7.5e7 |
#succ 1/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 284 (268) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 36 (34) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| GNN-CMA-ES bbob Faury | 1.1 (2) | 0.43 (0.6) | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| IPOP-CMA-ES-2019 bbob Faury | 3.0 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e5 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e6 | 0/15 |
Previous dimension | Dimension = 20 | Next dimension
| Δ fopt f1, 20-D |
1e1 43 |
1e0 43 |
1e-1 43 |
1e-2 43 |
1e-3 43 |
1e-5 43 |
1e-7 43 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 49 (13) | 97 (30) | 156 (47) | 205 (63) | 245 (61) | 373 (58) | 572 (156) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 1.6 (0) | 1.6 (0) | 1.6 (0) | 1.6 (0) | 1.6 (0) | 1.6 (0) | 1.6 (0) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.6 (0) | 1.6 (0) | 1.6 (0) | 1.6 (0) | 1.6 (0) | 1.6 (0) | 1.6 (0) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.2 (0.2) | 1.9 (0.5) | 3.3 (0.4) | 4.6 (0.4) | 6.0 (0.7) | 8.7 (0.6) | 11 (0.6) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 113 (21) | 224 (65) | 241 (91) | 245 (94) | 245 (99) | 245 (82) | 245 (118) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 1.5 (0.1) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 360 (554) | 2410 (1900) | 9393 (1e4) | 1.5e4 (1e4) | 2.2e4 (2e4) | 2.2e4 (3e4) | 1.1e5 (1e5) | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 4.0 (0.4) | 4.2 (0.1) | 4.3 (0.1) | 4.3 (0.1) | 4.3 (0.1) | 5.7 (5) | 5.7 (5) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.58 (0)★4 | 0.58 (0)★4 | 0.58 (0)★4 | 0.58 (0)★4 | 0.58 (0)★4 | 0.58 (0)★4 | 0.58 (0)★4 | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 38 (30) | 83 (61) | 99 (46) | 132 (68) | 205 (167) | 419 (563) | 6315 (9777) | 7/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 58 (23) | 123 (90) | 149 (111) | 159 (109) | 166 (63) | 175 (47) | 183 (95) | 15/15 |
| Δ fopt f2, 20-D |
1e1 385 |
1e0 386 |
1e-1 387 |
1e-2 388 |
1e-3 390 |
1e-5 391 |
1e-7 393 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 115 (91) | 170 (99) | 238 (83) | 467 (420) | 1195 (890) | 3823 (2950) | 4730 (3276) | 14/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 3.9 (1) | 4.2 (1) | 4.5 (1) | 4.7 (1.0) | 4.9 (0.9) | 5.5 (0.8) | 6.1 (2) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 206 (79) | 675 (611) | 2978 (5121) | 3.7e4 (6e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 65 (7) | 80 (9) | 106 (13) | 960 (2010) | 5720 (7239) | ∞ | ∞2e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 14 (2) | 17 (2) | 20 (2) | 21 (2) | 21 (2) | 22 (2) | 23 (2) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 1.1 (0.2)★4 | 1.2 (0.0)★4 | 1.2 (0.0)★4 | 1.2 (0.0)★4 | 1.4 (0.4)★4 | 1.9 (0.0)★4 | 1.9 (0.0)★4 | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 2.5 (0.8) | 2.7 (0.7) | 2.9 (0.8) | 3.0 (0.9) | 3.2 (0.8) | 3.5 (0.8) | 3.7 (1) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 32 (6) | 39 (8) | 47 (16) | 93 (143) | 237 (499) | 1902 (1863) | 4.0e4 (5e4) | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 46 (14) | 49 (11) | 51 (11) | 51 (9) | 51 (9) | 52 (10) | 53 (7) | 3/15 |
| Δ fopt f3, 20-D |
1e1 5066 |
1e0 7626 |
1e-1 7635 |
1e-2 7637 |
1e-3 7643 |
1e-5 7646 |
1e-7 7651 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 47 (29)★2 | 101 (49)★4 | 128 (56)★4 | 128 (59)★4 | 129 (62)★4 | 130 (56)★4 | 132 (55)★4 | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 223 (224) | 3881 (4854) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 1266 (1101) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Δ fopt f4, 20-D |
1e1 4722 |
1e0 7628 |
1e-1 7666 |
1e-2 7686 |
1e-3 7700 |
1e-5 7758 |
1e-7 1.4e5 |
#succ 9/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 91 (54) | 181 (70)★4 | 288 (124) | 287 (120) | 288 (109) | 289 (112) | 16 (4) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 247 (166) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 157 (154) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Δ fopt f5, 20-D |
1e1 41 |
1e0 41 |
1e-1 41 |
1e-2 41 |
1e-3 41 |
1e-5 41 |
1e-7 41 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 35 (20) | 38 (21) | 38 (23) | 38 (22) | 38 (17) | 38 (22) | 38 (23) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 2.7 (0.1) | 3.4 (0.5) | 3.5 (0.4) | 3.6 (0.4) | 3.6 (0.5) | 3.6 (0.4) | 3.6 (0.4) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 2.9 (0.4) | 3.9 (0.8) | 4.0 (0.8) | 4.0 (0.8) | 4.0 (0.8) | 4.0 (0.8) | 4.0 (0.7) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 3.1 (0.6) | 3.8 (0.5) | 3.9 (0.6) | 3.9 (0.7) | 3.9 (0.7) | 3.9 (0.7) | 3.9 (0.6) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 1266 (520) | 2844 (1759) | 3273 (2750) | 3273 (2616) | 3273 (3141) | 3273 (2557) | 3273 (2797) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 2.3 (0.5) | 2.7 (0.5) | 2.8 (0.5) | 2.8 (0.5) | 2.8 (0.4) | 2.8 (0.5) | 2.8 (0.5) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 394 (300) | 423 (329) | 423 (366) | 423 (374) | 423 (386) | 423 (370) | 423 (322) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 6.9 (0.1) | 6.9 (0.1) | 6.9 (0.1) | 6.9 (0.1) | 6.9 (0.1) | 6.9 (0.1) | 6.9 (0.1) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 8.8e5 (1e6) | 7.1e6 (7e6) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | 2.8e5 (4e5) | 3.3e6 (5e6) | 7.0e6 (6e6) | 7.0e6 (3e6) | 7.0e6 (8e6) | 7.0e6 (5e6) | 7.0e6 (7e6) | 1/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.6 (0.3)★ | 2.1 (0.5) | 2.2 (0.5) | 2.3 (0.5) | 2.3 (0.4) | 2.3 (0.4) | 2.3 (0.5) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 6.8 (3) | 7.2 (3) | 7.2 (3) | 7.2 (3) | 7.2 (3) | 7.2 (3) | 7.2 (3) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 56 (13) | 63 (53) | 63 (55) | 63 (55) | 63 (16) | 63 (11) | 63 (51) | 15/15 |
| Δ fopt f6, 20-D |
1e1 1296 |
1e0 2343 |
1e-1 3413 |
1e-2 4255 |
1e-3 5220 |
1e-5 6728 |
1e-7 8409 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 12 (7) | 13 (5) | 16 (11) | 17 (13) | 22 (18) | 34 (28) | 52 (52) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 4.7 (2) | 3.8 (1) | 3.7 (1) | 4.0 (0.8) | 4.2 (0.9) | 4.8 (0.8) | 8.0 (6) | 12/15 |
| CG-scipy-2019 bbob Varelas Dahito | 3.7 (2) | 3.9 (2) | 4.0 (1) | 4.4 (2) | 4.9 (2) | 5.6 (2) | 7.7 (5) | 10/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 24 (44) | 168 (241) | 4151 (7954) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 68 (29) | 81 (15) | 86 (19) | 94 (18) | 109 (49) | 192 (163) | 605 (538) | 2/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 2.8 (0.9) | 2.6 (0.4) | 2.6 (0.6) | 2.7 (0.7) | 2.7 (0.4) | 2.9 (0.5) | 3.0 (0.5) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 279 (232) | 1158 (961) | 1961 (3370) | 6805 (2e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 3.0 (0.8) | 2.6 (0.6) | 2.5 (1) | 2.6 (1) | 2.6 (0.9) | 2.9 (0.7) | 3.0 (0.6) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 29 (16) | 52 (63) | 186 (141) | 599 (995) | 5549 (3727) | ∞ | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 631 (391) | 1700 (2396) | 1417 (1268) | 1458 (1233) | 2701 (3735) | 4326 (2973) | ∞2e6 | 0/15 |
| Δ fopt f7, 20-D |
1e1 1351 |
1e0 4274 |
1e-1 9503 |
1e-2 16523 |
1e-3 16524 |
1e-5 16524 |
1e-7 16969 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 51 (88) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.0e4 (7773) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 20 (4) | 276 (253)★2 | 2981 (4420)★2 | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 2.2e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Δ fopt f8, 20-D |
1e1 2039 |
1e0 3871 |
1e-1 4040 |
1e-2 4148 |
1e-3 4219 |
1e-5 4371 |
1e-7 4484 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 103 (104) | 277 (339) | 423 (343) | 781 (149) | 1.4e4 (2e4) | ∞ | ∞4e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 1.7 (0.4) | 1.4 (2) | 1.4 (0.4) | 1.4 (1) | 1.4 (0.3) | 1.4 (0.9) | 1.4 (0.9) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.6 (0.7) | 1.7 (0.3) | 2.0 (0.3) | 2.2 (0.3) | 2.4 (0.4) | 2.5 (0.4) | 2.8 (0.6) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 6.9 (15) | 10 (11) | 14 (11) | 1252 (1887) | 2084 (2515) | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 18 (5) | 12 (2) | 11 (10) | 11 (2) | 11 (2) | 10 (9) | 13 (9) | 11/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 0.67 (0.1) | 0.66 (0.2) | 0.70 (0.2) | 0.70 (0.3) | 0.71 (0.3) | 0.70 (0.2) | 0.69 (0.3) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 2.0 (1) | 2.2 (1) | 2.6 (2) | 2.9 (2) | 3.1 (1) | 3.2 (2) | 3.4 (1) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.1 (0.4) | 0.81 (0.5) | 0.82 (0.4) | 0.82 (0.4) | 0.82 (0.5) | 0.81 (0.2) | 0.80 (0.2) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 66 (118) | 186 (297) | 318 (694) | 573 (438) | 890 (1189) | 7169 (4858) | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 5.3 (0.9) | 5.5 (4) | 5.9 (5) | 6.1 (5) | 6.1 (4) | 6.0 (3) | 6.0 (4) | 15/15 |
| Δ fopt f9, 20-D |
1e1 1716 |
1e0 3102 |
1e-1 3277 |
1e-2 3379 |
1e-3 3455 |
1e-5 3594 |
1e-7 3727 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 60 (66) | 290 (159) | 609 (179) | 5842 (5575) | ∞ | ∞ | ∞4e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 1.9 (0.8) | 1.5 (0.6) | 1.5 (0.8) | 1.5 (1.0) | 1.5 (0.8) | 1.4 (0.9) | 1.4 (0.9) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.6 (0.3) | 2.4 (2) | 2.7 (2) | 2.9 (0.2) | 3.1 (0.2) | 3.3 (2) | 3.5 (2) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 5.9 (5) | 9.5 (1) | 12 (4) | 1094 (1214) | 4233 (3660) | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 20 (6) | 12 (5) | 12 (6) | 11 (5) | 11 (5) | 11 (5) | 13 (8) | 12/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 0.83 (0.2)★ | 0.79 (0.3) | 0.81 (0.1) | 0.82 (0.1) | 0.82 (0.3) | 0.81 (0.3) | 0.79 (0.1) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 5126 (8238) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 6.0 (4) | 11 (9) | 11 (8) | 11 (8) | 11 (4) | 11 (8) | 11 (7) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.1 (0.3) | 1.0 (0.5) | 1.0 (0.2) | 1.0 (0.4) | 1.0 (0.5) | 0.99 (0.5) | 0.97 (0.5) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 178 (157) | 1004 (1132) | 2892 (4761) | 9185 (2e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 6.8 (4) | 7.4 (4) | 7.8 (4) | 8.0 (4) | 8.0 (4) | 7.9 (4) | 7.7 (3) | 0/15 |
| Δ fopt f10, 20-D |
1e1 7413 |
1e0 8661 |
1e-1 10735 |
1e-2 13641 |
1e-3 14920 |
1e-5 17073 |
1e-7 17476 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 0.20 (0.0) | 0.18 (0.0) | 0.16 (0.0) | 0.13 (0.0) | 0.13 (0.0) | 0.14 (0.1) | 17 (16) | 1/15 |
| CG-scipy-2019 bbob Varelas Dahito | 12 (5) | 38 (56) | 198 (173) | 1066 (753) | ∞ | ∞ | ∞2e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 370 (204) | 3489 (6398) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 0.72 (0.1) | 0.79 (0.1) | 0.71 (0.1) | 0.63 (0.2) | 0.60 (0.1) | 0.55 (0.2) | 26 (43) | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 11 (3) | 10 (1) | 8.6 (1) | 7.0 (0.3) | 6.6 (0.7) | 6.0 (0.4) | 6.1 (0.7) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.13 (0.0)★3 | 0.11 (0.0)★3 | 0.10 (0.0)★3 | 0.08 (0.0)★3 | 0.08 (0.0)★3 | 0.08 (0.0)★3 | 135 (317) | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2.6 (0.7) | 2.4 (0.4) | 1.9 (0.3) | 1.5 (0.2) | 1.4 (0.3) | 1.3 (0.2) | 2.1 (1) | 0/15 |
| Δ fopt f11, 20-D |
1e1 1002 |
1e0 2228 |
1e-1 6278 |
1e-2 8586 |
1e-3 9762 |
1e-5 12285 |
1e-7 14831 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 53 (38) | 49 (13) | 28 (8) | 31 (8) | 37 (10) | 50 (11) | 72 (15) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 0.29 (0.1) | 0.17 (0.1) | 0.07 (0.0) | 0.06 (0.0) | 0.08 (0.0) | 0.33 (0.5) | 13 (21) | 2/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.1 (0.3) | 0.78 (0.3) | 0.34 (0.1) | 0.32 (0.1) | 0.36 (0.1) | 1.9 (2) | ∞2e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 850 (148) | 715 (202) | 268 (48) | 229 (117) | 294 (217) | ∞ | ∞2e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 0.63 (0.2) | 0.45 (0.1) | 0.20 (0.0) | 0.18 (0.0) | 0.21 (0.1) | 0.88 (1) | 619 (746) | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 61 (28) | 41 (5) | 17 (8) | 14 (6) | 13 (6) | 10 (5) | 8.7 (4) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.23 (0.1) | 0.13 (0.1) | 0.05 (0.0) | 0.04 (0.0) | 0.05 (0.0) | 0.15 (0.2) | 555 (331) | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 8.6 (8) | 13 (8) | 7.8 (7) | 26 (35) | 188 (133) | ∞ | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 22 (5) | 12 (3) | 4.7 (1) | 3.5 (0.8) | 3.1 (0.7) | 2.5 (0.6) | 2.1 (0.6) | 15/15 |
| Δ fopt f12, 20-D |
1e1 1042 |
1e0 1938 |
1e-1 2740 |
1e-2 3156 |
1e-3 4140 |
1e-5 12407 |
1e-7 13827 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 1411 (1924) | 8265 (2e4) | 2.0e4 (2e4) | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 4.5 (3) | 3.0 (2) | 2.4 (2) | 2.2 (1) | 1.8 (0.9) | 1.3 (0.5) | 62 (79) | 3/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.3 (3) | 2.6 (3) | 3.6 (2) | 3.9 (2) | 4.2 (1) | 121 (458) | ∞2e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 0.38 (0.0) | 0.41 (0.2) | 2.0 (2) | 85 (178) | ∞ | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 51 (10) | 31 (6) | 24 (8) | 22 (10) | 19 (11) | 17 (9) | 2159 (1919) | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 0.58 (0.7) | 0.58 (0.7) | 0.67 (0.6) | 0.70 (0.6)★3 | 0.62 (0.4)★2 | 0.45 (0.3)★ | 1.7 (1) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 807 (835) | 1576 (2079) | 1.1e4 (1e4) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 3.0 (5) | 4.2 (4) | 4.4 (3) | 4.4 (2) | 4.0 (2) | 1.7 (0.8) | 1.9 (0.8) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 5.6 (4) | 3.6 (2) | 2.8 (2) | 2.5 (1) | 2.0 (0.7) | 1.7 (2) | 20 (17) | 7/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 25 (68) | 31 (73) | 89 (53) | 187 (324) | 330 (259) | ∞ | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 23 (16) | 31 (25) | 31 (30) | 32 (33) | 38 (29) | ∞ | ∞2e6 | 0/15 |
| Δ fopt f13, 20-D |
1e1 652 |
1e0 2021 |
1e-1 2751 |
1e-2 3507 |
1e-3 18749 |
1e-5 24455 |
1e-7 30201 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 4112 (3073) | 5456 (1e4) | 9469 (1e4) | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 1.4 (0.1) | 0.62 (0.0) | 0.58 (0.0) | 0.55 (0.0) | 94 (107) | 244 (298) | ∞2e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 2.4 (2) | 6.4 (7) | 11 (12) | 26 (33) | 16 (16) | 370 (342) | ∞2e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 0.91 (2)★ | 1.1 (3) | 4.1 (10) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 58 (18) | 39 (19) | 82 (52) | 174 (236) | 135 (167) | ∞ | ∞2e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.5 (2) | 3.4 (4) | 8.0 (6) | 11 (19) | 3.4 (2) | 53 (49) | ∞2e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2239 (2667) | 3388 (3946) | 3431 (3978) | 8394 (1e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 41 (53) | 222 (540) | 324 (488) | 541 (471) | 321 (194) | 547 (675) | ∞2e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.2 (0.1) | 0.58 (0.0) | 0.52 (0.0) | 0.51 (0.0)★2 | 6198 (9854) | 3.4e4 (8e4) | ∞4e7 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 12 (19) | 12 (17) | 42 (57) | 135 (109) | 77 (139) | 1207 (1213) | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 16 (11) | 7.3 (4) | 7.9 (5) | 6.3 (5) | 1.9 (1) | 15 (27) | ∞2e6 | 0/15 |
| Δ fopt f14, 20-D |
1e1 75 |
1e0 239 |
1e-1 304 |
1e-2 451 |
1e-3 932 |
1e-5 1648 |
1e-7 15661 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 18 (14) | 20 (7) | 24 (10) | 28 (8) | 57 (18) | ∞ | ∞4e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 1.4 (0.4) | 0.76 (0.2) | 1.1 (0.2) | 1.1 (0.2) | 0.75 (0.1) | 0.72 (0.1) | ∞2e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.6 (0.7) | 0.94 (0.2) | 1.2 (0.2) | 1.5 (0.3) | 2.1 (0.5) | 14 (5) | ∞2e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 0.81 (0.2)★2 | 0.43 (0.1)★3 | 0.61 (0.1)★3 | 0.92 (0.1) | 6977 (1e4) | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 32 (19) | 46 (12) | 42 (24) | 31 (21) | 16 (12) | 2375 (1868) | ∞2e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.6 (0.6) | 0.85 (0.2) | 1.0 (0.2) | 1.1 (0.1) | 0.83 (0.1) | 1.2 (0.2) | ∞2e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 57 (75) | 1157 (1366) | 2.1e4 (2e4) | 2.9e4 (2e4) | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 3.9 (1) | 2.3 (0.5) | 2.5 (0.5) | 4.3 (0.8) | 8.0 (4) | 21 (2) | 4.9 (5) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1.7e6 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 1.7e6 (2e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 2.2e5 (5e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 1.5e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 3.6e4 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 3.0e4 (9e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.3e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 4.8e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 3.8e6 (5e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 8.0e5 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.1 (0.3) | 0.63 (0.1) | 0.78 (0.1) | 0.84 (0.1) | 0.57 (0.1)★3 | 0.54 (0.1)★3 | ∞2e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 24 (17) | 19 (16) | 22 (11) | 141 (392) | 2501 (3402) | ∞ | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 21 (11) | 16 (8) | 20 (10) | 16 (6) | 9.0 (3) | 6.9 (2) | 1.7 (0.8)★3 | 14/15 |
| Δ fopt f15, 20-D |
1e1 30378 |
1e0 1.5e5 |
1e-1 3.1e5 |
1e-2 3.2e5 |
1e-3 3.2e5 |
1e-5 4.5e5 |
1e-7 4.6e5 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 988 (790) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Δ fopt f16, 20-D |
1e1 1384 |
1e0 27265 |
1e-1 77015 |
1e-2 1.4e5 |
1e-3 1.9e5 |
1e-5 2.0e5 |
1e-7 2.2e5 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 154 (341) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 3.3 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 4084 (2403) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2776 (6866) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 560 (570) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 2.1e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 3.9e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 2.1e5 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 1.1e5 (7e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 2.1e5 (8e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 2.2e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1.0e5 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 2.0e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 2.1e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2.1e4 (7225) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Δ fopt f17, 20-D |
1e1 63 |
1e0 1030 |
1e-1 4005 |
1e-2 12242 |
1e-3 30677 |
1e-5 56288 |
1e-7 80472 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 6.2 (6) | 1.1e4 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 191 (306) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.1e4 (8396) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.1e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 11 (6) | 1554 (2331) | 3265 (2999)★ | 2301 (2659)★ | ∞ | ∞ | ∞2e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 195 (325) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 4402 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 6556 (9605) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1.2e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.2e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 8.3e4 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 8.2e4 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 4331 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.3e4 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 63 (200) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 65 (216) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 23 (30) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 119 (132) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1350 (2111) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 1637 (3901) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 251 (640) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 4434 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 6178 (7318) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Δ fopt f18, 20-D |
1e1 621 |
1e0 3972 |
1e-1 19561 |
1e-2 28555 |
1e-3 67569 |
1e-5 1.3e5 |
1e-7 1.5e5 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 3973 (4857) | 1.5e4 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 24 (15)★ | 600 (268)★3 | 1451 (1025)★3 | 1018 (2282)★3 | ∞ | ∞ | ∞2e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 4.8e5 (7e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Δ fopt f19, 20-D |
1e1 1 |
1e0 1 |
1e-1 3.4e5 |
1e-2 4.7e6 |
1e-3 6.2e6 |
1e-5 6.7e6 |
1e-7 6.7e6 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 1 (0) | 1 (0) | 0.14 (0.0)★4 | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 2.2e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 6.9e5 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1006 (1303) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 1978 (957) | 8.4e5 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 6.1e4 (6e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 6.5e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 1.1e5 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.8 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 2.3 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 3.5 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 170 (219) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 1.3e7 (1e7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.2e8 (1e8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞1e7 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 4.7e5 (7e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 1.4e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Δ fopt f20, 20-D |
1e1 82 |
1e0 46150 |
1e-1 3.1e6 |
1e-2 5.5e6 |
1e-3 5.5e6 |
1e-5 5.6e6 |
1e-7 5.6e6 |
#succ 14/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 21 (16) | 19 (14) | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 12 (3) | 21 (16) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.9 (0.3) | 142 (235) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 0.96 (0.2) | 49 (69) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 65 (24) | 92 (110) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.4 (0.2) | 14 (15) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 336 (379) | 608 (715) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 10 (2) | 2.6 (3) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 3.6e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 3.7e5 (6e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 2575 (2349) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 1419 (1765) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 9817 (8683) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 2.0e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 3.4e6 (6e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.8 (2) | 9.2 (9) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 22 (15) | 192 (204) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 81 (82) | 4.6 (6) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Δ fopt f21, 20-D |
1e1 561 |
1e0 6541 |
1e-1 14103 |
1e-2 14318 |
1e-3 14643 |
1e-5 15567 |
1e-7 17589 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 3572 (3569) | 3978 (5966) | 1845 (2554) | 1818 (978) | 1778 (2050) | 1672 (1864) | 1481 (853) | 2/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 1.5 (2) | 1.5 (2) | 1.1 (1) | 1.1 (0.9) | 1.1 (0.9) | 1.0 (0.9) | 15 (14) | 2/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.8 (2) | 1.9 (4) | 1.7 (3) | 1.7 (2) | 1.7 (2) | 1.6 (2) | 15 (33) | 2/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.8 (2) | 1.1 (1) | 1.5 (3) | 1.5 (2) | 1.4 (3) | 1.4 (3) | 1.2 (1) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 12 (23) | 3.9 (7) | 2.3 (4) | 2.3 (2) | 2.3 (4) | 2.2 (4) | 31 (92) | 1/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.1 (2) | 0.82 (1) | 1.1 (2) | 1.1 (1) | 1.0 (2) | 0.99 (2) | 1.3 (2) | 6/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 75 (68) | 74 (109) | 81 (117) | 94 (78) | 118 (122) | 326 (475) | 751 (1056) | 1/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 5.4 (9) | 4.1 (8) | 2.8 (4) | 2.7 (4) | 2.7 (3) | 2.6 (4) | 2.3 (3) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 5.3e5 (7e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 5.0e5 (9e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.5e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 5.0e5 (5e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.68 (1) | 0.95 (2) | 1.0 (2) | 0.99 (1) | 0.97 (2) | 0.93 (2) | 0.92 (2) | 12/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 49 (61) | 19 (20) | 34 (50) | 45 (53) | 54 (94) | 894 (1037) | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 10 (6) | 16 (13) | 14 (29) | 14 (28) | 14 (27) | 13 (25) | 12 (23) | 15/15 |
| Δ fopt f22, 20-D |
1e1 467 |
1e0 5580 |
1e-1 23491 |
1e-2 24163 |
1e-3 24948 |
1e-5 26847 |
1e-7 1.3e5 |
#succ 12/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 1326 (2149) | 2870 (4483) | 1108 (2172) | 1078 (870) | 1044 (1123) | 972 (1230) | 195 (171) | 2/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 5.7 (8) | 3.9 (3) | 12 (5) | 12 (15) | 12 (16) | 11 (18) | 22 (40) | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 6.3 (4) | 6.2 (5) | 15 (30) | 14 (32) | 14 (12) | 13 (23) | 218 (341) | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 3.0 (5) | 4.6 (10) | 4.2 (5) | 4.2 (3) | 4.1 (5) | 3.9 (5) | 0.81 (1.0) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 29 (49) | 29 (64) | 41 (76) | 40 (85) | 39 (58) | 38 (72) | ∞2e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 3.6 (3) | 3.6 (7) | 11 (8) | 11 (4) | 11 (29) | 10 (26) | 15 (17) | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 203 (248) | 264 (375) | 1211 (1064) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 18 (42) | 21 (51) | 38 (59) | 37 (97) | 36 (61) | 34 (33) | 6.7 (20) | 12/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 6.2e5 (4e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 6.3e5 (5e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 2.9 (4) | 3.5 (6) | 8.7 (18) | 8.5 (6) | 8.2 (18) | 7.7 (17) | 6.3 (6) | 1/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 64 (160) | 126 (183) | 169 (239) | 564 (542) | ∞ | ∞ | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 56 (173) | 24 (26) | 53 (51) | 52 (73) | 50 (65) | 46 (40) | 9.3 (6) | 11/15 |
| Δ fopt f23, 20-D |
1e1 3.0 |
1e0 1614 |
1e-1 67457 |
1e-2 3.7e5 |
1e-3 4.9e5 |
1e-5 8.1e5 |
1e-7 8.4e5 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 3.6 (4) | 391 (305) | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 189 (404) | 4117 (4688) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 144 (251) | 1.8e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 2.8 (4) | 1.4 (0.8) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 1.6 (0.9) | 590 (645) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 27 (30) | 90 (86) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 5.4 (10) | 1.2 (0.7) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 4.2 (6) | 99 (125) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 2.1 (3) | 5.6e4 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 2.4 (3) | 1.8e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 3.1 (4) | 3.2e4 (6e4) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 4.3e4 (5e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | 3.0e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 1.8 (2) | 2.5e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1.6 (1) | 5.9e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 4.3e7 (4e7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 2.4 (3) | 1.8e5 (2e5) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 3.0 (3) | 3.7e4 (2e4) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 1.0 (1) | 8.9e4 (7e4) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 2.4 (2) | 1.8e5 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1.7 (2) | 1.8e5 (1e5) | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 2.5 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 3.5 (4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 16 (16) | 170 (225) | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 190 (266) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3.3 (3) | 2.3 (2) | 440 (460) | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Δ fopt f24, 20-D |
1e1 1.3e6 |
1e0 7.5e6 |
1e-1 5.2e7 |
1e-2 5.2e7 |
1e-3 5.2e7 |
1e-5 5.2e7 |
1e-7 5.2e7 |
#succ 3/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞2e6 | 0/15 |
Previous dimension | Dimension = 40 | First dimension
| Δ fopt f1, 40-D |
1e1 83 |
1e0 83 |
1e-1 83 |
1e-2 83 |
1e-3 83 |
1e-5 83 |
1e-7 83 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 63 (27) | 105 (40) | 146 (48) | 192 (41) | 245 (46) | 399 (91) | 570 (126) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 1.7 (0.3) | 2.0 (0) | 2.0 (0) | 2.0 (0) | 2.0 (0) | 2.0 (0) | 2.0 (0) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.5 (0) | 1.7 (0.5) | 1.8 (0.5) | 1.9 (0.5) | 1.9 (0.5) | 1.9 (0.5) | 1.9 (0.5) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.3 (0.1) | 2.3 (0.1) | 3.9 (0.5) | 5.2 (0.9) | 6.8 (0.7) | 10 (0.7) | 13 (0.8) | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 366 (113) | 517 (247) | 547 (210) | 547 (282) | 547 (224) | 547 (251) | 547 (148) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.5 (0) | 1.5 (0) | 1.5 (0) | 1.5 (0) | 1.5 (0) | 1.5 (0) | 1.5 (0) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 8545 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 4.4 (0.2) | 4.5 (0.1) | 4.5 (0.0) | 4.5 (0.1) | 4.5 (0.1) | 5.2 (2) | 8.4 (8) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.54 (0)★4 | 0.54 (0)★4 | 0.54 (0)★4 | 0.54 (0)★4 | 0.54 (0)★4 | 0.54 (0)★4 | 0.54 (0)★4 | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 114 (96) | 175 (101) | 219 (121) | 281 (142) | 487 (486) | 1641 (1913) | 8.4e4 (1e5) | 1/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 138 (87) | 389 (346) | 540 (427) | 719 (575) | 761 (457) | 789 (592) | 802 (523) | 0/15 |
| Δ fopt f2, 40-D |
1e1 796 |
1e0 797 |
1e-1 799 |
1e-2 799 |
1e-3 800 |
1e-5 802 |
1e-7 804 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 213 (119) | 407 (183) | 677 (325) | 2116 (1344) | 7508 (4366) | 2.0e4 (4e4) | 2.1e4 (3e4) | 6/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 5.5 (1) | 5.9 (1) | 6.2 (1) | 6.6 (1) | 6.8 (1) | 7.4 (1) | 7.9 (2) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 348 (126) | 624 (420) | 1540 (1008) | 9937 (6637) | ∞ | ∞ | ∞4e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 132 (17) | 164 (20) | 3109 (5302) | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 21 (2) | 27 (3) | 31 (4) | 34 (4) | 37 (3) | 40 (3) | 41 (3) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 1.1 (0.0)★4 | 1.1 (0.0)★4 | 1.1 (0.0)★4 | 1.2 (0.0)★4 | 1.5 (0.4)★4 | 1.9 (0.0)★4 | 1.9 (0.0)★4 | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 3.7 (0.5) | 3.9 (0.6) | 4.1 (0.7) | 4.4 (0.7) | 4.5 (0.7) | 4.9 (0.7) | 5.2 (0.9) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 56 (24) | 79 (67) | 113 (137) | 171 (214) | 513 (773) | 1.8e4 (4e4) | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 206 (57) | 213 (47) | 216 (62) | 218 (47) | 219 (43) | 219 (65) | 236 (60) | 0/15 |
| Δ fopt f3, 40-D |
1e1 15526 |
1e0 15602 |
1e-1 15612 |
1e-2 15641 |
1e-3 15646 |
1e-5 15651 |
1e-7 15656 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 116 (37)★4 | 215 (89)★4 | 274 (105) | 274 (118) | 275 (115) | 278 (129) | 281 (130) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Δ fopt f4, 40-D |
1e1 15536 |
1e0 15601 |
1e-1 15659 |
1e-2 15678 |
1e-3 15703 |
1e-5 15733 |
1e-7 2.8e5 |
#succ 6/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 276 (146) | 1444 (2211) | 7643 (1e4) | 7634 (7783) | 7622 (2e4) | 7611 (6357) | 424 (241) | 1/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Δ fopt f5, 40-D |
1e1 98 |
1e0 116 |
1e-1 120 |
1e-2 121 |
1e-3 121 |
1e-5 121 |
1e-7 121 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 33 (16) | 30 (12) | 30 (11) | 29 (12) | 29 (11) | 29 (14) | 29 (12) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 2.4 (0.3) | 2.4 (0.3) | 2.4 (0.3) | 2.4 (0.3) | 2.4 (0.3) | 2.4 (0.3) | 2.4 (0.2) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 2.8 (0.3) | 2.7 (0.5) | 2.7 (0.5) | 2.7 (0.7) | 2.7 (0.6) | 2.7 (0.5) | 2.7 (0.7) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 2.9 (0.4) | 3.0 (0.4) | 3.0 (0.4) | 3.0 (0.4) | 3.0 (0.3) | 3.0 (0.3) | 3.0 (0.4) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 6655 (3594) | 9828 (7197) | 1.0e4 (7460) | 1.0e4 (8508) | 1.0e4 (7199) | 1.0e4 (8890) | 1.0e4 (7182) | 15/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 2.0 (0.1) | 2.0 (0.2) | 2.0 (0.3) | 2.0 (0.3) | 2.0 (0.2) | 2.0 (0.3) | 2.0 (0.3) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 4355 (4454) | 4361 (3893) | 4215 (3738) | 4181 (2753) | 4181 (3436) | 4181 (3620) | 4181 (4586) | 15/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 5.9 (0.1) | 5.0 (0.1) | 4.8 (0.1) | 4.8 (0.1) | 4.8 (0.1) | 4.8 (0.1) | 4.8 (0.1) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.5 (0.2)★2 | 1.6 (0.2)★ | 1.7 (0.2) | 1.7 (0.2) | 1.7 (0.3) | 1.7 (0.2) | 1.7 (0.3) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 6.8 (8) | 6.7 (8) | 6.7 (8) | 6.7 (8) | 6.7 (8) | 6.7 (1) | 6.7 (7) | 15/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 90 (19) | 88 (22) | 86 (18) | 85 (20) | 85 (20) | 85 (22) | 85 (19) | 15/15 |
| Δ fopt f6, 40-D |
1e1 3507 |
1e0 5523 |
1e-1 7168 |
1e-2 9470 |
1e-3 11538 |
1e-5 15007 |
1e-7 19222 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 16 (6) | 21 (11) | 25 (11) | 31 (13) | 46 (23) | 84 (69) | 166 (137) | 14/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 7.4 (2) | 7.0 (2) | 7.0 (1) | 6.7 (1) | 6.7 (1) | 7.0 (1) | 7.4 (1.0) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 4.3 (2) | 5.4 (1) | 6.6 (2) | 7.0 (2) | 7.7 (3) | 8.6 (2) | 9.0 (2) | 4/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 13 (7) | 27 (17) | 1007 (1713) | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 399 (87) | 461 (94) | 512 (51) | 423 (0.4) | 745 (435) | ∞ | ∞4e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 3.5 (1) | 3.8 (0.9) | 4.1 (0.8) | 4.1 (0.4) | 4.1 (0.5) | 4.3 (0.6) | 4.2 (0.4) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 1627 (2542) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 4.4 (2) | 4.0 (1) | 4.0 (0.9) | 3.9 (0.9) | 4.0 (0.4) | 4.2 (1.0) | 4.2 (0.8) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 277 (385) | 1191 (1559) | 2431 (2367) | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Δ fopt f7, 40-D |
1e1 10698 |
1e0 17839 |
1e-1 41037 |
1e-2 66294 |
1e-3 66294 |
1e-5 66294 |
1e-7 68145 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞8e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 144 (188)★3 | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Δ fopt f8, 40-D |
1e1 7080 |
1e0 10655 |
1e-1 11012 |
1e-2 11265 |
1e-3 11430 |
1e-5 11701 |
1e-7 11969 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 300 (240) | 406 (237) | 667 (504) | 2568 (2833) | ∞ | ∞ | ∞8e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 2.1 (0.5) | 1.9 (1) | 1.9 (0.8) | 1.9 (0.9) | 1.8 (1) | 1.8 (0.7) | 1.8 (0.8) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 2.7 (0.2) | 2.9 (1) | 3.0 (2) | 3.1 (1) | 3.3 (0.8) | 3.4 (1) | 3.7 (2) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 11 (16) | 14 (13) | 15 (9) | 227 (230) | 1225 (1367) | ∞ | ∞4e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 21 (13) | 16 (11) | 15 (7) | 15 (7) | 15 (6) | 14 (10) | 49 (37) | 7/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 0.93 (0.3) | 1.1 (0.6) | 1.1 (0.6) | 1.1 (0.6) | 1.1 (0.6) | 1.1 (0.6) | 1.1 (0.6) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 1.5 (0.9) | 3.9 (2) | 4.4 (2) | 4.7 (6) | 4.9 (6) | 5.1 (5) | 5.3 (2) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.2 (0.5) | 1.1 (1) | 1.1 (1.0) | 1.1 (0.9) | 1.1 (1.0) | 1.1 (0.8) | 1.1 (0.9) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 537 (1020) | 911 (1159) | 1692 (1045) | 1655 (2382) | 2572 (4697) | ∞ | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 21 (9) | 25 (20) | 25 (21) | 26 (22) | 26 (21) | 25 (20) | 25 (17) | 9/15 |
| Δ fopt f9, 40-D |
1e1 6122 |
1e0 12982 |
1e-1 13300 |
1e-2 13496 |
1e-3 13651 |
1e-5 13909 |
1e-7 14142 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 189 (287) | 235 (242) | 511 (525) | ∞ | ∞ | ∞ | ∞8e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 2.1 (0.4) | 1.4 (0.8) | 1.4 (0.9) | 1.3 (0.4) | 1.3 (0.8) | 1.3 (0.7) | 1.3 (0.7) | 15/15 |
| CG-scipy-2019 bbob Varelas Dahito | 3.0 (0.3) | 2.1 (0.9) | 2.3 (0.1) | 2.4 (0.2) | 2.5 (0.2) | 2.6 (0.2) | 2.8 (0.9) | 15/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 12 (2) | 10 (4) | 11 (4) | 311 (322) | 4235 (4427) | ∞ | ∞4e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 65 (167) | 31 (75) | 30 (5) | 30 (5) | 29 (72) | 29 (70) | 38 (95) | 6/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.1 (0.1)★ | 0.77 (0.4) | 0.78 (0.4) | 0.79 (0.4) | 0.79 (0.4) | 0.78 (0.4) | 0.78 (0.2) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 14 (7) | 9.4 (4) | 10 (0.9) | 11 (3) | 11 (3) | 11 (4) | 11 (4) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.3 (0.3) | 1.0 (0.7) | 1.0 (0.4) | 1.0 (0.6) | 1.0 (0.6) | 0.99 (0.6) | 0.98 (0.6) | 15/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 29 (12) | 20 (10) | 20 (10) | 21 (12) | 21 (11) | 21 (10) | 24 (15) | 0/15 |
| Δ fopt f10, 40-D |
1e1 25536 |
1e0 29762 |
1e-1 35676 |
1e-2 51579 |
1e-3 56007 |
1e-5 65128 |
1e-7 70824 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞8e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 0.17 (0.0) | 0.16 (0.0) | 0.14 (0.0) | 0.10 (0.0) | 0.09 (0.0) | 0.09 (0.0) | 91 (198) | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 12 (6) | 51 (20) | 116 (115) | 603 (528) | ∞ | ∞ | ∞4e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 0.68 (0.1) | 0.74 (0.0) | 0.73 (0.1) | 0.56 (0.0) | 0.57 (0.1) | 0.89 (0.4) | 135 (149) | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 142 (220) | 459 (452) | 1666 (1794) | 1152 (1066) | ∞ | ∞ | ∞4e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.12 (0.0)★3 | 0.11 (0.0)★3 | 0.10 (0.0)★3 | 0.07 (0.0)★3 | 0.07 (0.0)★3 | 0.12 (0.1) | 76 (87) | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 7.1 (2) | 6.6 (1) | 5.6 (0.8) | 3.9 (0.5) | 3.6 (0.5) | 3.1 (0.5) | 831 (720) | 0/15 |
| Δ fopt f11, 40-D |
1e1 2368 |
1e0 4855 |
1e-1 11681 |
1e-2 25315 |
1e-3 29749 |
1e-5 38949 |
1e-7 48211 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 47 (15) | 45 (10) | 30 (7) | 22 (3) | 26 (5) | 36 (5) | 54 (11) | 15/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 0.23 (0.1) | 0.15 (0.1) | 0.08 (0.0) | 0.04 (0.0) | 0.05 (0.0) | 0.19 (0.1) | 12 (16) | 2/15 |
| CG-scipy-2019 bbob Varelas Dahito | 0.96 (0.3) | 0.73 (0.2) | 0.39 (0.1) | 0.21 (0.0) | 0.23 (0.0) | 0.54 (0.4) | ∞4e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 2.4e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 1680 (37) | 819 (0.1) | 365 (93) | 181 (43) | 287 (306) | ∞ | ∞4e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 0.69 (0.2) | 0.46 (0.2) | 0.24 (0.1) | 0.15 (0.1) | 0.16 (0.1) | 0.37 (0.3) | 85 (120) | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 452 (422) | 963 (770) | 844 (562) | 406 (411) | 346 (402) | 331 (488) | 363 (680) | 3/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.13 (0.0)★ | 0.08 (0.0)★ | 0.04 (0.0)★2 | 0.02 (7e-3)★3 | 0.02 (6e-3)★3 | 5.2 (0.0) | 290 (475) | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 28 (32) | 32 (25) | 17 (8) | 75 (82) | ∞ | ∞ | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 71 (22) | 43 (12) | 20 (6) | 9.5 (2) | 8.7 (3) | 7.1 (3) | 5.8 (2) | 0/15 |
| Δ fopt f12, 40-D |
1e1 4169 |
1e0 7452 |
1e-1 9174 |
1e-2 10751 |
1e-3 13146 |
1e-5 22758 |
1e-7 25192 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 705 (960) | 4299 (1e4) | ∞ | ∞ | ∞ | ∞ | ∞8e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 3.1 (2) | 2.1 (1) | 1.8 (0.8) | 1.6 (0.7) | 1.4 (0.4) | 1.1 (0.7) | 58 (70) | 8/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.4 (1) | 1.9 (3) | 2.4 (2) | 2.6 (2) | 2.7 (2) | 90 (131) | 1095 (2530) | 1/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 0.42 (0.7) | 0.95 (2) | 2.2 (4) | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 46 (8) | 27 (4) | 25 (2) | 24 (18) | 20 (3) | 27 (53) | 2234 (1987) | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 0.26 (0.2) | 0.35 (0.3) | 0.40 (0.2) | 0.40 (0.2)★3 | 0.38 (0.1)★3 | 0.49 (0.3)★ | 1.2 (0.7) | 15/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 1.6 (2) | 2.2 (2) | 2.4 (2) | 2.4 (1) | 2.3 (1) | 1.7 (0.6) | 1.7 (0.7) | 15/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 2.1 (1) | 1.4 (0.6) | 1.3 (0.4) | 1.1 (0.5) | 0.99 (0.3) | 0.88 (1.0) | 53 (165) | 6/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 11 (22) | 23 (35) | 71 (141) | 123 (183) | 245 (237) | 2529 (3982) | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 117 (130) | 469 (684) | 1843 (1067) | 5343 (5023) | ∞ | ∞ | ∞4e6 | 0/15 |
| Δ fopt f13, 40-D |
1e1 2029 |
1e0 6916 |
1e-1 8734 |
1e-2 11861 |
1e-3 71936 |
1e-5 98467 |
1e-7 1.2e5 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 297 (988) | 4638 (4052) | 1.3e4 (2e4) | ∞ | ∞ | ∞ | ∞8e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 1.4 (0.1) | 0.52 (0.0) | 0.55 (0.0) | 0.48 (0.0) | 68 (125) | ∞ | ∞4e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.5 (4) | 1.9 (3) | 6.9 (13) | 13 (19) | 7.1 (6) | ∞ | ∞4e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 0.55 (0.4) | 0.80 (0.9) | 2.2 (2) | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 75 (40) | 42 (35) | 62 (58) | 242 (403) | 113 (111) | 608 (468) | ∞4e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.5 (2) | 1.5 (2) | 3.0 (6) | 5.6 (9) | 1.6 (2) | 52 (75) | ∞4e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 12 (32) | 137 (313) | 249 (440) | 427 (655) | 188 (136) | 596 (427) | 492 (503) | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.2 (0.0) | 0.48 (0.0) | 0.52 (0.0) | 0.45 (7e-3)★4 | 3955 (4627) | ∞ | ∞9e7 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 21 (15) | 14 (17) | 40 (48) | 47 (38) | 39 (34) | ∞ | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 43 (13) | 18 (11) | 17 (14) | 15 (10) | 4.6 (4) | 102 (100) | ∞4e6 | 0/15 |
| Δ fopt f14, 40-D |
1e1 304 |
1e0 616 |
1e-1 777 |
1e-2 1105 |
1e-3 2207 |
1e-5 4825 |
1e-7 57711 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 11 (5) | 14 (5) | 17 (6) | 27 (7) | 92 (8) | ∞ | ∞8e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 0.80 (0.2) | 0.68 (0.2) | 0.91 (0.1) | 1.1 (0.1) | 0.80 (0.1) | 0.64 (0.1) | ∞4e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 0.89 (0.1) | 0.77 (0.1) | 0.95 (0.1) | 1.4 (0.2) | 2.7 (0.5) | 26 (10) | ∞4e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 0.48 (0.1)★2 | 0.40 (0.1)★4 | 0.57 (0.0)★ | 1.0 (0.1) | 36 (37) | ∞ | ∞4e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 87 (20) | 92 (35) | 78 (26) | 57 (34) | 29 (14) | 1.2e4 (2e4) | ∞4e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 0.87 (0.2) | 0.73 (0.1) | 0.85 (0.1) | 1.00 (0.1) | 0.90 (0.1) | 1.2 (0.1) | ∞4e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 282 (435) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 2.5 (0.5) | 2.1 (0.2) | 2.3 (0.2) | 4.5 (1) | 11 (5) | 246 (343) | 181 (229) | 1/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 0.71 (0.2) | 0.58 (0.1) | 0.69 (0.1) | 0.82 (0.1)★2 | 0.61 (0.1)★4 | 0.50 (0.1)★3 | ∞4e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 36 (23) | 35 (18) | 43 (17) | 521 (336) | 2.6e4 (3e4) | ∞ | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 20 (6) | 67 (62) | 84 (49) | 77 (42) | 41 (23) | 22 (9) | 987 (1750) | 0/15 |
| Δ fopt f15, 40-D |
1e1 1.9e5 |
1e0 7.9e5 |
1e-1 1.0e6 |
1e-2 1.1e6 |
1e-3 1.1e6 |
1e-5 1.1e6 |
1e-7 1.1e6 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞8e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Δ fopt f16, 40-D |
1e1 5244 |
1e0 72122 |
1e-1 3.2e5 |
1e-2 7.1e5 |
1e-3 1.4e6 |
1e-5 2.0e6 |
1e-7 2.0e6 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 2517 (7389) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞8e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 30 (37)★2 | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Δ fopt f17, 40-D |
1e1 399 |
1e0 4220 |
1e-1 14158 |
1e-2 34948 |
1e-3 51958 |
1e-5 1.3e5 |
1e-7 2.7e5 |
#succ 14/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 4.1 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞8e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 401 (414) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 6184 (6478) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.3e4 (9351) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 13 (6) | 1604 (2128)★3 | 3994 (6940)★3 | 1716 (1062)★3 | ∞ | ∞ | ∞4e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 524 (365) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3768 (3653) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 6435 (8280) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 4.0e4 (8e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 3.1e4 (5e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 2.1e4 (3e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 1.4e6 (2e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 2.2e4 (5e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 752 (1217) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 1.4e6 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 576 (2000) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 100 (181) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 230 (629) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 449 (756) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 3917 (4536) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 6.6e5 (6e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 159 (197) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 3342 (4037) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2.9e4 (4e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Δ fopt f18, 40-D |
1e1 1442 |
1e0 16998 |
1e-1 47068 |
1e-2 1.3e5 |
1e-3 1.9e5 |
1e-5 6.7e5 |
1e-7 9.5e5 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞8e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 51 (27)★4 | 680 (1006)★4 | 1220 (1321)★4 | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Δ fopt f19, 40-D |
1e1 1 |
1e0 1 |
1e-1 1.4e6 |
1e-2 1.7e7 |
1e-3 2.6e7 |
1e-5 4.5e7 |
1e-7 4.5e7 |
#succ 8/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 1 (0) | 1 (0) | 0.29 (0.1)★4 | ∞ | ∞ | ∞ | ∞8e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 1.9e5 (3e5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.4e7 (2e7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 8.3e4 (8e4) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 1.2e4 (8349) | 4.2e6 (4e6) | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.1e6 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 1.5e6 (1e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 4.3e6 (3e6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.3 (0.5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 2.3 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 11 (13) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 3272 (4644) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 1 (0) | 1 (0) | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞3e7 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 6.0e6 (1e7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 7.8e6 (1e7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Δ fopt f20, 40-D |
1e1 222 |
1e0 1.3e5 |
1e-1 1.6e8 |
1e-2 ∞ |
1e-3 ∞ |
1e-5 ∞ |
1e-7 ∞ |
#succ 0/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 15 (8) | 91 (70) | ∞ | 0/15 | ||||
| BFGS-scipy-2019 bbob Varelas Dahito | 12 (0.9) | 449 (831) | ∞ | 0/15 | ||||
| CG-scipy-2019 bbob Varelas Dahito | 1.6 (0.3) | ∞ | ∞ | 0/15 | ||||
| COBYLA-scipy-2019 bbob Varelas Dahito | 0.90 (0.2) | ∞ | ∞ | 0/15 | ||||
| DE-scipy-2019 bbob Varelas Dahito | 128 (39) | 127 (92) | ∞ | 0/15 | ||||
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.1 (0.2) | 451 (442) | ∞ | 0/15 | ||||
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 2548 (1584) | ∞ | ∞ | 0/15 | ||||
| Powell-scipy-2019 bbob Varelas Dahito | 7.5 (0.8) | 13 (12)★ | ∞ | 0/15 | ||||
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | 0/15 | ||||
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | 0/15 | ||||
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | 0/15 | ||||
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | 0/15 | ||||
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | 0/15 | ||||
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | 0/15 | ||||
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | 0/15 | ||||
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | 0/15 | ||||
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | 0/15 | ||||
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | 0/15 | ||||
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | 0/15 | ||||
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | 0/15 | ||||
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | 0/15 | ||||
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | 0/15 | ||||
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | 0/15 | ||||
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | 0/15 | ||||
| SLSQP-scipy-2019 bbob Varelas Dahito | 2.3 (3) | 95 (61) | ∞ | 0/15 | ||||
| TNC-scipy-2019 bbob Varelas Dahito | 52 (22) | ∞ | ∞ | 0/15 | ||||
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 148 (441) | 127 (99) | ∞ | 0/15 |
| Δ fopt f21, 40-D |
1e1 1044 |
1e0 21144 |
1e-1 1.0e5 |
1e-2 1.0e5 |
1e-3 1.0e5 |
1e-5 1.0e5 |
1e-7 1.0e5 |
#succ 26/30 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 1922 (3835) | 1515 (3028) | 517 (278) | 515 (476) | 514 (533) | 511 (334) | 509 (391) | 2/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 0.86 (1.0) | 0.82 (2) | 0.34 (0.4) | 0.34 (0.5) | 0.34 (0.3) | 0.35 (0.4) | ∞4e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 2.7 (4) | 0.80 (0.8) | 0.72 (0.8) | 0.72 (2) | 0.72 (1) | 0.73 (1) | 49 (42) | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.1 (2) | 1.5 (4) | 0.77 (1) | 0.77 (1) | 0.77 (0.9) | 0.77 (0.8) | 0.77 (1) | 15/15 |
| DE-scipy-2019 bbob Varelas Dahito | 6.1 (12) | 1.5 (3) | 1.1 (0.8) | 1.1 (2) | 1.1 (2) | 1.1 (2) | 43 (29) | 1/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.4 (2) | 1.5 (1) | 0.92 (1) | 0.91 (1) | 0.91 (1) | 0.91 (1) | 15 (12) | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 839 (701) | 482 (695) | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 10 (22) | 4.5 (6) | 9.3 (17) | 9.2 (25) | 9.2 (18) | 9.2 (6) | 9.2 (13) | 14/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.0 (2) | 0.39 (0.5) | 0.25 (0.3) | 0.25 (0.4) | 0.25 (0.2) | 0.26 (0.4) | 1.6 (0.5) | 4/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 22 (55) | 25 (45) | 18 (21) | 40 (51) | 51 (72) | ∞ | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 69 (90) | 43 (43) | 32 (110) | 32 (40) | 32 (54) | 32 (39) | 32 (34) | 10/15 |
| Δ fopt f22, 40-D |
1e1 3090 |
1e0 35442 |
1e-1 6.5e5 |
1e-2 6.5e5 |
1e-3 6.5e5 |
1e-5 6.5e5 |
1e-7 6.5e5 |
#succ 8/30 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 1729 (3886) | 3162 (5138) | ∞ | ∞ | ∞ | ∞ | ∞8e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 1.3 (3) | 7.7 (23) | 4.0 (6) | 4.0 (4) | 4.0 (3) | 4.0 (7) | ∞4e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 1.1 (0.9) | 16 (21) | 5.4 (7) | 5.4 (5) | 5.4 (4) | 5.4 (9) | ∞4e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.2 (3) | 4.5 (10) | 5.1 (8) | 5.1 (6) | 5.1 (4) | 5.1 (5) | 5.1 (7) | 10/15 |
| DE-scipy-2019 bbob Varelas Dahito | 6.6 (4) | 12 (33) | 4.0 (9) | 4.0 (4) | 4.0 (4) | 11 (10) | ∞4e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 1.1 (3) | 12 (38) | 4.9 (3) | 4.9 (12) | 4.9 (8) | 4.9 (5) | 42 (81) | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 786 (1090) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 3.8 (5) | 23 (57) | 7.1 (7) | 7.1 (6) | 7.1 (8) | 7.1 (6) | 7.1 (8) | 8/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 1.5 (3) | 11 (22) | 3.7 (4) | 3.6 (5) | 3.6 (4) | 3.6 (3) | 11 (15) | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 72 (206) | 57 (180) | 90 (62) | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 66 (123) | 82 (61) | 89 (94) | 89 (92) | 89 (78) | 89 (54) | 88 (72) | 1/15 |
| Δ fopt f23, 40-D |
1e1 7.0 |
1e0 11925 |
1e-1 75453 |
1e-2 6.6e5 |
1e-3 1.3e6 |
1e-5 3.2e6 |
1e-7 3.4e6 |
#succ 15/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | 1.7 (3) | 1535 (2008) | ∞ | ∞ | ∞ | ∞ | ∞8e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | 176 (168) | 2282 (3055) | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | 523 (665) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | 1.2 (1) | 1.1 (1.0) | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | 1.5 (3) | 594 (699) | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | 96 (114) | 177 (157) | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | 4.6 (8) | 1.5 (1) | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | 1.7 (2) | 498 (471) | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | 1.8 (2) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | 1.1 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | 1.8 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | 3.7e7 (3e7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | 1.1 (0.8) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | 0.86 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | 3.7e7 (2e7) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | 0.87 (0.5) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | 1.2 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | 1.8 (3) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | 1.0 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | 1.7 (1) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | 4.4 (6) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | 5.4 (10) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | 19 (9) | 32 (62) | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | 380 (488) | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | 3.1 (4) | 0.90 (0.7) | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Δ fopt f24, 40-D |
1e1 5.8e6 |
1e0 9.8e7 |
1e-1 3.0e8 |
1e-2 3.0e8 |
1e-3 3.0e8 |
1e-5 3.0e8 |
1e-7 3.0e8 |
#succ 1/15 |
|---|---|---|---|---|---|---|---|---|
| Adaptive-Two-Mode bbob Bodner | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞8e6 | 0/15 |
| BFGS-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| CG-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| COBYLA-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| DE-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| L-BFGS-B-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| Powell-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| RS-0p5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-0p5 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-10 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-1 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-20 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-2 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-3 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-4-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-5-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6-initIn0 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| RS-6 bbob Brockhoff Hansen | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e7 | 0/15 |
| SLSQP-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| TNC-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |
| adapt-Nelder-Mead-scipy-2019 bbob Varelas Dahito | ∞ | ∞ | ∞ | ∞ | ∞ | ∞ | ∞4e6 | 0/15 |