Overview page

Table showing the ERT in number of evaluations

Last dimension | Dimension = 2 | Next dimension

Δ fopt
f1, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 274 (86)384 (89)494 (108)628 (143)790 (111)1025 (129)1135 (108)15/15
AL2-CMA-ES Dufosse 217 (60)367 (74)506 (90)618 (105)726 (99)994 (147)1109 (167)15/15
AL3-CMA-ES Dufosse 224 (77)367 (103)477 (128)607 (117)732 (108)948 (148)1055 (105)15/15
AL4-CMA-ES Dufosse 231 (83)384 (107)528 (130)628 (152)755 (123)992 (140)1084 (130)15/15
BPepsMAg Hellwig 294 (303)834 (1520)1326 (1947)2979 (2727)3408 (2990)7729 (8120)8187 (7792)15/15
COBYLA Dufosse 15 (3)20 (6)27 (5)32 (10)41 (5)53 (11)65 (7)15/15
RandomSearch-5 Dufosse 1100 (1196)1.3e4 (2e4)1.4e6 (1e6)5.8e6 (6e6)4e50/15
epsMAg Hellwig 121 (71)239 (187)490 (442)836 (1228)1521 (2293)6666 (6950)1.0e4 (1e4)15/15
fmincon Hellwig 23 (8)28 (10)32 (12)37 (11)39 (11)50 (11)149 (117)5/15

Δ fopt
f2, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 354 (102)558 (154)736 (182)892 (180)1062 (169)1387 (288)1581 (283)15/15
AL2-CMA-ES Dufosse 379 (180)542 (216)716 (223)934 (246)1113 (210)1500 (321)1707 (325)15/15
AL3-CMA-ES Dufosse 366 (123)571 (166)728 (116)914 (115)1056 (132)1389 (151)1571 (133)15/15
AL4-CMA-ES Dufosse 390 (185)555 (238)770 (208)932 (197)1088 (181)1424 (258)1566 (214)15/15
BPepsMAg Hellwig 677 (584)1713 (1226)4229 (3563)9004 (6466)3.2e4 (4e4)1.2e5 (1e5)2.7e5 (4e5)6/15
COBYLA Dufosse 13 (3)13 (4)14 (4)15 (10)15 (10)★215 (10)★315 (10)★315/15
RandomSearch-5 Dufosse 5130 (7924)5.2e5 (6e5)1.7e6 (3e6)4e50/15
epsMAg Hellwig 1837 (3838)5642 (8522)1.1e4 (8400)1.5e4 (1e4)2.0e4 (7130)2.6e4 (3788)2.7e4 (3129)15/15
fmincon Hellwig 18 (6)20 (9)26 (12)31 (15)37 (12)51 (25)470/15

Δ fopt
f3, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 471 (283)665 (288)863 (257)1058 (307)1230 (309)1523 (282)1698 (281)15/15
AL2-CMA-ES Dufosse 389 (183)583 (162)773 (204)935 (293)1092 (234)1368 (217)1542 (329)15/15
AL3-CMA-ES Dufosse 390 (160)600 (129)768 (177)1004 (241)1144 (218)1497 (173)1662 (182)15/15
AL4-CMA-ES Dufosse 400 (154)607 (170)802 (239)981 (220)1118 (189)1444 (267)1622 (208)15/15
BPepsMAg Hellwig 2265 (3814)5698 (9162)1.8e4 (2e4)4.3e4 (4e4)1.1e5 (1e5)4.8e5 (7e5)6.5e5 (6e5)3/15
COBYLA Dufosse 14 (4)14 (4)★314 (4)★314 (4)★314 (4)★314 (4)★314 (4)★315/15
RandomSearch-5 Dufosse 2.0e4 (3e4)9.1e5 (2e6)4e50/15
epsMAg Hellwig 2376 (4844)9315 (1e4)1.3e4 (1e4)1.8e4 (1e4)2.3e4 (7276)2.6e4 (2251)2.6e4 (2098)15/15
fmincon Hellwig 22 (9)28 (6)34 (9)38 (12)56 (21)164 (100)332 (332)3/15

Δ fopt
f4, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 476 (144)684 (141)858 (101)1061 (164)1225 (179)1576 (283)1747 (145)15/15
AL2-CMA-ES Dufosse 473 (290)694 (221)869 (206)1024 (192)1200 (213)1499 (185)1651 (239)15/15
AL3-CMA-ES Dufosse 489 (208)719 (298)886 (359)1055 (362)1202 (380)1512 (360)1651 (368)15/15
AL4-CMA-ES Dufosse 542 (129)737 (137)920 (142)1083 (183)1235 (133)1566 (182)1716 (116)15/15
BPepsMAg Hellwig 3757 (2890)7988 (1e4)1.4e4 (2e4)2.2e4 (2e4)8.2e4 (1e5)2.8e5 (2e5)9.4e5 (1e6)2/15
COBYLA Dufosse 12 (3)★313 (4)★313 (4)★313 (4)★313 (6)★313 (6)★313 (6)★315/15
RandomSearch-5 Dufosse 5.7e4 (7e4)1.8e6 (2e6)4e50/15
epsMAg Hellwig 5407 (5913)1.4e4 (1e4)2.1e4 (9050)2.5e4 (2926)2.8e4 (2516)2.9e4 (2350)2.9e4 (2165)15/15
fmincon Hellwig 28 (9)30 (12)36 (13)46 (28)75 (18)237 (282)237 (221)5/15

Δ fopt
f5, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 452 (249)685 (128)860 (144)1056 (143)1209 (206)1509 (154)1681 (199)15/15
AL2-CMA-ES Dufosse 404 (112)617 (141)804 (111)958 (130)1137 (176)1435 (175)1600 (214)15/15
AL3-CMA-ES Dufosse 443 (189)674 (139)885 (163)1080 (161)1223 (222)1519 (209)1685 (218)15/15
AL4-CMA-ES Dufosse 410 (179)643 (206)833 (200)1015 (218)1160 (230)1463 (237)1676 (203)15/15
BPepsMAg Hellwig 2559 (1926)8179 (2e4)1.6e4 (2e4)3.4e4 (4e4)6.8e4 (5e4)9.8e5 (9e5)2.0e6 (3e6)1/15
COBYLA Dufosse 13 (5)★215 (7)16 (8)★216 (8)★216 (8)★318 (8)★318 (8)★315/15
RandomSearch-5 Dufosse 4.3e4 (2e4)1.7e6 (2e6)4e50/15
epsMAg Hellwig 1968 (3431)1.0e4 (1e4)1.8e4 (1e4)2.2e4 (4360)2.5e4 (3804)2.7e4 (1728)2.8e4 (1463)15/15
fmincon Hellwig 26 (9)29 (12)34 (13)40 (27)62 (27)383 (337)383 (418)3/15

Δ fopt
f6, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 473 (183)656 (181)866 (133)1017 (179)1202 (99)1517 (205)1700 (188)15/15
AL2-CMA-ES Dufosse 486 (143)710 (187)865 (155)1041 (185)1210 (125)1445 (147)1674 (152)15/15
AL3-CMA-ES Dufosse 503 (147)660 (142)864 (137)1025 (209)1206 (196)1553 (112)1721 (148)15/15
AL4-CMA-ES Dufosse 464 (158)695 (150)847 (186)1048 (203)1174 (228)1478 (179)1685 (221)15/15
BPepsMAg Hellwig 3398 (3430)6840 (7763)1.5e4 (2e4)3.8e4 (2e4)7.1e4 (7e4)2.2e5 (2e5)4.4e5 (4e5)4/15
COBYLA Dufosse 13 (5)★315 (7)★215 (7)★315 (7)★318 (14)★319 (16)★320 (16)★315/15
RandomSearch-5 Dufosse 3.3e4 (3e4)1.7e6 (2e6)4e50/15
epsMAg Hellwig 4631 (5990)1.4e4 (1e4)1.9e4 (1e4)2.3e4 (5692)2.6e4 (2577)2.9e4 (2031)2.9e4 (1746)15/15
fmincon Hellwig 37 (16)39 (21)50 (31)67 (31)80 (21)680 (675)680 (835)2/15

Δ fopt
f7, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 193 (106)367 (163)656 (312)858 (277)997 (310)1289 (233)1423 (305)15/15
AL2-CMA-ES Dufosse 233 (179)389 (333)666 (317)924 (214)1058 (189)1319 (197)1500 (257)15/15
AL3-CMA-ES Dufosse 216 (97)355 (124)584 (229)819 (245)968 (178)1249 (178)1370 (193)15/15
AL4-CMA-ES Dufosse 235 (171)372 (229)581 (256)844 (309)961 (194)1252 (165)1335 (202)15/15
BPepsMAg Hellwig 119 (138)374 (336)502 (359)639 (442)6984 (9644)1.2e5 (1e5)1.7e5 (2e5)8/15
COBYLA Dufosse 15 (4)18 (5)21 (7)★225 (9)★338 (16)★2104 (85)145 (149)15/15
RandomSearch-5 Dufosse 812 (833)5152 (8626)6.6e4 (1e5)3.4e5 (4e5)5.9e6 (4e6)4e50/15
epsMAg Hellwig 89 (66)243 (230)1630 (3110)3851 (5972)2.1e4 (1e4)6.6e4 (1e5)6.8e4 (1e5)13/15
fmincon Hellwig 28 (19)38 (22)48 (18)65 (42)88 (41)513 (390)2146 (1998)1/15

Δ fopt
f8, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 570 (148)780 (162)934 (155)1141 (177)1349 (195)1688 (205)1864 (244)15/15
AL2-CMA-ES Dufosse 591 (271)806 (150)978 (176)1129 (263)1371 (266)1717 (313)2029 (474)15/15
AL3-CMA-ES Dufosse 651 (216)831 (196)1005 (265)1166 (260)1327 (329)1675 (325)1803 (357)15/15
AL4-CMA-ES Dufosse 554 (166)747 (149)919 (116)1076 (157)1266 (118)1529 (168)1670 (164)15/15
BPepsMAg Hellwig 4363 (8762)1.9e4 (2e4)3.0e4 (4e4)8.5e4 (7e4)2.3e5 (3e5)2.1e6 (2e6)2.1e6 (2e6)1/15
COBYLA Dufosse 20 (7)25 (8)★232 (7)★339 (9)★346 (9)★356 (14)★362 (16)★315/15
RandomSearch-5 Dufosse 2.1e5 (3e5)1.2e6 (2e6)4e50/15
epsMAg Hellwig 3355 (4588)1.2e4 (8470)1.7e4 (1e4)2.2e4 (2854)2.4e4 (2594)2.6e4 (3190)2.6e4 (3068)15/15
fmincon Hellwig 45 (23)61 (30)74 (31)85 (32)122 (70)1117 (1221)1170/15

Δ fopt
f9, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 609 (212)810 (229)999 (212)1186 (206)1345 (193)1684 (225)1831 (242)15/15
AL2-CMA-ES Dufosse 534 (238)727 (197)935 (209)1115 (212)1272 (210)1583 (227)1734 (214)15/15
AL3-CMA-ES Dufosse 554 (127)730 (166)942 (228)1100 (244)1287 (209)1642 (330)1773 (308)15/15
AL4-CMA-ES Dufosse 584 (181)755 (205)948 (163)1091 (243)1262 (261)1601 (307)1749 (262)15/15
BPepsMAg Hellwig 1.2e4 (9142)2.2e4 (3e4)5.4e4 (6e4)1.4e5 (1e5)4.5e5 (5e5)1e50/15
COBYLA Dufosse 23 (11)★229 (8)★335 (11)★341 (13)★349 (10)★368 (16)★372 (19)★315/15
RandomSearch-5 Dufosse 3.4e5 (5e5)4e50/15
epsMAg Hellwig 5891 (1e4)1.3e4 (1e4)2.1e4 (6174)2.4e4 (5525)2.6e4 (3363)2.7e4 (3138)2.8e4 (2804)15/15
fmincon Hellwig 59 (24)87 (37)102 (35)118 (68)163 (75)987 (756)1170/15

Δ fopt
f10, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 539 (201)763 (162)933 (161)1091 (181)1266 (210)1637 (175)2145 (199)15/15
AL2-CMA-ES Dufosse 583 (292)799 (198)992 (226)1106 (204)1272 (254)1626 (273)1754 (205)15/15
AL3-CMA-ES Dufosse 635 (206)840 (179)1043 (151)1172 (205)1340 (175)1707 (188)1856 (204)15/15
AL4-CMA-ES Dufosse 600 (208)796 (233)995 (277)1113 (275)1317 (291)1655 (314)1819 (296)15/15
BPepsMAg Hellwig 1.5e4 (2e4)3.1e4 (4e4)7.6e4 (9e4)1.4e5 (2e5)3.3e5 (4e5)2.0e6 (2e6)2.0e6 (2e6)1/15
COBYLA Dufosse 20 (6)★326 (10)★336 (12)★343 (13)★352 (11)★369 (19)★378 (21)★315/15
RandomSearch-5 Dufosse 4.1e5 (5e5)2.7e6 (3e6)4e50/15
epsMAg Hellwig 5915 (8452)1.5e4 (1e4)2.1e4 (1e4)2.4e4 (2622)2.6e4 (2928)2.8e4 (1596)2.8e4 (1704)15/15
fmincon Hellwig 56 (34)80 (34)107 (40)146 (84)200 (143)1660 (2238)3335 (5362)1/15

Δ fopt
f11, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 612 (149)837 (227)1039 (240)1210 (266)1400 (270)1731 (206)1867 (213)15/15
AL2-CMA-ES Dufosse 638 (252)832 (180)1004 (250)1168 (257)1314 (327)1644 (267)1786 (320)15/15
AL3-CMA-ES Dufosse 683 (379)866 (318)1014 (348)1219 (346)1383 (289)1738 (436)1909 (419)15/15
AL4-CMA-ES Dufosse 621 (349)817 (378)995 (288)1182 (399)1348 (383)1664 (426)1838 (376)15/15
BPepsMAg Hellwig 1.5e4 (2e4)3.6e4 (4e4)7.4e4 (1e5)1.2e5 (1e5)2.6e5 (2e5)5.8e5 (9e5)1e50/15
COBYLA Dufosse 21 (6)★328 (7)★337 (9)★342 (11)★352 (11)★369 (15)★374 (21)★315/15
RandomSearch-5 Dufosse 2.6e5 (4e5)5.6e6 (4e6)4e50/15
epsMAg Hellwig 4463 (5128)1.3e4 (1e4)2.0e4 (7908)2.3e4 (8216)2.5e4 (2214)2.7e4 (3315)2.7e4 (2718)15/15
fmincon Hellwig 76 (49)102 (61)116 (59)135 (58)276 (420)1894 (2342)3792 (3649)1/15

Δ fopt
f12, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 651 (220)901 (288)1080 (300)1234 (310)1421 (367)1770 (403)1923 (363)15/15
AL2-CMA-ES Dufosse 620 (129)780 (124)951 (163)1109 (157)1238 (139)1567 (144)1722 (159)15/15
AL3-CMA-ES Dufosse 659 (167)835 (261)991 (258)1156 (287)1348 (256)1669 (354)1805 (293)15/15
AL4-CMA-ES Dufosse 593 (189)819 (234)975 (303)1146 (316)1322 (191)1644 (250)1815 (246)15/15
BPepsMAg Hellwig 1.7e4 (3e4)4.3e4 (5e4)1.5e5 (2e5)4.3e5 (3e5)4.3e5 (4e5)2.0e6 (2e6)1e50/15
COBYLA Dufosse 23 (7)★332 (14)★337 (14)★347 (17)★256 (22)★371 (27)★378 (31)★315/15
RandomSearch-5 Dufosse 2.5e5 (3e5)2.8e6 (4e6)4e50/15
epsMAg Hellwig 3663 (7208)1.5e4 (1e4)2.0e4 (7294)2.5e4 (5241)2.6e4 (4534)2.8e4 (2472)2.9e4 (2566)15/15
fmincon Hellwig 61 (27)72 (30)101 (34)113 (42)151 (107)1114 (1357)1090/15

Δ fopt
f13, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 280 (79)379 (128)496 (131)605 (150)707 (225)972 (158)1112 (210)15/15
AL2-CMA-ES Dufosse 263 (72)320 (102)477 (103)612 (154)762 (112)1082 (236)1220 (250)15/15
AL3-CMA-ES Dufosse 222 (136)4005 (192)8466 (114)8513 (165)8658 (174)8891 (205)9004 (172)14/15
AL4-CMA-ES Dufosse 229 (112)334 (60)440 (119)571 (122)684 (112)908 (103)1047 (101)15/15
BPepsMAg Hellwig 64 (64)77 (63)88 (90)88 (90)88 (90)88 (90)88 (90)15/15
COBYLA Dufosse 12 (2)12 (2)12 (2)12 (2)★212 (2)★212 (2)★212 (2)★215/15
RandomSearch-5 Dufosse 222 (208)1294 (1304)1.8e4 (2e4)1.7e5 (2e5)1.9e6 (2e6)4e50/15
epsMAg Hellwig 79 (38)84 (30)89 (38)89 (38)89 (38)89 (38)89 (38)15/15
fmincon Hellwig 11 (3)13 (6)14 (6)18 (6)23 (3)62 (71)290/15

Δ fopt
f14, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 403 (150)610 (173)812 (147)954 (143)1166 (185)1485 (187)1837 (150)15/15
AL2-CMA-ES Dufosse 468 (174)662 (184)835 (187)1013 (184)1202 (231)1536 (162)1919 (224)15/15
AL3-CMA-ES Dufosse 438 (140)599 (136)777 (139)959 (150)1107 (176)1429 (218)1577 (185)15/15
AL4-CMA-ES Dufosse 448 (204)631 (157)775 (135)936 (208)1108 (159)1420 (293)1607 (243)15/15
BPepsMAg Hellwig 997 (881)3520 (5988)8170 (7404)1.5e4 (1e4)3.4e4 (4e4)1.6e5 (1e5)6.5e5 (6e5)3/15
COBYLA Dufosse 13 (3)13 (3)13 (3)★213 (3)★313 (3)★313 (3)★313 (3)★315/15
RandomSearch-5 Dufosse 1.8e4 (3e4)4.3e5 (8e5)4e50/15
epsMAg Hellwig 735 (652)3933 (5498)1.1e4 (9817)1.9e4 (7460)2.2e4 (4412)2.6e4 (3058)2.7e4 (3198)15/15
fmincon Hellwig 16 (6)19 (6)25 (9)29 (12)32 (12)49 (28)350/15

Δ fopt
f15, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 607 (279)779 (282)916 (251)1084 (295)1232 (294)1563 (304)1731 (264)15/15
AL2-CMA-ES Dufosse 549 (106)737 (117)915 (148)1079 (115)1206 (123)1506 (163)1687 (157)15/15
AL3-CMA-ES Dufosse 580 (277)730 (294)912 (211)1133 (299)1273 (308)1614 (289)1767 (297)15/15
AL4-CMA-ES Dufosse 506 (131)717 (121)870 (137)1057 (125)1197 (163)1522 (209)1669 (243)15/15
BPepsMAg Hellwig 2163 (1672)4601 (4456)1.0e4 (1e4)2.6e4 (3e4)8.4e4 (8e4)2.3e5 (2e5)1.0e6 (1e6)2/15
COBYLA Dufosse 15 (8)15 (8)★215 (8)★215 (8)★315 (8)★315 (8)★315 (8)★315/15
RandomSearch-5 Dufosse 7.7e4 (1e5)5.8e6 (4e6)4e50/15
epsMAg Hellwig 3409 (5976)9589 (9116)1.9e4 (6900)2.5e4 (2999)2.7e4 (2248)2.9e4 (2390)2.9e4 (2368)15/15
fmincon Hellwig 30 (18)32 (18)42 (22)53 (21)62 (24)486 (759)610/15

Δ fopt
f16, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 635 (272)826 (219)1014 (208)1164 (214)1322 (220)1671 (203)1811 (228)15/15
AL2-CMA-ES Dufosse 464 (188)694 (196)851 (240)1009 (139)1178 (202)1525 (117)1657 (222)15/15
AL3-CMA-ES Dufosse 520 (190)730 (157)887 (113)1073 (175)1220 (195)1511 (105)1696 (154)15/15
AL4-CMA-ES Dufosse 528 (159)699 (162)894 (188)1026 (141)1191 (154)1500 (224)1648 (189)15/15
BPepsMAg Hellwig 6494 (9092)1.1e4 (2e4)1.9e4 (3e4)5.5e4 (9e4)1.2e5 (1e5)5.9e5 (5e5)5.9e5 (7e5)3/15
COBYLA Dufosse 14 (3)14 (3)14 (3)★214 (3)★214 (3)★314 (3)★314 (3)★315/15
RandomSearch-5 Dufosse 9.8e4 (1e5)5.8e6 (6e6)4e50/15
epsMAg Hellwig 3497 (4954)1.2e4 (1e4)1.9e4 (1e4)2.5e4 (4478)2.8e4 (3024)2.9e4 (1881)2.9e4 (1662)15/15
fmincon Hellwig 25 (9)27 (12)32 (18)40 (30)61 (27)968 (1374)968 (642)1/15

Δ fopt
f17, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 530 (276)764 (194)902 (176)1094 (199)1245 (136)1550 (212)1770 (268)15/15
AL2-CMA-ES Dufosse 556 (301)732 (268)875 (320)1018 (283)1179 (197)1515 (263)1635 (235)15/15
AL3-CMA-ES Dufosse 582 (210)781 (179)939 (161)1080 (266)1246 (264)1552 (228)1702 (246)15/15
AL4-CMA-ES Dufosse 572 (184)821 (200)976 (214)1155 (228)1268 (287)1624 (296)1800 (256)15/15
BPepsMAg Hellwig 3611 (3804)1.3e4 (1e4)2.2e4 (2e4)2.7e4 (3e4)1.6e5 (2e5)9.9e5 (1e6)1e50/15
COBYLA Dufosse 15 (5)★215 (5)★216 (8)★216 (8)★316 (8)★316 (8)★316 (8)★315/15
RandomSearch-5 Dufosse 6.1e4 (7e4)2.8e6 (4e6)4e50/15
epsMAg Hellwig 7704 (1e4)1.4e4 (1e4)2.0e4 (1e4)2.5e4 (6588)2.7e4 (3500)2.9e4 (1769)2.9e4 (1976)15/15
fmincon Hellwig 38 (21)39 (21)48 (27)65 (30)77 (33)830/15

Δ fopt
f18, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 548 (179)782 (200)1030 (323)1171 (324)1364 (308)1693 (339)1816 (303)15/15
AL2-CMA-ES Dufosse 564 (157)712 (161)894 (153)1029 (212)1174 (191)1427 (188)1596 (205)15/15
AL3-CMA-ES Dufosse 525 (106)758 (207)931 (209)1122 (245)1320 (251)1650 (271)1808 (296)15/15
AL4-CMA-ES Dufosse 582 (213)771 (229)1005 (263)1194 (275)1352 (277)1669 (317)1862 (366)15/15
BPepsMAg Hellwig 3572 (5618)9391 (1e4)2.4e4 (2e4)4.1e4 (4e4)1.1e5 (1e5)2.9e5 (3e5)9.6e5 (9e5)2/15
COBYLA Dufosse 12 (3)★315 (7)★215 (7)★215 (7)★315 (7)★315 (7)★315 (7)★315/15
RandomSearch-5 Dufosse 6.2e4 (6e4)5.9e6 (6e6)4e50/15
epsMAg Hellwig 5695 (7952)1.3e4 (1e4)2.0e4 (8505)2.4e4 (4912)2.7e4 (2626)2.9e4 (1572)2.9e4 (1279)15/15
fmincon Hellwig 32 (12)36 (18)41 (18)57 (42)71 (36)710/15

Δ fopt
f19, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 266 (84)407 (179)2928 (3595)8009 (7992)1.6e4 (4892)2.0e4 (2e4)2.3e4 (2e4)15/15
AL2-CMA-ES Dufosse 218 (131)390 (110)4333 (4765)1.6e4 (2e4)3.3e4 (2e4)3.8e4 (2e4)4.5e4 (4e4)14/15
AL3-CMA-ES Dufosse 250 (126)425 (169)4223 (3991)1.1e4 (1e4)2.4e4 (3e4)3.6e4 (4e4)5.4e4 (5e4)13/15
AL4-CMA-ES Dufosse 237 (121)962 (332)4137 (4144)1.1e4 (1e4)2.2e4 (2e4)5.1e4 (6e4)6.3e4 (6e4)12/15
BPepsMAg Hellwig 246 (236)390 (284)530 (362)612 (328)2255 (5188)9.1e4 (1e5)2.6e5 (2e5)6/15
COBYLA Dufosse 19 (10)27 (12)42 (13)49 (15)3010 (5018)3.0e4 (3e4)8.9e4 (1e5)3/15
RandomSearch-5 Dufosse 633 (824)4233 (3413)5.7e4 (8e4)6.5e5 (7e5)6.0e6 (7e6)4e50/15
epsMAg Hellwig 146 (112)195 (116)303 (205)354 (271)1226 (770)1.4e5 (2e5)1.3e6 (1e6)2/15
fmincon Hellwig 27 (21)32 (21)37 (20)41 (21)6111 (9516)1.2e5 (1e5)1e40/15

Δ fopt
f20, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3321 (3602)4128 (3880)4663 (3894)4875 (4050)5049 (4057)5578 (4253)1.1e4 (4261)14/15
AL2-CMA-ES Dufosse 4809 (1e4)8795 (1e4)9470 (1e4)1.1e4 (1e4)1.1e4 (1e4)1.8e4 (3e4)2.9e4 (5e4)12/15
AL3-CMA-ES Dufosse 3767 (6632)5881 (6690)6393 (7924)6886 (8122)8693 (2e4)1.4e4 (2e4)2.0e4 (5e4)13/15
AL4-CMA-ES Dufosse 4139 (3697)6567 (1e4)7005 (1e4)9068 (1e4)9396 (1e4)1.3e4 (2e4)1.3e4 (1e4)14/15
BPepsMAg Hellwig 3647 (3994)1.8e4 (3e4)7.6e4 (8e4)2.1e5 (3e5)3.4e5 (4e5)9.8e5 (9e5)9.8e5 (1e6)2/15
COBYLA Dufosse 20 (6)★2299 (29)308 (77)324 (138)335 (187)448 (651)639 (2010)15/15
RandomSearch-5 Dufosse 3.9e4 (6e4)9.9e5 (1e6)4e50/15
epsMAg Hellwig 2324 (4088)4929 (6846)1.4e4 (1e4)3.7e4 (2e4)5.2e4 (8e4)7.6e4 (9e4)8.5e4 (2e5)12/15
fmincon Hellwig 88 (126)136 (196)200 (300)221 (315)340 (416)1320 (1080)1350/15

Δ fopt
f21, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 555 (191)761 (153)927 (147)1086 (210)1272 (232)1597 (203)1736 (187)15/15
AL2-CMA-ES Dufosse 731 (226)912 (196)1096 (183)1251 (200)1406 (188)1703 (129)1866 (209)15/15
AL3-CMA-ES Dufosse 665 (231)846 (207)1010 (197)1198 (190)1349 (169)1665 (222)1857 (154)15/15
AL4-CMA-ES Dufosse 605 (169)777 (189)945 (233)1082 (195)1253 (202)1589 (142)1743 (181)15/15
BPepsMAg Hellwig 1.1e4 (1e4)1.8e4 (2e4)7.0e4 (1e5)1.6e5 (2e5)3.1e5 (5e5)1e50/15
COBYLA Dufosse 23 (8)★330 (9)★339 (10)★345 (9)★355 (13)★368 (14)★380 (17)★315/15
RandomSearch-5 Dufosse 2.9e5 (5e5)4e50/15
epsMAg Hellwig 3696 (5868)1.3e4 (1e4)2.0e4 (1e4)2.4e4 (6532)2.7e4 (2812)2.8e4 (2818)2.9e4 (2372)15/15
fmincon Hellwig 71 (39)91 (40)107 (31)125 (46)210 (147)2807 (3288)1390/15

Δ fopt
f22, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 656 (161)828 (200)1022 (228)1159 (246)1350 (165)1672 (239)1831 (233)15/15
AL2-CMA-ES Dufosse 618 (246)800 (154)953 (181)1110 (240)1264 (270)1551 (239)1746 (227)15/15
AL3-CMA-ES Dufosse 678 (239)836 (250)1016 (273)1161 (267)1345 (232)1672 (256)1850 (312)15/15
AL4-CMA-ES Dufosse 637 (152)826 (142)997 (165)1157 (181)1313 (169)1661 (168)1829 (189)15/15
BPepsMAg Hellwig 1.1e4 (2e4)3.4e4 (4e4)6.5e4 (9e4)1.7e5 (2e5)4.8e5 (4e5)2.1e6 (3e6)2.1e6 (3e6)1/15
COBYLA Dufosse 23 (5)★331 (11)★335 (15)★342 (12)★351 (8)★369 (19)★378 (18)★315/15
RandomSearch-5 Dufosse 3.9e5 (5e5)2.8e6 (3e6)4e50/15
epsMAg Hellwig 5087 (9870)1.4e4 (1e4)2.0e4 (5765)2.2e4 (6058)2.6e4 (3481)2.8e4 (2514)2.8e4 (2486)15/15
fmincon Hellwig 71 (28)104 (67)137 (82)168 (90)235 (145)626 (551)1570 (1638)2/15

Δ fopt
f23, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 672 (227)859 (208)1009 (172)1170 (287)1344 (279)1638 (328)1813 (323)15/15
AL2-CMA-ES Dufosse 561 (218)741 (161)897 (179)1064 (178)1227 (229)1476 (216)1672 (204)15/15
AL3-CMA-ES Dufosse 583 (188)778 (154)953 (140)1161 (143)1317 (143)1637 (116)1793 (166)15/15
AL4-CMA-ES Dufosse 583 (180)766 (226)962 (159)1154 (169)1322 (214)1640 (147)1810 (192)15/15
BPepsMAg Hellwig 2.6e4 (2e4)6.2e4 (9e4)1.2e5 (1e5)1.6e5 (2e5)3.4e5 (3e5)9.6e5 (1e6)2.0e6 (2e6)1/15
COBYLA Dufosse 23 (5)★328 (6)★336 (6)★341 (10)★350 (11)★367 (16)★373 (19)★315/15
RandomSearch-5 Dufosse 3.0e5 (4e5)5.8e6 (6e6)5.8e6 (8e6)4e50/15
epsMAg Hellwig 6236 (8654)1.5e4 (1e4)2.1e4 (6006)2.6e4 (3596)2.7e4 (4384)2.9e4 (2592)2.9e4 (2626)15/15
fmincon Hellwig 71 (40)102 (78)194 (91)231 (92)294 (146)2068 (1737)2030/15

Δ fopt
f24, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 612 (173)804 (216)995 (180)1158 (155)1349 (225)1646 (219)1842 (233)15/15
AL2-CMA-ES Dufosse 580 (149)786 (199)960 (240)1126 (202)1270 (180)1554 (237)1691 (218)15/15
AL3-CMA-ES Dufosse 605 (193)862 (292)1040 (238)1185 (314)1370 (268)1698 (305)1870 (246)15/15
AL4-CMA-ES Dufosse 649 (275)829 (254)1013 (275)1174 (292)1336 (282)1645 (346)1817 (258)15/15
BPepsMAg Hellwig 3.3e4 (7e4)5.0e4 (8e4)1.1e5 (1e5)1.9e5 (2e5)4.5e5 (5e5)2.0e6 (2e6)2.0e6 (2e6)1/15
COBYLA Dufosse 26 (10)★231 (10)★336 (10)★343 (14)★349 (9)★368 (12)★380 (19)★315/15
RandomSearch-5 Dufosse 4.2e5 (8e5)2.8e6 (2e6)4e50/15
epsMAg Hellwig 6145 (9550)1.6e4 (1e4)2.3e4 (4150)2.7e4 (3912)2.7e4 (3894)2.9e4 (3160)2.9e4 (3372)15/15
fmincon Hellwig 75 (40)138 (96)197 (126)233 (139)463 (656)4358 (4847)2370/15

Δ fopt
f25, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 272 (156)1268 (3434)3190 (3795)7682 (7941)9280 (5145)1.3e4 (5625)1.8e4 (2e4)15/15
AL2-CMA-ES Dufosse 223 (161)1482 (4021)3960 (4737)8060 (8757)2.1e4 (2e4)2.9e4 (2e4)4.0e4 (4e4)14/15
AL3-CMA-ES Dufosse 264 (175)911 (216)4340 (4010)1.0e4 (1e4)1.9e4 (2e4)3.2e4 (2e4)3.7e4 (2e4)14/15
AL4-CMA-ES Dufosse 237 (98)398 (119)3267 (4250)1.5e4 (1e4)2.7e4 (2e4)3.8e4 (2e4)4.4e4 (2e4)15/15
BPepsMAg Hellwig 237 (268)373 (299)515 (318)631 (318)1.0e4 (2e4)9.2e4 (1e5)1.6e5 (1e5)9/15
COBYLA Dufosse 21 (13)30 (12)39 (15)53 (12)2071 (2020)3.8e4 (4e4)2.9e5 (2e5)1/15
RandomSearch-5 Dufosse 501 (586)6188 (9191)5.5e4 (1e5)1.3e6 (1e6)4e50/15
epsMAg Hellwig 107 (75)168 (92)232 (124)863 (1622)1.7e4 (4898)3.2e5 (3e5)2.8e6 (2e6)1/15
fmincon Hellwig 31 (18)41 (24)46 (27)49 (24)3611 (6355)970/15

Δ fopt
f26, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 952 (747)1309 (1259)1630 (2436)1834 (2451)2037 (2523)2360 (2477)2530 (2578)15/15
AL2-CMA-ES Dufosse 922 (229)2050 (1981)2574 (4199)2726 (4128)2962 (4186)3378 (4447)3649 (4550)15/15
AL3-CMA-ES Dufosse 1951 (574)2178 (514)2394 (487)2614 (432)2763 (513)3317 (539)8936 (541)14/15
AL4-CMA-ES Dufosse 872 (179)2958 (1960)3458 (3985)3648 (4045)3889 (4092)5037 (4205)9513 (4249)14/15
BPepsMAg Hellwig 5054 (8917)2.3e4 (4e4)3.5e4 (6e4)1.2e5 (2e5)1.6e5 (2e5)9.3e5 (1e6)9.4e5 (1e6)2/15
COBYLA Dufosse 41 (6)62 (6)78 (7)105 (10)★2125 (9)★2205 (418)217 (422)15/15
RandomSearch-5 Dufosse 1.3e5 (2e5)1.2e6 (2e6)4e50/15
epsMAg Hellwig 3699 (6138)1.2e4 (9502)2.0e4 (7406)2.8e4 (4348)3.0e4 (3362)3.2e4 (2401)3.3e4 (2311)15/15
fmincon Hellwig 50 (36)70 (41)105 (136)116 (128)148 (151)770 (967)1150/15

Δ fopt
f27, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 852 (684)1085 (719)1246 (623)1421 (687)1596 (603)1907 (596)2106 (550)15/15
AL2-CMA-ES Dufosse 646 (190)808 (227)981 (202)1159 (197)1306 (209)1607 (193)1733 (222)15/15
AL3-CMA-ES Dufosse 614 (143)757 (145)964 (170)1129 (149)1324 (194)1637 (208)1798 (208)15/15
AL4-CMA-ES Dufosse 621 (413)813 (402)1009 (307)1178 (346)1365 (278)1686 (345)1810 (404)15/15
BPepsMAg Hellwig 1.5e4 (1e4)2.7e4 (2e4)8.5e4 (9e4)1.1e5 (1e5)4.4e5 (6e5)2.0e6 (3e6)2.0e6 (1e6)1/15
COBYLA Dufosse 22 (9)★327 (7)★335 (8)★342 (14)★349 (13)★364 (17)★372 (16)★315/15
RandomSearch-5 Dufosse 2.8e5 (4e5)5.6e6 (5e6)4e50/15
epsMAg Hellwig 5951 (6672)1.5e4 (1e4)2.0e4 (1e4)2.5e4 (4123)2.7e4 (2282)2.8e4 (1766)2.9e4 (1592)15/15
fmincon Hellwig 62 (24)115 (124)177 (161)195 (160)316 (314)1325 (1730)4001 (5036)1/15

Δ fopt
f28, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1025 (290)1192 (331)1346 (330)1552 (285)1717 (343)2069 (390)4002 (402)15/15
AL2-CMA-ES Dufosse 964 (486)1153 (552)1318 (598)1485 (598)1659 (600)1921 (608)2088 (585)15/15
AL3-CMA-ES Dufosse 7797 (498)7986 (465)8172 (475)8319 (493)8508 (528)8805 (539)8988 (456)14/15
AL4-CMA-ES Dufosse 1221 (427)1424 (425)1611 (386)1804 (484)1993 (511)2344 (468)2492 (454)15/15
BPepsMAg Hellwig 2.2e4 (1e4)3.9e4 (6e4)1.5e5 (2e5)1.9e5 (3e5)5.8e5 (7e5)1.9e6 (3e6)1.9e6 (2e6)1/15
COBYLA Dufosse 24 (8)★330 (9)★338 (10)★346 (7)★352 (7)★368 (12)★376 (15)★315/15
RandomSearch-5 Dufosse 1.1e6 (2e6)4e50/15
epsMAg Hellwig 5623 (8912)1.3e4 (1e4)2.2e4 (8264)2.7e4 (3256)2.8e4 (2367)3.1e4 (1798)3.2e4 (1568)15/15
fmincon Hellwig 67 (21)193 (190)282 (387)351 (409)563 (413)3490 (3342)1370/15

Δ fopt
f29, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 641 (368)846 (341)1025 (307)1184 (317)1384 (348)1680 (386)1858 (343)15/15
AL2-CMA-ES Dufosse 622 (158)798 (229)995 (219)1148 (186)1279 (236)1577 (229)1725 (299)15/15
AL3-CMA-ES Dufosse 659 (160)869 (268)1033 (200)1181 (348)1366 (338)1718 (366)1892 (319)15/15
AL4-CMA-ES Dufosse 686 (213)835 (215)987 (206)1181 (215)1337 (203)1670 (185)1809 (216)15/15
BPepsMAg Hellwig 1.1e4 (2e4)3.1e4 (3e4)5.1e4 (6e4)2.8e5 (2e5)6.3e5 (6e5)1e50/15
COBYLA Dufosse 23 (3)★331 (6)★338 (7)★345 (8)★355 (13)★369 (9)★376 (13)★315/15
RandomSearch-5 Dufosse 6.0e5 (6e5)4e50/15
epsMAg Hellwig 5993 (8616)1.5e4 (1e4)2.0e4 (1e4)2.2e4 (1e4)2.6e4 (4211)2.8e4 (2446)2.9e4 (2343)15/15
fmincon Hellwig 82 (76)122 (101)173 (158)203 (203)319 (297)1259 (1807)1870/15

Δ fopt
f30, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 754 (202)954 (220)1149 (318)1324 (314)1498 (303)1826 (321)1971 (364)15/15
AL2-CMA-ES Dufosse 666 (219)863 (247)1031 (235)1197 (248)1385 (293)1659 (309)1790 (271)15/15
AL3-CMA-ES Dufosse 787 (213)933 (241)1112 (238)1255 (293)1444 (292)1733 (207)1919 (278)15/15
AL4-CMA-ES Dufosse 746 (394)930 (361)1126 (348)1264 (341)1449 (347)1795 (334)1954 (314)15/15
BPepsMAg Hellwig 1.6e4 (2e4)4.6e4 (5e4)2.0e5 (3e5)3.5e5 (4e5)1e50/15
COBYLA Dufosse 22 (5)★229 (9)★335 (4)★343 (3)★347 (5)★363 (6)★371 (12)★315/15
RandomSearch-5 Dufosse 5.1e5 (7e5)5.7e6 (7e6)4e50/15
epsMAg Hellwig 7689 (9350)1.6e4 (1e4)2.3e4 (7423)2.7e4 (3510)2.8e4 (3186)2.9e4 (1670)3.0e4 (1486)15/15
fmincon Hellwig 601 (53)727 (114)820 (215)916 (226)1075 (275)1.5e4 (2e4)1930/15

Δ fopt
f31, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 282 (174)560 (223)716 (288)966 (243)1526 (360)3011 (3662)3176 (3797)15/15
AL2-CMA-ES Dufosse 229 (157)481 (212)675 (294)1478 (252)1712 (326)2133 (437)2293 (380)15/15
AL3-CMA-ES Dufosse 273 (103)914 (391)1113 (394)1462 (411)1730 (282)2620 (3732)2749 (3767)15/15
AL4-CMA-ES Dufosse 284 (105)461 (159)757 (303)939 (334)2272 (4178)3174 (4282)3366 (4285)15/15
BPepsMAg Hellwig 127 (114)229 (270)268 (290)2680 (7008)3772 (7153)4.0e4 (4e4)6.0e4 (6e4)14/15
COBYLA Dufosse 15 (10)17 (10)20 (12)155 (13)426 (13)972 (1018)981 (1018)15/15
RandomSearch-5 Dufosse 1187 (1100)9579 (1e4)7.0e4 (1e5)5.1e5 (6e5)4e50/15
epsMAg Hellwig 91 (39)111 (89)114 (102)119 (102)1.4e4 (250)1.6e4 (2036)1.8e4 (1e4)14/15
fmincon Hellwig 19 (16)22 (16)26 (13)1931 (6012)4591 (9503)8855 (1e4)2.7e4 (2e4)2/15

Δ fopt
f32, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 463 (304)713 (303)981 (371)1142 (359)1323 (319)1682 (319)2073 (481)15/15
AL2-CMA-ES Dufosse 427 (261)626 (284)862 (228)1022 (213)1198 (186)1578 (181)1768 (226)15/15
AL3-CMA-ES Dufosse 472 (287)667 (243)900 (217)1108 (220)1300 (233)1638 (277)1815 (256)15/15
AL4-CMA-ES Dufosse 410 (262)576 (226)808 (186)975 (162)1129 (120)1507 (150)1688 (155)15/15
BPepsMAg Hellwig 1887 (1952)5609 (7332)1.7e4 (3e4)3.1e4 (3e4)4.8e4 (3e4)3.1e5 (2e5)4.0e5 (5e5)4/15
COBYLA Dufosse 19 (8)27 (11)34 (11)39 (16)42 (19)48 (22)50 (26)15/15
RandomSearch-5 Dufosse 6.3e4 (7e4)5.5e5 (7e5)2.7e6 (4e6)4e50/15
epsMAg Hellwig 721 (1052)5938 (8670)1.2e4 (1e4)2.0e4 (9908)2.4e4 (4706)2.7e4 (2856)2.7e4 (2886)15/15
fmincon Hellwig 103 (21)139 (21)147 (19)150 (25)168 (26)408 (861)493 (878)5/15

Δ fopt
f33, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 656 (156)841 (106)1046 (114)1221 (155)1374 (210)1704 (195)1880 (174)15/15
AL2-CMA-ES Dufosse 655 (181)840 (177)1021 (235)1203 (219)1371 (207)1678 (222)1835 (270)15/15
AL3-CMA-ES Dufosse 714 (202)908 (218)1102 (185)1238 (193)1393 (201)1691 (219)1864 (285)15/15
AL4-CMA-ES Dufosse 630 (189)854 (209)1030 (244)1218 (201)1362 (224)1697 (356)1845 (272)15/15
BPepsMAg Hellwig 5298 (7993)1.7e4 (2e4)2.2e4 (2e4)4.1e4 (3e4)1.3e5 (2e5)3.3e5 (3e5)6.2e5 (6e5)3/15
COBYLA Dufosse 24 (12)28 (15)33 (16)37 (21)45 (26)56 (32)★261 (35)★215/15
RandomSearch-5 Dufosse 4.3e5 (4e5)4e50/15
epsMAg Hellwig 1.0e4 (1e4)1.5e4 (1e4)2.0e4 (9320)2.3e4 (4320)2.5e4 (3444)2.8e4 (2268)2.9e4 (2516)15/15
fmincon Hellwig 40 (15)42 (16)52 (18)59 (22)78 (54)348 (246)770/15

Δ fopt
f34, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 799 (228)1056 (515)1233 (505)1390 (505)1582 (475)1886 (478)2011 (451)15/15
AL2-CMA-ES Dufosse 651 (198)804 (159)989 (213)1149 (198)1310 (267)1609 (211)1756 (231)15/15
AL3-CMA-ES Dufosse 772 (388)945 (472)1111 (431)1277 (381)1466 (361)1775 (367)1918 (330)15/15
AL4-CMA-ES Dufosse 649 (278)882 (217)1046 (273)1231 (333)1366 (323)1729 (296)1870 (301)15/15
BPepsMAg Hellwig 8318 (1e4)2.4e4 (4e4)4.7e4 (5e4)7.9e4 (7e4)3.3e5 (3e5)1e50/15
COBYLA Dufosse 20 (9)24 (12)27 (15)★233 (20)34 (23)★240 (27)★342 (34)★315/15
RandomSearch-5 Dufosse 5.8e5 (6e5)5.7e6 (7e6)4e50/15
epsMAg Hellwig 9762 (1e4)1.8e4 (1e4)2.2e4 (4649)2.6e4 (2742)2.7e4 (2826)2.9e4 (917)2.9e4 (892)15/15
fmincon Hellwig 35 (15)40 (15)52 (18)57 (15)85 (38)650/15

Δ fopt
f35, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 693 (267)881 (251)1040 (266)1213 (279)1383 (286)1708 (306)1902 (290)15/15
AL2-CMA-ES Dufosse 680 (342)889 (347)1072 (357)1236 (309)1400 (316)1720 (350)1865 (287)15/15
AL3-CMA-ES Dufosse 741 (215)922 (242)1110 (235)1265 (227)1436 (152)1776 (246)1928 (208)15/15
AL4-CMA-ES Dufosse 643 (325)826 (370)1008 (312)1175 (350)1277 (385)1643 (359)1795 (385)15/15
BPepsMAg Hellwig 8857 (1e4)1.3e4 (2e4)2.7e4 (3e4)6.5e4 (7e4)1.0e5 (2e5)3.4e5 (4e5)6.1e5 (6e5)3/15
COBYLA Dufosse 18 (8)★222 (14)24 (16)26 (18)29 (24)31 (26)★333 (27)★315/15
RandomSearch-5 Dufosse 6.8e5 (9e5)5.7e6 (5e6)5.8e6 (6e6)4e50/15
epsMAg Hellwig 8939 (1e4)1.8e4 (6162)2.3e4 (3362)2.6e4 (4456)2.8e4 (2620)2.9e4 (1692)3.0e4 (1782)15/15
fmincon Hellwig 36 (12)40 (15)47 (21)56 (24)68 (27)1028 (643)670/15

Δ fopt
f36, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 931 (612)1151 (641)1337 (675)1502 (603)1693 (664)1982 (681)2156 (696)15/15
AL2-CMA-ES Dufosse 667 (241)826 (267)1031 (187)1245 (282)1396 (291)1702 (293)1867 (320)15/15
AL3-CMA-ES Dufosse 914 (514)1090 (575)1268 (553)1469 (526)1668 (481)1989 (560)2144 (550)15/15
AL4-CMA-ES Dufosse 654 (250)870 (256)1048 (316)1205 (248)1375 (294)1732 (231)1873 (225)15/15
BPepsMAg Hellwig 7823 (9812)1.6e4 (1e4)3.7e4 (4e4)1.3e5 (2e5)3.1e5 (4e5)4.2e5 (4e5)1.9e6 (2e6)1/15
COBYLA Dufosse 23 (6)★226 (7)★233 (12)37 (20)★246 (22)★252 (29)★356 (34)★315/15
RandomSearch-5 Dufosse 3.0e5 (3e5)5.9e6 (5e6)4e50/15
epsMAg Hellwig 9407 (1e4)1.7e4 (1e4)2.2e4 (1e4)2.5e4 (6541)2.6e4 (6908)2.8e4 (3032)2.8e4 (3018)15/15
fmincon Hellwig 42 (15)45 (15)60 (30)70 (24)94 (46)1270 (2504)870/15

Δ fopt
f37, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 306 (132)458 (179)604 (167)710 (130)870 (166)1195 (235)1350 (230)15/15
AL2-CMA-ES Dufosse 335 (146)516 (129)664 (174)836 (182)1027 (148)1309 (181)1456 (277)15/15
AL3-CMA-ES Dufosse 313 (99)478 (141)637 (168)822 (165)954 (205)1252 (229)1371 (231)15/15
AL4-CMA-ES Dufosse 303 (133)453 (163)624 (165)792 (143)958 (193)1236 (228)1414 (240)15/15
BPepsMAg Hellwig 287 (424)367 (411)473 (392)788 (1026)1324 (1124)3943 (3332)5742 (9065)15/15
COBYLA Dufosse 26 (6)29 (7)31 (7)33 (11)35 (9)★339 (9)★342 (9)★315/15
RandomSearch-5 Dufosse 1703 (2842)5.1e4 (5e4)5.9e5 (5e5)5.8e6 (7e6)4e50/15
epsMAg Hellwig 98 (54)153 (80)184 (163)214 (163)296 (170)363 (278)507 (590)15/15
fmincon Hellwig 36 (15)46 (19)54 (21)62 (27)77 (27)104 (39)141 (59)13/15

Δ fopt
f38, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 448 (147)678 (281)891 (222)1094 (270)1238 (285)1572 (241)1730 (251)15/15
AL2-CMA-ES Dufosse 375 (156)672 (171)875 (151)1082 (218)1275 (260)1619 (320)1808 (262)15/15
AL3-CMA-ES Dufosse 455 (108)669 (172)923 (261)1102 (241)1285 (221)1602 (287)1801 (293)15/15
AL4-CMA-ES Dufosse 483 (132)676 (124)918 (207)1183 (230)1320 (301)1695 (209)1849 (182)15/15
BPepsMAg Hellwig 1017 (1742)2174 (2486)8778 (8202)2.1e4 (3e4)4.3e4 (5e4)2.4e5 (3e5)1.9e6 (2e6)1/15
COBYLA Dufosse 22 (10)24 (11)25 (14)25 (14)25 (14)25 (14)★225 (14)★315/15
RandomSearch-5 Dufosse 8532 (1e4)5.9e5 (7e5)4e50/15
epsMAg Hellwig 232 (160)727 (804)6443 (1e4)1.3e4 (1e4)2.4e4 (7656)2.7e4 (4588)2.8e4 (4470)15/15
fmincon Hellwig 19 (12)23 (13)28 (21)38 (18)42 (17)48 (15)258 (278)3/15

Δ fopt
f39, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 568 (160)784 (197)982 (228)1193 (200)1371 (211)1694 (238)1867 (267)15/15
AL2-CMA-ES Dufosse 528 (237)792 (171)969 (253)1173 (176)1340 (245)1656 (299)1828 (257)15/15
AL3-CMA-ES Dufosse 534 (175)722 (165)924 (173)1057 (141)1239 (249)1598 (221)1774 (219)15/15
AL4-CMA-ES Dufosse 480 (204)728 (190)975 (259)1128 (228)1308 (220)1605 (216)1779 (222)15/15
BPepsMAg Hellwig 2580 (1441)6593 (1e4)1.7e4 (2e4)3.7e4 (5e4)7.0e4 (6e4)4.3e5 (6e5)1e50/15
COBYLA Dufosse 21 (12)24 (13)24 (14)24 (14)25 (15)★325 (15)★325 (15)★315/15
RandomSearch-5 Dufosse 4.3e4 (9e4)5.8e6 (3e6)4e50/15
epsMAg Hellwig 426 (229)2348 (1572)1.1e4 (1e4)2.3e4 (1e4)2.8e4 (1972)3.0e4 (2170)3.0e4 (1807)15/15
fmincon Hellwig 28 (9)30 (9)37 (18)51 (18)65 (15)208 (191)528 (533)2/15

Δ fopt
f40, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 572 (143)762 (125)959 (188)1197 (205)1374 (213)1718 (180)1884 (164)15/15
AL2-CMA-ES Dufosse 509 (145)712 (146)908 (147)1102 (123)1287 (185)1617 (168)1770 (226)15/15
AL3-CMA-ES Dufosse 567 (198)786 (245)983 (282)1189 (305)1383 (310)1704 (314)1914 (319)15/15
AL4-CMA-ES Dufosse 533 (155)724 (191)976 (200)1178 (205)1337 (260)1702 (196)1850 (227)15/15
BPepsMAg Hellwig 2828 (1776)8628 (1e4)2.5e4 (3e4)4.7e4 (6e4)1.2e5 (1e5)6.0e5 (8e5)1.9e6 (2e6)1/15
COBYLA Dufosse 22 (13)24 (13)24 (17)27 (17)27 (17)★227 (17)★327 (17)★315/15
RandomSearch-5 Dufosse 2.2e4 (2e4)5.9e6 (6e6)4e50/15
epsMAg Hellwig 263 (168)1981 (1372)7061 (1e4)1.4e4 (1e4)1.5e4 (1e4)1.8e4 (1e4)2.0e4 (1e4)15/15
fmincon Hellwig 26 (6)31 (9)36 (15)45 (24)59 (18)241 (258)321 (370)3/15

Δ fopt
f41, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 606 (246)844 (285)1045 (242)1233 (244)1416 (257)1777 (267)1949 (297)15/15
AL2-CMA-ES Dufosse 589 (200)860 (240)1059 (193)1279 (205)1455 (250)1784 (223)1934 (253)15/15
AL3-CMA-ES Dufosse 629 (226)854 (200)1076 (214)1298 (222)1458 (240)1818 (197)1967 (201)15/15
AL4-CMA-ES Dufosse 667 (199)865 (203)1119 (243)1284 (284)1496 (264)1802 (234)1955 (251)15/15
BPepsMAg Hellwig 2004 (2733)1.4e4 (1e4)2.5e4 (2e4)4.5e4 (6e4)1.1e5 (1e5)3.5e5 (4e5)1e50/15
COBYLA Dufosse 23 (11)23 (11)23 (11)23 (11)★223 (11)★323 (11)★323 (11)★315/15
RandomSearch-5 Dufosse 6.6e4 (6e4)2.9e6 (2e6)4e50/15
epsMAg Hellwig 2327 (1068)8254 (1e4)1.9e4 (1e4)2.4e4 (2767)2.6e4 (1610)2.9e4 (1334)3.0e4 (1186)15/15
fmincon Hellwig 34 (18)36 (15)40 (24)58 (27)75 (19)614 (660)614 (606)2/15

Δ fopt
f42, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 618 (157)838 (202)1013 (224)1184 (267)1365 (276)1714 (259)1843 (287)15/15
AL2-CMA-ES Dufosse 676 (282)903 (249)1062 (233)1296 (266)1455 (305)1753 (280)1901 (282)15/15
AL3-CMA-ES Dufosse 554 (117)824 (129)1016 (165)1232 (188)1373 (216)1708 (199)1859 (203)15/15
AL4-CMA-ES Dufosse 671 (197)868 (220)1040 (264)1229 (256)1432 (240)1735 (295)1942 (286)15/15
BPepsMAg Hellwig 2752 (2000)1.0e4 (1e4)1.6e4 (2e4)2.8e4 (3e4)1.2e5 (1e5)1.0e6 (1e6)2.0e6 (1e6)1/15
COBYLA Dufosse 19 (10)20 (10)20 (10)★220 (10)★220 (10)★320 (10)★320 (10)★315/15
RandomSearch-5 Dufosse 6.8e4 (9e4)1.8e6 (4e6)4e50/15
epsMAg Hellwig 556 (273)5622 (1e4)1.5e4 (1e4)2.2e4 (1e4)2.7e4 (1744)3.0e4 (900)3.0e4 (975)15/15
fmincon Hellwig 31 (6)35 (9)38 (9)50 (24)77 (21)409 (421)409 (520)3/15

Δ fopt
f43, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2816 (4307)7136 (7854)8019 (8056)8599 (8486)9081 (8751)1.0e4 (9769)1.1e4 (9799)15/15
AL2-CMA-ES Dufosse 4879 (6567)6855 (6783)7144 (6796)7601 (7212)7961 (7744)9383 (8319)1.0e4 (1e4)15/15
AL3-CMA-ES Dufosse 5335 (4254)7117 (7297)7544 (7630)8049 (7770)8447 (8294)9234 (8714)9712 (9009)15/15
AL4-CMA-ES Dufosse 5625 (6901)8470 (7631)8958 (8088)9558 (8408)1.0e4 (8731)1.1e4 (9323)1.2e4 (9510)15/15
BPepsMAg Hellwig 8.3e4 (1e5)1.8e5 (2e5)2.1e5 (3e5)2.6e5 (3e5)3.3e5 (4e5)2.0e6 (4e6)2.0e6 (2e6)1/15
COBYLA Dufosse 856 (797)873 (793)881 (798)892 (797)902 (796)938 (804)1156 (1364)15/15
RandomSearch-5 Dufosse 4.0e4 (6e4)9.9e5 (9e5)4e50/15
epsMAg Hellwig 1.4e5 (2e5)1.4e5 (1e5)1.4e5 (2e5)2.4e5 (2e5)5.7e5 (5e5)2.8e6 (4e6)2.8e6 (2e6)1/15
fmincon Hellwig 1250/15

Δ fopt
f44, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 8281 (1e4)1.1e4 (1e4)1.2e4 (2e4)1.3e4 (2e4)1.4e4 (2e4)1.7e4 (2e4)2.6e4 (4e4)14/15
AL2-CMA-ES Dufosse 7780 (1e4)1.3e4 (1e4)1.4e4 (2e4)1.5e4 (2e4)1.6e4 (2e4)1.9e4 (2e4)2.8e4 (4e4)14/15
AL3-CMA-ES Dufosse 1.1e4 (2e4)1.4e4 (2e4)2.0e4 (3e4)2.1e4 (3e4)2.1e4 (3e4)2.3e4 (4e4)2.4e4 (4e4)14/15
AL4-CMA-ES Dufosse 9740 (1e4)1.2e4 (1e4)1.3e4 (2e4)1.4e4 (2e4)1.4e4 (2e4)1.6e4 (2e4)1.7e4 (2e4)15/15
BPepsMAg Hellwig 1.6e5 (2e5)1.8e5 (2e5)2.2e5 (3e5)4.5e5 (6e5)4.5e5 (4e5)1e50/15
COBYLA Dufosse 51 (88)58 (96)67 (90)73 (88)★280 (94)★390 (90)★395 (94)★315/15
RandomSearch-5 Dufosse 1.2e5 (2e5)1.3e6 (1e6)4e50/15
epsMAg Hellwig 5.1e4 (1e5)1.2e5 (1e5)2.6e5 (3e5)6.0e5 (1e6)6.1e5 (7e5)1.4e6 (2e6)1.4e6 (2e6)2/15
fmincon Hellwig 223 (327)245 (276)281 (268)356 (321)470 (492)566 (560)1549 (2175)3/15

Δ fopt
f45, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.3e4 (1e4)2.5e4 (5e4)3.0e4 (6e4)3.4e4 (5e4)3.6e4 (5e4)4.2e4 (5e4)4.3e4 (5e4)12/15
AL2-CMA-ES Dufosse 2.6e4 (2e4)4.2e4 (6e4)4.4e4 (6e4)4.5e4 (7e4)4.7e4 (6e4)4.9e4 (6e4)5.0e4 (7e4)12/15
AL3-CMA-ES Dufosse 3.1e4 (5e4)7.7e4 (1e5)8.1e4 (6e4)8.2e4 (1e5)8.3e4 (6e4)8.5e4 (6e4)8.6e4 (1e5)9/15
AL4-CMA-ES Dufosse 1.8e4 (2e4)5.6e4 (1e5)5.8e4 (5e4)5.9e4 (1e5)6.1e4 (8e4)6.3e4 (8e4)6.5e4 (1e5)11/15
BPepsMAg Hellwig 2.1e5 (2e5)2.5e5 (3e5)5.4e5 (8e5)9.0e5 (1e6)9.0e5 (1e6)1.9e6 (2e6)1e50/15
COBYLA Dufosse 111 (96)118 (96)123 (98)130 (96)139 (100)153 (104)162 (108)15/15
RandomSearch-5 Dufosse 1.5e5 (1e5)5.7e6 (6e6)4e50/15
epsMAg Hellwig 3.1e4 (1e5)5.1e4 (1e5)2.3e5 (5e5)5.6e5 (5e5)8.1e5 (9e5)2.8e6 (2e6)2e50/15
fmincon Hellwig 258 (262)269 (341)430 (529)484 (683)606 (888)1778 (1578)5389 (4726)1/15

Δ fopt
f46, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.2e4 (1e4)2.4e4 (5e4)2.8e4 (5e4)3.0e4 (5e4)3.9e4 (5e4)4.0e4 (5e4)4.1e4 (5e4)12/15
AL2-CMA-ES Dufosse 8557 (1e4)1.9e4 (2e4)2.0e4 (2e4)2.1e4 (2e4)2.2e4 (2e4)2.4e4 (2e4)2.5e4 (2e4)14/15
AL3-CMA-ES Dufosse 2.1e4 (1e4)2.3e4 (1e4)3.2e4 (5e4)3.3e4 (5e4)3.4e4 (5e4)3.7e4 (6e4)3.8e4 (5e4)13/15
AL4-CMA-ES Dufosse 1.8e4 (2e4)3.7e4 (5e4)4.3e4 (5e4)4.5e4 (5e4)4.6e4 (5e4)5.0e4 (5e4)5.6e4 (7e4)12/15
BPepsMAg Hellwig 1.6e5 (2e5)1.6e5 (1e5)4.2e5 (5e5)9.3e5 (1e6)2.0e6 (2e6)1e50/15
COBYLA Dufosse 76 (106)★283 (104)★291 (104)★298 (114)★2104 (114)★2119 (110)★2123 (112)★215/15
RandomSearch-5 Dufosse 1.0e5 (9e4)2.8e6 (2e6)4e50/15
epsMAg Hellwig 1.8e4 (8012)2.0e4 (9060)8.1e4 (1e5)4.1e5 (5e5)1.3e6 (1e6)2.8e6 (4e6)2.8e6 (3e6)1/15
fmincon Hellwig 280 (374)296 (242)374 (319)503 (585)596 (790)1411 (1338)4318 (5425)1/15

Δ fopt
f47, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.5e4 (5e4)4.7e4 (6e4)5.0e4 (6e4)5.8e4 (6e4)5.9e4 (7e4)6.2e4 (7e4)6.3e4 (6e4)11/15
AL2-CMA-ES Dufosse 4.0e4 (7e4)6.8e4 (1e5)7.0e4 (7e4)7.2e4 (8e4)7.3e4 (9e4)7.5e4 (6e4)7.7e4 (7e4)10/15
AL3-CMA-ES Dufosse 3.0e4 (5e4)5.4e4 (5e4)6.2e4 (7e4)6.3e4 (7e4)6.5e4 (1e5)6.9e4 (1e5)7.1e4 (9e4)11/15
AL4-CMA-ES Dufosse 4.1e4 (5e4)6.2e4 (6e4)9.2e4 (1e5)9.3e4 (2e5)9.5e4 (1e5)9.8e4 (2e5)1.0e5 (1e5)9/15
BPepsMAg Hellwig 8.9e4 (1e5)1.6e5 (2e5)4.3e5 (4e5)1.9e6 (2e6)1.9e6 (2e6)1e50/15
COBYLA Dufosse 114 (202)120 (198)127 (194)134 (192)143 (196)157 (192)166 (192)15/15
RandomSearch-5 Dufosse 8.2e4 (1e5)2.8e6 (3e6)4e50/15
epsMAg Hellwig 674 (350)1.6e4 (4113)3.1e5 (3e5)8.2e5 (1e6)8.2e5 (1e6)1.3e6 (2e6)1.3e6 (2e6)2/15
fmincon Hellwig 118 (111)180 (156)257 (165)286 (171)330 (174)570 (342)3508 (2860)1/15

Δ fopt
f48, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.3e4 (2e4)4.3e4 (5e4)4.4e4 (7e4)4.6e4 (5e4)4.7e4 (5e4)5.0e4 (5e4)5.1e4 (5e4)12/15
AL2-CMA-ES Dufosse 2.2e4 (3e4)3.8e4 (6e4)3.9e4 (5e4)4.0e4 (6e4)4.1e4 (6e4)4.3e4 (5e4)4.4e4 (6e4)12/15
AL3-CMA-ES Dufosse 2.4e4 (2e4)3.4e4 (5e4)4.2e4 (7e4)4.4e4 (6e4)4.5e4 (6e4)4.7e4 (6e4)4.9e4 (5e4)12/15
AL4-CMA-ES Dufosse 2.5e4 (5e4)2.8e4 (5e4)3.9e4 (6e4)4.0e4 (6e4)4.1e4 (6e4)4.3e4 (6e4)4.4e4 (6e4)12/15
BPepsMAg Hellwig 1.0e5 (2e5)2.6e5 (2e5)6.0e5 (6e5)9.4e5 (9e5)1e50/15
COBYLA Dufosse 56 (11)★362 (17)★369 (13)★273 (14)★280 (14)★395 (16)★3103 (18)★315/15
RandomSearch-5 Dufosse 1.6e5 (2e5)2.9e6 (3e6)4e50/15
epsMAg Hellwig 1.6e4 (9596)3.4e4 (1e5)1.4e5 (2e5)3.1e5 (4e5)4.2e5 (6e5)1.3e6 (1e6)1.3e6 (1e6)2/15
fmincon Hellwig 330 (350)517 (640)564 (638)697 (1004)742 (666)1398 (1402)2490/15

Δ fopt
f49, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3954 (3849)6897 (3462)8134 (7549)8598 (8100)8975 (8253)9936 (9092)1.1e4 (9989)15/15
AL2-CMA-ES Dufosse 4297 (6685)5849 (8117)6464 (8322)6764 (8577)7285 (9282)8441 (1e4)9024 (1e4)15/15
AL3-CMA-ES Dufosse 6422 (7020)1.2e4 (1e4)1.4e4 (2e4)1.5e4 (2e4)1.6e4 (2e4)1.8e4 (2e4)1.8e4 (2e4)14/15
AL4-CMA-ES Dufosse 5291 (6439)5903 (6722)6184 (7046)6609 (7589)6915 (7664)7788 (8824)8167 (9299)15/15
BPepsMAg Hellwig 6.4e4 (8e4)1.6e5 (2e5)1.8e5 (2e5)4.1e5 (5e5)5.6e5 (9e5)1e50/15
COBYLA Dufosse 638 (625)644 (630)654 (627)663 (621)679 (620)799 (638)1163 (1186)15/15
RandomSearch-5 Dufosse 2.5e4 (3e4)6.1e5 (6e5)4e50/15
epsMAg Hellwig 1.8e5 (5e5)1.8e5 (3e5)1.8e5 (2e5)2.3e5 (3e5)4.1e5 (6e5)2.8e6 (3e6)2.8e6 (3e6)1/15
fmincon Hellwig 1480/15

Δ fopt
f50, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.1e4 (2e4)3.5e4 (5e4)4.0e4 (5e4)4.1e4 (6e4)4.2e4 (5e4)4.4e4 (5e4)4.5e4 (6e4)12/15
AL2-CMA-ES Dufosse 1.7e4 (2e4)4.7e4 (5e4)5.0e4 (7e4)5.2e4 (5e4)5.5e4 (6e4)5.9e4 (8e4)1.0e5 (1e5)9/15
AL3-CMA-ES Dufosse 1.6e4 (2e4)7.4e4 (1e5)8.4e4 (1e5)1.1e5 (1e5)1.1e5 (2e5)1.1e5 (2e5)1.1e5 (1e5)8/15
AL4-CMA-ES Dufosse 1.9e4 (1e4)4.1e4 (5e4)5.1e4 (6e4)5.2e4 (6e4)5.3e4 (9e4)5.4e4 (8e4)5.6e4 (5e4)11/15
BPepsMAg Hellwig 8.6e4 (8e4)2.0e5 (2e5)5.9e5 (4e5)9.4e5 (1e6)1.9e6 (2e6)1e50/15
COBYLA Dufosse 343 (415)370 (413)381 (411)403 (411)431 (409)544 (509)581 (694)15/15
RandomSearch-5 Dufosse 8.3e4 (8e4)9.6e5 (1e6)4e50/15
epsMAg Hellwig 5.6e4 (1e5)7.8e4 (1e5)1.4e5 (2e5)4.1e5 (4e5)2e50/15
fmincon Hellwig 838 (611)872 (1250)1140 (1120)1185 (866)1206 (1075)4028 (3271)4028 (3283)1/15

Δ fopt
f51, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.9e4 (2e4)7.4e4 (8e4)8.5e4 (1e5)8.6e4 (2e5)8.8e4 (1e5)9.0e4 (2e5)9.2e4 (1e5)9/15
AL2-CMA-ES Dufosse 3.1e4 (5e4)6.2e4 (6e4)6.2e4 (6e4)6.3e4 (1e5)6.4e4 (8e4)6.5e4 (6e4)6.6e4 (1e5)10/15
AL3-CMA-ES Dufosse 2.8e4 (4e4)7.9e4 (1e5)8.1e4 (7e4)8.1e4 (9e4)8.2e4 (1e5)8.4e4 (1e5)8.5e4 (1e5)9/15
AL4-CMA-ES Dufosse 4.3e4 (5e4)8.5e4 (1e5)1.2e5 (1e5)1.2e5 (2e5)1.2e5 (1e5)1.2e5 (1e5)1.3e5 (1e5)8/15
BPepsMAg Hellwig 8.9e4 (1e5)1.1e5 (1e5)3.1e5 (3e5)5.9e5 (5e5)9.5e5 (9e5)2.0e6 (2e6)2.0e6 (3e6)1/15
COBYLA Dufosse 97 (182)104 (180)110 (176)117 (180)125 (182)138 (182)144 (182)15/15
RandomSearch-5 Dufosse 1.1e5 (1e5)1.8e6 (2e6)5.7e6 (6e6)4e50/15
epsMAg Hellwig 4.8e4 (1e5)4.8e4 (1e5)1.3e5 (2e5)3.9e5 (6e5)5.5e5 (7e5)1.3e6 (2e6)2.8e6 (5e6)1/15
fmincon Hellwig 304 (282)323 (450)347 (337)397 (520)444 (365)872 (969)1764 (1932)2/15

Δ fopt
f52, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5.1e4 (5e4)1.6e5 (2e5)1.6e5 (3e5)1.6e5 (2e5)1.6e5 (3e5)1.7e5 (2e5)1.7e5 (1e5)6/15
AL2-CMA-ES Dufosse 6.9e4 (1e5)1.4e5 (2e5)1.4e5 (1e5)1.4e5 (2e5)1.4e5 (1e5)1.5e5 (2e5)1.5e5 (3e5)7/15
AL3-CMA-ES Dufosse 4.3e4 (6e4)1.7e5 (2e5)2.3e5 (3e5)2.3e5 (2e5)2.3e5 (3e5)3.0e5 (4e5)3.0e5 (3e5)4/15
AL4-CMA-ES Dufosse 8.1e4 (9e4)2.2e5 (3e5)2.2e5 (3e5)2.2e5 (4e5)2.2e5 (3e5)2.2e5 (4e5)2.2e5 (3e5)5/15
BPepsMAg Hellwig 8.5e4 (8e4)2.0e5 (3e5)4.1e5 (3e5)9.0e5 (1e6)1e50/15
COBYLA Dufosse 96 (146)102 (152)111 (146)116 (146)121 (146)134 (144)142 (150)15/15
RandomSearch-5 Dufosse 1.9e5 (2e5)5.6e6 (6e6)4e50/15
epsMAg Hellwig 1.8e4 (9993)1.9e4 (1e4)1.1e5 (2e5)1.9e5 (3e5)3.1e5 (5e5)1.3e6 (2e6)1.3e6 (1e6)2/15
fmincon Hellwig 151 (166)191 (217)255 (182)313 (414)404 (436)848 (852)2596 (3282)2/15

Δ fopt
f53, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.5e4 (5e4)5.0e4 (1e5)5.1e4 (5e4)5.2e4 (6e4)5.3e4 (6e4)5.5e4 (6e4)6.8e4 (1e5)10/15
AL2-CMA-ES Dufosse 3.7e4 (5e4)5.2e4 (6e4)6.7e4 (7e4)6.8e4 (1e5)6.9e4 (9e4)7.1e4 (5e4)7.2e4 (1e5)10/15
AL3-CMA-ES Dufosse 1.6e4 (1e4)7.4e4 (1e5)7.4e4 (1e5)7.5e4 (2e5)7.5e4 (1e5)7.6e4 (2e5)7.7e4 (6e4)9/15
AL4-CMA-ES Dufosse 4.1e4 (5e4)1.0e5 (1e5)1.0e5 (1e5)1.0e5 (1e5)1.0e5 (2e5)1.0e5 (1e5)1.1e5 (2e5)8/15
BPepsMAg Hellwig 2.0e5 (2e5)4.7e5 (3e5)9.6e5 (1e6)2.0e6 (3e6)2.0e6 (2e6)1e50/15
COBYLA Dufosse 280 (456)286 (455)291 (455)298 (456)305 (454)317 (461)326 (456)15/15
RandomSearch-5 Dufosse 2.3e5 (4e5)5.7e6 (9e6)4e50/15
epsMAg Hellwig 5.4e4 (1e5)5.7e4 (1e5)2.4e5 (3e5)8.1e5 (1e6)1.3e6 (2e6)2.8e6 (3e6)2.8e6 (3e6)1/15
fmincon Hellwig 213 (312)231 (271)283 (230)312 (208)380 (322)643 (355)1956 (1969)2/15

Δ fopt
f54, 2-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 4.5e4 (7e4)9.0e4 (1e5)1.2e5 (1e5)1.2e5 (1e5)1.2e5 (9e4)1.2e5 (2e5)1.3e5 (1e5)8/15
AL2-CMA-ES Dufosse 3.4e4 (7e4)1.3e5 (2e5)1.3e5 (3e5)1.3e5 (2e5)1.3e5 (2e5)1.3e5 (2e5)1.3e5 (1e5)7/15
AL3-CMA-ES Dufosse 2.0e4 (2e4)4.9e4 (5e4)6.0e4 (8e4)6.0e4 (1e5)6.1e4 (8e4)6.2e4 (1e5)6.3e4 (6e4)10/15
AL4-CMA-ES Dufosse 1.8e4 (1e4)6.9e4 (1e5)7.0e4 (1e5)7.1e4 (1e5)7.3e4 (8e4)8.3e4 (9e4)8.4e4 (2e5)9/15
BPepsMAg Hellwig 8.9e4 (1e5)1.8e5 (2e5)2.9e5 (3e5)6.2e5 (7e5)9.4e5 (8e5)1e50/15
COBYLA Dufosse 59 (96)79 (92)85 (92)91 (94)100 (92)113 (90)119 (92)15/15
RandomSearch-5 Dufosse 2.4e5 (3e5)1.9e6 (3e6)4e50/15
epsMAg Hellwig 1.6e4 (9381)1.7e4 (9326)1.4e5 (3e5)8.1e5 (1e6)2e50/15
fmincon Hellwig 185 (144)203 (288)276 (358)361 (358)480 (488)1223 (1306)2370/15

Previous dimension | Dimension = 3 | Next dimension

Δ fopt
f1, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 384 (140)540 (155)697 (110)871 (134)1042 (87)1377 (123)1600 (212)15/15
AL2-CMA-ES Dufosse 367 (81)514 (123)713 (132)847 (128)1021 (134)1405 (176)1607 (197)15/15
AL3-CMA-ES Dufosse 373 (123)570 (164)748 (159)899 (144)1080 (157)1405 (182)1619 (173)15/15
AL4-CMA-ES Dufosse 364 (173)572 (149)753 (151)891 (219)1053 (154)1377 (132)1569 (231)15/15
BPepsMAg Hellwig 529 (841)1075 (1134)1524 (1283)2016 (1695)2898 (1536)5629 (2336)6219 (2722)15/15
COBYLA Dufosse 20 (9)29 (12)39 (10)51 (12)67 (11)89 (14)100 (15)15/15
RandomSearch-5 Dufosse 9650 (9004)1.1e6 (7e5)6e50/15
epsMAg Hellwig 269 (169)743 (351)1653 (1103)5384 (7505)1.2e4 (1e4)2.1e4 (1e4)2.3e4 (1e4)15/15
fmincon Hellwig 27 (8)29 (10)35 (10)44 (14)48 (15)87 (42)109 (52)10/15

Δ fopt
f2, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 561 (182)823 (219)1053 (167)1278 (255)1534 (232)2040 (234)2229 (208)15/15
AL2-CMA-ES Dufosse 651 (218)956 (260)1168 (268)1404 (221)1627 (237)2140 (345)2429 (368)15/15
AL3-CMA-ES Dufosse 598 (265)794 (236)1009 (287)1230 (232)1455 (263)1906 (296)2129 (346)15/15
AL4-CMA-ES Dufosse 583 (179)796 (182)1036 (190)1313 (201)1503 (200)1968 (236)2166 (265)15/15
BPepsMAg Hellwig 1532 (1915)5722 (7367)7001 (8392)1.2e4 (1e4)1.9e4 (1e4)6.0e4 (1e5)1.3e5 (1e5)11/15
COBYLA Dufosse 17 (5)23 (8)36 (6)47 (12)56 (12)76 (11)84 (17)15/15
RandomSearch-5 Dufosse 1.3e5 (2e5)6e50/15
epsMAg Hellwig 3279 (5595)7246 (8750)1.3e4 (1e4)1.7e4 (1e4)2.2e4 (1e4)3.0e4 (6612)3.2e4 (4447)15/15
fmincon Hellwig 30 (15)34 (16)44 (15)49 (15)54 (13)64 (14)1068 (991)1/15

Δ fopt
f3, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 816 (260)1142 (271)1436 (321)1795 (304)2048 (378)2543 (406)2821 (407)15/15
AL2-CMA-ES Dufosse 808 (114)1114 (208)1379 (184)1666 (219)1936 (288)2439 (234)2704 (285)15/15
AL3-CMA-ES Dufosse 813 (327)1164 (399)1457 (343)1716 (366)1995 (366)2536 (409)2831 (473)15/15
AL4-CMA-ES Dufosse 859 (393)1178 (390)1465 (358)1755 (322)2018 (379)2510 (291)2759 (321)15/15
BPepsMAg Hellwig 4054 (3325)1.1e4 (9712)2.8e4 (2e4)7.0e4 (6e4)9.3e4 (7e4)1.5e6 (1e6)2e50/15
COBYLA Dufosse 15 (3)★317 (7)★317 (7)★317 (7)★317 (7)★317 (7)★317 (7)★315/15
RandomSearch-5 Dufosse 6.9e5 (1e6)6e50/15
epsMAg Hellwig 6266 (1e4)1.2e4 (1e4)2.4e4 (1e4)2.9e4 (5222)3.1e4 (1836)3.3e4 (1611)3.3e4 (1246)15/15
fmincon Hellwig 41 (20)45 (24)60 (28)72 (29)88 (28)141 (102)180 (108)8/15

Δ fopt
f4, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 881 (267)1176 (274)1425 (230)1710 (247)1982 (294)2553 (306)2893 (349)15/15
AL2-CMA-ES Dufosse 960 (346)1290 (272)1564 (296)1849 (266)2097 (272)2589 (235)2858 (235)15/15
AL3-CMA-ES Dufosse 877 (204)1192 (166)1439 (171)1724 (267)1997 (291)2517 (293)2773 (318)15/15
AL4-CMA-ES Dufosse 868 (269)1153 (202)1458 (268)1735 (395)2000 (299)2536 (391)2766 (431)15/15
BPepsMAg Hellwig 2927 (3293)7853 (2e4)3.1e4 (4e4)5.3e4 (5e4)1.4e5 (1e5)5.5e5 (4e5)9.7e5 (1e6)3/15
COBYLA Dufosse 16 (4)★218 (8)★322 (13)★225 (23)★326 (23)★327 (23)★327 (23)★315/15
RandomSearch-5 Dufosse 8.6e6 (9e6)6e50/15
epsMAg Hellwig 1.5e4 (1e4)2.1e4 (9313)2.8e4 (2736)3.1e4 (2483)3.2e4 (2030)3.3e4 (1748)3.4e4 (1733)15/15
fmincon Hellwig 42 (20)47 (20)63 (25)77 (28)93 (29)377 (416)377 (362)4/15

Δ fopt
f5, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 890 (198)1152 (195)1450 (216)1723 (258)1974 (250)2518 (169)3012 (282)15/15
AL2-CMA-ES Dufosse 843 (221)1141 (204)1436 (251)1724 (230)1995 (289)2481 (230)2719 (269)15/15
AL3-CMA-ES Dufosse 913 (203)1241 (233)1509 (244)1777 (298)2061 (353)2523 (357)3099 (477)15/15
AL4-CMA-ES Dufosse 790 (205)1126 (222)1384 (218)1676 (247)1961 (238)2478 (327)2663 (331)15/15
BPepsMAg Hellwig 3556 (3689)1.0e4 (1e4)3.8e4 (3e4)8.6e4 (1e5)1.4e5 (1e5)9.7e5 (8e5)3.0e6 (3e6)1/15
COBYLA Dufosse 15 (5)★316 (8)★316 (8)★317 (8)★317 (8)★317 (8)★317 (8)★315/15
RandomSearch-5 Dufosse 1.1e6 (1e6)6e50/15
epsMAg Hellwig 1.1e4 (1e4)2.0e4 (1e4)2.6e4 (7521)3.1e4 (2846)3.2e4 (2060)3.4e4 (1900)3.4e4 (1858)15/15
fmincon Hellwig 47 (17)52 (17)64 (25)76 (25)98 (38)532 (474)532 (387)3/15

Δ fopt
f6, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1406 (581)1920 (1050)2193 (926)2452 (1022)2831 (1032)3340 (920)3654 (1100)15/15
AL2-CMA-ES Dufosse 1090 (590)1427 (651)1724 (579)1992 (551)2266 (522)2706 (464)2967 (500)15/15
AL3-CMA-ES Dufosse 1154 (467)1555 (541)1883 (486)2230 (570)2473 (537)2982 (535)3558 (895)15/15
AL4-CMA-ES Dufosse 1292 (502)1717 (516)1991 (517)2270 (557)2545 (599)3003 (541)3353 (504)15/15
BPepsMAg Hellwig 5192 (4659)1.2e4 (2e4)2.0e4 (2e4)5.7e4 (8e4)2.0e5 (3e5)6.5e5 (7e5)1.4e6 (2e6)2/15
COBYLA Dufosse 15 (4)★319 (8)★321 (14)★321 (14)★321 (16)★321 (16)★321 (16)★315/15
RandomSearch-5 Dufosse 4.2e6 (7e6)6e50/15
epsMAg Hellwig 1.7e4 (7413)2.5e4 (5210)3.0e4 (2808)3.1e4 (2130)3.2e4 (1040)3.3e4 (1035)3.4e4 (997)15/15
fmincon Hellwig 58 (24)67 (32)80 (36)114 (32)126 (20)2009 (1831)2009 (2873)1/15

Δ fopt
f7, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 426 (189)727 (292)973 (346)1194 (397)1428 (322)1815 (293)2014 (318)15/15
AL2-CMA-ES Dufosse 457 (203)698 (229)1008 (326)1209 (273)1492 (219)1875 (227)2129 (309)15/15
AL3-CMA-ES Dufosse 425 (179)682 (214)1032 (337)1375 (325)1580 (281)1864 (327)2072 (391)15/15
AL4-CMA-ES Dufosse 552 (282)796 (330)1048 (355)1298 (220)1464 (292)1811 (279)1975 (278)15/15
BPepsMAg Hellwig 148 (120)1043 (902)3563 (3350)7565 (1e4)3.0e4 (4e4)7.3e5 (7e5)2e50/15
COBYLA Dufosse 21 (7)29 (8)★242 (15)59 (17)810 (1016)5.7e4 (7e4)2.0e5 (3e5)2/15
RandomSearch-5 Dufosse 939 (1060)1.5e4 (1e4)3.3e5 (3e5)4.2e6 (3e6)6e50/15
epsMAg Hellwig 218 (229)590 (566)6881 (8774)1.5e4 (1e4)4.5e4 (9233)9.8e4 (2e5)1.5e5 (2e5)11/15
fmincon Hellwig 30 (8)52 (32)70 (36)102 (62)517 (647)5875 (6465)7100/15

Δ fopt
f8, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3693 (6334)8647 (1e4)1.2e4 (1e4)1.4e4 (1e4)2.5e4 (1e4)2.7e4 (1e4)9.2e4 (1e5)10/15
AL2-CMA-ES Dufosse 7395 (9251)1.0e4 (1e4)1.8e4 (3e4)2.2e4 (3e4)2.3e4 (3e4)4.5e4 (8e4)4.9e4 (9e4)13/15
AL3-CMA-ES Dufosse 1.1e4 (2e4)1.6e4 (3e4)1.9e4 (3e4)3.0e4 (4e4)3.8e4 (4e4)6.5e4 (8e4)6.7e4 (8e4)12/15
AL4-CMA-ES Dufosse 5915 (6994)2.1e4 (2e4)2.8e4 (3e4)3.3e4 (3e4)4.6e4 (8e4)5.9e4 (8e4)9.5e4 (2e5)10/15
BPepsMAg Hellwig 1559 (1211)5064 (7975)1.7e4 (2e4)1.2e5 (1e5)2.9e6 (4e6)3.1e6 (3e6)2e50/15
COBYLA Dufosse 29 (20)186 (58)722 (1014)4960 (9046)1.3e4 (2e4)5.1e4 (6e4)1.3e5 (2e5)3/15
RandomSearch-5 Dufosse 2.0e5 (3e5)2.6e6 (3e6)6e50/15
epsMAg Hellwig 9763 (1e4)2.1e4 (2e4)4.0e4 (3e4)7.7e4 (5e4)2.9e5 (4e5)5.5e5 (8e5)5.7e5 (5e5)6/15
fmincon Hellwig 157 (211)1886 (4811)1.4e4 (1e4)2.5e4 (2e4)4.2e4 (7e4)2e40/15

Δ fopt
f9, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1311 (825)1598 (753)1910 (785)2176 (796)2462 (792)2979 (715)3836 (2028)15/15
AL2-CMA-ES Dufosse 1149 (208)1444 (259)1686 (229)1938 (243)2202 (266)2752 (270)3012 (312)15/15
AL3-CMA-ES Dufosse 1380 (464)1640 (579)1947 (561)2234 (611)2502 (609)3034 (722)3283 (661)15/15
AL4-CMA-ES Dufosse 1225 (483)1528 (428)1826 (433)2140 (465)2450 (363)2960 (399)3203 (355)15/15
BPepsMAg Hellwig 1.3e4 (1e4)4.2e4 (4e4)1.4e5 (2e5)2.9e5 (3e5)9.2e5 (1e6)2e50/15
COBYLA Dufosse 118 (22)★2178 (22)★2186 (22)★2196 (22)★2210 (29)★2236 (33)★2244 (31)★215/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 1.8e4 (9184)2.6e4 (4183)3.0e4 (1880)3.1e4 (2100)3.3e4 (1771)3.5e4 (2065)3.6e4 (2151)15/15
fmincon Hellwig 167 (123)350 (341)411 (333)459 (430)805 (422)8411 (7932)3680/15

Δ fopt
f10, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1206 (461)1489 (378)1776 (589)2076 (606)2338 (547)2892 (672)3088 (509)15/15
AL2-CMA-ES Dufosse 1511 (397)2462 (516)2759 (507)3021 (483)3279 (535)3827 (604)4034 (419)15/15
AL3-CMA-ES Dufosse 1717 (944)2726 (2678)3121 (3414)3368 (3433)3656 (3399)4241 (3521)4508 (3549)15/15
AL4-CMA-ES Dufosse 1536 (731)2243 (766)3634 (728)3986 (760)4254 (809)4840 (722)5095 (739)15/15
BPepsMAg Hellwig 2.3e4 (3e4)9.2e4 (1e5)1.8e5 (2e5)6.8e5 (6e5)2e50/15
COBYLA Dufosse 32 (6)★343 (16)★359 (36)★367 (34)★377 (37)★3106 (51)★3131 (48)★315/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 1.7e4 (6619)2.6e4 (6337)3.2e4 (3727)3.4e4 (5881)3.5e4 (5664)3.6e4 (5657)3.7e4 (5618)15/15
fmincon Hellwig 211 (159)232 (160)264 (161)309 (178)384 (362)2605 (2923)3310/15

Δ fopt
f11, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1474 (1357)1755 (1320)2034 (1378)2286 (1399)2592 (1460)3160 (1434)3461 (1343)15/15
AL2-CMA-ES Dufosse 1185 (533)1496 (560)1780 (612)2009 (527)2252 (555)2742 (588)3011 (646)15/15
AL3-CMA-ES Dufosse 1006 (327)1317 (310)1570 (354)1894 (361)2153 (409)2660 (326)3210 (414)15/15
AL4-CMA-ES Dufosse 1112 (280)1408 (327)1655 (350)1954 (261)2238 (366)2817 (491)3078 (385)15/15
BPepsMAg Hellwig 1.8e4 (1e4)6.1e4 (7e4)2.0e5 (1e5)6.7e5 (6e5)7.1e5 (8e5)2e50/15
COBYLA Dufosse 31 (8)★342 (10)★349 (10)★370 (21)★3144 (27)★2230 (29)★3244 (42)★315/15
RandomSearch-5 Dufosse 4.2e6 (5e6)6e50/15
epsMAg Hellwig 1.6e4 (7818)2.3e4 (6338)2.8e4 (6135)3.0e4 (2184)3.2e4 (1439)3.3e4 (1369)3.4e4 (1371)15/15
fmincon Hellwig 175 (137)235 (227)298 (251)327 (255)448 (405)4150/15

Δ fopt
f12, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1540 (741)1799 (836)2032 (905)2302 (976)2565 (1037)3071 (1004)3831 (1908)15/15
AL2-CMA-ES Dufosse 1104 (253)1385 (306)1615 (331)1914 (262)2113 (308)2632 (242)2822 (279)15/15
AL3-CMA-ES Dufosse 1504 (609)1773 (581)2013 (587)2301 (600)2545 (663)3080 (647)3367 (662)15/15
AL4-CMA-ES Dufosse 1372 (505)1676 (573)1923 (622)2148 (595)2448 (604)2975 (560)3253 (638)15/15
BPepsMAg Hellwig 3.4e4 (7e4)8.4e4 (1e5)1.8e5 (2e5)7.0e5 (1e6)1.5e6 (2e6)3.0e6 (2e6)3.0e6 (5e6)1/15
COBYLA Dufosse 30 (11)★337 (8)★348 (10)★357 (12)★369 (12)★390 (13)★399 (18)★315/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 1.6e4 (1e4)2.8e4 (4545)3.0e4 (2951)3.3e4 (2389)3.3e4 (2379)3.4e4 (2322)3.5e4 (2501)15/15
fmincon Hellwig 109 (55)415 (58)464 (50)491 (151)977 (1159)9093 (1e4)3070/15

Δ fopt
f13, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 329 (146)445 (107)654 (150)786 (142)1002 (145)1308 (114)1491 (174)15/15
AL2-CMA-ES Dufosse 336 (117)470 (126)632 (174)836 (208)1026 (198)1436 (274)1586 (263)15/15
AL3-CMA-ES Dufosse 293 (102)407 (83)602 (106)721 (149)910 (100)1214 (166)1361 (175)15/15
AL4-CMA-ES Dufosse 331 (136)473 (115)649 (155)804 (164)941 (208)1259 (193)1397 (199)15/15
BPepsMAg Hellwig 47 (36)60 (36)78 (36)95 (36)100 (36)101 (36)101 (36)15/15
COBYLA Dufosse 14 (3)15 (3)15 (3)15 (3)15 (3)★315 (3)★315 (3)★315/15
RandomSearch-5 Dufosse 174 (237)1529 (2273)2.6e4 (3e4)2.6e5 (4e5)1.5e6 (2e6)6e50/15
epsMAg Hellwig 122 (73)154 (54)176 (109)176 (109)176 (109)176 (109)176 (109)15/15
fmincon Hellwig 12 (4)14 (8)16 (8)21 (4)28 (4)47 (20)508 (330)1/15

Δ fopt
f14, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 624 (244)839 (269)1062 (224)1266 (305)1486 (289)1890 (284)4458 (415)15/15
AL2-CMA-ES Dufosse 650 (201)872 (186)1084 (215)1295 (190)1530 (170)1950 (222)1.3e4 (2014)14/15
AL3-CMA-ES Dufosse 608 (158)804 (186)1049 (161)1230 (175)1455 (212)1882 (150)2083 (179)15/15
AL4-CMA-ES Dufosse 646 (207)885 (183)1087 (227)1299 (258)1492 (305)1867 (294)2270 (477)15/15
BPepsMAg Hellwig 533 (539)993 (1547)1417 (1670)3341 (2228)5044 (6725)6499 (6863)1.0e4 (1e4)15/15
COBYLA Dufosse 14 (2)14 (2)★214 (2)★314 (2)★314 (2)★314 (2)★314 (2)★315/15
RandomSearch-5 Dufosse 2.7e4 (5e4)1.1e6 (8e5)6e50/15
epsMAg Hellwig 1797 (1885)5144 (8800)8992 (1e4)1.3e4 (2e4)1.6e4 (2e4)1.9e4 (2e4)1.9e4 (2e4)15/15
fmincon Hellwig 20 (4)23 (4)30 (4)35 (8)39 (8)73 (66)470/15

Δ fopt
f15, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1088 (592)1382 (506)1695 (614)1963 (519)2240 (530)2814 (662)3239 (622)15/15
AL2-CMA-ES Dufosse 940 (202)1229 (202)1533 (265)1801 (245)2043 (245)2569 (246)2824 (304)15/15
AL3-CMA-ES Dufosse 976 (264)1252 (248)1534 (275)1812 (215)2087 (242)2596 (242)2848 (193)15/15
AL4-CMA-ES Dufosse 980 (179)1231 (208)1511 (161)1776 (346)2103 (227)2572 (485)3076 (553)15/15
BPepsMAg Hellwig 5128 (3509)1.0e4 (1e4)2.1e4 (2e4)4.0e4 (3e4)1.3e5 (1e5)6.2e5 (7e5)1.4e6 (1e6)2/15
COBYLA Dufosse 16 (6)★316 (6)★316 (6)★316 (6)★316 (6)★316 (6)★316 (6)★315/15
RandomSearch-5 Dufosse 2.5e6 (3e6)6e50/15
epsMAg Hellwig 1.3e4 (1e4)2.4e4 (6550)2.8e4 (4434)3.1e4 (2368)3.2e4 (1792)3.3e4 (1429)3.4e4 (1240)15/15
fmincon Hellwig 49 (20)51 (20)58 (37)83 (30)90 (30)711 (466)950/15

Δ fopt
f16, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 855 (205)1119 (160)1417 (281)1675 (223)1904 (267)2386 (240)2913 (201)15/15
AL2-CMA-ES Dufosse 1038 (196)1309 (235)1566 (173)1805 (215)2066 (242)2510 (355)2744 (232)15/15
AL3-CMA-ES Dufosse 936 (357)1253 (350)1531 (356)1830 (311)2098 (345)2575 (320)4111 (2118)15/15
AL4-CMA-ES Dufosse 970 (177)1207 (232)1542 (223)1834 (268)2054 (227)2577 (280)2808 (289)15/15
BPepsMAg Hellwig 1.0e4 (2e4)1.3e4 (2e4)2.6e4 (4e4)6.2e4 (6e4)2.0e5 (3e5)1.5e6 (2e6)2e50/15
COBYLA Dufosse 18 (7)★218 (7)★318 (7)★318 (7)★318 (7)★318 (7)★318 (7)★315/15
RandomSearch-5 Dufosse 4.0e6 (5e6)6e50/15
epsMAg Hellwig 1.1e4 (1e4)2.2e4 (5340)2.7e4 (3860)3.0e4 (2907)3.2e4 (2200)3.3e4 (1623)3.4e4 (1579)15/15
fmincon Hellwig 35 (12)39 (16)57 (20)63 (26)71 (26)1145 (948)710/15

Δ fopt
f17, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1048 (249)1302 (302)1583 (381)1894 (508)2128 (536)2730 (660)2917 (636)15/15
AL2-CMA-ES Dufosse 1008 (174)1300 (224)1596 (267)1827 (292)2124 (231)2573 (296)2820 (328)15/15
AL3-CMA-ES Dufosse 1040 (240)1343 (171)1561 (169)1847 (209)2108 (249)2576 (245)2854 (240)15/15
AL4-CMA-ES Dufosse 1114 (302)1409 (382)1700 (438)1989 (445)2205 (359)2707 (399)3237 (593)15/15
BPepsMAg Hellwig 4681 (6122)1.8e4 (2e4)3.4e4 (3e4)5.5e4 (6e4)2.2e5 (3e5)6.5e5 (6e5)1.4e6 (9e5)2/15
COBYLA Dufosse 15 (6)★317 (12)★217 (12)★217 (12)★317 (12)★317 (12)★317 (12)★315/15
RandomSearch-5 Dufosse 8.7e6 (1e7)6e50/15
epsMAg Hellwig 1.7e4 (1e4)2.3e4 (1e4)3.0e4 (1793)3.1e4 (2994)3.3e4 (1679)3.4e4 (1883)3.4e4 (1630)15/15
fmincon Hellwig 40 (20)42 (24)53 (35)82 (24)88 (24)950/15

Δ fopt
f18, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1331 (530)1692 (971)1955 (1019)2263 (1038)2543 (1078)3035 (923)3306 (845)15/15
AL2-CMA-ES Dufosse 1024 (240)1345 (299)1589 (275)1846 (290)2108 (271)2608 (440)2831 (358)15/15
AL3-CMA-ES Dufosse 1253 (519)1510 (564)1784 (569)2023 (628)2338 (830)2910 (754)3844 (1055)15/15
AL4-CMA-ES Dufosse 1186 (442)1410 (409)1735 (433)2041 (464)2341 (446)2798 (575)3346 (727)15/15
BPepsMAg Hellwig 7010 (1e4)1.0e4 (1e4)2.7e4 (3e4)9.2e4 (1e5)2.5e5 (4e5)5.3e5 (5e5)7.0e5 (1e6)4/15
COBYLA Dufosse 17 (6)★319 (9)★320 (14)★321 (14)★321 (14)★321 (14)★321 (14)★315/15
RandomSearch-5 Dufosse 8.8e6 (7e6)6e50/15
epsMAg Hellwig 1.8e4 (1e4)2.5e4 (6608)3.0e4 (1789)3.1e4 (1175)3.2e4 (931)3.3e4 (1096)3.4e4 (875)15/15
fmincon Hellwig 51 (32)54 (28)64 (28)97 (40)110 (48)1110/15

Δ fopt
f19, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3792 (5382)5991 (6435)1.2e4 (1e4)1.3e4 (1e4)1.8e4 (1e4)2.1e4 (1e4)3.4e4 (2e4)15/15
AL2-CMA-ES Dufosse 2452 (3519)4296 (3929)8459 (5882)1.3e4 (1e4)2.0e4 (1e4)2.8e4 (2e4)3.3e4 (1e4)15/15
AL3-CMA-ES Dufosse 3910 (6207)7662 (9471)1.6e4 (1e4)3.1e4 (4e4)6.0e4 (5e4)1.1e5 (4e4)1.5e5 (9e4)12/15
AL4-CMA-ES Dufosse 1911 (3786)8248 (9932)1.8e4 (1e4)3.0e4 (3e4)4.3e4 (3e4)7.6e4 (5e4)9.4e4 (8e4)13/15
BPepsMAg Hellwig 147 (130)2982 (5242)1.4e4 (2e4)4.4e4 (5e4)3.2e5 (3e5)2e50/15
COBYLA Dufosse 26 (15)114 (78)5434 (6024)1.1e4 (2e4)4.7e4 (5e4)3e40/15
RandomSearch-5 Dufosse 797 (991)1.7e4 (3e4)4.7e5 (3e5)4.4e6 (3e6)6e50/15
epsMAg Hellwig 228 (210)421 (310)4038 (7170)1.5e4 (1e4)3.6e5 (4e5)3e50/15
fmincon Hellwig 47 (33)381 (846)2350 (4036)6055 (7897)3.7e4 (5e4)1e40/15

Δ fopt
f20, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 4621 (5145)9458 (1e4)2.0e4 (2e4)2.6e4 (2e4)3.2e4 (1e4)7.1e4 (8e4)2.0e5 (2e5)7/15
AL2-CMA-ES Dufosse 5219 (6280)1.6e4 (1e4)2.9e4 (3e4)3.4e4 (2e4)4.0e4 (3e4)6.4e4 (7e4)6.6e4 (8e4)13/15
AL3-CMA-ES Dufosse 1.4e4 (2e4)3.1e4 (3e4)5.5e4 (8e4)7.9e4 (9e4)1.1e5 (1e5)1.4e5 (1e5)1.6e5 (2e5)9/15
AL4-CMA-ES Dufosse 2.1e4 (1e4)3.6e4 (3e4)4.7e4 (3e4)7.4e4 (1e5)8.3e4 (9e4)1.1e5 (2e5)1.1e5 (1e5)11/15
BPepsMAg Hellwig 2298 (3288)2.6e4 (3e4)6.1e4 (9e4)2.1e5 (3e5)4.8e5 (5e5)2e50/15
COBYLA Dufosse 31 (16)1555 (209)4975 (1e4)1.0e4 (1e4)2.2e4 (3e4)3e40/15
RandomSearch-5 Dufosse 4.1e4 (6e4)2.6e6 (2e6)6e50/15
epsMAg Hellwig 2297 (4645)1.4e4 (1e4)7.8e4 (2e5)2.2e5 (3e5)3.6e5 (4e5)9.8e5 (8e5)2.1e6 (2e6)2/15
fmincon Hellwig 54 (40)292 (713)7040 (1e4)1.9e4 (2e4)3.9e4 (3e4)2e40/15

Δ fopt
f21, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1148 (274)1499 (429)1776 (401)2034 (437)2306 (404)2848 (304)3039 (419)15/15
AL2-CMA-ES Dufosse 1319 (779)1606 (913)1849 (937)2120 (861)2339 (888)2850 (845)3108 (766)15/15
AL3-CMA-ES Dufosse 1459 (547)1768 (573)2082 (549)2379 (602)2625 (529)3185 (573)3459 (504)15/15
AL4-CMA-ES Dufosse 1342 (410)1635 (406)1916 (387)2169 (483)2459 (433)2970 (566)3543 (2164)15/15
BPepsMAg Hellwig 1.1e4 (2e4)4.4e4 (5e4)1.2e5 (1e5)2.8e5 (2e5)1.4e6 (2e6)2.9e6 (3e6)2e50/15
COBYLA Dufosse 31 (11)★340 (12)★353 (10)★364 (16)★376 (17)★3108 (20)★3118 (24)★315/15
RandomSearch-5 Dufosse 8.9e6 (7e6)6e50/15
epsMAg Hellwig 1.5e4 (1e4)2.4e4 (4721)2.9e4 (5399)3.2e4 (3534)3.3e4 (3618)3.4e4 (3187)3.5e4 (3213)15/15
fmincon Hellwig 118 (54)143 (68)249 (160)275 (175)357 (450)1994 (1805)3330/15

Δ fopt
f22, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1208 (325)1448 (317)1736 (252)1957 (228)2272 (366)2842 (391)3385 (441)15/15
AL2-CMA-ES Dufosse 1114 (257)1399 (235)1693 (250)1981 (305)2163 (289)2682 (315)2952 (324)15/15
AL3-CMA-ES Dufosse 1214 (582)1498 (470)1777 (521)2048 (560)2303 (614)2823 (564)3116 (617)15/15
AL4-CMA-ES Dufosse 1044 (281)1348 (231)1641 (296)1866 (314)2150 (297)2674 (279)2888 (317)15/15
BPepsMAg Hellwig 1.6e4 (2e4)5.8e4 (1e5)1.2e5 (1e5)1.7e5 (2e5)4.7e5 (4e5)2e50/15
COBYLA Dufosse 33 (11)★342 (12)★351 (13)★366 (14)★277 (13)★2241 (39)★3251 (44)15/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 1.9e4 (9453)2.6e4 (6068)2.9e4 (3717)3.1e4 (3124)3.2e4 (2228)3.4e4 (1904)3.4e4 (1939)15/15
fmincon Hellwig 113 (92)136 (98)161 (104)194 (123)273 (177)3726 (4822)1930/15

Δ fopt
f23, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1342 (891)1609 (815)1919 (973)2191 (844)2505 (963)3074 (1010)3324 (1003)15/15
AL2-CMA-ES Dufosse 1382 (787)1676 (848)1954 (943)2205 (887)2520 (907)2944 (870)3195 (832)15/15
AL3-CMA-ES Dufosse 1573 (991)1910 (967)2172 (1026)2436 (1071)2727 (1018)3333 (1133)3578 (1114)15/15
AL4-CMA-ES Dufosse 1317 (548)1633 (619)1878 (721)2160 (758)2418 (877)2896 (776)3169 (736)15/15
BPepsMAg Hellwig 3.5e4 (4e4)7.3e4 (1e5)1.4e5 (2e5)3.0e5 (3e5)1.4e6 (2e6)2e50/15
COBYLA Dufosse 31 (11)★341 (10)★351 (10)★359 (12)★392 (15)★2140 (42)★3163 (50)★315/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 1.7e4 (9754)2.7e4 (4560)3.0e4 (2908)3.1e4 (2326)3.3e4 (2738)3.4e4 (2956)3.5e4 (3013)15/15
fmincon Hellwig 110 (39)170 (115)281 (124)355 (413)456 (486)6857 (8298)3350/15

Δ fopt
f24, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1542 (539)1821 (650)2072 (687)2399 (669)2663 (806)3190 (859)3980 (1398)15/15
AL2-CMA-ES Dufosse 1471 (750)1759 (677)2024 (726)2277 (673)2543 (654)3010 (716)3274 (710)15/15
AL3-CMA-ES Dufosse 1872 (800)2194 (916)2433 (830)2714 (961)3005 (933)3616 (990)4133 (2510)15/15
AL4-CMA-ES Dufosse 1513 (944)1783 (966)2001 (1018)2275 (966)2598 (931)3170 (1126)3702 (1233)15/15
BPepsMAg Hellwig 7.0e4 (1e5)1.7e5 (2e5)2.7e5 (2e5)4.1e5 (4e5)6.6e5 (7e5)1.4e6 (1e6)2e50/15
COBYLA Dufosse 30 (10)★240 (12)★355 (11)★363 (16)★384 (22)★3104 (22)★3118 (33)★315/15
RandomSearch-5 Dufosse 8.4e6 (8e6)8.4e6 (1e7)8.5e6 (1e7)6e50/15
epsMAg Hellwig 1.7e4 (1e4)2.3e4 (6625)2.8e4 (4627)5.3e4 (6041)5.5e4 (4293)5.6e4 (4163)5.7e4 (3948)14/15
fmincon Hellwig 437 (373)733 (369)809 (378)881 (463)1247 (2274)7519 (7050)3710/15

Δ fopt
f25, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 365 (230)2885 (8219)5354 (8409)1.4e4 (1e4)2.4e4 (1e4)4.2e4 (2e4)5.2e4 (3e4)15/15
AL2-CMA-ES Dufosse 323 (311)730 (485)6201 (6667)1.7e4 (1e4)2.8e4 (2e4)3.8e4 (1e4)5.6e4 (4e4)15/15
AL3-CMA-ES Dufosse 280 (213)3480 (6526)1.0e4 (1e4)2.1e4 (1e4)5.6e4 (5e4)1.0e5 (9e4)1.9e5 (2e5)9/15
AL4-CMA-ES Dufosse 268 (286)2642 (4656)1.1e4 (1e4)3.6e4 (3e4)7.5e4 (8e4)1.5e5 (1e5)1.6e5 (1e5)10/15
BPepsMAg Hellwig 178 (165)353 (431)512 (547)684 (488)1.2e4 (2e4)2.9e6 (3e6)2e50/15
COBYLA Dufosse 25 (14)40 (14)50 (13)63 (20)2630 (5032)2.1e5 (2e5)2.1e5 (3e5)2/15
RandomSearch-5 Dufosse 405 (425)3878 (5609)4.7e4 (8e4)3.1e5 (6e5)8.4e6 (1e7)6e50/15
epsMAg Hellwig 169 (217)282 (233)572 (507)614 (429)1.6e4 (8443)4.2e6 (6e6)3e50/15
fmincon Hellwig 51 (43)73 (86)86 (82)92 (86)1.3e4 (2e4)1e40/15

Δ fopt
f26, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 810 (364)2112 (1052)5537 (1e4)3.5e4 (8e4)7.7e4 (2e5)1.4e5 (2e5)6.7e5 (5e5)3/15
AL2-CMA-ES Dufosse 748 (320)2830 (6377)5059 (6943)2.5e4 (4e4)4.1e4 (4e4)5.4e4 (3e4)9.5e4 (1e5)12/15
AL3-CMA-ES Dufosse 734 (288)1224 (508)3330 (7127)2.2e4 (1e4)3.9e4 (3e4)5.4e4 (8e4)5.8e4 (8e4)13/15
AL4-CMA-ES Dufosse 738 (234)1126 (277)4248 (7169)4.1e4 (8e4)5.7e4 (9e4)7.5e4 (8e4)7.6e4 (8e4)13/15
BPepsMAg Hellwig 4686 (7349)7420 (1e4)1.1e4 (2e4)1.6e4 (2e4)2.2e4 (3e4)1.8e5 (1e5)1.5e6 (2e6)2/15
COBYLA Dufosse 35 (14)★254 (16)66 (28)79 (23)2366 (3015)2.3e4 (3e4)4.4e4 (6e4)7/15
RandomSearch-5 Dufosse 1.9e5 (3e5)4.0e6 (4e6)6e50/15
epsMAg Hellwig 4590 (6528)1.2e4 (1e4)1.7e4 (1e4)2.4e4 (1e4)5.1e4 (3e4)3.2e5 (3e5)9.2e5 (1e6)4/15
fmincon Hellwig 77 (51)109 (67)123 (68)6966 (1e4)1.5e4 (2e4)2e40/15

Δ fopt
f27, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1171 (440)1416 (397)1685 (395)1984 (444)2180 (422)2714 (426)3011 (459)15/15
AL2-CMA-ES Dufosse 1356 (432)1662 (469)1963 (503)2244 (516)2503 (567)2984 (623)3257 (607)15/15
AL3-CMA-ES Dufosse 1215 (453)1496 (521)1747 (428)1986 (385)2269 (403)2786 (378)3320 (430)15/15
AL4-CMA-ES Dufosse 2185 (1046)2476 (1130)2789 (1083)3032 (1060)3327 (1090)3849 (1123)4413 (2679)15/15
BPepsMAg Hellwig 4.7e4 (5e4)1.2e5 (1e5)2.1e5 (3e5)6.7e5 (6e5)9.3e5 (1e6)2e50/15
COBYLA Dufosse 32 (13)★350 (27)★261 (32)★273 (40)★287 (47)★2108 (53)★3117 (63)★315/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 1.8e4 (1e4)2.8e4 (2182)3.0e4 (2368)3.3e4 (3198)3.4e4 (2843)3.5e4 (2696)3.5e4 (2977)15/15
fmincon Hellwig 103 (48)144 (94)423 (126)496 (348)598 (482)2061 (2730)2710/15

Δ fopt
f28, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1466 (799)1726 (701)2004 (731)2266 (857)2534 (787)3114 (744)3344 (791)15/15
AL2-CMA-ES Dufosse 1590 (478)1925 (495)2143 (450)2406 (552)2675 (522)3130 (511)3323 (636)15/15
AL3-CMA-ES Dufosse 1457 (603)1769 (565)2044 (525)2359 (576)2589 (614)3111 (644)3352 (638)15/15
AL4-CMA-ES Dufosse 1330 (648)1628 (738)1907 (755)2181 (718)2433 (771)2898 (877)3197 (849)15/15
BPepsMAg Hellwig 2.8e4 (3e4)5.9e4 (6e4)1.2e5 (1e5)3.2e5 (3e5)1.5e6 (1e6)2e50/15
COBYLA Dufosse 31 (7)★343 (13)★355 (16)★368 (15)★378 (18)★3101 (29)★3116 (32)★315/15
RandomSearch-5 Dufosse 8.5e6 (9e6)6e50/15
epsMAg Hellwig 1.5e4 (1e4)2.4e4 (7109)3.0e4 (3040)3.1e4 (2461)3.3e4 (2434)3.4e4 (3127)3.5e4 (3393)15/15
fmincon Hellwig 130 (47)184 (151)216 (196)239 (212)342 (220)1966 (1329)3943 (4292)1/15

Δ fopt
f29, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1182 (354)1470 (333)1721 (325)2021 (342)2288 (319)2869 (362)3112 (376)15/15
AL2-CMA-ES Dufosse 1288 (310)1585 (429)1841 (395)2096 (447)2342 (420)2841 (602)3151 (519)15/15
AL3-CMA-ES Dufosse 1255 (424)1566 (702)1865 (713)2124 (726)2443 (804)2941 (789)3159 (785)15/15
AL4-CMA-ES Dufosse 1244 (584)1526 (498)1831 (505)2106 (506)2376 (522)2932 (567)3178 (516)15/15
BPepsMAg Hellwig 3.4e4 (4e4)6.0e4 (6e4)1.7e5 (1e5)6.7e5 (5e5)1.5e6 (1e6)2e50/15
COBYLA Dufosse 35 (14)★348 (22)★361 (24)★380 (25)★3119 (31)★2183 (34)★3213 (32)★315/15
RandomSearch-5 Dufosse 8.8e6 (7e6)6e50/15
epsMAg Hellwig 1.8e4 (8574)2.5e4 (2656)2.9e4 (2581)3.1e4 (2707)3.2e4 (1863)3.4e4 (1946)3.5e4 (2824)15/15
fmincon Hellwig 335 (151)403 (219)462 (310)508 (286)673 (736)4616 (2832)9281 (7386)1/15

Δ fopt
f30, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1473 (898)1724 (972)1994 (943)2300 (876)2554 (881)3124 (708)3384 (944)15/15
AL2-CMA-ES Dufosse 1214 (374)1495 (412)1741 (423)2033 (402)2263 (352)2752 (363)3002 (506)15/15
AL3-CMA-ES Dufosse 1372 (487)1661 (603)2015 (651)2289 (463)2530 (624)3119 (474)3381 (551)15/15
AL4-CMA-ES Dufosse 1549 (651)1832 (637)2086 (632)2358 (615)2643 (688)3237 (604)3506 (687)15/15
BPepsMAg Hellwig 3.8e4 (5e4)9.8e4 (1e5)2.9e5 (4e5)4.9e5 (5e5)1.4e6 (9e5)2e50/15
COBYLA Dufosse 34 (11)★344 (11)★354 (14)★362 (14)★372 (19)★3100 (19)★3112 (27)★315/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 1.9e4 (7709)2.6e4 (4673)2.9e4 (4188)3.2e4 (1854)3.3e4 (1336)3.4e4 (1386)3.5e4 (1265)15/15
fmincon Hellwig 146 (85)249 (174)336 (283)717 (659)897 (669)4598 (3747)4790/15

Δ fopt
f31, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 520 (115)727 (111)967 (316)2721 (4985)4464 (6236)1.2e4 (1e4)1.6e4 (2e4)15/15
AL2-CMA-ES Dufosse 488 (152)697 (141)1617 (432)2352 (1006)3988 (7475)7454 (8790)2.0e4 (2e4)14/15
AL3-CMA-ES Dufosse 519 (116)692 (124)1011 (364)5207 (6522)3.0e4 (8e4)5.3e4 (8e4)1.4e5 (2e5)8/15
AL4-CMA-ES Dufosse 492 (123)673 (163)1014 (455)3041 (6502)5178 (6542)4.5e4 (8e4)7.8e4 (1e5)10/15
BPepsMAg Hellwig 631 (906)908 (1042)1357 (1287)1759 (1648)5411 (3455)5.6e4 (6e4)2.0e5 (3e5)9/15
COBYLA Dufosse 33 (10)45 (13)54 (14)65 (16)473 (1000)2.1e4 (2e4)7.4e4 (6e4)5/15
RandomSearch-5 Dufosse 4.6e4 (6e4)6.6e5 (9e5)6e50/15
epsMAg Hellwig 309 (235)1187 (1501)2505 (3167)4935 (5472)8201 (1e4)1.9e5 (3e5)3.0e5 (4e5)8/15
fmincon Hellwig 58 (17)61 (18)81 (44)1515 (1280)5683 (1e4)2.2e4 (4e4)3.3e4 (4e4)2/15

Δ fopt
f32, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 891 (263)1437 (411)1798 (411)2051 (478)2354 (474)2948 (564)3210 (580)15/15
AL2-CMA-ES Dufosse 932 (344)1200 (451)1504 (324)1798 (432)2146 (568)2728 (672)3121 (834)15/15
AL3-CMA-ES Dufosse 789 (178)1141 (251)1487 (371)1723 (276)2063 (262)2713 (372)2998 (423)15/15
AL4-CMA-ES Dufosse 880 (205)1821 (1036)4882 (1346)6067 (1487)6468 (1759)7282 (2223)7712 (2751)15/15
BPepsMAg Hellwig 3512 (2222)8800 (1e4)1.7e4 (1e4)4.5e4 (5e4)8.7e4 (1e5)3.0e5 (3e5)5.2e5 (6e5)4/15
COBYLA Dufosse 34 (13)43 (14)63 (14)79 (22)102 (14)195 (148)460 (363)15/15
RandomSearch-5 Dufosse 7.8e5 (7e5)6e50/15
epsMAg Hellwig 6165 (9523)1.2e4 (1e4)2.2e4 (1e4)4.2e4 (1e4)4.6e4 (1e4)1.0e5 (2e5)1.4e5 (2e5)12/15
fmincon Hellwig 53 (19)72 (19)80 (27)87 (23)92 (24)191 (237)794 (1304)2/15

Δ fopt
f33, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1463 (666)1776 (724)2032 (639)2321 (709)2568 (691)3102 (708)3348 (829)15/15
AL2-CMA-ES Dufosse 1398 (652)1681 (679)1949 (752)2231 (747)2441 (714)2912 (792)3172 (863)15/15
AL3-CMA-ES Dufosse 1325 (386)1648 (397)1922 (423)2179 (402)2454 (436)2958 (446)3237 (627)15/15
AL4-CMA-ES Dufosse 1383 (438)1722 (434)1973 (448)2237 (479)2479 (426)3057 (435)3288 (381)15/15
BPepsMAg Hellwig 1.3e4 (2e4)2.4e4 (4e4)5.7e4 (6e4)1.0e5 (8e4)2.7e5 (2e5)1.4e6 (1e6)2.9e6 (3e6)1/15
COBYLA Dufosse 33 (10)★245 (15)54 (10)58 (13)★265 (16)★380 (22)★386 (23)★315/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 1.7e4 (1e4)2.6e4 (3963)2.9e4 (2504)3.1e4 (1749)3.2e4 (1200)3.4e4 (1296)3.4e4 (1262)15/15
fmincon Hellwig 68 (40)72 (36)85 (36)91 (32)131 (68)499 (323)1508 (1982)1/15

Δ fopt
f34, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1319 (553)1630 (535)1904 (560)2217 (573)2462 (622)2966 (369)3274 (431)15/15
AL2-CMA-ES Dufosse 1275 (304)1646 (342)1930 (375)2201 (376)2449 (343)2920 (323)3171 (299)15/15
AL3-CMA-ES Dufosse 1191 (337)1480 (382)1802 (420)2040 (342)2325 (358)2798 (450)3094 (474)15/15
AL4-CMA-ES Dufosse 1186 (275)1519 (385)1817 (393)2098 (348)2393 (430)2855 (334)3195 (317)15/15
BPepsMAg Hellwig 1.1e4 (1e4)1.3e4 (1e4)2.0e4 (2e4)6.8e4 (1e5)1.8e5 (3e5)9.1e5 (6e5)2e50/15
COBYLA Dufosse 29 (8)38 (12)48 (16)57 (18)69 (23)85 (31)92 (29)15/15
RandomSearch-5 Dufosse 8.4e6 (8e6)6e50/15
epsMAg Hellwig 1.8e4 (1e4)2.5e4 (7591)2.7e4 (6210)2.9e4 (4446)3.1e4 (2110)3.4e4 (1073)3.4e4 (1163)15/15
fmincon Hellwig 57 (32)66 (28)75 (32)79 (28)108 (74)342 (332)1390 (1302)1/15

Δ fopt
f35, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1265 (236)1573 (228)1865 (257)2194 (274)2431 (246)2942 (198)3197 (244)15/15
AL2-CMA-ES Dufosse 1227 (371)1519 (451)1791 (381)2071 (368)2314 (377)2807 (419)3030 (434)15/15
AL3-CMA-ES Dufosse 1213 (325)1518 (363)1788 (371)2028 (481)2307 (475)2801 (423)3081 (408)15/15
AL4-CMA-ES Dufosse 1262 (260)1564 (248)1809 (207)2102 (307)2364 (240)2919 (269)3158 (330)15/15
BPepsMAg Hellwig 1.5e4 (2e4)2.9e4 (2e4)7.4e4 (1e5)1.1e5 (1e5)3.0e5 (3e5)2.8e6 (2e6)2e50/15
COBYLA Dufosse 35 (10)41 (11)50 (13)60 (13)68 (18)★283 (22)★291 (27)15/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 1.7e4 (1e4)2.6e4 (6400)3.0e4 (2563)3.1e4 (2791)3.2e4 (2740)3.4e4 (2498)3.4e4 (2484)15/15
fmincon Hellwig 48 (24)56 (36)71 (24)75 (20)112 (59)650 (572)870/15

Δ fopt
f36, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1851 (849)2160 (802)2432 (807)2694 (817)2953 (756)3509 (967)3725 (933)15/15
AL2-CMA-ES Dufosse 1271 (382)1565 (434)1876 (402)2135 (464)2419 (417)2885 (346)3158 (410)15/15
AL3-CMA-ES Dufosse 1489 (783)1770 (732)2034 (678)2313 (757)2592 (777)3188 (708)3458 (635)15/15
AL4-CMA-ES Dufosse 1628 (806)1965 (903)2254 (909)2534 (919)2748 (970)3240 (919)3598 (822)15/15
BPepsMAg Hellwig 1.8e4 (2e4)3.1e4 (5e4)1.2e5 (2e5)2.2e5 (3e5)2.6e5 (2e5)2.9e6 (3e6)2e50/15
COBYLA Dufosse 35 (9)★245 (9)★250 (15)★362 (9)★271 (19)★287 (21)★293 (20)★215/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 1.9e4 (1e4)2.5e4 (5122)3.0e4 (1313)3.1e4 (1826)3.2e4 (1547)3.4e4 (1079)3.4e4 (1021)15/15
fmincon Hellwig 73 (36)81 (36)97 (38)104 (31)127 (66)870 (811)1746 (3039)1/15

Δ fopt
f37, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 587 (153)760 (245)979 (245)1133 (202)1322 (206)1758 (258)1947 (283)15/15
AL2-CMA-ES Dufosse 566 (159)750 (134)938 (208)1170 (238)1349 (229)1794 (209)1986 (265)15/15
AL3-CMA-ES Dufosse 496 (179)769 (152)965 (140)1159 (234)1412 (227)1782 (295)1967 (265)15/15
AL4-CMA-ES Dufosse 553 (184)808 (214)970 (208)1227 (226)1420 (195)1772 (248)1963 (274)15/15
BPepsMAg Hellwig 258 (112)514 (395)817 (571)1411 (844)2287 (1780)5443 (3431)6307 (4140)15/15
COBYLA Dufosse 39 (17)46 (16)55 (17)61 (22)69 (23)92 (45)★2151 (146)15/15
RandomSearch-5 Dufosse 2.2e4 (3e4)4.2e6 (7e6)6e50/15
epsMAg Hellwig 302 (170)554 (251)741 (345)916 (452)1465 (900)3846 (1574)9762 (1e4)15/15
fmincon Hellwig 55 (33)65 (33)82 (40)101 (33)113 (39)180 (63)201 (64)15/15

Δ fopt
f38, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 746 (257)1084 (266)1367 (307)1661 (328)1967 (365)2484 (391)2759 (327)15/15
AL2-CMA-ES Dufosse 761 (174)1055 (307)1313 (259)1612 (243)1924 (261)2422 (253)2727 (282)15/15
AL3-CMA-ES Dufosse 754 (238)1110 (402)1400 (426)1750 (351)2014 (363)2608 (362)2825 (398)15/15
AL4-CMA-ES Dufosse 784 (219)1122 (267)1434 (251)1744 (373)1988 (347)2548 (225)2761 (248)15/15
BPepsMAg Hellwig 992 (1202)2402 (2172)5414 (6353)8466 (6699)1.1e4 (6153)5.5e4 (9e4)1.2e5 (1e5)11/15
COBYLA Dufosse 35 (10)42 (10)44 (11)★248 (17)★252 (18)★364 (26)★371 (27)★315/15
RandomSearch-5 Dufosse 3.9e5 (6e5)6e50/15
epsMAg Hellwig 471 (282)998 (700)6631 (1e4)1.1e4 (2e4)1.3e4 (2e4)1.9e4 (2e4)2.6e4 (2e4)15/15
fmincon Hellwig 43 (25)57 (29)73 (27)86 (31)97 (23)151 (47)209 (104)11/15

Δ fopt
f39, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 925 (237)1253 (241)1559 (320)1855 (326)2124 (365)2621 (346)2885 (272)15/15
AL2-CMA-ES Dufosse 878 (268)1239 (290)1596 (277)1902 (321)2176 (371)2700 (394)2920 (337)15/15
AL3-CMA-ES Dufosse 1116 (470)1487 (492)1838 (471)2096 (413)2359 (475)2933 (458)3203 (476)15/15
AL4-CMA-ES Dufosse 1060 (381)1410 (357)1785 (432)2086 (397)2349 (428)2876 (361)3157 (389)15/15
BPepsMAg Hellwig 4087 (8431)6897 (8638)1.8e4 (2e4)5.4e4 (7e4)1.3e5 (1e5)5.4e5 (5e5)3.0e6 (3e6)1/15
COBYLA Dufosse 26 (13)29 (15)31 (19)★231 (19)★231 (19)★331 (19)★331 (19)★315/15
RandomSearch-5 Dufosse 4.1e6 (5e6)6e50/15
epsMAg Hellwig 2640 (1319)8780 (1e4)2.6e4 (2e4)3.2e4 (2898)3.2e4 (2575)3.4e4 (2078)3.5e4 (2129)15/15
fmincon Hellwig 42 (24)49 (24)67 (24)71 (28)85 (17)201 (212)1481 (1671)1/15

Δ fopt
f40, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 999 (350)1401 (530)1770 (602)2116 (600)2394 (623)2951 (647)3246 (637)15/15
AL2-CMA-ES Dufosse 1006 (280)1332 (274)1764 (279)2057 (367)2328 (281)2904 (366)3167 (320)15/15
AL3-CMA-ES Dufosse 959 (333)1348 (561)1657 (598)1983 (593)2254 (578)2861 (659)3120 (630)15/15
AL4-CMA-ES Dufosse 995 (264)1330 (301)1706 (375)2027 (379)2281 (416)2902 (452)3121 (485)15/15
BPepsMAg Hellwig 1167 (1446)6014 (9661)1.8e4 (3e4)7.4e4 (1e5)1.5e5 (1e5)1.5e6 (2e6)3.0e6 (2e6)1/15
COBYLA Dufosse 26 (14)29 (12)31 (13)★232 (16)★332 (16)★332 (16)★332 (16)★315/15
RandomSearch-5 Dufosse 2.6e6 (4e6)6e50/15
epsMAg Hellwig 613 (412)1.0e4 (1e4)2.1e4 (2e4)2.7e4 (2e4)3.0e4 (8429)3.2e4 (4382)3.3e4 (4713)15/15
fmincon Hellwig 37 (12)45 (20)63 (33)82 (28)94 (28)261 (208)398 (421)4/15

Δ fopt
f41, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1044 (295)1552 (354)1895 (259)2209 (327)2477 (252)3011 (442)3296 (480)15/15
AL2-CMA-ES Dufosse 1017 (201)1385 (267)1780 (288)2061 (395)2358 (285)2880 (371)3108 (379)15/15
AL3-CMA-ES Dufosse 1034 (263)1397 (238)1734 (299)2056 (279)2279 (336)2840 (383)3122 (328)15/15
AL4-CMA-ES Dufosse 1058 (414)1478 (318)1767 (359)2087 (289)2366 (327)2964 (357)3228 (400)15/15
BPepsMAg Hellwig 2336 (1904)6070 (6771)2.2e4 (2e4)6.8e4 (7e4)1.8e5 (3e5)1.4e6 (1e6)3.0e6 (3e6)1/15
COBYLA Dufosse 24 (6)27 (10)28 (10)★228 (10)★328 (10)★328 (10)★328 (10)★315/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 4037 (1e4)1.4e4 (1e4)2.6e4 (2e4)3.1e4 (2513)3.3e4 (1718)3.5e4 (1875)3.5e4 (1704)15/15
fmincon Hellwig 47 (24)53 (24)65 (24)87 (28)106 (31)447 (361)908 (630)2/15

Δ fopt
f42, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1168 (301)1593 (297)1888 (332)2159 (423)2432 (402)3044 (427)3287 (362)15/15
AL2-CMA-ES Dufosse 1322 (483)1732 (463)2022 (489)2360 (495)2582 (520)3109 (559)3394 (544)15/15
AL3-CMA-ES Dufosse 1158 (459)1591 (670)1939 (653)2203 (608)2478 (574)3086 (594)3275 (592)15/15
AL4-CMA-ES Dufosse 1237 (349)1631 (457)1952 (408)2255 (447)2526 (467)3111 (593)3405 (462)15/15
BPepsMAg Hellwig 8451 (2e4)1.7e4 (2e4)3.7e4 (5e4)8.5e4 (1e5)2.9e5 (3e5)2e50/15
COBYLA Dufosse 23 (12)★326 (17)★327 (18)★328 (18)★331 (27)★332 (35)★334 (35)★315/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 4412 (1e4)2.0e4 (2e4)3.0e4 (4946)3.2e4 (3134)3.3e4 (2464)3.4e4 (2189)3.5e4 (2422)15/15
fmincon Hellwig 52 (12)60 (17)77 (28)97 (32)112 (27)457 (400)613 (338)3/15

Δ fopt
f43, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.4e4 (2e4)1.6e4 (2e4)1.6e4 (2e4)1.7e4 (2e4)1.8e4 (2e4)2.0e4 (2e4)2.0e4 (3e4)15/15
AL2-CMA-ES Dufosse 1.8e4 (2e4)2.7e4 (2e4)2.8e4 (2e4)2.9e4 (2e4)2.9e4 (2e4)3.2e4 (3e4)3.4e4 (3e4)14/15
AL3-CMA-ES Dufosse 2.2e4 (1e4)2.6e4 (2e4)2.6e4 (3e4)2.7e4 (3e4)2.8e4 (3e4)2.9e4 (3e4)3.0e4 (3e4)14/15
AL4-CMA-ES Dufosse 8790 (5021)1.1e4 (5621)1.1e4 (6034)1.2e4 (6006)1.2e4 (6085)1.3e4 (6609)1.3e4 (6672)15/15
BPepsMAg Hellwig 2.4e5 (3e5)3.1e5 (3e5)3.1e5 (3e5)4.8e5 (8e5)9.3e5 (9e5)2e50/15
COBYLA Dufosse 3792 (5904)6824 (8472)6836 (8466)6854 (8468)6876 (8478)9515 (1e4)3.2e4 (3e4)8/15
RandomSearch-5 Dufosse 2.0e6 (3e6)6e50/15
epsMAg Hellwig 2.7e5 (5e5)3.5e5 (5e5)4.6e5 (5e5)8.3e5 (1e6)2.0e6 (2e6)2.0e6 (3e6)2.0e6 (2e6)2/15
fmincon Hellwig 2420/15

Δ fopt
f44, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 6.5e4 (9e4)6.7e4 (9e4)6.9e4 (8e4)7.1e4 (1e5)7.3e4 (1e5)7.7e4 (1e5)8.0e4 (1e5)12/15
AL2-CMA-ES Dufosse 4.8e4 (8e4)5.7e4 (9e4)5.9e4 (8e4)6.0e4 (1e5)6.2e4 (8e4)6.5e4 (9e4)6.7e4 (9e4)12/15
AL3-CMA-ES Dufosse 4.3e4 (8e4)5.7e4 (8e4)5.9e4 (8e4)5.9e4 (8e4)6.0e4 (2e5)6.3e4 (8e4)6.4e4 (1e5)12/15
AL4-CMA-ES Dufosse 2.6e4 (1e4)4.2e4 (8e4)4.3e4 (8e4)4.4e4 (8e4)4.5e4 (8e4)4.7e4 (8e4)4.8e4 (8e4)13/15
BPepsMAg Hellwig 3.0e5 (4e5)3.0e5 (3e5)4.7e5 (4e5)6.2e5 (5e5)1.4e6 (2e6)2.9e6 (2e6)2e50/15
COBYLA Dufosse 790 (772)803 (766)822 (754)833 (766)854 (756)3295 (5694)5131 (1e4)14/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 8.3e5 (9e5)1.2e6 (2e6)3e50/15
fmincon Hellwig 3317 (3489)5337 (4104)1.2e4 (3556)1.3e4 (5258)2230/15

Δ fopt
f45, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.1e5 (2e5)3.4e5 (2e5)3.4e5 (3e5)3.4e5 (4e5)3.4e5 (3e5)3.5e5 (4e5)4.5e5 (5e5)4/15
AL2-CMA-ES Dufosse 1.7e5 (2e5)2.0e5 (2e5)2.1e5 (3e5)2.1e5 (3e5)2.1e5 (3e5)2.1e5 (2e5)2.1e5 (3e5)7/15
AL3-CMA-ES Dufosse 1.4e5 (2e5)2.7e5 (4e5)2.7e5 (4e5)2.7e5 (4e5)2.8e5 (3e5)2.8e5 (4e5)3.4e5 (4e5)5/15
AL4-CMA-ES Dufosse 2.3e5 (3e5)3.3e5 (6e5)3.3e5 (4e5)3.4e5 (4e5)3.4e5 (5e5)3.4e5 (4e5)3.4e5 (4e5)5/15
BPepsMAg Hellwig 1.6e5 (2e5)2.1e5 (2e5)6.0e5 (5e5)1.4e6 (2e6)2e50/15
COBYLA Dufosse 139 (204)154 (198)163 (202)189 (202)214 (249)262 (304)285 (302)15/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 2.1e5 (4e5)3.6e5 (5e5)6.2e5 (7e5)2.0e6 (3e6)2.0e6 (2e6)2.0e6 (2e6)2.0e6 (3e6)2/15
fmincon Hellwig 1652 (3180)1673 (5294)1764 (3634)1855 (3437)1906 (2583)6106 (5692)1.2e4 (1e4)1/15

Δ fopt
f46, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.5e5 (3e5)2.5e5 (4e5)2.5e5 (3e5)2.5e5 (3e5)2.5e5 (2e5)2.6e5 (3e5)2.6e5 (3e5)6/15
AL2-CMA-ES Dufosse 6.4e5 (8e5)1.0e6 (1e6)1.0e6 (1e6)1.0e6 (1e6)1.0e6 (1e6)1.0e6 (1e6)1.0e6 (9e5)2/15
AL3-CMA-ES Dufosse 2.2e5 (2e5)2.7e5 (5e5)2.7e5 (5e5)2.7e5 (2e5)2.7e5 (3e5)2.8e5 (2e5)2.8e5 (3e5)6/15
AL4-CMA-ES Dufosse 2.1e5 (3e5)2.6e5 (2e5)2.6e5 (6e5)2.6e5 (3e5)2.7e5 (5e5)2.7e5 (2e5)2.7e5 (3e5)6/15
BPepsMAg Hellwig 2.3e5 (3e5)2.8e5 (3e5)6.5e5 (6e5)2.9e6 (4e6)2.9e6 (4e6)2e50/15
COBYLA Dufosse 186 (272)199 (266)207 (262)216 (280)231 (286)251 (292)259 (292)15/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 5.0e4 (2e5)1.5e5 (2e5)1.2e6 (1e6)4.2e6 (6e6)3e50/15
fmincon Hellwig 3544 (5566)3629 (9201)3722 (6686)3796 (5808)3832 (7366)6526 (8070)9822 (7976)2/15

Δ fopt
f47, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.2e5 (5e5)3.2e5 (4e5)3.3e5 (4e5)3.3e5 (5e5)3.3e5 (3e5)3.3e5 (3e5)4.4e5 (7e5)4/15
AL2-CMA-ES Dufosse 2.6e5 (3e5)4.4e5 (8e5)4.4e5 (6e5)4.4e5 (7e5)4.4e5 (5e5)4.4e5 (4e5)4.4e5 (4e5)4/15
AL3-CMA-ES Dufosse 2.8e5 (3e5)4.8e5 (6e5)4.8e5 (6e5)4.8e5 (5e5)4.9e5 (5e5)6.5e5 (9e5)6.6e5 (7e5)3/15
AL4-CMA-ES Dufosse 1.7e5 (2e5)2.0e5 (3e5)2.0e5 (3e5)2.0e5 (2e5)2.0e5 (3e5)2.1e5 (2e5)2.1e5 (3e5)7/15
BPepsMAg Hellwig 2.5e5 (5e5)4.9e5 (4e5)5.0e5 (5e5)2.9e6 (3e6)2.9e6 (2e6)2e50/15
COBYLA Dufosse 112 (180)124 (174)135 (174)★2148 (180)★2167 (176)★2194 (176)★2203 (180)★215/15
RandomSearch-5 Dufosse 8.6e6 (8e6)6e50/15
epsMAg Hellwig 5.2e4 (2e5)2.1e5 (3e5)8.4e5 (2e6)1.2e6 (1e6)1.2e6 (2e6)2.0e6 (2e6)2.0e6 (2e6)2/15
fmincon Hellwig 387 (300)456 (332)632 (400)674 (476)757 (516)2181 (2388)8778 (9506)1/15

Δ fopt
f48, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.4e5 (3e5)4.3e5 (5e5)4.4e5 (3e5)4.4e5 (5e5)4.4e5 (5e5)4.4e5 (5e5)4.4e5 (7e5)4/15
AL2-CMA-ES Dufosse 1.4e5 (2e5)1.9e5 (2e5)2.0e5 (2e5)2.0e5 (2e5)2.0e5 (3e5)2.5e5 (3e5)2.5e5 (2e5)6/15
AL3-CMA-ES Dufosse 3.3e5 (4e5)4.2e5 (7e5)4.3e5 (6e5)4.3e5 (5e5)4.3e5 (6e5)4.3e5 (6e5)4.3e5 (4e5)4/15
AL4-CMA-ES Dufosse 6.1e5 (8e5)6.1e5 (5e5)6.2e5 (8e5)6.2e5 (8e5)6.2e5 (8e5)6.2e5 (6e5)6.2e5 (8e5)3/15
BPepsMAg Hellwig 2.2e5 (2e5)3.8e5 (4e5)4.9e5 (4e5)3.0e6 (3e6)3.0e6 (4e6)2e50/15
COBYLA Dufosse 83 (148)95 (142)133 (146)172 (194)194 (192)256 (204)284 (268)15/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 8.1e4 (2e5)1.2e5 (2e5)6.2e5 (8e5)1.2e6 (1e6)2.0e6 (3e6)2.0e6 (2e6)2.0e6 (2e6)2/15
fmincon Hellwig 134 (79)218 (128)696 (887)1017 (901)1294 (865)3765 (9326)5290/15

Δ fopt
f49, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.5e4 (2e4)3.3e4 (2e4)3.4e4 (2e4)3.5e4 (2e4)3.6e4 (3e4)3.8e4 (3e4)4.8e4 (8e4)13/15
AL2-CMA-ES Dufosse 3.2e4 (2e4)3.7e4 (2e4)3.8e4 (2e4)3.9e4 (2e4)4.1e4 (2e4)4.4e4 (3e4)4.7e4 (3e4)14/15
AL3-CMA-ES Dufosse 1.7e4 (2e4)4.5e4 (8e4)5.0e4 (8e4)5.1e4 (1e5)5.1e4 (9e4)5.2e4 (8e4)5.3e4 (8e4)12/15
AL4-CMA-ES Dufosse 2.3e4 (2e4)3.3e4 (5e4)3.4e4 (5e4)3.5e4 (5e4)3.6e4 (5e4)3.8e4 (6e4)3.9e4 (6e4)14/15
BPepsMAg Hellwig 2.6e5 (1e5)3.7e5 (5e5)3.7e5 (3e5)4.9e5 (6e5)6.4e5 (7e5)2e50/15
COBYLA Dufosse 7125 (8106)9564 (8698)9582 (8704)9596 (8696)9626 (8666)2.5e4 (3e4)4.8e4 (4e4)7/15
RandomSearch-5 Dufosse 2.8e6 (3e6)6e50/15
epsMAg Hellwig 8.3e5 (1e6)8.3e5 (1e6)8.3e5 (1e6)2.0e6 (3e6)4.2e6 (5e6)3e50/15
fmincon Hellwig 2150/15

Δ fopt
f50, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.7e5 (3e5)4.4e5 (5e5)4.4e5 (5e5)4.4e5 (5e5)4.4e5 (4e5)4.5e5 (4e5)4.5e5 (5e5)4/15
AL2-CMA-ES Dufosse 2.2e5 (3e5)3.4e5 (4e5)3.4e5 (5e5)3.4e5 (3e5)3.4e5 (3e5)3.5e5 (3e5)4.4e5 (4e5)4/15
AL3-CMA-ES Dufosse 2.0e5 (2e5)3.4e5 (3e5)3.5e5 (5e5)3.5e5 (5e5)3.5e5 (3e5)3.6e5 (5e5)4.5e5 (7e5)4/15
AL4-CMA-ES Dufosse 4.3e5 (7e5)4.3e5 (7e5)4.3e5 (5e5)4.4e5 (6e5)4.4e5 (4e5)4.4e5 (7e5)4.4e5 (5e5)4/15
BPepsMAg Hellwig 8.3e5 (8e5)8.3e5 (1e6)8.3e5 (9e5)1.3e6 (2e6)2e50/15
COBYLA Dufosse 1609 (1308)1623 (1302)1640 (1300)1652 (1282)1672 (1298)3102 (3588)4716 (6223)15/15
RandomSearch-5 Dufosse 8.9e6 (8e6)6e50/15
epsMAg Hellwig 8.3e5 (9e5)2.0e6 (2e6)4.2e6 (4e6)3e50/15
fmincon Hellwig 2570/15

Δ fopt
f51, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.1e6 (2e6)2.1e6 (3e6)2.1e6 (2e6)2.1e6 (3e6)2.1e6 (3e6)2.1e6 (3e6)2.1e6 (2e6)1/15
AL2-CMA-ES Dufosse 2.2e6 (3e6)2.2e6 (4e6)2.2e6 (3e6)2.2e6 (3e6)2.2e6 (2e6)2.2e6 (2e6)2.2e6 (3e6)1/15
AL3-CMA-ES Dufosse 2.1e6 (3e6)2.1e6 (3e6)2.1e6 (2e6)2.1e6 (2e6)2.1e6 (3e6)2.1e6 (3e6)2.2e6 (2e6)1/15
AL4-CMA-ES Dufosse 9.9e5 (1e6)9.9e5 (1e6)9.9e5 (1e6)9.9e5 (1e6)9.9e5 (8e5)9.9e5 (1e6)9.9e5 (9e5)2/15
BPepsMAg Hellwig 2.3e5 (3e5)3.8e5 (4e5)1.4e6 (2e6)2.9e6 (4e6)2e50/15
COBYLA Dufosse 138 (150)148 (154)157 (152)179 (188)281 (194)389 (295)469 (836)15/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 8.4e4 (2e5)2.1e5 (3e5)8.4e5 (1e6)1.2e6 (1e6)2.0e6 (2e6)4.2e6 (5e6)4.2e6 (7e6)1/15
fmincon Hellwig 725 (779)807 (846)895 (837)1097 (1304)1212 (1134)4508 (4933)9045 (2e4)1/15

Δ fopt
f52, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 6.2e5 (7e5)6.2e5 (7e5)6.2e5 (9e5)6.2e5 (5e5)6.2e5 (6e5)6.2e5 (5e5)6.2e5 (6e5)3/15
AL2-CMA-ES Dufosse 6.2e5 (7e5)6.2e5 (7e5)6.3e5 (6e5)6.3e5 (8e5)6.3e5 (5e5)6.3e5 (7e5)6.3e5 (9e5)3/15
AL3-CMA-ES Dufosse 4.5e5 (7e5)6.3e5 (7e5)6.3e5 (7e5)6.4e5 (1e6)6.4e5 (1e6)6.4e5 (7e5)6.4e5 (7e5)3/15
AL4-CMA-ES Dufosse 6.2e5 (7e5)6.3e5 (9e5)6.3e5 (7e5)6.3e5 (7e5)6.3e5 (6e5)6.3e5 (1e6)6.3e5 (1e6)3/15
BPepsMAg Hellwig 2.0e5 (2e5)2.7e5 (3e5)6.4e5 (6e5)1.4e6 (2e6)1.4e6 (1e6)2e50/15
COBYLA Dufosse 314 (374)325 (378)336 (383)348 (378)417 (482)506 (720)549 (721)15/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 1.2e5 (2e5)2.7e5 (3e5)6.2e5 (6e5)2.0e6 (3e6)4.2e6 (5e6)4.2e6 (4e6)4.2e6 (4e6)1/15
fmincon Hellwig 2054 (7331)2129 (7688)2561 (2957)2601 (5180)2978 (6396)1.8e4 (3e4)3110/15

Δ fopt
f53, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 9.9e5 (1e6)1.0e6 (9e5)1.0e6 (1e6)1.0e6 (9e5)1.0e6 (2e6)1.0e6 (8e5)1.0e6 (1e6)2/15
AL2-CMA-ES Dufosse 6.4e5 (7e5)6.4e5 (6e5)6.4e5 (7e5)6.4e5 (6e5)6.4e5 (6e5)6.5e5 (9e5)6.5e5 (1e6)3/15
AL3-CMA-ES Dufosse 6.4e5 (9e5)2.1e6 (2e6)2.1e6 (3e6)2.1e6 (2e6)2.1e6 (2e6)2.1e6 (3e6)2.1e6 (3e6)1/15
AL4-CMA-ES Dufosse 4.4e5 (6e5)4.4e5 (6e5)4.4e5 (5e5)4.5e5 (5e5)4.5e5 (5e5)4.5e5 (8e5)4.5e5 (6e5)4/15
BPepsMAg Hellwig 2.2e5 (4e5)2.9e5 (5e5)4.4e5 (4e5)1.3e6 (2e6)1.3e6 (1e6)2e50/15
COBYLA Dufosse 182 (236)190 (236)200 (238)212 (238)224 (236)363 (386)778 (388)15/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 2.1e5 (3e5)6.1e5 (9e5)2.0e6 (3e6)3e50/15
fmincon Hellwig 657 (806)700 (581)840 (712)959 (701)1005 (1028)3252 (4346)3300/15

Δ fopt
f54, 3-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 6.5e5 (8e5)6.5e5 (7e5)6.5e5 (6e5)6.6e5 (1e6)6.6e5 (7e5)6.7e5 (1e6)1.0e6 (1e6)2/15
AL2-CMA-ES Dufosse 6.3e5 (1e6)9.9e5 (1e6)9.9e5 (9e5)9.9e5 (1e6)9.9e5 (1e6)1.0e6 (7e5)1.0e6 (1e6)2/15
AL3-CMA-ES Dufosse 6.1e5 (6e5)9.8e5 (2e6)9.9e5 (7e5)9.9e5 (1e6)9.9e5 (1e6)9.9e5 (8e5)9.9e5 (1e6)2/15
AL4-CMA-ES Dufosse 1.0e6 (1e6)1.0e6 (8e5)1.0e6 (1e6)1.0e6 (9e5)1.0e6 (1e6)1.0e6 (1e6)1.0e6 (7e5)2/15
BPepsMAg Hellwig 1.7e5 (2e5)2.5e5 (4e5)9.2e5 (1e6)2e50/15
COBYLA Dufosse 175 (288)186 (286)195 (284)206 (300)222 (300)240 (296)255 (306)15/15
RandomSearch-5 Dufosse 6e50/15
epsMAg Hellwig 5.3e4 (2e5)3.6e5 (5e5)8.6e5 (8e5)1.3e6 (1e6)2.0e6 (3e6)2.0e6 (2e6)2.0e6 (2e6)2/15
fmincon Hellwig 368 (454)404 (606)497 (647)564 (728)700 (649)2538 (4034)3460/15

Previous dimension | Dimension = 5 | Next dimension

Δ fopt
f1, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 692 (148)964 (203)1232 (216)1495 (228)1736 (259)2245 (240)2568 (236)15/15
AL2-CMA-ES Dufosse 678 (152)952 (133)1232 (233)1493 (231)1711 (185)2359 (342)2701 (462)15/15
AL3-CMA-ES Dufosse 654 (99)973 (151)1233 (202)1486 (217)1696 (208)2138 (259)2416 (173)15/15
AL4-CMA-ES Dufosse 709 (204)980 (198)1301 (153)1527 (228)1744 (246)2211 (221)2509 (149)15/15
BPepsMAg Hellwig 570 (436)1658 (671)2879 (1087)3703 (823)4626 (1544)6090 (1736)7022 (1811)15/15
COBYLA Dufosse 34 (15)57 (15)78 (20)98 (16)120 (18)162 (19)183 (23)15/15
RandomSearch-5 Dufosse 9.7e5 (6e5)1e60/15
epsMAg Hellwig 677 (478)1788 (813)6379 (5900)1.6e4 (1e4)2.9e4 (2e4)4.6e4 (2978)4.8e4 (2116)15/15
fmincon Hellwig 39 (13)48 (19)59 (38)69 (27)80 (26)★2116 (26)148 (73)13/15

Δ fopt
f2, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1086 (297)1521 (327)1885 (282)2218 (442)2522 (361)3276 (284)3757 (268)15/15
AL2-CMA-ES Dufosse 994 (324)1323 (321)1701 (267)2018 (313)2384 (393)3217 (580)3601 (486)15/15
AL3-CMA-ES Dufosse 1117 (398)1494 (509)1859 (524)2179 (637)2535 (693)3231 (646)3611 (779)15/15
AL4-CMA-ES Dufosse 996 (264)1372 (258)1727 (282)2065 (286)2416 (445)3099 (450)3400 (442)15/15
BPepsMAg Hellwig 2945 (4736)5899 (5777)1.0e4 (8455)1.2e4 (1e4)3.0e4 (3e4)7.3e4 (9e4)9.1e4 (1e5)14/15
COBYLA Dufosse 32 (11)★251 (13)69 (15)86 (19)105 (15)142 (17)160 (24)15/15
RandomSearch-5 Dufosse 1.4e7 (2e7)1e60/15
epsMAg Hellwig 8230 (9900)1.9e4 (2e4)2.9e4 (2e4)4.0e4 (8085)4.6e4 (8353)5.2e4 (6810)5.4e4 (6340)15/15
fmincon Hellwig 49 (10)64 (17)92 (24)102 (23)108 (20)133 (21)269 (212)8/15

Δ fopt
f3, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1695 (377)2376 (690)2979 (597)3652 (765)4197 (597)5144 (760)2.4e4 (3747)14/15
AL2-CMA-ES Dufosse 1746 (586)2365 (732)2999 (750)3614 (678)4246 (1076)5314 (1222)6.6e4 (1e5)13/15
AL3-CMA-ES Dufosse 1463 (270)2117 (622)2711 (654)3339 (594)4010 (614)5088 (718)5600 (728)15/15
AL4-CMA-ES Dufosse 1642 (353)2245 (685)2729 (620)3396 (587)3918 (523)5090 (810)5486 (773)15/15
BPepsMAg Hellwig 6921 (8606)2.1e4 (2e4)7.7e4 (1e5)3.5e5 (3e5)8.4e5 (1e6)2.3e6 (2e6)3e50/15
COBYLA Dufosse 20 (6)★324 (10)★324 (10)★324 (10)★324 (10)★324 (10)★324 (10)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 2.3e4 (2e4)3.4e4 (2e4)4.3e4 (9366)5.2e4 (6884)5.5e4 (5889)5.8e4 (6354)5.9e4 (6226)15/15
fmincon Hellwig 79 (30)92 (30)113 (36)121 (36)141 (30)207 (94)799 (634)3/15

Δ fopt
f4, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1996 (452)2557 (563)3102 (718)3757 (757)4339 (729)5319 (469)6704 (3573)15/15
AL2-CMA-ES Dufosse 2060 (379)2592 (552)3140 (477)3648 (485)4252 (748)5810 (1015)1.2e4 (9682)15/15
AL3-CMA-ES Dufosse 1976 (776)2587 (734)3192 (764)3759 (862)4224 (919)5280 (713)7580 (3682)15/15
AL4-CMA-ES Dufosse 1929 (405)2599 (541)3159 (569)3692 (497)4270 (638)5203 (686)6611 (3400)15/15
BPepsMAg Hellwig 5988 (1e4)3.9e4 (5e4)1.0e5 (1e5)3.4e5 (5e5)8.6e5 (7e5)5.1e6 (5e6)3e50/15
COBYLA Dufosse 23 (6)★327 (20)★328 (22)★329 (26)★329 (26)★329 (26)★329 (26)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 3.6e4 (1e4)4.5e4 (5658)4.9e4 (7241)5.2e4 (4947)5.4e4 (3027)5.7e4 (3221)5.8e4 (3173)15/15
fmincon Hellwig 81 (36)93 (42)111 (42)127 (31)142 (25)261 (228)294 (204)8/15

Δ fopt
f5, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1955 (419)2548 (641)3186 (757)3741 (765)4353 (848)5304 (740)1.3e4 (1e4)15/15
AL2-CMA-ES Dufosse 2107 (629)2672 (624)3384 (840)3977 (864)4419 (938)5358 (776)6407 (1014)15/15
AL3-CMA-ES Dufosse 1940 (543)2508 (462)3093 (569)3670 (519)4265 (551)5321 (730)8846 (4801)15/15
AL4-CMA-ES Dufosse 1821 (441)2388 (362)2897 (341)3446 (678)4025 (540)5149 (713)7683 (4754)15/15
BPepsMAg Hellwig 1.1e4 (2e4)5.5e4 (5e4)1.9e5 (2e5)3.9e5 (4e5)6.7e5 (6e5)3e50/15
COBYLA Dufosse 23 (6)★325 (12)★330 (19)★330 (19)★331 (23)★334 (23)★334 (23)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 3.6e4 (1e4)4.6e4 (5039)5.1e4 (3777)5.4e4 (3574)5.5e4 (3769)5.8e4 (3883)5.9e4 (3804)15/15
fmincon Hellwig 90 (28)103 (28)123 (31)134 (37)149 (42)490 (388)490 (506)5/15

Δ fopt
f6, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2189 (629)2727 (489)3284 (551)3992 (919)4399 (686)5580 (883)7274 (3782)15/15
AL2-CMA-ES Dufosse 2408 (847)2971 (892)3452 (927)4150 (990)4638 (966)5580 (972)6657 (935)15/15
AL3-CMA-ES Dufosse 2297 (760)2782 (838)3336 (1194)4021 (904)4583 (1092)5569 (842)1.0e4 (4506)15/15
AL4-CMA-ES Dufosse 2358 (687)2806 (656)3328 (709)4085 (668)4650 (707)5577 (469)1.5e4 (1e4)15/15
BPepsMAg Hellwig 2.4e4 (5e4)4.8e4 (6e4)1.6e5 (2e5)4.3e5 (4e5)6.4e5 (6e5)4.9e6 (4e6)4.9e6 (5e6)1/15
COBYLA Dufosse 21 (6)★322 (7)★330 (20)★331 (20)★332 (30)★333 (30)★333 (30)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 4.1e4 (7041)4.7e4 (8842)5.1e4 (4371)5.3e4 (3538)5.4e4 (3578)5.6e4 (3710)5.8e4 (3046)15/15
fmincon Hellwig 112 (66)134 (79)165 (79)183 (61)197 (61)798 (932)1067 (1450)3/15

Δ fopt
f7, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 922 (421)1518 (376)2023 (610)2509 (478)2863 (371)3506 (319)3724 (339)15/15
AL2-CMA-ES Dufosse 945 (262)1402 (457)1947 (537)2514 (298)2860 (539)3567 (341)4226 (449)15/15
AL3-CMA-ES Dufosse 908 (317)1405 (438)1942 (606)2433 (695)2865 (778)3709 (578)4012 (604)15/15
AL4-CMA-ES Dufosse 893 (449)1627 (341)2025 (499)2552 (549)2952 (307)3529 (271)3805 (317)15/15
BPepsMAg Hellwig 446 (463)3920 (4629)1.1e4 (1e4)8.2e4 (1e5)5.5e5 (6e5)3e50/15
COBYLA Dufosse 34 (15)★2213 (474)4235 (3025)2.7e4 (4e4)3.4e5 (3e5)7.1e5 (6e5)5e40/15
RandomSearch-5 Dufosse 2888 (4085)2.4e5 (3e5)7.0e6 (7e6)1e60/15
epsMAg Hellwig 1144 (1441)7883 (1e4)2.4e4 (1e4)4.1e4 (1e4)6.5e4 (4e4)1.1e6 (2e6)5e50/15
fmincon Hellwig 73 (25)104 (27)547 (734)6356 (7373)3.2e4 (4e4)2.0e5 (2e5)2e40/15

Δ fopt
f8, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 6833 (9853)1.4e4 (1e4)3.0e4 (2e4)5.6e4 (6e4)1.9e5 (3e5)7.0e5 (1e6)7.1e5 (1e6)4/15
AL2-CMA-ES Dufosse 5584 (4812)9332 (9160)1.2e4 (9167)1.4e4 (8599)1.5e4 (8915)4.6e4 (5e4)1.2e5 (1e5)14/15
AL3-CMA-ES Dufosse 1.8e4 (2e4)5.3e4 (8e4)8.9e4 (1e5)1.2e5 (1e5)1.7e5 (2e5)4.0e5 (3e5)7.9e5 (1e6)4/15
AL4-CMA-ES Dufosse 1.7e4 (2e4)5.0e4 (6e4)8.4e4 (1e5)9.6e4 (1e5)1.2e5 (1e5)2.0e5 (2e5)3.2e5 (4e5)8/15
BPepsMAg Hellwig 4206 (5630)2.0e4 (2e4)6.4e5 (7e5)2.3e6 (2e6)3e50/15
COBYLA Dufosse 56 (31)1022 (2014)6314 (9068)5.2e4 (5e4)7.1e5 (1e6)5e40/15
RandomSearch-5 Dufosse 6.1e5 (6e5)6.8e6 (1e7)1e60/15
epsMAg Hellwig 1.6e4 (2e4)4.9e4 (5e4)2.6e5 (4e5)1.1e6 (2e6)2.3e6 (2e6)5e50/15
fmincon Hellwig 682 (112)9173 (2e4)2.8e4 (3e4)9.2e4 (9e4)2.9e5 (4e5)2e40/15

Δ fopt
f9, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.8e4 (2e4)2.2e4 (2e4)2.3e4 (2e4)2.3e4 (2e4)2.4e4 (2e4)4.2e4 (2e4)3.2e5 (4e5)7/15
AL2-CMA-ES Dufosse 9851 (5558)1.1e4 (6386)1.2e4 (5889)1.2e4 (6163)1.3e4 (6243)2.2e4 (2e4)1.0e6 (2e6)3/15
AL3-CMA-ES Dufosse 5.2e4 (8e4)5.5e4 (8e4)6.1e4 (8e4)9.6e4 (2e5)9.9e4 (2e5)1.0e5 (1e5)1.0e5 (1e5)12/15
AL4-CMA-ES Dufosse 2.6e4 (3e4)3.3e4 (3e4)3.6e4 (4e4)3.8e4 (4e4)3.9e4 (4e4)4.0e4 (4e4)4.6e4 (4e4)15/15
BPepsMAg Hellwig 1.5e5 (2e5)6.6e5 (7e5)2.4e6 (3e6)5.0e6 (4e6)4e50/15
COBYLA Dufosse 185 (26)★3476 (1018)★2620 (1016)★2632 (1014)★2647 (1020)★21329 (3023)★21341 (3030)★215/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 7.1e4 (5e4)3.5e5 (3e5)6.3e5 (6e5)1.1e6 (1e6)1.1e6 (1e6)1.1e6 (2e6)1.1e6 (1e6)5/15
fmincon Hellwig 7229 (1e4)1.2e4 (2e4)1.6e4 (3e4)1.7e4 (2e4)2.1e4 (4e4)1.7e5 (2e5)1.7e5 (2e5)1/15

Δ fopt
f10, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.0e4 (8151)1.1e4 (8521)1.2e4 (8365)1.3e4 (8192)1.3e4 (8360)1.4e4 (8376)8.3e4 (1e5)12/15
AL2-CMA-ES Dufosse 5171 (2413)5833 (2475)6684 (2983)7101 (2839)7667 (2865)8697 (2724)4.2e4 (6e4)14/15
AL3-CMA-ES Dufosse 1.3e4 (1e4)1.8e4 (2e4)1.9e4 (2e4)2.0e4 (2e4)2.1e4 (2e4)2.2e4 (2e4)2.3e4 (2e4)15/15
AL4-CMA-ES Dufosse 7550 (8323)1.2e4 (1e4)1.3e4 (1e4)1.4e4 (1e4)1.5e4 (1e4)1.6e4 (1e4)1.7e4 (1e4)15/15
BPepsMAg Hellwig 1.1e5 (2e5)3.3e5 (4e5)8.4e5 (1e6)5.0e6 (5e6)4e50/15
COBYLA Dufosse 51 (21)★383 (31)★3242 (190)★2297 (413)★2368 (815)★22055 (5024)2444 (5012)★215/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 4.6e4 (9380)5.4e4 (1e4)9.3e4 (4e4)1.4e5 (3e5)1.5e5 (3e5)1.9e5 (3e5)1.9e5 (3e5)12/15
fmincon Hellwig 3416 (6621)4675 (6904)5368 (1e4)6346 (1e4)8449 (1e4)18650/15

Δ fopt
f11, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 4762 (4582)5418 (4883)6024 (4849)6736 (4964)7257 (5109)8283 (5139)1.5e4 (5776)15/15
AL2-CMA-ES Dufosse 3292 (1866)3864 (1973)4428 (2193)4996 (2147)5482 (2143)6413 (2095)7827 (2110)15/15
AL3-CMA-ES Dufosse 3240 (1279)4164 (1471)4607 (1637)5293 (1847)5753 (1709)6751 (1526)9199 (5715)15/15
AL4-CMA-ES Dufosse 4427 (1528)5379 (1536)6035 (1514)6640 (1571)7190 (1639)8275 (1651)9774 (4452)15/15
BPepsMAg Hellwig 1.7e5 (2e5)3.4e5 (2e5)8.2e5 (6e5)1.5e6 (2e6)2.4e6 (3e6)4.9e6 (5e6)4.9e6 (3e6)1/15
COBYLA Dufosse 47 (13)★356 (15)★368 (22)★390 (16)★3245 (26)★2411 (1000)★2429 (1010)★215/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 4.1e4 (1e4)5.0e4 (6171)5.3e4 (1e4)5.5e4 (1e4)5.8e4 (1e4)9.5e4 (1e4)9.7e4 (1e4)14/15
fmincon Hellwig 4993 (1e4)5172 (1e4)5714 (1e4)5891 (1e4)7768 (1e4)4.1e4 (5e4)6690/15

Δ fopt
f12, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3748 (2983)4300 (3030)4924 (3009)5496 (3192)6026 (2893)6893 (3094)1.4e4 (1e4)15/15
AL2-CMA-ES Dufosse 2429 (466)2967 (498)3501 (479)4065 (432)4513 (442)5535 (607)6755 (694)15/15
AL3-CMA-ES Dufosse 2772 (1215)3473 (1401)4003 (1468)4586 (1436)5275 (1207)6312 (1416)8525 (5648)15/15
AL4-CMA-ES Dufosse 3027 (1426)3738 (1733)4307 (1541)4804 (1637)5372 (1537)6395 (1281)1.0e4 (3939)15/15
BPepsMAg Hellwig 1.2e5 (1e5)2.0e5 (2e5)8.3e5 (1e6)5.2e6 (7e6)5.2e6 (6e6)3e50/15
COBYLA Dufosse 46 (17)★365 (12)★375 (15)★392 (11)★3102 (12)★3129 (21)★3149 (18)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 4.0e4 (6648)4.7e4 (3281)5.1e4 (4150)5.3e4 (3409)5.4e4 (3125)5.7e4 (2665)5.8e4 (2776)15/15
fmincon Hellwig 1152 (1684)2102 (1764)2293 (1734)2419 (1942)2858 (1948)13230/15

Δ fopt
f13, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 597 (175)763 (134)985 (209)1224 (254)1541 (279)2113 (311)2420 (311)15/15
AL2-CMA-ES Dufosse 558 (233)736 (232)895 (234)1264 (321)1542 (252)2192 (265)7.0e4 (3e5)12/15
AL3-CMA-ES Dufosse 524 (256)701 (225)922 (328)1223 (226)1415 (207)2057 (454)2434 (319)15/15
AL4-CMA-ES Dufosse 528 (129)681 (196)938 (239)1157 (307)1487 (284)2062 (212)2376 (306)15/15
BPepsMAg Hellwig 78 (66)144 (85)193 (122)193 (122)193 (122)193 (122)193 (122)15/15
COBYLA Dufosse 17 (1)17 (1)17 (1)17 (1)★217 (1)★317 (1)★317 (1)★315/15
RandomSearch-5 Dufosse 356 (488)3819 (4307)2.4e4 (3e4)2.6e5 (2e5)4.3e6 (5e6)1e60/15
epsMAg Hellwig 167 (118)245 (210)302 (99)302 (99)302 (99)302 (99)302 (99)15/15
fmincon Hellwig 20 (6)24 (12)28 (12)35 (12)43 (6)106 (115)470/15

Δ fopt
f14, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 945 (327)1249 (402)1611 (261)2012 (305)2312 (390)3043 (381)3.0e4 (3e4)14/15
AL2-CMA-ES Dufosse 934 (213)1263 (135)1670 (263)1948 (300)2359 (251)1.7e5 (4e5)1.0e6 (8e5)3/15
AL3-CMA-ES Dufosse 1030 (233)1325 (234)1682 (331)1979 (417)2286 (407)2920 (292)3636 (292)15/15
AL4-CMA-ES Dufosse 1036 (367)1385 (337)1718 (435)1942 (501)2319 (428)3004 (446)3333 (478)15/15
BPepsMAg Hellwig 1463 (2635)1948 (2861)2729 (3432)2969 (3575)3182 (3798)4946 (4968)5192 (5222)15/15
COBYLA Dufosse 17 (1)★217 (1)★217 (1)★317 (1)★317 (1)★317 (1)★317 (1)★315/15
RandomSearch-5 Dufosse 3.5e4 (5e4)4.6e6 (7e6)1e60/15
epsMAg Hellwig 3485 (5759)1.0e4 (1e4)1.7e4 (2e4)2.4e4 (2e4)2.6e4 (2e4)3.3e4 (3e4)3.4e4 (3e4)15/15
fmincon Hellwig 41 (12)44 (18)53 (12)57 (12)65 (12)158 (103)1156 (1153)1/15

Δ fopt
f15, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1918 (444)2514 (531)3308 (750)3753 (646)4391 (672)5471 (670)3.1e5 (4e5)7/15
AL2-CMA-ES Dufosse 2072 (767)2743 (704)3351 (1076)3926 (769)4492 (819)6.7e4 (1e5)3e50/15
AL3-CMA-ES Dufosse 2080 (456)2675 (616)3316 (694)3960 (753)4334 (808)5446 (846)2.5e4 (4e4)15/15
AL4-CMA-ES Dufosse 2076 (727)2694 (562)3347 (640)3917 (612)4323 (798)5431 (1027)1.5e4 (1e4)15/15
BPepsMAg Hellwig 1.7e4 (2e4)8.3e4 (1e5)8.0e5 (7e5)1.5e6 (2e6)4e50/15
COBYLA Dufosse 19 (5)★320 (5)★320 (5)★321 (7)★321 (7)★321 (7)★321 (7)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 2.9e4 (2e4)4.2e4 (2e4)5.6e4 (2e4)5.9e4 (2e4)6.1e4 (2e4)6.4e4 (2e4)6.5e4 (2e4)15/15
fmincon Hellwig 75 (24)84 (24)93 (18)109 (43)117 (43)636 (732)958 (1204)2/15

Δ fopt
f16, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2347 (617)2842 (659)3438 (687)4028 (753)4449 (656)6428 (3472)1.2e5 (2e5)11/15
AL2-CMA-ES Dufosse 2325 (522)2943 (666)3478 (827)3963 (873)4489 (795)6971 (863)5.9e4 (6e4)14/15
AL3-CMA-ES Dufosse 2014 (406)2501 (404)3046 (482)3536 (528)4038 (470)5077 (754)5.1e4 (1e5)13/15
AL4-CMA-ES Dufosse 1981 (335)2607 (411)3128 (523)3667 (545)4141 (546)5109 (760)4.0e4 (3e4)14/15
BPepsMAg Hellwig 2.4e4 (3e4)1.0e5 (1e5)4.1e5 (5e5)8.8e5 (1e6)1.6e6 (2e6)4e50/15
COBYLA Dufosse 21 (7)★323 (7)★324 (7)★326 (18)★326 (18)★326 (18)★326 (18)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 3.8e4 (1e4)4.6e4 (8655)4.9e4 (6844)5.2e4 (3289)5.5e4 (4292)5.7e4 (4352)5.8e4 (4563)15/15
fmincon Hellwig 68 (30)82 (36)95 (36)108 (36)124 (36)1430/15

Δ fopt
f17, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2388 (1030)2904 (926)3466 (896)4085 (1120)4642 (1015)6178 (2428)2.8e4 (3e4)15/15
AL2-CMA-ES Dufosse 2243 (564)2850 (565)3417 (713)3979 (422)4512 (792)5459 (818)7864 (3874)15/15
AL3-CMA-ES Dufosse 2274 (723)2841 (811)3541 (728)4104 (669)4707 (951)5646 (709)1.7e4 (2e4)15/15
AL4-CMA-ES Dufosse 2391 (827)2927 (1004)3474 (1011)4077 (848)4630 (896)5507 (1060)1.1e4 (9615)15/15
BPepsMAg Hellwig 1.8e4 (2e4)6.6e4 (1e5)2.6e5 (3e5)6.4e5 (6e5)2.5e6 (2e6)3e50/15
COBYLA Dufosse 22 (6)★328 (17)★329 (17)★329 (20)★329 (20)★329 (20)★329 (20)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 3.8e4 (9691)4.5e4 (6316)4.9e4 (3516)5.2e4 (3252)5.3e4 (2915)5.6e4 (4203)5.7e4 (3970)15/15
fmincon Hellwig 89 (24)100 (36)115 (48)149 (36)155 (37)1690/15

Δ fopt
f18, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2870 (1014)3398 (982)4201 (1116)4720 (914)5129 (1097)6114 (854)3.9e4 (2e4)14/15
AL2-CMA-ES Dufosse 2590 (836)3111 (825)3739 (836)4348 (845)4841 (897)5857 (1064)7599 (4684)15/15
AL3-CMA-ES Dufosse 2660 (923)3142 (896)3843 (729)4383 (1104)4834 (893)5934 (903)4.1e4 (2e4)14/15
AL4-CMA-ES Dufosse 2353 (676)2873 (632)3504 (868)4204 (820)4668 (716)6415 (1031)7.2e4 (1e5)13/15
BPepsMAg Hellwig 2.2e4 (3e4)5.0e4 (8e4)1.7e5 (2e5)3.1e5 (3e5)2.5e6 (3e6)3e50/15
COBYLA Dufosse 19 (3)★322 (15)★327 (17)★327 (17)★332 (29)★334 (31)★334 (31)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 3.8e4 (1e4)4.6e4 (5125)5.0e4 (1529)5.2e4 (2349)5.3e4 (1569)5.5e4 (1822)5.7e4 (1739)15/15
fmincon Hellwig 109 (43)124 (48)165 (55)183 (31)188 (31)1910/15

Δ fopt
f19, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5693 (5599)1.7e4 (9334)2.8e4 (1e4)4.0e4 (1e4)5.1e4 (2e4)7.0e4 (1e4)7.8e4 (2e4)15/15
AL2-CMA-ES Dufosse 2725 (2267)6320 (5434)1.3e4 (8190)2.8e4 (2e4)4.7e4 (2e4)6.8e4 (3e4)7.8e4 (2e4)15/15
AL3-CMA-ES Dufosse 6494 (1e4)2.4e4 (2e4)6.1e4 (5e4)1.3e5 (7e4)2.0e5 (2e5)6.6e5 (9e5)1.2e6 (1e6)3/15
AL4-CMA-ES Dufosse 1.1e4 (2e4)2.7e4 (3e4)6.0e4 (4e4)9.7e4 (6e4)1.2e5 (5e4)1.7e5 (7e4)1.8e5 (7e4)14/15
BPepsMAg Hellwig 1596 (2996)1.6e4 (2e4)2.3e5 (3e5)2.4e6 (3e6)3e50/15
COBYLA Dufosse 146 (58)1776 (2850)8865 (2e4)9.6e4 (1e5)7.3e5 (8e5)5e40/15
RandomSearch-5 Dufosse 3367 (4075)2.7e5 (2e5)1e60/15
epsMAg Hellwig 774 (811)6957 (1e4)4.6e4 (7e4)3.7e5 (5e5)5e50/15
fmincon Hellwig 390 (201)3211 (4098)1.1e4 (2e4)8.1e4 (8e4)2e40/15

Δ fopt
f20, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 7498 (8443)1.8e4 (1e4)3.0e4 (2e4)2.1e5 (3e5)4.2e5 (5e5)7.8e5 (1e6)3.5e6 (4e6)1/15
AL2-CMA-ES Dufosse 4222 (3359)9774 (8453)1.8e4 (1e4)2.9e4 (2e4)4.4e4 (4e4)1.2e5 (1e5)1.8e5 (2e5)12/15
AL3-CMA-ES Dufosse 2.0e4 (3e4)5.6e4 (4e4)1.1e5 (8e4)1.3e5 (7e4)2.0e5 (1e5)3.6e5 (4e5)5.2e5 (7e5)6/15
AL4-CMA-ES Dufosse 1.7e4 (1e4)4.2e4 (2e4)6.6e4 (4e4)9.3e4 (6e4)1.2e5 (6e4)1.9e5 (2e5)2.3e5 (3e5)11/15
BPepsMAg Hellwig 6851 (6232)4.9e4 (5e4)3.0e5 (3e5)1.6e6 (1e6)3e50/15
COBYLA Dufosse 49 (30)★31393 (2162)1.1e4 (1e4)6.2e4 (9e4)5e40/15
RandomSearch-5 Dufosse 4.9e5 (1e6)1e60/15
epsMAg Hellwig 1.3e4 (2e4)5.4e4 (5e4)2.0e5 (3e5)2.1e6 (2e6)5e50/15
fmincon Hellwig 257 (204)4091 (1e4)2.7e4 (4e4)9.7e4 (2e5)3.3e5 (4e5)2e40/15

Δ fopt
f21, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.3e4 (2e4)1.7e4 (2e4)3.4e4 (2e4)3.4e4 (2e4)3.5e4 (2e4)3.6e4 (2e4)1.8e5 (3e5)9/15
AL2-CMA-ES Dufosse 8204 (6824)9621 (7312)1.0e4 (7334)1.1e4 (7337)1.2e4 (7538)2.2e4 (3e4)6.1e5 (7e5)5/15
AL3-CMA-ES Dufosse 2.9e4 (3e4)3.5e4 (4e4)3.6e4 (4e4)4.6e4 (4e4)4.7e4 (4e4)5.2e4 (5e4)6.8e4 (1e5)13/15
AL4-CMA-ES Dufosse 2.7e4 (4e4)3.3e4 (4e4)3.5e4 (4e4)3.6e4 (4e4)3.7e4 (5e4)3.9e4 (5e4)4.0e4 (5e4)15/15
BPepsMAg Hellwig 1.8e5 (2e5)7.0e5 (1e6)4.9e6 (5e6)4e50/15
COBYLA Dufosse 111 (35)★2327 (1006)346 (1010)361 (1008)★2375 (1008)★2576 (1026)★2600 (1032)★215/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 1.1e5 (2e5)2.6e5 (4e5)3.2e5 (5e5)3.2e5 (3e5)4.0e5 (4e5)5.1e5 (7e5)5.2e5 (7e5)9/15
fmincon Hellwig 774 (1562)2652 (1944)2844 (1971)2956 (2032)3254 (2202)4.8e4 (7e4)14610/15

Δ fopt
f22, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5605 (5873)6839 (6960)7814 (6992)8399 (6871)9064 (7293)1.0e4 (7376)2.9e4 (9233)14/15
AL2-CMA-ES Dufosse 4662 (4269)5417 (4466)6217 (4452)6890 (4306)7379 (4143)8485 (4299)5.7e4 (1e5)13/15
AL3-CMA-ES Dufosse 1.9e4 (1e4)2.8e4 (3e4)2.9e4 (3e4)3.9e4 (3e4)4.0e4 (3e4)4.1e4 (3e4)4.1e4 (3e4)14/15
AL4-CMA-ES Dufosse 8157 (5692)1.0e4 (1e4)1.2e4 (2e4)1.3e4 (1e4)1.3e4 (1e4)1.5e4 (2e4)2.2e4 (3e4)15/15
BPepsMAg Hellwig 1.2e5 (2e5)3.2e5 (4e5)8.5e5 (1e6)1.6e6 (2e6)4e50/15
COBYLA Dufosse 132 (90)★2344 (1000)489 (1010)633 (1004)966 (1012)1502 (3046)1513 (3040)15/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 4.0e4 (7474)4.9e4 (6772)5.4e4 (6955)5.8e4 (1e4)6.2e4 (3e4)1.0e5 (3e4)1.4e5 (3e5)13/15
fmincon Hellwig 697 (538)902 (869)1171 (1176)1312 (1249)1833 (2142)1.1e4 (8811)10870/15

Δ fopt
f23, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3567 (3367)4821 (3803)5497 (3728)5993 (3608)6647 (3549)7742 (3716)1.0e4 (7313)15/15
AL2-CMA-ES Dufosse 3733 (3041)4389 (3063)5103 (3119)5779 (3334)6695 (3617)7873 (3571)1.0e4 (3414)15/15
AL3-CMA-ES Dufosse 6342 (6599)7746 (6674)8335 (6616)1.0e4 (7413)1.1e4 (1e4)1.8e4 (1e4)2.3e4 (2e4)15/15
AL4-CMA-ES Dufosse 4060 (1851)5498 (3202)6586 (3607)7263 (3888)8343 (4835)9726 (7882)2.0e4 (3e4)15/15
BPepsMAg Hellwig 9.9e4 (2e5)3.7e5 (5e5)9.2e5 (1e6)2.5e6 (2e6)3e50/15
COBYLA Dufosse 64 (16)★3156 (14)★2969 (15)★22117 (20)2196 (318)4026 (1024)4051 (1020)14/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 4.2e4 (7052)5.2e4 (7678)5.6e4 (4646)5.8e4 (5813)6.0e4 (1e4)6.5e4 (3e4)6.8e4 (3e4)15/15
fmincon Hellwig 834 (1614)1321 (1974)1730 (2688)1912 (2691)2557 (2403)1.6e4 (2e4)11110/15

Δ fopt
f24, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 4436 (5062)1.4e4 (4969)1.4e4 (5063)1.5e4 (5163)1.6e4 (5031)1.7e4 (4960)5.0e4 (1e5)13/15
AL2-CMA-ES Dufosse 4267 (2377)4774 (2377)5369 (2388)5887 (2309)6521 (2315)7423 (2358)8526 (4557)15/15
AL3-CMA-ES Dufosse 1.5e4 (5160)1.7e4 (6077)2.3e4 (6087)2.4e4 (6107)2.4e4 (6222)2.5e4 (6240)2.8e4 (1e4)14/15
AL4-CMA-ES Dufosse 1.7e4 (2988)2.2e4 (3080)2.2e4 (3348)2.3e4 (3327)2.4e4 (3517)2.5e4 (3400)3.5e4 (5e4)14/15
BPepsMAg Hellwig 1.3e5 (1e5)5.7e5 (7e5)3e50/15
COBYLA Dufosse 51 (11)★362 (11)★376 (16)★393 (12)★3109 (11)★3137 (24)★3156 (27)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 4.0e4 (4808)4.7e4 (3116)5.2e4 (5043)5.4e4 (4680)5.5e4 (4926)5.8e4 (7774)6.0e4 (8295)15/15
fmincon Hellwig 1269 (1935)4548 (6107)5011 (6134)5412 (6264)7260 (1e4)2.7e4 (6e4)21830/15

Δ fopt
f25, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 428 (389)2813 (3629)1.4e4 (1e4)3.3e4 (2e4)4.9e4 (2e4)1.1e5 (6e4)1.6e5 (7e4)14/15
AL2-CMA-ES Dufosse 392 (263)1988 (3519)1.1e4 (1e4)3.1e4 (3e4)4.9e4 (4e4)1.2e5 (6e4)1.6e5 (6e4)14/15
AL3-CMA-ES Dufosse 404 (237)5652 (8924)5.6e4 (4e4)1.4e5 (1e5)4.2e5 (5e5)3.6e6 (5e6)3e50/15
AL4-CMA-ES Dufosse 534 (384)3666 (4495)3.6e4 (4e4)1.1e5 (7e4)2.1e5 (1e5)8.7e5 (1e6)1.9e6 (1e6)2/15
BPepsMAg Hellwig 190 (254)412 (361)744 (421)3560 (4243)3.6e5 (5e5)3e50/15
COBYLA Dufosse 26 (13)52 (24)76 (20)96 (16)3.3e4 (5e4)5e40/15
RandomSearch-5 Dufosse 284 (334)4133 (4137)3.5e4 (3e4)1.1e6 (2e6)1e60/15
epsMAg Hellwig 237 (132)412 (375)481 (317)1220 (1849)1.2e5 (2e5)5e50/15
fmincon Hellwig 54 (30)70 (34)76 (34)2285 (5213)1.3e5 (2e5)2e40/15

Δ fopt
f26, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1180 (240)6368 (9962)5.4e4 (1e5)7.6e5 (9e5)3e50/15
AL2-CMA-ES Dufosse 1175 (310)3429 (3691)2.4e4 (2e4)1.8e5 (3e5)3.9e5 (5e5)6.6e5 (7e5)3e50/15
AL3-CMA-ES Dufosse 1220 (368)1789 (429)6.8e4 (1e5)2.8e5 (4e5)5.2e5 (4e5)8.4e5 (8e5)1.1e6 (8e5)3/15
AL4-CMA-ES Dufosse 1306 (338)1.5e4 (3e4)9.2e4 (1e5)3.8e5 (3e5)4.9e5 (6e5)5.2e5 (4e5)5.2e5 (6e5)6/15
BPepsMAg Hellwig 1761 (1797)2256 (1458)3730 (3043)4122 (2899)1.1e5 (1e5)3e50/15
COBYLA Dufosse 61 (21)83 (23)101 (21)124 (20)6566 (8026)5e40/15
RandomSearch-5 Dufosse 4.4e5 (1e6)4.2e6 (6e6)1e60/15
epsMAg Hellwig 1.1e4 (2e4)1.7e4 (2e4)2.5e4 (2e4)3.1e4 (2e4)3.6e5 (5e5)5e50/15
fmincon Hellwig 82 (34)101 (38)115 (60)4381 (1e4)2.4e5 (2e5)2e40/15

Δ fopt
f27, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.6e4 (2e4)3.0e4 (2e4)3.4e4 (2e4)4.4e4 (2e4)4.5e4 (2e4)4.8e4 (3e4)5.2e5 (7e5)5/15
AL2-CMA-ES Dufosse 7429 (5144)1.0e4 (6171)1.2e4 (8763)1.6e4 (2e4)3.1e4 (2e4)4.9e4 (8e4)3.1e5 (3e5)8/15
AL3-CMA-ES Dufosse 3.5e4 (4e4)8.3e4 (1e5)1.1e5 (2e5)1.4e5 (1e5)1.4e5 (2e5)1.9e5 (3e5)2.2e5 (4e5)9/15
AL4-CMA-ES Dufosse 4.2e4 (5e4)6.9e4 (1e5)7.4e4 (1e5)7.6e4 (1e5)7.8e4 (1e5)1.2e5 (2e5)1.3e5 (1e5)12/15
BPepsMAg Hellwig 1.3e5 (2e5)1.5e6 (2e6)2.4e6 (2e6)5.0e6 (3e6)4e50/15
COBYLA Dufosse 59 (23)★3475 (1006)1289 (3021)1444 (3003)1594 (4022)1626 (4020)1645 (4007)15/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 6.5e4 (9e4)1.8e5 (3e5)5.2e5 (8e5)5.9e5 (7e5)5.9e5 (7e5)8.8e5 (1e6)8.8e5 (9e5)6/15
fmincon Hellwig 1978 (2489)3143 (2475)6449 (1e4)8614 (1e4)9523 (2e4)3.5e4 (5e4)16110/15

Δ fopt
f28, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 7771 (1e4)1.0e4 (1e4)1.3e4 (1e4)1.3e4 (1e4)1.4e4 (1e4)1.5e4 (9892)4.1e4 (4e4)14/15
AL2-CMA-ES Dufosse 6193 (4636)7126 (4852)7826 (4940)8462 (4889)8928 (5081)9963 (4947)2.1e4 (2e4)15/15
AL3-CMA-ES Dufosse 2.8e4 (2e4)3.2e4 (2e4)3.7e4 (2e4)3.7e4 (2e4)3.8e4 (2e4)3.9e4 (2e4)4.0e4 (2e4)14/15
AL4-CMA-ES Dufosse 9303 (9325)1.9e4 (1e4)2.6e4 (5e4)3.5e4 (5e4)3.7e4 (5e4)3.8e4 (5e4)3.9e4 (5e4)14/15
BPepsMAg Hellwig 8.3e4 (6e4)4.5e5 (5e5)2.5e6 (2e6)2.5e6 (4e6)5.0e6 (6e6)4e50/15
COBYLA Dufosse 206 (22)★2606 (48)★2873 (1004)899 (1010)1054 (1026)1225 (1042)1248 (1038)15/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 5.6e4 (2e4)9.8e4 (7e4)1.1e5 (7e4)1.5e5 (3e5)1.5e5 (3e5)1.6e5 (3e5)1.6e5 (3e5)13/15
fmincon Hellwig 1091 (1207)1382 (1827)1797 (1837)2948 (2380)4626 (7098)1.2e4 (1e4)6.1e4 (9e4)1/15

Δ fopt
f29, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 6803 (6689)7388 (6895)7998 (6817)8622 (6939)9145 (6998)1.0e4 (6829)2.9e4 (1e4)14/15
AL2-CMA-ES Dufosse 5223 (3244)5798 (3285)6404 (3303)6909 (3381)7397 (3510)8492 (3302)1.1e4 (5220)15/15
AL3-CMA-ES Dufosse 4656 (4559)5653 (4717)6248 (4775)6780 (4873)7320 (4700)8414 (5017)1.3e4 (9610)15/15
AL4-CMA-ES Dufosse 7275 (6985)7919 (6812)8519 (6730)9120 (6768)9668 (6795)1.1e4 (6709)1.3e4 (8937)15/15
BPepsMAg Hellwig 1.3e5 (2e5)8.6e5 (1e6)2.4e6 (4e6)5.0e6 (5e6)5.0e6 (4e6)4e50/15
COBYLA Dufosse 54 (12)★370 (19)★386 (20)★3102 (23)★3204 (24)★3284 (39)★3296 (31)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 4.3e4 (7577)4.8e4 (5747)5.2e4 (6019)5.4e4 (5302)5.5e4 (4763)5.8e4 (5092)5.9e4 (5213)15/15
fmincon Hellwig 489 (344)670 (410)928 (635)1156 (1211)1815 (2984)2.1e4 (2e4)10670/15

Δ fopt
f30, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5687 (6947)6230 (6856)6809 (6975)7496 (6812)7998 (7061)9246 (6735)2.0e4 (2e4)15/15
AL2-CMA-ES Dufosse 3800 (3141)4496 (3103)5099 (3057)5625 (3049)6182 (3419)7283 (3559)1.0e4 (8584)15/15
AL3-CMA-ES Dufosse 4209 (3096)4702 (2994)5168 (3075)5812 (3042)6341 (2905)7508 (2888)1.2e4 (1e4)15/15
AL4-CMA-ES Dufosse 3593 (2200)4165 (2349)4742 (2185)5317 (2426)5686 (2201)7015 (2320)8512 (4304)15/15
BPepsMAg Hellwig 1.3e5 (2e5)3.1e5 (5e5)4.4e5 (4e5)1.6e6 (2e6)5.1e6 (7e6)3e50/15
COBYLA Dufosse 42 (12)★363 (14)★378 (17)★394 (18)★3115 (23)★3147 (33)★3158 (27)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 4.1e4 (6385)4.7e4 (3812)5.0e4 (1986)5.2e4 (1537)5.3e4 (1581)5.6e4 (2010)5.7e4 (2011)15/15
fmincon Hellwig 699 (459)2764 (1282)3320 (1407)3778 (2978)5569 (4732)2.5e4 (3e4)12370/15

Δ fopt
f31, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1057 (217)1317 (233)4359 (5636)1.3e4 (1e4)2.1e4 (2e4)2.9e4 (2e4)4.6e4 (2e4)14/15
AL2-CMA-ES Dufosse 992 (167)1289 (262)2414 (2260)4725 (5588)9462 (7676)1.6e4 (8950)1.7e4 (9443)15/15
AL3-CMA-ES Dufosse 995 (191)1300 (150)3803 (1884)1.7e4 (1e4)9.6e4 (2e5)3.2e5 (4e5)5.2e5 (8e5)5/15
AL4-CMA-ES Dufosse 989 (259)1282 (352)4593 (9027)1.0e4 (1e4)3.7e4 (3e4)4.1e5 (5e5)4.1e5 (5e5)6/15
BPepsMAg Hellwig 1058 (850)1837 (1068)2960 (1430)3937 (2198)1.1e4 (1e4)2.7e5 (3e5)1.1e6 (1e6)4/15
COBYLA Dufosse 61 (13)★281 (18)★3102 (16)★2127 (17)★2681 (1004)3.3e4 (4e4)1.0e5 (1e5)6/15
RandomSearch-5 Dufosse 7.3e6 (8e6)1e60/15
epsMAg Hellwig 1760 (411)3344 (1266)1.5e4 (1e4)2.7e4 (8737)1.9e5 (3e5)5e50/15
fmincon Hellwig 142 (45)164 (40)179 (59)219 (65)4233 (1e4)1.0e4 (1e4)22890/15

Δ fopt
f32, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1823 (923)2399 (1068)3311 (1729)3827 (1879)4357 (2018)5622 (2270)5989 (2208)15/15
AL2-CMA-ES Dufosse 1931 (924)2745 (1552)3348 (1582)3829 (1813)4309 (1855)5332 (1910)9178 (6970)15/15
AL3-CMA-ES Dufosse 2210 (1373)4202 (2953)2.1e4 (3840)2.2e4 (3833)2.3e4 (4268)2.4e4 (6811)2.5e4 (7615)14/15
AL4-CMA-ES Dufosse 1879 (1142)2892 (2321)4145 (2822)4956 (2954)5557 (3154)2.3e4 (4251)2.4e4 (4584)14/15
BPepsMAg Hellwig 5964 (7562)2.9e4 (5e4)8.5e4 (8e4)3.8e5 (4e5)1.0e6 (8e5)3e50/15
COBYLA Dufosse 63 (18)★3164 (203)334 (572)2032 (4006)2167 (4014)1.4e4 (3e4)2.7e4 (4e4)10/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 2.1e4 (2e4)3.3e4 (2e4)4.5e4 (1e4)5.4e4 (8180)7.9e4 (3e4)3.8e5 (4e5)1.5e6 (2e6)4/15
fmincon Hellwig 149 (52)228 (83)547 (454)1244 (458)1249 (458)2126 (1047)4808 (1e4)4/15

Δ fopt
f33, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3422 (1967)4085 (1873)4669 (1846)5362 (1819)6068 (1839)7221 (1827)9068 (5189)15/15
AL2-CMA-ES Dufosse 2960 (1027)3662 (919)4364 (899)5008 (1147)5762 (1020)6849 (1179)3.7e4 (5e4)14/15
AL3-CMA-ES Dufosse 3175 (1033)3794 (839)4405 (751)5034 (1104)5712 (952)6780 (1109)7369 (1095)15/15
AL4-CMA-ES Dufosse 3188 (1377)3804 (1124)4434 (1036)5109 (1200)5738 (1332)6833 (1304)7349 (1273)15/15
BPepsMAg Hellwig 2.9e4 (3e4)9.3e4 (7e4)3.2e5 (3e5)2.2e6 (2e6)4.4e6 (3e6)3e50/15
COBYLA Dufosse 56 (16)★370 (17)★388 (24)★299 (28)★2113 (23)★2135 (18)★3143 (25)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 3.7e4 (1e4)4.5e4 (1e4)5.1e4 (9738)5.6e4 (1e4)5.8e4 (9554)6.0e4 (9189)6.2e4 (9243)15/15
fmincon Hellwig 147 (100)157 (100)169 (94)178 (94)186 (88)975 (787)1750/15

Δ fopt
f34, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3794 (2130)4345 (2103)4854 (2122)5388 (2009)5906 (2271)7028 (2222)1.0e4 (8827)15/15
AL2-CMA-ES Dufosse 3358 (1388)4082 (1208)4594 (1487)5149 (1596)5672 (1566)6713 (1484)9.8e4 (1e5)11/15
AL3-CMA-ES Dufosse 3275 (1111)3941 (996)4549 (1005)5081 (933)5583 (1054)6605 (980)7105 (1023)15/15
AL4-CMA-ES Dufosse 3280 (2011)3816 (1986)4339 (1925)4820 (1968)5415 (1951)6373 (1918)7533 (1937)15/15
BPepsMAg Hellwig 2.3e4 (3e4)9.2e4 (1e5)4.1e5 (4e5)1.4e6 (2e6)4.6e6 (5e6)3e50/15
COBYLA Dufosse 46 (14)★361 (17)★378 (10)★284 (23)104 (17)131 (30)★2142 (25)★215/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 3.9e4 (7437)4.6e4 (4907)4.9e4 (3732)5.2e4 (2252)5.4e4 (2367)5.7e4 (3144)5.8e4 (3016)15/15
fmincon Hellwig 125 (67)139 (67)146 (66)149 (67)159 (61)843 (620)2548 (2554)1/15

Δ fopt
f35, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3335 (1483)3879 (1266)4312 (1351)4827 (1301)5305 (1347)6382 (1389)6882 (1458)15/15
AL2-CMA-ES Dufosse 3610 (1600)4126 (1625)4604 (1713)5117 (1585)5654 (1641)6588 (1751)9920 (3025)15/15
AL3-CMA-ES Dufosse 3300 (1417)3882 (1556)4374 (1550)4824 (1525)5380 (1440)6383 (1327)6864 (1450)15/15
AL4-CMA-ES Dufosse 2997 (990)3504 (932)4019 (917)4574 (917)5040 (986)6000 (1028)6553 (1174)15/15
BPepsMAg Hellwig 3.0e4 (3e4)1.1e5 (1e5)3.5e5 (5e5)1.4e6 (2e6)4.9e6 (6e6)3e50/15
COBYLA Dufosse 48 (21)★363 (13)★376 (20)★391 (19)★3103 (14)★3125 (30)★3135 (24)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 4.3e4 (6017)4.9e4 (3559)5.1e4 (2347)5.3e4 (1626)5.5e4 (1839)5.7e4 (1808)5.8e4 (1192)15/15
fmincon Hellwig 130 (65)147 (71)163 (76)168 (75)221 (120)1790/15

Δ fopt
f36, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5100 (1936)5637 (1861)6094 (1834)6717 (1814)7299 (1818)8332 (1950)2.7e4 (3675)14/15
AL2-CMA-ES Dufosse 4113 (1821)4682 (1912)5197 (1907)5673 (1846)6118 (1882)7082 (1946)7592 (1875)15/15
AL3-CMA-ES Dufosse 4236 (2114)4687 (2132)5230 (2368)5717 (2204)6242 (2377)7417 (2278)8719 (2874)15/15
AL4-CMA-ES Dufosse 4744 (2534)5251 (2617)5742 (2450)6303 (2544)6841 (2607)7858 (2457)8905 (3621)15/15
BPepsMAg Hellwig 3.7e4 (7e4)7.8e4 (8e4)2.4e5 (3e5)7.4e5 (1e6)9.8e5 (1e6)4.8e6 (7e6)3e50/15
COBYLA Dufosse 51 (14)★365 (6)★378 (14)★391 (9)★3101 (11)★3118 (22)★3136 (25)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 4.5e4 (4842)4.8e4 (4157)5.1e4 (2370)5.3e4 (1798)5.4e4 (1791)5.7e4 (2583)5.8e4 (2732)15/15
fmincon Hellwig 163 (72)185 (67)198 (67)203 (66)214 (67)3364 (3474)3364 (4064)1/15

Δ fopt
f37, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 990 (134)1245 (162)1672 (405)1992 (433)2383 (449)2975 (367)3307 (505)15/15
AL2-CMA-ES Dufosse 965 (225)1322 (259)1640 (257)1946 (321)2287 (380)2948 (421)3272 (409)15/15
AL3-CMA-ES Dufosse 942 (146)1330 (191)1609 (200)1988 (314)2443 (302)3082 (377)3461 (416)15/15
AL4-CMA-ES Dufosse 973 (172)1341 (202)1639 (241)1966 (334)2390 (480)3036 (389)3339 (445)15/15
BPepsMAg Hellwig 459 (199)823 (261)1666 (464)2988 (1567)4608 (2368)7264 (1483)1.2e4 (5572)15/15
COBYLA Dufosse 60 (23)★396 (33)★3155 (31)★23747 (30)3830 (77)9028 (9274)2.2e5 (3e5)3/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 677 (294)1082 (196)1582 (372)3744 (656)9702 (2e4)4.6e4 (1e4)4.9e4 (1e4)15/15
fmincon Hellwig 146 (37)187 (41)224 (28)257 (42)294 (42)453 (96)★2776 (627)★212/15

Δ fopt
f38, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1389 (372)1848 (401)2381 (478)2768 (450)3193 (433)4218 (446)4773 (535)15/15
AL2-CMA-ES Dufosse 1348 (302)1827 (343)2252 (365)2674 (418)3175 (552)4151 (409)4605 (408)15/15
AL3-CMA-ES Dufosse 1377 (271)1876 (360)2404 (300)2801 (248)3266 (386)4172 (451)4653 (515)15/15
AL4-CMA-ES Dufosse 1398 (314)1860 (361)2291 (395)2831 (508)3319 (760)4217 (734)4665 (757)15/15
BPepsMAg Hellwig 556 (247)2076 (1101)4284 (3093)8391 (8485)1.4e4 (1e4)8.4e4 (2e5)1.2e5 (2e5)12/15
COBYLA Dufosse 57 (13)★384 (25)★3128 (70)★2188 (175)452 (561)2.8e4 (5e4)1.6e5 (2e5)4/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 1027 (370)5074 (2040)1.3e4 (2e4)2.6e4 (2e4)4.3e4 (3e4)5.8e4 (9166)6.1e4 (8148)15/15
fmincon Hellwig 141 (52)174 (45)226 (38)263 (65)315 (88)494 (100)★3891 (492)★39/15

Δ fopt
f39, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1901 (493)2660 (557)3417 (794)4064 (769)4623 (937)5794 (728)6410 (756)15/15
AL2-CMA-ES Dufosse 1914 (480)2672 (729)3339 (696)3963 (820)4509 (1024)5677 (964)6352 (976)15/15
AL3-CMA-ES Dufosse 2056 (646)2844 (902)3534 (824)4091 (783)4681 (771)5813 (774)6413 (745)15/15
AL4-CMA-ES Dufosse 1902 (516)2588 (561)3293 (418)3806 (330)4352 (509)5501 (437)5921 (344)15/15
BPepsMAg Hellwig 1542 (1456)9604 (2e4)3.8e4 (5e4)1.7e5 (2e5)6.8e5 (6e5)3e50/15
COBYLA Dufosse 41 (11)★247 (20)★353 (19)★358 (24)★360 (27)★360 (27)★360 (27)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 1590 (727)2.4e4 (3e4)4.3e4 (3e4)5.1e4 (7474)5.6e4 (5340)5.9e4 (5024)6.0e4 (5253)15/15
fmincon Hellwig 91 (42)107 (54)142 (54)157 (50)179 (48)294 (156)1037 (1201)3/15

Δ fopt
f40, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2112 (615)2812 (697)3407 (677)3987 (767)4526 (710)5762 (921)6229 (809)15/15
AL2-CMA-ES Dufosse 2108 (760)3022 (857)3705 (1028)4242 (1038)4842 (1085)6041 (1292)6488 (1067)15/15
AL3-CMA-ES Dufosse 2313 (848)3023 (948)3769 (1059)4392 (1016)4986 (1032)6046 (1193)6664 (1214)15/15
AL4-CMA-ES Dufosse 2171 (636)2928 (594)3560 (688)4062 (776)4631 (664)5748 (702)6199 (847)15/15
BPepsMAg Hellwig 1374 (1197)7498 (4136)6.7e4 (9e4)1.8e5 (2e5)4.3e5 (5e5)5.1e6 (5e6)3e50/15
COBYLA Dufosse 45 (11)★348 (14)★356 (21)★359 (30)★359 (30)★362 (30)★362 (30)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 2216 (2195)2.6e4 (2e4)4.8e4 (5427)5.2e4 (5167)5.4e4 (4537)5.7e4 (4015)5.8e4 (3858)15/15
fmincon Hellwig 101 (42)119 (55)147 (66)173 (40)198 (40)296 (259)1148 (1319)3/15

Δ fopt
f41, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2848 (1242)3628 (1527)4299 (1537)4870 (1450)5424 (1463)6586 (1278)7712 (1232)15/15
AL2-CMA-ES Dufosse 3064 (1406)3809 (1357)4520 (1736)5089 (1700)5630 (1683)6798 (1530)1.3e4 (1451)15/15
AL3-CMA-ES Dufosse 2993 (1292)3831 (1256)4502 (1102)5131 (1466)5668 (1566)6843 (1284)7341 (1488)15/15
AL4-CMA-ES Dufosse 2560 (970)3283 (984)3870 (965)4474 (1080)4995 (950)6172 (933)6691 (1050)15/15
BPepsMAg Hellwig 2285 (2620)1.2e4 (2e4)3.7e4 (3e4)1.4e5 (2e5)7.0e5 (7e5)3e50/15
COBYLA Dufosse 29 (10)★335 (20)★238 (24)★344 (37)★347 (38)★352 (53)★352 (53)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 6125 (4086)3.2e4 (2e4)4.4e4 (2e4)5.1e4 (4231)5.3e4 (4786)5.5e4 (3205)5.7e4 (2844)15/15
fmincon Hellwig 104 (54)113 (78)155 (50)164 (50)189 (50)533 (292)1628 (1577)2/15

Δ fopt
f42, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3105 (1287)3802 (1290)4330 (1261)4889 (1290)5399 (1096)6560 (1370)7712 (1280)15/15
AL2-CMA-ES Dufosse 3173 (1145)4011 (1303)4613 (1179)5114 (1362)5634 (1250)6813 (1174)8150 (2911)15/15
AL3-CMA-ES Dufosse 2611 (613)3313 (708)3892 (725)4368 (855)4949 (668)6175 (710)6692 (704)15/15
AL4-CMA-ES Dufosse 3010 (1280)3720 (1176)4327 (1170)4808 (1186)5463 (1084)6555 (1093)7148 (1285)15/15
BPepsMAg Hellwig 7760 (2e4)2.3e4 (2e4)1.0e5 (1e5)2.0e5 (2e5)1.1e6 (1e6)5.0e6 (4e6)5.0e6 (5e6)1/15
COBYLA Dufosse 31 (8)★340 (19)★347 (30)★352 (33)★358 (34)★363 (49)★363 (49)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 1.8e4 (2e4)4.5e4 (5138)5.2e4 (5202)5.3e4 (3767)5.4e4 (3705)5.6e4 (4006)5.8e4 (4063)15/15
fmincon Hellwig 97 (48)111 (54)143 (48)172 (30)201 (42)230 (48)1706 (2032)2/15

Δ fopt
f43, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.3e4 (3e4)2.6e4 (3e4)2.7e4 (3e4)2.8e4 (4e4)2.9e4 (4e4)3.1e4 (4e4)3.2e4 (4e4)15/15
AL2-CMA-ES Dufosse 2.6e4 (2e4)2.7e4 (2e4)2.8e4 (2e4)2.9e4 (2e4)3.0e4 (2e4)3.2e4 (3e4)3.4e4 (3e4)15/15
AL3-CMA-ES Dufosse 3.0e4 (2e4)3.5e4 (2e4)3.7e4 (2e4)3.8e4 (2e4)3.9e4 (2e4)4.1e4 (2e4)4.2e4 (2e4)15/15
AL4-CMA-ES Dufosse 2.9e4 (4e4)3.1e4 (3e4)3.2e4 (3e4)3.3e4 (3e4)3.4e4 (3e4)3.6e4 (4e4)3.7e4 (4e4)15/15
BPepsMAg Hellwig 4.8e6 (7e6)4.8e6 (3e6)4.8e6 (6e6)4.8e6 (7e6)3e50/15
COBYLA Dufosse 7.4e4 (9e4)9.1e4 (1e5)9.1e4 (1e5)9.1e4 (2e5)9.1e4 (1e5)7.2e5 (8e5)5e40/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 4.4e5 (8e5)5.8e5 (1e6)7.6e5 (5e5)3.3e6 (3e6)3.3e6 (5e6)7.0e6 (7e6)7.0e6 (9e6)1/15
fmincon Hellwig 4620/15

Δ fopt
f44, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.2e5 (2e5)1.2e5 (1e5)1.2e5 (2e5)1.3e5 (2e5)1.6e5 (2e5)1.6e5 (3e5)1.7e5 (2e5)11/15
AL2-CMA-ES Dufosse 1.0e5 (2e5)1.0e5 (2e5)1.1e5 (3e5)1.1e5 (1e5)1.1e5 (1e5)1.2e5 (1e5)1.2e5 (2e5)12/15
AL3-CMA-ES Dufosse 1.7e5 (2e5)1.7e5 (2e5)1.8e5 (2e5)2.0e5 (2e5)2.0e5 (2e5)2.0e5 (2e5)2.1e5 (2e5)10/15
AL4-CMA-ES Dufosse 3.0e5 (3e5)3.0e5 (2e5)3.1e5 (4e5)3.1e5 (4e5)3.6e5 (5e5)3.7e5 (3e5)3.7e5 (3e5)7/15
BPepsMAg Hellwig 4.7e6 (4e6)4.7e6 (6e6)4.7e6 (6e6)3e50/15
COBYLA Dufosse 5.9e4 (2e5)6.0e4 (5e4)6.0e4 (1e5)6.3e4 (7e4)7.5e4 (9e4)3.4e5 (3e5)5e40/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 1.4e6 (2e6)2.0e6 (2e6)3.3e6 (6e6)7.0e6 (8e6)7.0e6 (1e7)7.1e6 (6e6)5e50/15
fmincon Hellwig 6010/15

Δ fopt
f45, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.7e6 (3e6)1.7e6 (2e6)1.8e6 (2e6)3.6e6 (4e6)3.6e6 (4e6)3.6e6 (3e6)3.6e6 (5e6)1/15
AL2-CMA-ES Dufosse 1.1e6 (2e6)1.1e6 (1e6)1.1e6 (1e6)1.7e6 (2e6)1.7e6 (2e6)3.6e6 (4e6)3.6e6 (3e6)1/15
AL3-CMA-ES Dufosse 3.6e6 (4e6)3.6e6 (4e6)3.6e6 (5e6)3.6e6 (3e6)3.6e6 (4e6)3.6e6 (6e6)3.6e6 (5e6)1/15
AL4-CMA-ES Dufosse 1.1e6 (9e5)1.1e6 (8e5)1.1e6 (1e6)1.1e6 (1e6)1.7e6 (2e6)1.7e6 (2e6)1.7e6 (1e6)2/15
BPepsMAg Hellwig 4.9e6 (6e6)4.9e6 (6e6)4.9e6 (6e6)3e50/15
COBYLA Dufosse 1238 (1174)1258 (1180)1287 (1182)1402 (1486)2561 (4200)3012 (4194)3807 (6342)15/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 1.0e6 (1e6)2.0e6 (3e6)7.0e6 (9e6)7.0e6 (7e6)7.0e6 (8e6)7.1e6 (7e6)7.1e6 (7e6)1/15
fmincon Hellwig 4730/15

Δ fopt
f46, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.6e6 (4e6)3.6e6 (5e6)3.6e6 (4e6)3e50/15
AL2-CMA-ES Dufosse 7.4e5 (9e5)7.4e5 (1e6)1.0e6 (2e6)1.0e6 (1e6)1.0e6 (1e6)1.0e6 (1e6)1.7e6 (2e6)2/15
AL3-CMA-ES Dufosse 3e50/15
AL4-CMA-ES Dufosse 3e50/15
BPepsMAg Hellwig 1.4e6 (2e6)1.4e6 (2e6)2.3e6 (3e6)3e50/15
COBYLA Dufosse 338 (626)★2361 (642)★2413 (902)★2522 (1204)★2539 (1210)★2571 (1210)★2588 (1218)★215/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 2.0e6 (3e6)7.0e6 (1e7)7.0e6 (3e6)5e50/15
fmincon Hellwig 4979 (9685)5197 (5308)6069 (5177)9242 (1e4)9340 (8617)2.9e4 (4e4)6310/15

Δ fopt
f47, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.7e6 (3e6)1.7e6 (3e6)1.7e6 (2e6)1.7e6 (3e6)1.7e6 (2e6)1.7e6 (2e6)3.6e6 (2e6)1/15
AL2-CMA-ES Dufosse 1.0e6 (9e5)1.0e6 (1e6)1.1e6 (1e6)1.1e6 (2e6)1.1e6 (6e5)1.1e6 (2e6)1.7e6 (2e6)2/15
AL3-CMA-ES Dufosse 3e50/15
AL4-CMA-ES Dufosse 3e50/15
BPepsMAg Hellwig 2.5e6 (3e6)5.0e6 (5e6)5.0e6 (5e6)3e50/15
COBYLA Dufosse 427 (460)★2445 (462)★2591 (1002)★2606 (1006)★2626 (1012)★2656 (1010)★2675 (1002)★215/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 1.0e6 (1e6)3.3e6 (5e6)7.0e6 (6e6)7.0e6 (6e6)7.1e6 (1e7)7.1e6 (1e7)7.1e6 (8e6)1/15
fmincon Hellwig 1.0e4 (2e4)1.1e4 (2e4)2.3e4 (2e4)2.4e4 (4e4)2.4e4 (3e4)7.2e4 (7e4)7.2e4 (1e5)1/15

Δ fopt
f48, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.6e6 (5e6)3.6e6 (4e6)3.6e6 (6e6)3.6e6 (3e6)3.6e6 (4e6)3.7e6 (3e6)3.7e6 (5e6)1/15
AL2-CMA-ES Dufosse 3.6e6 (3e6)3.6e6 (3e6)3.6e6 (4e6)3.6e6 (4e6)3.6e6 (3e6)3.7e6 (3e6)3.7e6 (4e6)1/15
AL3-CMA-ES Dufosse 3e50/15
AL4-CMA-ES Dufosse 3.6e6 (4e6)3.6e6 (5e6)3.6e6 (3e6)3.6e6 (5e6)3.6e6 (4e6)3.6e6 (3e6)3.6e6 (5e6)1/15
BPepsMAg Hellwig 1.1e6 (9e5)2.3e6 (3e6)4.9e6 (6e6)3e50/15
COBYLA Dufosse 178 (404)★2192 (400)★2203 (394)★3214 (398)★3232 (390)★3263 (404)★3274 (406)★315/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 6.0e5 (8e5)2.0e6 (2e6)7.1e6 (1e7)7.1e6 (7e6)7.1e6 (6e6)7.1e6 (8e6)7.1e6 (9e6)1/15
fmincon Hellwig 3589 (6516)9228 (7724)9702 (2e4)1.1e4 (1e4)1.3e4 (1e4)2.2e4 (2e4)6.7e4 (4e4)1/15

Δ fopt
f49, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 6.0e4 (6e4)6.3e4 (6e4)6.5e4 (7e4)6.7e4 (7e4)6.8e4 (7e4)7.1e4 (8e4)7.3e4 (8e4)14/15
AL2-CMA-ES Dufosse 3.7e4 (3e4)5.2e4 (6e4)5.4e4 (6e4)5.5e4 (6e4)5.7e4 (7e4)6.2e4 (7e4)6.6e4 (8e4)15/15
AL3-CMA-ES Dufosse 4.8e4 (6e4)5.8e4 (7e4)6.0e4 (7e4)6.2e4 (7e4)6.4e4 (7e4)6.7e4 (8e4)6.9e4 (8e4)15/15
AL4-CMA-ES Dufosse 5.6e4 (7e4)7.4e4 (7e4)7.6e4 (7e4)7.8e4 (8e4)8.0e4 (8e4)8.3e4 (8e4)8.4e4 (8e4)14/15
BPepsMAg Hellwig 5.0e6 (5e6)5.0e6 (6e6)5.0e6 (6e6)5.0e6 (8e6)3e50/15
COBYLA Dufosse 9.6e4 (1e5)3.5e5 (6e5)3.5e5 (4e5)3.5e5 (3e5)3.5e5 (3e5)7.6e5 (8e5)5e40/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 3.3e6 (5e6)7.0e6 (7e6)7.0e6 (9e6)7.0e6 (1e7)7.0e6 (7e6)7.1e6 (9e6)7.1e6 (9e6)1/15
fmincon Hellwig 4360/15

Δ fopt
f50, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.1e5 (3e5)3.1e5 (4e5)3.2e5 (4e5)3.3e5 (3e5)3.8e5 (6e5)3.9e5 (5e5)3.9e5 (4e5)7/15
AL2-CMA-ES Dufosse 4.2e5 (7e5)4.2e5 (7e5)4.3e5 (6e5)4.3e5 (4e5)4.3e5 (5e5)4.4e5 (4e5)4.4e5 (8e5)6/15
AL3-CMA-ES Dufosse 4.2e5 (5e5)4.2e5 (7e5)4.2e5 (4e5)4.2e5 (5e5)4.3e5 (5e5)4.3e5 (6e5)4.3e5 (7e5)6/15
AL4-CMA-ES Dufosse 4.3e5 (4e5)4.3e5 (6e5)4.3e5 (4e5)4.4e5 (4e5)4.4e5 (5e5)4.4e5 (4e5)4.5e5 (6e5)6/15
BPepsMAg Hellwig 2.3e6 (3e6)2.3e6 (3e6)2.3e6 (3e6)4.9e6 (3e6)3e50/15
COBYLA Dufosse 7.9e4 (7e4)7.9e4 (7e4)7.9e4 (1e5)8.0e4 (1e5)8.0e4 (8e4)3.7e5 (3e5)5e40/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 7.0e6 (9e6)7.0e6 (1e7)5e50/15
fmincon Hellwig 4940/15

Δ fopt
f51, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.5e6 (4e6)3.5e6 (2e6)3.5e6 (3e6)3.5e6 (3e6)3.5e6 (4e6)3.5e6 (4e6)3.5e6 (4e6)1/15
AL2-CMA-ES Dufosse 3e50/15
AL3-CMA-ES Dufosse 3e50/15
AL4-CMA-ES Dufosse 3e50/15
BPepsMAg Hellwig 3e50/15
COBYLA Dufosse 1738 (1799)1754 (1809)1912 (1797)3453 (3203)6019 (8982)6835 (1e4)6853 (1e4)15/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 2.0e6 (2e6)3.3e6 (4e6)5e50/15
fmincon Hellwig 5310/15

Δ fopt
f52, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.5e6 (3e6)3.6e6 (3e6)3.6e6 (2e6)3.6e6 (3e6)3.6e6 (3e6)3.6e6 (4e6)3.6e6 (5e6)1/15
AL2-CMA-ES Dufosse 3.7e6 (5e6)3e50/15
AL3-CMA-ES Dufosse 3e50/15
AL4-CMA-ES Dufosse 3e50/15
BPepsMAg Hellwig 3e50/15
COBYLA Dufosse 1211 (2232)1230 (2220)1248 (2234)1279 (2215)1699 (2259)1736 (2262)1755 (2257)15/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 7.0e6 (7e6)7.0e6 (9e6)5e50/15
fmincon Hellwig 1.7e4 (3e4)2.4e4 (2e4)2.9e4 (2e4)5.8e4 (9e4)5.8e4 (7e4)5.8e4 (4e4)8610/15

Δ fopt
f53, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3e50/15
AL2-CMA-ES Dufosse 3e50/15
AL3-CMA-ES Dufosse 3e50/15
AL4-CMA-ES Dufosse 3e50/15
BPepsMAg Hellwig 2.3e6 (3e6)2.3e6 (2e6)2.3e6 (3e6)5.0e6 (5e6)5.1e6 (5e6)3e50/15
COBYLA Dufosse 2792 (1843)2808 (1854)2822 (1858)2838 (1860)2877 (1859)3018 (2490)3037 (2486)15/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 1.4e6 (2e6)2.0e6 (3e6)3.3e6 (3e6)3.3e6 (3e6)3.3e6 (7e6)3.3e6 (4e6)3.3e6 (5e6)2/15
fmincon Hellwig 1960 (2422)3362 (4646)4146 (6718)4225 (6581)4357 (6656)9175 (8432)3.7e4 (2e4)1/15

Δ fopt
f54, 5-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.7e6 (1e6)3.7e6 (5e6)3.7e6 (6e6)3.7e6 (3e6)3e50/15
AL2-CMA-ES Dufosse 1.8e6 (2e6)1.8e6 (2e6)3.6e6 (4e6)3.6e6 (3e6)3.6e6 (3e6)3.6e6 (5e6)3.6e6 (4e6)1/15
AL3-CMA-ES Dufosse 3.7e6 (3e6)3.7e6 (3e6)3.7e6 (4e6)3.7e6 (4e6)3.7e6 (5e6)3e50/15
AL4-CMA-ES Dufosse 3e50/15
BPepsMAg Hellwig 1.1e6 (2e6)2.2e6 (3e6)4.8e6 (7e6)4.8e6 (6e6)3e50/15
COBYLA Dufosse 276 (270)292 (274)310 (270)★2324 (268)★2337 (264)★2366 (264)★2380 (272)★215/15
RandomSearch-5 Dufosse 1e60/15
epsMAg Hellwig 1.0e6 (8e5)1.4e6 (1e6)2.0e6 (2e6)2.0e6 (3e6)2.1e6 (3e6)2.1e6 (3e6)2.1e6 (2e6)3/15
fmincon Hellwig 2125 (2288)2391 (2400)3320 (4137)3685 (4953)4214 (6554)7992 (9226)10610/15

Previous dimension | Dimension = 10 | Next dimension

Δ fopt
f1, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1421 (189)2007 (279)2582 (347)3048 (337)3514 (379)4337 (337)4691 (358)15/15
AL2-CMA-ES Dufosse 1449 (229)1998 (206)2441 (319)2926 (338)3478 (584)5061 (830)5787 (688)15/15
AL3-CMA-ES Dufosse 1392 (270)2065 (281)2568 (243)3105 (294)3470 (301)4307 (413)4673 (335)15/15
AL4-CMA-ES Dufosse 1444 (154)2076 (279)2637 (400)3083 (398)3505 (359)4263 (419)4775 (612)15/15
BPepsMAg Hellwig 1595 (464)3756 (922)5760 (780)8527 (1326)1.1e4 (1418)1.5e4 (1550)1.6e4 (1670)15/15
COBYLA Dufosse 85 (15)137 (20)186 (23)239 (26)294 (33)391 (40)446 (34)15/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 2862 (923)5825 (2055)2.6e4 (2e4)6.0e4 (4e4)8.6e4 (5e4)1.1e5 (1e4)1.1e5 (4170)15/15
fmincon Hellwig 71 (23)80 (34)★2101 (41)★3124 (42)★3135 (42)★3171 (30)★3231 (112)★313/15

Δ fopt
f2, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2212 (689)2990 (765)3687 (577)4314 (731)4873 (641)6358 (701)7014 (821)15/15
AL2-CMA-ES Dufosse 2205 (609)2901 (640)3548 (641)4313 (799)4969 (974)8137 (1248)9.2e4 (1e5)14/15
AL3-CMA-ES Dufosse 2306 (476)3085 (497)3789 (450)4410 (457)5036 (510)6293 (377)6896 (520)15/15
AL4-CMA-ES Dufosse 2304 (666)3031 (519)3726 (396)4320 (346)4874 (462)6203 (425)6826 (503)15/15
BPepsMAg Hellwig 4763 (2052)1.2e4 (1e4)1.8e4 (2e4)2.8e4 (3e4)3.4e4 (4e4)7.5e4 (1e5)7.6e4 (1e5)15/15
COBYLA Dufosse 77 (13)★2133 (21)177 (23)224 (31)277 (42)371 (42)422 (53)15/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 3.2e4 (4e4)5.9e4 (5e4)9.1e4 (4e4)1.0e5 (3e4)1.2e5 (2e4)1.3e5 (2e4)1.4e5 (2e4)15/15
fmincon Hellwig 121 (50)161 (37)187 (37)203 (24)226 (46)306 (72)348 (151)13/15

Δ fopt
f3, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 4290 (1058)5638 (1841)7349 (1501)8588 (2000)9524 (1626)1.2e4 (1809)9.1e4 (3e5)13/15
AL2-CMA-ES Dufosse 4106 (1725)5672 (1357)7225 (2039)8666 (2305)9852 (2299)3.8e5 (4e5)5e50/15
AL3-CMA-ES Dufosse 3932 (1587)5559 (1765)6856 (1690)8172 (2061)9159 (2332)1.1e4 (2263)1.4e4 (6257)15/15
AL4-CMA-ES Dufosse 3930 (1289)5222 (1737)6453 (1427)7745 (1652)8826 (1847)1.0e4 (1548)1.2e4 (1851)15/15
BPepsMAg Hellwig 1.3e4 (1e4)4.2e4 (4e4)1.7e5 (2e5)2.6e5 (3e5)3.8e5 (4e5)7.8e5 (9e5)1.2e6 (2e6)7/15
COBYLA Dufosse 74 (18)★3113 (24)★3152 (27)★3195 (29)★2237 (25)★2322 (53)359 (59)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 8.3e4 (3e4)1.1e5 (3e4)1.2e5 (3e4)1.4e5 (2e4)1.5e5 (2e4)2.3e5 (2e5)2.4e5 (2e5)15/15
fmincon Hellwig 184 (64)221 (65)257 (65)275 (64)324 (64)413 (220)5944 (6514)1/15

Δ fopt
f4, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 6469 (3248)8570 (2977)1.1e4 (3611)1.3e4 (3648)1.4e4 (3960)2.4e4 (3939)3.3e6 (5e6)2/15
AL2-CMA-ES Dufosse 6415 (2796)8618 (3527)1.1e4 (4249)1.3e4 (4505)1.5e4 (4314)8.5e5 (1e6)5e50/15
AL3-CMA-ES Dufosse 6294 (2428)8407 (2714)1.0e4 (2408)1.2e4 (3108)1.4e4 (3982)1.7e4 (3950)8.2e4 (9e4)15/15
AL4-CMA-ES Dufosse 6188 (2774)8412 (3290)1.0e4 (3381)1.2e4 (3052)1.4e4 (3184)1.7e4 (3646)3.3e5 (5e5)10/15
BPepsMAg Hellwig 1.6e4 (2e4)2.5e5 (4e5)1.1e6 (1e6)3.0e6 (4e6)7e50/15
COBYLA Dufosse 42 (15)★355 (31)★361 (39)★365 (39)★385 (43)★285 (43)★385 (43)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 8.6e4 (2e4)1.0e5 (2e4)1.2e5 (9380)1.3e5 (7054)1.4e5 (9023)1.5e5 (1e4)1.5e5 (1e4)15/15
fmincon Hellwig 216 (67)249 (67)277 (89)299 (78)330 (89)676 (588)5584 (4500)1/15

Δ fopt
f5, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 6887 (2666)8854 (2592)1.1e4 (3096)1.3e4 (2953)1.4e4 (3351)5.8e4 (2e4)7.0e6 (8e6)1/15
AL2-CMA-ES Dufosse 7937 (3642)1.0e4 (4368)1.3e4 (3820)1.4e4 (4153)1.5e4 (4204)4.0e5 (5e5)5e50/15
AL3-CMA-ES Dufosse 7626 (3138)9432 (3303)1.1e4 (3599)1.3e4 (4085)1.4e4 (3562)1.7e4 (4333)4.5e5 (6e5)10/15
AL4-CMA-ES Dufosse 6455 (1931)8758 (3026)1.1e4 (2647)1.3e4 (2271)1.4e4 (2687)1.8e4 (5100)5.3e5 (9e5)8/15
BPepsMAg Hellwig 2.1e4 (2e4)2.6e5 (3e5)5.9e5 (7e5)2.3e6 (2e6)9.8e6 (1e7)7e50/15
COBYLA Dufosse 38 (10)★349 (23)★350 (23)★359 (42)★360 (44)★364 (54)★364 (54)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 9.9e4 (1e4)1.2e5 (8946)1.3e5 (7693)1.3e5 (8633)1.4e5 (7906)1.5e5 (7073)1.5e5 (7184)15/15
fmincon Hellwig 265 (55)290 (66)319 (55)339 (55)364 (66)1002 (1525)2023 (1537)3/15

Δ fopt
f6, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 7873 (2761)9325 (2840)1.2e4 (3529)1.3e4 (3769)1.5e4 (3511)7.7e4 (1e5)7.2e6 (8e6)1/15
AL2-CMA-ES Dufosse 7579 (2147)9434 (2685)1.1e4 (2510)1.2e4 (2590)1.3e4 (2611)1.6e4 (2453)2.7e5 (4e5)10/15
AL3-CMA-ES Dufosse 7727 (2835)9119 (2986)1.1e4 (3449)1.3e4 (3327)1.4e4 (3339)7.3e4 (1e5)7.1e6 (1e7)1/15
AL4-CMA-ES Dufosse 7745 (1633)9143 (1799)1.2e4 (2764)1.3e4 (2096)1.4e4 (2146)2.7e4 (3e4)3.4e6 (3e6)2/15
BPepsMAg Hellwig 9964 (7431)4.0e4 (8e4)1.0e5 (1e5)3.8e5 (4e5)8.7e5 (1e6)3.3e6 (3e6)7e50/15
COBYLA Dufosse 39 (21)★357 (29)★368 (25)★380 (46)★388 (53)★396 (63)★396 (63)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1.1e5 (6408)1.2e5 (4007)1.3e5 (2408)1.3e5 (4152)1.3e5 (4369)1.4e5 (4183)1.5e5 (4760)15/15
fmincon Hellwig 442 (297)491 (374)541 (331)555 (330)579 (331)1140 (995)1140 (1296)8/15

Δ fopt
f7, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3245 (1222)4788 (1440)6639 (1957)7824 (1403)8506 (1353)9920 (1102)1.0e4 (1140)15/15
AL2-CMA-ES Dufosse 2900 (1012)4175 (1136)5724 (1369)7157 (1025)8038 (819)9180 (912)9787 (943)15/15
AL3-CMA-ES Dufosse 2893 (1129)5037 (1929)6705 (1837)8229 (2651)1.0e4 (5312)1.4e4 (1e4)1.6e4 (2e4)15/15
AL4-CMA-ES Dufosse 3369 (957)4785 (1160)6598 (1352)7968 (1725)8681 (1775)9940 (1633)1.0e4 (1453)15/15
BPepsMAg Hellwig 2239 (1392)1.0e4 (7790)1.1e5 (1e5)1.0e6 (1e6)7e50/15
COBYLA Dufosse 278 (267)6032 (8889)1.9e5 (3e5)1e50/15
RandomSearch-5 Dufosse 2.3e5 (4e5)2e60/15
epsMAg Hellwig 4290 (6674)2.9e4 (3e4)6.2e4 (3e4)1.7e5 (6e4)5.8e5 (6e5)1.4e7 (2e7)1e60/15
fmincon Hellwig 187 (56)460 (154)2776 (2310)★23.7e4 (4e4)1.8e5 (2e5)3e40/15

Δ fopt
f8, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.1e4 (1e4)3.8e4 (2e4)9.2e4 (6e4)1.9e5 (3e5)2.0e5 (3e5)2.0e6 (2e6)7.0e6 (7e6)1/15
AL2-CMA-ES Dufosse 1.2e4 (7340)1.9e4 (1e4)2.2e4 (1e4)2.9e4 (2e4)3.2e4 (2e4)1.9e5 (3e5)6.4e5 (1e6)8/15
AL3-CMA-ES Dufosse 1.7e5 (2e5)4.1e5 (5e5)1.2e6 (1e6)2.2e6 (3e6)3.6e6 (3e6)5e50/15
AL4-CMA-ES Dufosse 7.6e4 (7e4)2.8e5 (3e5)6.7e5 (8e5)1.0e6 (1e6)1.6e6 (2e6)3.7e6 (4e6)3.7e6 (6e6)2/15
BPepsMAg Hellwig 3.8e4 (6e4)1.3e6 (2e6)1.0e7 (1e7)7e50/15
COBYLA Dufosse 697 (2028)2.0e4 (5e4)3.4e5 (4e5)1e50/15
RandomSearch-5 Dufosse 8.3e6 (1e7)2e60/15
epsMAg Hellwig 6.3e4 (5e4)3.9e5 (3e5)6.7e6 (6e6)1.4e7 (2e7)1e60/15
fmincon Hellwig 3197 (6696)3.2e4 (4e4)4.5e5 (4e5)3e40/15

Δ fopt
f9, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5.1e4 (3e4)1.1e5 (3e4)1.4e5 (6e4)2.8e5 (3e5)5.6e5 (7e5)5e50/15
AL2-CMA-ES Dufosse 3.0e4 (8591)3.7e4 (1e4)4.0e4 (1e4)4.8e4 (2e4)7.3e4 (4e4)7.2e6 (7e6)5e50/15
AL3-CMA-ES Dufosse 5.5e5 (7e5)1.1e6 (2e6)1.8e6 (1e6)1.8e6 (1e6)3.7e6 (3e6)7.5e6 (8e6)7.5e6 (1e7)1/15
AL4-CMA-ES Dufosse 1.9e5 (2e5)5.6e5 (6e5)6.7e5 (6e5)8.2e5 (6e5)1.1e6 (5e5)1.1e6 (1e6)1.7e6 (1e6)4/15
BPepsMAg Hellwig 8.8e5 (1e6)4.8e6 (6e6)7e50/15
COBYLA Dufosse 1542 (2148)2.9e4 (5e4)2.5e5 (3e5)1.5e6 (2e6)1e50/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 6.3e5 (6e5)4.3e6 (6e6)1e60/15
fmincon Hellwig 1.4e4 (2e4)1.4e5 (1e5)3e40/15

Δ fopt
f10, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5.8e4 (3e4)7.1e4 (3e4)1.2e5 (4e4)2.0e5 (3e5)2.6e5 (3e5)3.3e6 (5e6)5e50/15
AL2-CMA-ES Dufosse 2.4e4 (1e4)2.8e4 (1e4)3.2e4 (1e4)3.4e4 (2e4)7.9e4 (5e4)5e50/15
AL3-CMA-ES Dufosse 5.3e5 (6e5)6.7e5 (7e5)1.0e6 (1e6)1.0e6 (1e6)1.3e6 (1e6)1.4e6 (2e6)1.7e6 (1e6)4/15
AL4-CMA-ES Dufosse 2.1e5 (2e5)4.4e5 (5e5)6.7e5 (7e5)8.0e5 (1e6)8.0e5 (1e6)8.1e5 (8e5)1.2e6 (1e6)5/15
BPepsMAg Hellwig 2.2e6 (2e6)7e50/15
COBYLA Dufosse 281 (152)★3666 (1034)★31257 (2066)★31481 (2058)★31596 (2086)★37296 (6018)★39629 (1e4)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 7.7e5 (1e6)2.9e6 (4e6)1.4e7 (2e7)1.4e7 (2e7)1.4e7 (2e7)1.4e7 (2e7)1.4e7 (1e7)1/15
fmincon Hellwig 1.1e4 (1e4)3.4e4 (4e4)8.0e4 (9e4)8.3e4 (9e4)1.0e5 (1e5)3e40/15

Δ fopt
f11, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.0e4 (2e4)3.2e4 (2e4)3.4e4 (2e4)3.6e4 (2e4)3.8e4 (2e4)2.3e5 (3e5)7.1e6 (7e6)1/15
AL2-CMA-ES Dufosse 1.4e4 (6361)1.6e4 (6872)1.7e4 (6464)1.9e4 (6600)2.0e4 (6738)1.4e6 (1e6)5e50/15
AL3-CMA-ES Dufosse 1.1e5 (2e5)1.2e5 (2e5)1.2e5 (2e5)1.3e5 (2e5)1.3e5 (2e5)1.3e5 (2e5)4.4e5 (5e5)10/15
AL4-CMA-ES Dufosse 3.5e4 (4e4)4.2e4 (4e4)4.5e4 (4e4)4.7e4 (4e4)4.9e4 (4e4)5.2e4 (4e4)2.2e6 (3e6)3/15
BPepsMAg Hellwig 6.9e5 (1e6)1.7e6 (1e6)1.0e7 (8e6)7e50/15
COBYLA Dufosse 97 (21)★3124 (23)★3153 (20)★3181 (20)★3204 (21)★3257 (19)★3284 (21)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 2.9e5 (5e5)4.4e5 (7e5)6.4e5 (5e5)8.1e5 (1e6)1.0e6 (1e6)1.0e6 (1e6)1.0e6 (2e6)8/15
fmincon Hellwig 6890 (6984)8355 (8323)1.1e4 (2e4)1.1e4 (2e4)2.0e4 (2e4)9.2e4 (7e4)1.8e5 (2e5)1/15

Δ fopt
f12, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.4e4 (1e4)1.6e4 (1e4)1.7e4 (1e4)1.9e4 (1e4)2.0e4 (1e4)1.0e5 (3e5)7.0e6 (6e6)1/15
AL2-CMA-ES Dufosse 8259 (3054)9649 (3109)1.1e4 (2919)1.2e4 (3528)1.3e4 (3132)1.6e4 (3304)9.6e4 (3e5)13/15
AL3-CMA-ES Dufosse 1.1e4 (6101)1.2e4 (6016)1.4e4 (6532)1.5e4 (6378)1.7e4 (6291)1.9e4 (5955)1.5e6 (2e6)4/15
AL4-CMA-ES Dufosse 1.1e4 (5357)1.2e4 (4923)1.4e4 (5198)1.5e4 (5506)1.7e4 (4836)2.5e4 (1e4)3.4e6 (4e6)2/15
BPepsMAg Hellwig 8.5e4 (1e5)2.3e5 (4e5)6.0e5 (1e6)2.0e6 (2e6)4.6e6 (5e6)7e50/15
COBYLA Dufosse 100 (27)★3125 (22)★3151 (35)★3176 (18)★3205 (25)★3258 (20)★3282 (29)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1.1e5 (7416)1.2e5 (4074)1.3e5 (4150)1.3e5 (4750)1.4e5 (5734)1.5e5 (4980)1.5e5 (5130)15/15
fmincon Hellwig 1.3e4 (2e4)2.1e4 (2e4)2.6e4 (3e4)2.6e4 (3e4)3.3e4 (5e4)2.7e5 (3e5)96810/15

Δ fopt
f13, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 984 (295)1380 (387)1907 (489)2677 (464)3574 (984)5085 (1086)6129 (792)15/15
AL2-CMA-ES Dufosse 1076 (364)1379 (322)1955 (408)2625 (518)3298 (903)6.2e4 (5e4)3.7e5 (4e5)10/15
AL3-CMA-ES Dufosse 1154 (421)1508 (358)1983 (375)2821 (483)3520 (480)4970 (1282)5862 (546)15/15
AL4-CMA-ES Dufosse 1126 (410)1577 (278)1874 (322)2883 (471)3468 (681)5305 (818)5988 (724)15/15
BPepsMAg Hellwig 128 (136)251 (206)305 (206)310 (206)310 (206)310 (206)310 (206)15/15
COBYLA Dufosse 26 (1)26 (1)26 (1)26 (1)★226 (1)★326 (1)★326 (1)★315/15
RandomSearch-5 Dufosse 183 (224)3751 (3784)2.4e4 (3e4)2.1e5 (3e5)2.1e6 (2e6)2e60/15
epsMAg Hellwig 307 (246)455 (168)499 (21)521 (16)521 (16)521 (16)521 (16)15/15
fmincon Hellwig 34 (11)40 (22)46 (22)59 (22)77 (11)148 (131)486 (283)3/15

Δ fopt
f14, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2535 (937)3105 (861)3951 (669)4782 (683)5795 (992)7362 (1116)4.9e5 (8e5)8/15
AL2-CMA-ES Dufosse 2099 (513)2791 (707)3666 (616)4672 (615)1.2e5 (3e5)7.5e6 (1e7)5e50/15
AL3-CMA-ES Dufosse 2343 (573)3036 (516)3753 (565)4761 (835)5634 (633)7520 (967)1.3e4 (4670)15/15
AL4-CMA-ES Dufosse 2336 (379)3028 (444)3788 (573)4682 (462)5491 (529)6935 (489)2.0e4 (4e4)15/15
BPepsMAg Hellwig 1908 (1542)2972 (2343)3960 (2926)6548 (7080)9130 (1e4)1.8e4 (2e4)2.5e4 (2e4)15/15
COBYLA Dufosse 27 (2)28 (2)28 (2)★228 (2)★328 (2)★328 (2)★328 (2)★315/15
RandomSearch-5 Dufosse 1.8e5 (2e5)1.4e7 (2e7)2e60/15
epsMAg Hellwig 1.3e4 (2e4)2.0e4 (3e4)4.2e4 (5e4)5.4e4 (6e4)7.4e4 (8e4)8.5e4 (8e4)8.8e4 (8e4)15/15
fmincon Hellwig 65 (33)69 (33)94 (33)97 (33)109 (33)190 (148)1040 (863)2/15

Δ fopt
f15, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 4621 (1112)5824 (1140)7237 (1524)8505 (1756)9332 (1857)1.3e4 (6620)5e50/15
AL2-CMA-ES Dufosse 5024 (1207)7067 (1828)8261 (1917)9239 (1622)8.7e4 (3e5)5e50/15
AL3-CMA-ES Dufosse 4649 (1118)5854 (1283)7060 (1502)8072 (1797)8898 (1829)1.1e4 (2117)2.2e5 (3e5)13/15
AL4-CMA-ES Dufosse 4822 (1546)5991 (1350)7246 (1471)8229 (1717)9235 (2151)1.1e4 (2040)2.0e5 (3e5)13/15
BPepsMAg Hellwig 1.7e4 (1e4)9.7e4 (1e5)2.2e5 (4e5)4.6e5 (5e5)6.3e5 (7e5)7.3e5 (7e5)7.3e5 (9e5)9/15
COBYLA Dufosse 28 (2)★328 (2)★328 (2)★328 (2)★328 (2)★328 (2)★328 (2)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 4.7e4 (4e4)9.5e4 (4e4)1.3e5 (4e4)1.7e5 (9e4)2.4e5 (3e5)2.5e5 (3e5)2.5e5 (3e5)14/15
fmincon Hellwig 111 (22)139 (44)167 (91)177 (91)195 (91)458 (273)1095 (1085)3/15

Δ fopt
f16, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 8188 (4087)1.2e4 (3644)1.4e4 (3053)1.5e4 (3858)1.7e4 (3292)2.3e5 (3e5)5e50/15
AL2-CMA-ES Dufosse 8532 (1836)1.2e4 (2812)1.4e4 (2875)1.6e4 (3317)2.6e4 (2895)5e50/15
AL3-CMA-ES Dufosse 8186 (4734)1.1e4 (4105)1.3e4 (4628)1.5e4 (4041)1.6e4 (4005)2.3e4 (7239)9.1e5 (1e6)6/15
AL4-CMA-ES Dufosse 6993 (2439)9656 (3224)1.2e4 (2907)1.3e4 (3064)1.5e4 (3210)2.0e4 (1e4)7.0e6 (9e6)1/15
BPepsMAg Hellwig 1.2e5 (2e5)1.3e6 (2e6)9.9e6 (1e7)7e50/15
COBYLA Dufosse 34 (14)★340 (24)★344 (27)★347 (27)★351 (30)★351 (30)★351 (30)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 9.8e4 (3e4)1.4e5 (2e4)1.7e5 (6e4)1.8e5 (6e4)1.8e5 (6e4)1.9e5 (6e4)2.0e5 (6e4)15/15
fmincon Hellwig 209 (110)259 (132)288 (155)297 (155)344 (155)1687 (1515)5100 (5008)1/15

Δ fopt
f17, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 7933 (2799)1.0e4 (2977)1.2e4 (3231)1.3e4 (3502)1.5e4 (3230)1.3e5 (3e5)5e50/15
AL2-CMA-ES Dufosse 7491 (1765)9552 (1549)1.1e4 (1652)1.2e4 (2096)1.4e4 (1712)7.0e6 (1e7)5e50/15
AL3-CMA-ES Dufosse 7731 (2863)9887 (3052)1.2e4 (2943)1.3e4 (3376)1.4e4 (3073)6.3e4 (2e4)3.4e6 (4e6)2/15
AL4-CMA-ES Dufosse 7727 (2802)1.0e4 (3187)1.2e4 (3553)1.3e4 (2674)1.4e4 (3084)2.3e4 (1e4)7.1e6 (8e6)1/15
BPepsMAg Hellwig 1.4e5 (1e5)9.1e5 (1e6)4.7e6 (4e6)7e50/15
COBYLA Dufosse 34 (11)★342 (23)★350 (34)★359 (55)★365 (59)★379 (83)★381 (83)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1.1e5 (1e4)1.2e5 (8310)1.3e5 (8664)1.3e5 (7973)1.4e5 (8208)1.5e5 (7450)1.5e5 (7281)15/15
fmincon Hellwig 277 (124)314 (168)325 (179)367 (176)378 (168)2784 (2769)3530/15

Δ fopt
f18, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 9682 (3175)1.2e4 (4147)1.3e4 (4325)1.5e4 (4459)1.6e4 (4676)1.1e6 (1e6)5e50/15
AL2-CMA-ES Dufosse 8442 (2451)1.0e4 (2642)1.2e4 (2620)1.3e4 (2555)1.4e4 (2797)1.7e4 (2969)6.9e5 (7e5)7/15
AL3-CMA-ES Dufosse 8167 (3341)1.0e4 (3767)1.2e4 (4071)1.3e4 (4293)1.5e4 (4449)6.5e5 (8e5)5e50/15
AL4-CMA-ES Dufosse 7893 (2075)9905 (2326)1.1e4 (2514)1.3e4 (2426)1.4e4 (2677)5.8e5 (6e5)5e50/15
BPepsMAg Hellwig 1.4e4 (7062)4.7e4 (5e4)2.3e5 (3e5)4.5e5 (6e5)2.2e6 (3e6)1.0e7 (1e7)1.0e7 (9e6)1/15
COBYLA Dufosse 36 (11)★351 (32)★351 (32)★365 (47)★367 (47)★373 (64)★373 (64)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1.1e5 (4030)1.2e5 (4980)1.3e5 (4121)1.3e5 (1e4)1.4e5 (1e4)1.5e5 (1e4)1.5e5 (1e4)15/15
fmincon Hellwig 314 (165)369 (198)451 (143)460 (154)504 (199)7318 (1e4)4610/15

Δ fopt
f19, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.4e4 (9493)2.7e4 (1e4)5.1e4 (2e4)7.2e4 (3e4)1.3e5 (1e5)5.5e5 (5e5)5.8e5 (3e5)11/15
AL2-CMA-ES Dufosse 8329 (5186)2.3e4 (1e4)4.6e4 (2e4)8.3e4 (7e4)1.5e5 (1e5)3.7e5 (1e5)4.1e5 (8e4)15/15
AL3-CMA-ES Dufosse 4.2e4 (9e4)1.9e5 (2e5)7.3e5 (8e5)2.3e6 (2e6)7.4e6 (9e6)7.5e6 (8e6)5e50/15
AL4-CMA-ES Dufosse 3.1e4 (2e4)1.1e5 (7e4)2.8e5 (1e5)5.9e5 (3e5)1.4e6 (8e5)3.6e6 (3e6)3.7e6 (4e6)2/15
BPepsMAg Hellwig 1.2e4 (7084)2.9e5 (5e5)1.0e7 (9e6)7e50/15
COBYLA Dufosse 133 (82)4148 (4742)2.4e5 (4e5)1e50/15
RandomSearch-5 Dufosse 3.5e5 (5e5)2e60/15
epsMAg Hellwig 4758 (6378)6.3e4 (6e4)1.4e6 (1e6)1e60/15
fmincon Hellwig 4462 (1e4)1.4e4 (2e4)7.7e4 (8e4)3e40/15

Δ fopt
f20, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.2e4 (1e4)3.4e4 (2e4)8.7e4 (3e4)1.6e5 (3e5)1.2e6 (1e6)5e50/15
AL2-CMA-ES Dufosse 1.1e4 (6166)3.2e4 (2e4)4.7e4 (2e4)1.6e5 (2e5)3.8e5 (3e5)8.0e5 (5e5)3.6e6 (3e6)2/15
AL3-CMA-ES Dufosse 1.1e5 (1e5)3.2e5 (3e5)1.1e6 (1e6)7.4e6 (8e6)5e50/15
AL4-CMA-ES Dufosse 5.2e4 (4e4)1.3e5 (1e5)4.4e5 (6e5)1.1e6 (9e5)1.7e6 (2e6)7.4e6 (8e6)7.4e6 (8e6)1/15
BPepsMAg Hellwig 6.2e4 (1e5)1.3e6 (2e6)7e50/15
COBYLA Dufosse 603 (1012)2.3e4 (3e4)1.4e6 (2e6)1e50/15
RandomSearch-5 Dufosse 2.8e7 (3e7)2e60/15
epsMAg Hellwig 1.3e5 (5e4)5.4e5 (5e5)7.1e6 (8e6)1e60/15
fmincon Hellwig 4833 (9431)1.7e4 (3e4)1.1e5 (1e5)3e40/15

Δ fopt
f21, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 4.6e4 (3e4)1.1e5 (9e4)5.4e5 (5e5)1.1e6 (1e6)7.1e6 (7e6)5e50/15
AL2-CMA-ES Dufosse 3.3e4 (2e4)4.9e4 (2e4)6.1e4 (4e4)1.0e5 (4e4)2.0e5 (3e5)5e50/15
AL3-CMA-ES Dufosse 5.3e5 (5e5)2.4e6 (2e6)3.7e6 (4e6)3.7e6 (3e6)3.7e6 (4e6)7.4e6 (7e6)7.4e6 (8e6)1/15
AL4-CMA-ES Dufosse 1.4e5 (1e5)5.9e5 (5e5)9.4e5 (6e5)1.4e6 (2e6)1.4e6 (1e6)1.4e6 (1e6)1.4e6 (9e5)5/15
BPepsMAg Hellwig 4.1e5 (4e5)1.0e7 (7e6)7e50/15
COBYLA Dufosse 987 (2002)3.1e4 (5e4)3.2e5 (5e5)1e50/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1.5e5 (1e5)2.0e6 (2e6)1e60/15
fmincon Hellwig 9207 (1e4)4.4e4 (6e4)4.7e5 (5e5)4.7e5 (5e5)3e40/15

Δ fopt
f22, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 7.9e4 (3e4)8.5e4 (4e4)9.1e4 (4e4)1.3e5 (3e5)1.9e5 (3e5)2.0e6 (2e6)5e50/15
AL2-CMA-ES Dufosse 2.3e4 (1e4)2.7e4 (1e4)3.0e4 (1e4)3.4e4 (1e4)8.9e4 (5e4)5e50/15
AL3-CMA-ES Dufosse 4.0e5 (5e5)6.2e5 (5e5)6.3e5 (6e5)1.0e6 (8e5)1.0e6 (1e6)1.3e6 (1e6)1.7e6 (1e6)4/15
AL4-CMA-ES Dufosse 2.5e5 (3e5)3.3e5 (5e5)3.4e5 (4e5)3.5e5 (3e5)3.5e5 (4e5)3.5e5 (5e5)2.3e6 (3e6)3/15
BPepsMAg Hellwig 3.2e6 (3e6)7e50/15
COBYLA Dufosse 388 (1012)★31205 (2022)★21228 (2004)★21260 (2018)★31284 (2028)★31362 (2024)★31644 (2044)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 8.7e5 (1e6)4.1e6 (6e6)4.1e6 (3e6)4.1e6 (6e6)4.1e6 (5e6)6.7e6 (1e7)6.7e6 (7e6)2/15
fmincon Hellwig 7182 (8832)1.3e4 (1e4)1.6e4 (1e4)2.1e4 (2e4)4.4e4 (6e4)1e40/15

Δ fopt
f23, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 4.0e4 (3e4)4.5e4 (4e4)4.8e4 (4e4)5.0e4 (4e4)5.1e4 (4e4)1.8e5 (3e5)5e50/15
AL2-CMA-ES Dufosse 1.8e4 (1e4)2.1e4 (1e4)2.3e4 (1e4)2.4e4 (1e4)2.5e4 (1e4)2.0e6 (3e6)5e50/15
AL3-CMA-ES Dufosse 1.2e5 (1e5)2.2e5 (3e5)2.3e5 (3e5)2.3e5 (3e5)2.3e5 (5e5)2.3e5 (3e5)5.4e5 (5e5)10/15
AL4-CMA-ES Dufosse 9.2e4 (1e5)1.4e5 (2e5)1.4e5 (2e5)1.5e5 (2e5)1.5e5 (2e5)1.5e5 (2e5)1.1e6 (2e6)5/15
BPepsMAg Hellwig 1.1e6 (1e6)7e50/15
COBYLA Dufosse 92 (27)★3126 (19)★3157 (24)★3181 (21)★3204 (34)★3272 (32)★3293 (35)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1.9e5 (2e4)3.1e5 (5e5)3.9e5 (5e5)4.7e5 (5e5)4.8e5 (5e5)5.0e5 (9e5)6.1e5 (8e5)11/15
fmincon Hellwig 8799 (1e4)1.2e4 (2e4)1.5e4 (2e4)1.8e4 (2e4)2.5e4 (4e4)1e40/15

Δ fopt
f24, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.4e4 (6979)1.6e4 (7324)1.7e4 (7807)1.9e4 (7780)2.0e4 (7293)8.5e4 (1e5)5e50/15
AL2-CMA-ES Dufosse 9705 (4271)1.1e4 (4775)1.3e4 (4134)1.4e4 (4078)1.5e4 (4616)1.8e4 (4756)1.2e5 (3e5)13/15
AL3-CMA-ES Dufosse 1.1e4 (6218)1.2e4 (6507)1.4e4 (6277)1.5e4 (5895)1.7e4 (6094)2.9e4 (1e4)2.2e6 (2e6)3/15
AL4-CMA-ES Dufosse 1.3e4 (5869)1.4e4 (6011)1.6e4 (6107)1.7e4 (5517)1.9e4 (5520)2.8e4 (2e4)2.1e6 (3e6)3/15
BPepsMAg Hellwig 2.7e5 (4e5)7.8e5 (1e6)2.8e6 (5e6)4.6e6 (8e6)9.9e6 (9e6)7e50/15
COBYLA Dufosse 104 (11)★3122 (19)★3153 (16)★3179 (19)★3205 (23)★3255 (18)★3453 (22)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1.1e5 (6239)1.2e5 (3420)1.3e5 (7673)1.3e5 (8410)1.4e5 (1e4)1.5e5 (8347)1.5e5 (8428)15/15
fmincon Hellwig 2.1e4 (2e4)2.3e4 (2e4)2.9e4 (3e4)3.7e4 (3e4)5.0e4 (7e4)3.0e5 (3e5)2e40/15

Δ fopt
f25, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5135 (7904)3.4e4 (3e4)9.0e4 (4e4)1.5e5 (7e4)2.3e5 (9e4)1.8e6 (6e5)7.4e6 (1e7)1/15
AL2-CMA-ES Dufosse 712 (799)8391 (6158)4.4e4 (3e4)1.1e5 (9e4)2.1e5 (1e5)2.4e6 (2e6)7.5e6 (8e6)1/15
AL3-CMA-ES Dufosse 704 (757)4.3e4 (4e4)4.6e5 (6e5)1.4e6 (2e6)5e50/15
AL4-CMA-ES Dufosse 1778 (711)3.8e4 (4e4)2.6e5 (2e5)1.0e6 (1e6)7.3e6 (9e6)5e50/15
BPepsMAg Hellwig 128 (107)552 (438)1365 (998)4.8e4 (7e4)7e50/15
COBYLA Dufosse 46 (25)89 (32)130 (50)163 (40)1.4e6 (2e6)1e50/15
RandomSearch-5 Dufosse 186 (213)3315 (5023)4.2e4 (5e4)1.8e6 (1e6)2e60/15
epsMAg Hellwig 246 (242)619 (236)732 (464)1263 (1233)1.5e7 (1e7)1e60/15
fmincon Hellwig 114 (91)147 (91)175 (91)1.8e4 (2e4)3e40/15

Δ fopt
f26, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3031 (1042)2.2e4 (2e4)8.2e4 (3e4)6.7e5 (9e5)7.2e6 (7e6)5e50/15
AL2-CMA-ES Dufosse 2841 (1400)8.8e4 (3e5)3.3e5 (3e5)9.9e5 (1e6)3.6e6 (4e6)5e50/15
AL3-CMA-ES Dufosse 2944 (1265)4.2e4 (7e4)1.3e6 (1e6)3.7e6 (4e6)5e50/15
AL4-CMA-ES Dufosse 2997 (1143)4.1e4 (6e4)9.9e5 (1e6)2.4e6 (3e6)7.5e6 (8e6)5e50/15
BPepsMAg Hellwig 3754 (2406)6640 (7226)8071 (8153)6.2e4 (8e4)1.0e7 (1e7)7e50/15
COBYLA Dufosse 121 (37)165 (57)200 (62)235 (52)3.2e5 (4e5)1e50/15
RandomSearch-5 Dufosse 4.9e5 (1e6)1.5e7 (2e7)2e60/15
epsMAg Hellwig 2.8e4 (5e4)5.1e4 (7e4)6.6e4 (8e4)1.4e5 (1e5)1e60/15
fmincon Hellwig 289 (548)332 (537)476 (568)3.8e4 (4e4)3e40/15

Δ fopt
f27, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.3e4 (2e4)2.9e5 (5e5)7.1e6 (9e6)5e50/15
AL2-CMA-ES Dufosse 5.6e4 (5e4)7.4e5 (9e5)2.4e6 (3e6)5e50/15
AL3-CMA-ES Dufosse 1.1e5 (1e5)2.8e5 (5e5)9.4e5 (8e5)7.4e6 (8e6)5e50/15
AL4-CMA-ES Dufosse 6.9e4 (1e5)1.0e5 (1e5)1.2e6 (2e6)7.5e6 (1e7)7.5e6 (8e6)7.5e6 (6e6)7.5e6 (7e6)1/15
BPepsMAg Hellwig 2.6e5 (4e5)7.0e5 (1e6)1.1e6 (1e6)1.6e6 (2e6)7e50/15
COBYLA Dufosse 642 (581)1382 (2028)2681 (4004)2854 (4081)4.9e4 (7e4)1e50/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1.6e5 (1e5)3.5e5 (3e5)6.8e5 (9e5)6.9e5 (8e5)4.7e6 (4e6)1e60/15
fmincon Hellwig 2732 (1205)3379 (2189)9489 (2e4)4.3e4 (5e4)3e40/15

Δ fopt
f28, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.0e5 (3e4)4.1e5 (5e5)6.5e5 (1e6)6.6e5 (8e5)8.4e5 (8e5)5e50/15
AL2-CMA-ES Dufosse 1.6e5 (3e5)1.8e5 (3e5)2.4e5 (3e5)2.5e5 (3e5)5.1e5 (5e5)5e50/15
AL3-CMA-ES Dufosse 1.5e6 (1e6)3.4e6 (4e6)5e50/15
AL4-CMA-ES Dufosse 4.8e5 (4e5)6.0e5 (6e5)7.9e5 (7e5)1.3e6 (1e6)2.2e6 (2e6)3.5e6 (4e6)7.3e6 (1e7)1/15
BPepsMAg Hellwig 9.1e5 (1e6)5.1e6 (6e6)1.0e7 (8e6)7e50/15
COBYLA Dufosse 398 (1002)★2916 (1068)★37291 (1e4)★21.0e4 (1e4)1.1e4 (1e4)★21.1e4 (1e4)★21.1e4 (1e4)★215/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 5.9e5 (1e6)1.9e6 (2e6)1.4e7 (1e7)1e60/15
fmincon Hellwig 1.7e4 (2e4)3.3e4 (3e4)5.6e4 (5e4)6.8e4 (7e4)4.2e5 (5e5)3e40/15

Δ fopt
f29, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 4.0e4 (3e4)4.5e4 (2e4)4.8e4 (2e4)5.1e4 (2e4)5.2e4 (2e4)2.8e5 (4e5)5e50/15
AL2-CMA-ES Dufosse 1.9e4 (9640)2.1e4 (1e4)2.3e4 (1e4)2.5e4 (1e4)2.6e4 (1e4)1.4e6 (1e6)5e50/15
AL3-CMA-ES Dufosse 1.3e5 (1e5)1.8e5 (2e5)1.8e5 (2e5)1.9e5 (2e5)2.4e5 (3e5)2.4e5 (3e5)4.7e5 (4e5)10/15
AL4-CMA-ES Dufosse 6.1e4 (4e4)8.5e4 (9e4)8.9e4 (9e4)9.3e4 (9e4)9.5e4 (9e4)9.9e4 (9e4)1.0e6 (9e5)6/15
BPepsMAg Hellwig 2.0e6 (3e6)1.0e7 (1e7)1.0e7 (1e7)7e50/15
COBYLA Dufosse 507 (1022)★3579 (1024)★3966 (1026)★21119 (1032)★21146 (1028)★21199 (1022)★31227 (1030)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1.9e5 (4e4)3.2e5 (5e5)4.9e5 (5e5)5.3e5 (1e6)5.4e5 (6e5)5.5e5 (5e5)5.7e5 (5e5)11/15
fmincon Hellwig 1.2e4 (2e4)1.5e4 (2e4)1.6e4 (2e4)1.7e4 (2e4)2.6e4 (4e4)2.1e5 (2e5)87970/15

Δ fopt
f30, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.3e4 (8864)1.6e4 (8818)1.7e4 (9553)1.9e4 (9586)2.0e4 (9635)5.4e4 (7e4)5e50/15
AL2-CMA-ES Dufosse 1.1e4 (6088)1.2e4 (6334)1.4e4 (6368)1.5e4 (5718)1.6e4 (5760)1.9e4 (5436)2.2e5 (5e5)11/15
AL3-CMA-ES Dufosse 1.7e4 (1e4)1.9e4 (1e4)2.1e4 (1e4)2.2e4 (1e4)2.4e4 (1e4)2.9e4 (2e4)2.1e6 (2e6)3/15
AL4-CMA-ES Dufosse 1.2e4 (6047)1.4e4 (8838)1.6e4 (1e4)1.8e4 (1e4)1.9e4 (1e4)3.7e4 (3e4)3.5e6 (3e6)2/15
BPepsMAg Hellwig 1.3e5 (2e5)6.4e5 (7e5)9.8e5 (1e6)2.1e6 (2e6)4.8e6 (4e6)7e50/15
COBYLA Dufosse 101 (24)★3124 (23)★3151 (25)★3173 (38)★3196 (37)★3260 (19)★3284 (19)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1.1e5 (1e4)1.2e5 (7384)1.3e5 (7640)1.4e5 (9386)1.4e5 (9154)1.6e5 (1e4)2.3e5 (1e4)14/15
fmincon Hellwig 3.5e4 (4e4)6.4e4 (8e4)6.5e4 (8e4)6.5e4 (8e4)2.0e5 (2e5)3e40/15

Δ fopt
f31, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2322 (287)3114 (454)1.2e4 (1e4)2.6e4 (2e4)3.3e4 (2e4)3.9e4 (2e4)4.2e4 (2e4)15/15
AL2-CMA-ES Dufosse 2231 (380)2913 (286)4322 (2441)9513 (5604)1.5e4 (8041)2.0e4 (8116)2.2e4 (8974)15/15
AL3-CMA-ES Dufosse 2303 (369)3065 (499)1.7e4 (2e4)9.8e4 (7e4)2.5e5 (3e5)9.0e5 (1e6)1.1e6 (1e6)5/15
AL4-CMA-ES Dufosse 2369 (501)3042 (522)7070 (9151)9.1e4 (1e5)2.9e5 (4e5)6.7e5 (8e5)1.1e6 (2e6)5/15
BPepsMAg Hellwig 3292 (1115)5644 (1039)7914 (1240)1.2e4 (2850)8.7e4 (2e5)3.0e6 (3e6)4.9e6 (4e6)2/15
COBYLA Dufosse 130 (19)★3179 (25)★3225 (14)★3280 (22)★3739 (998)★21.0e4 (8658)5.0e4 (6e4)12/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 5994 (1918)2.0e4 (2e4)5.4e4 (3e4)7.8e4 (4e4)2.5e5 (5e5)2.9e6 (3e6)1.4e7 (2e7)1/15
fmincon Hellwig 329 (158)518 (167)606 (196)651 (172)1.2e4 (2e4)4.6e4 (3e4)27110/15

Δ fopt
f32, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 4817 (1988)6316 (3317)8143 (3517)9549 (3941)1.1e4 (4317)1.4e4 (4397)1.4e4 (4498)15/15
AL2-CMA-ES Dufosse 4761 (2425)5895 (2757)7263 (3745)8229 (4000)9255 (4183)1.4e4 (8313)3.1e5 (5e5)10/15
AL3-CMA-ES Dufosse 5378 (2534)7080 (4099)8807 (5168)1.2e4 (8284)1.4e4 (8721)1.8e4 (9440)2.1e4 (9782)15/15
AL4-CMA-ES Dufosse 6455 (3959)8516 (7994)1.0e4 (1e4)1.2e4 (1e4)1.3e4 (1e4)1.7e4 (1e4)1.8e4 (1e4)15/15
BPepsMAg Hellwig 1.9e4 (2e4)5.4e4 (4e4)1.6e5 (2e5)8.8e5 (1e6)2.0e6 (3e6)7e50/15
COBYLA Dufosse 223 (139)★2432 (264)1623 (538)1.2e4 (2e4)2.6e4 (4e4)2.3e5 (2e5)1e50/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 7.9e4 (3e4)1.0e5 (4e4)1.3e5 (4e4)1.4e5 (4e4)2.1e5 (1e5)1.9e6 (3e6)2.6e6 (3e6)5/15
fmincon Hellwig 579 (352)903 (493)3616 (1352)3649 (1363)3684 (1363)6582 (1e4)5.3e4 (9e4)1/15

Δ fopt
f33, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 8287 (4419)1.0e4 (4204)1.2e4 (4611)1.5e4 (4666)1.7e4 (4505)2.0e4 (4773)1.1e5 (3e5)13/15
AL2-CMA-ES Dufosse 7549 (2322)9666 (2993)1.2e4 (3214)1.4e4 (2564)1.7e4 (2305)2.1e6 (2e6)7.3e6 (5e6)1/15
AL3-CMA-ES Dufosse 8396 (3495)1.0e4 (4880)1.3e4 (5233)1.5e4 (5770)1.7e4 (5930)2.2e4 (6458)2.3e4 (6371)15/15
AL4-CMA-ES Dufosse 8288 (2598)1.1e4 (3212)1.3e4 (3859)1.6e4 (4543)1.8e4 (4619)2.3e4 (6206)2.4e4 (6348)15/15
BPepsMAg Hellwig 4.4e4 (4e4)1.7e5 (9e4)1.0e6 (1e6)7e50/15
COBYLA Dufosse 163 (43)★3233 (52)★3309 (63)★2450 (137)1040 (760)2.1e4 (4e4)6.6e4 (7e4)10/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 9.8e4 (2e4)1.4e5 (5e4)1.5e5 (5e4)2.1e5 (7e4)3.5e5 (4e5)4.9e6 (5e6)1e60/15
fmincon Hellwig 460 (222)532 (253)610 (324)683 (500)778 (511)1524 (1231)6210/15

Δ fopt
f34, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.4e4 (4081)1.6e4 (5117)1.8e4 (4995)2.0e4 (5078)2.1e4 (4610)2.4e4 (4742)2.1e5 (3e5)11/15
AL2-CMA-ES Dufosse 1.2e4 (5402)1.5e4 (5195)1.7e4 (5431)1.9e4 (4963)2.1e4 (4911)1.0e6 (2e6)5e50/15
AL3-CMA-ES Dufosse 1.1e4 (3860)1.4e4 (3110)1.6e4 (4421)1.8e4 (4216)2.0e4 (4383)2.3e4 (4817)2.4e4 (4476)15/15
AL4-CMA-ES Dufosse 1.3e4 (4766)1.6e4 (4906)1.7e4 (5564)1.9e4 (5555)2.1e4 (5498)2.4e4 (5604)2.8e4 (2e4)15/15
BPepsMAg Hellwig 9.9e4 (2e5)8.7e5 (1e6)4.6e6 (5e6)7e50/15
COBYLA Dufosse 106 (26)★3134 (27)★3165 (40)★3190 (46)★3213 (64)★3261 (72)★3270 (63)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1.0e5 (1e4)1.2e5 (1e4)1.3e5 (1e4)1.4e5 (1e4)1.5e5 (8872)1.6e5 (1e4)1.6e5 (1e4)15/15
fmincon Hellwig 601 (354)630 (396)655 (447)671 (458)687 (447)1766 (1248)5110/15

Δ fopt
f35, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.2e4 (5657)1.4e4 (5895)1.6e4 (5831)1.8e4 (5981)1.9e4 (6154)5.7e4 (6414)2.0e5 (4e5)11/15
AL2-CMA-ES Dufosse 1.3e4 (4500)1.6e4 (5211)1.7e4 (6180)1.9e4 (5876)2.0e4 (5841)2.0e5 (3e5)1.0e6 (2e6)5/15
AL3-CMA-ES Dufosse 1.3e4 (6392)1.5e4 (8114)1.7e4 (8413)1.8e4 (8350)2.0e4 (8305)2.3e4 (8268)3.6e4 (3e4)15/15
AL4-CMA-ES Dufosse 1.2e4 (5270)1.4e4 (5498)1.5e4 (5540)1.7e4 (5303)1.9e4 (4723)2.1e4 (4926)6.0e4 (2e4)14/15
BPepsMAg Hellwig 1.4e5 (1e5)3.9e5 (7e5)2.2e6 (3e6)7e50/15
COBYLA Dufosse 92 (20)★3125 (17)★3146 (17)★3165 (18)★3190 (26)★3236 (26)★3245 (30)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1.1e5 (7008)1.2e5 (6450)1.3e5 (8780)1.4e5 (8122)1.4e5 (7264)1.5e5 (7824)1.5e5 (7434)15/15
fmincon Hellwig 413 (297)433 (297)448 (286)461 (297)476 (286)1897 (2171)7646 (1e4)1/15

Δ fopt
f36, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.6e4 (6095)1.7e4 (6033)1.9e4 (5759)2.0e4 (6503)2.2e4 (6323)2.5e4 (5886)3.4e5 (5e5)10/15
AL2-CMA-ES Dufosse 1.5e4 (6997)1.7e4 (6685)1.8e4 (6780)2.0e4 (6772)2.1e4 (6412)7.1e4 (1e5)3.6e5 (5e5)9/15
AL3-CMA-ES Dufosse 1.7e4 (8688)1.8e4 (8927)1.9e4 (8835)2.1e4 (8251)2.2e4 (8263)2.6e4 (9021)2.1e5 (3e5)12/15
AL4-CMA-ES Dufosse 1.7e4 (8245)1.9e4 (7929)2.0e4 (8143)2.1e4 (7900)2.3e4 (8503)2.7e4 (1e4)6.0e4 (3e4)15/15
BPepsMAg Hellwig 3.5e4 (5e4)7.5e4 (1e5)1.7e5 (2e5)3.9e5 (5e5)1.3e6 (2e6)5.0e6 (4e6)1.0e7 (1e7)1/15
COBYLA Dufosse 109 (14)★3122 (15)★3151 (16)★3163 (17)★3188 (30)★3226 (32)★3261 (31)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1.1e5 (5050)1.2e5 (7351)1.3e5 (6362)1.3e5 (6827)1.4e5 (6066)1.5e5 (5120)1.5e5 (5270)15/15
fmincon Hellwig 646 (462)679 (429)694 (440)709 (429)722 (438)1.1e4 (1e4)6810/15

Δ fopt
f37, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2253 (340)3221 (626)4128 (656)5062 (573)5953 (757)7618 (841)8449 (1003)15/15
AL2-CMA-ES Dufosse 2379 (277)3181 (339)4107 (378)4966 (508)5742 (681)7658 (798)8703 (717)15/15
AL3-CMA-ES Dufosse 2378 (509)3252 (610)4184 (617)5035 (557)6109 (650)8021 (576)8896 (694)15/15
AL4-CMA-ES Dufosse 2151 (367)2958 (452)3883 (555)4764 (547)5734 (560)7544 (1055)8512 (1007)15/15
BPepsMAg Hellwig 1032 (186)2037 (348)3749 (938)6464 (1900)9227 (1060)1.6e4 (3276)2.0e4 (4033)15/15
COBYLA Dufosse 112 (18)★3197 (43)★3655 (633)2.9e4 (5e4)3.1e5 (3e5)1e50/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1774 (414)3132 (526)4888 (926)3.1e4 (5e4)9.8e4 (1e4)1.2e5 (7462)1.3e5 (1e4)15/15
fmincon Hellwig 424 (110)549 (88)663 (114)762 (101)831 (114)★31494 (482)★33991 (3203)★310/15

Δ fopt
f38, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3197 (590)4290 (601)5404 (958)6475 (886)7579 (751)9956 (876)1.2e4 (1243)15/15
AL2-CMA-ES Dufosse 3256 (660)4299 (744)5640 (798)6658 (919)7507 (780)1.1e4 (1496)4.6e4 (7e4)15/15
AL3-CMA-ES Dufosse 3146 (600)4233 (745)5442 (830)6634 (1235)7780 (1280)9917 (1344)1.1e4 (1067)15/15
AL4-CMA-ES Dufosse 3183 (603)4276 (698)5352 (777)6501 (729)7540 (803)9887 (603)1.2e4 (1003)15/15
BPepsMAg Hellwig 1572 (502)4691 (1772)7759 (3302)1.2e4 (5582)2.2e4 (8675)4.4e4 (6e4)5.5e4 (7e4)15/15
COBYLA Dufosse 106 (23)★3190 (36)★3443 (190)★22750 (594)8.1e4 (8e4)1e50/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 2625 (734)7405 (3932)4.2e4 (5e4)9.2e4 (6e4)1.2e5 (1e4)1.4e5 (1e4)1.5e5 (1e4)15/15
fmincon Hellwig 471 (110)594 (103)710 (105)811 (94)942 (155)★31542 (438)★35685 (3682)★36/15

Δ fopt
f39, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5884 (3404)8564 (3522)1.1e4 (3185)1.2e4 (2755)1.4e4 (3214)1.7e4 (3173)1.8e4 (3034)15/15
AL2-CMA-ES Dufosse 6105 (3485)8596 (4156)1.1e4 (4097)1.2e4 (4260)1.4e4 (4689)3.3e4 (4e4)3.4e6 (4e6)2/15
AL3-CMA-ES Dufosse 6052 (3430)8377 (3814)1.0e4 (3714)1.2e4 (3772)1.5e4 (4219)1.8e4 (4585)1.9e4 (4324)15/15
AL4-CMA-ES Dufosse 5551 (2766)8017 (3940)9701 (3680)1.1e4 (3750)1.3e4 (3921)1.7e4 (3529)1.8e4 (2923)15/15
BPepsMAg Hellwig 2584 (831)6051 (2602)2.0e4 (2e4)5.9e4 (6e4)1.5e5 (2e5)5.1e5 (5e5)7.2e5 (6e5)9/15
COBYLA Dufosse 108 (22)★3184 (55)★3347 (193)★2845 (792)1.2e4 (2e4)4.7e4 (6e4)2.4e5 (3e5)5/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 2.0e4 (5e4)4.7e4 (6e4)1.0e5 (5e4)1.3e5 (2e4)1.4e5 (1e4)1.8e5 (4e4)1.9e5 (5e4)15/15
fmincon Hellwig 446 (75)567 (71)729 (93)809 (126)869 (174)1194 (227)4683 (4498)4/15

Δ fopt
f40, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5875 (1661)9687 (3980)1.2e4 (3671)1.5e4 (3597)1.7e4 (3855)2.1e4 (4817)5.0e4 (4e4)15/15
AL2-CMA-ES Dufosse 7142 (3101)1.0e4 (5073)1.2e4 (4798)1.5e4 (4973)1.8e4 (5373)1.5e5 (3e5)1.5e6 (3e6)4/15
AL3-CMA-ES Dufosse 5756 (1798)9166 (2361)1.2e4 (5336)1.4e4 (5601)1.6e4 (6151)2.1e4 (5692)2.2e4 (5532)15/15
AL4-CMA-ES Dufosse 7013 (2929)9466 (4580)1.2e4 (4423)1.4e4 (4476)1.6e4 (4006)2.0e4 (4676)2.1e4 (4072)15/15
BPepsMAg Hellwig 3569 (1518)8244 (3415)7.0e4 (1e5)3.7e5 (5e5)1.7e6 (2e6)1.0e7 (1e7)1.0e7 (1e7)1/15
COBYLA Dufosse 103 (41)★3142 (62)★3194 (120)★3247 (206)★2284 (260)★2302 (262)★3302 (262)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 6372 (2928)5.7e4 (6e4)1.2e5 (2e4)1.3e5 (2e4)1.4e5 (1e4)1.6e5 (1e4)1.6e5 (1e4)15/15
fmincon Hellwig 344 (88)432 (131)540 (117)600 (132)644 (128)1409 (1708)2315 (2412)5/15

Δ fopt
f41, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 9322 (5445)1.3e4 (6370)1.5e4 (6833)1.6e4 (7014)1.8e4 (7478)2.2e4 (7568)4.6e4 (6e4)15/15
AL2-CMA-ES Dufosse 1.1e4 (5583)1.4e4 (6458)1.6e4 (6972)1.8e4 (7913)2.0e4 (7858)2.4e5 (6e5)8.4e5 (8e5)6/15
AL3-CMA-ES Dufosse 9081 (4628)1.2e4 (6730)1.4e4 (7645)1.5e4 (8258)1.7e4 (7636)2.1e4 (7552)2.2e4 (8401)15/15
AL4-CMA-ES Dufosse 8478 (4091)1.1e4 (5245)1.4e4 (4729)1.6e4 (5063)1.8e4 (4778)2.1e4 (5152)4.1e4 (2e4)15/15
BPepsMAg Hellwig 4615 (4412)3.6e4 (6e4)1.3e5 (1e5)5.2e5 (6e5)1.1e6 (1e6)7e50/15
COBYLA Dufosse 64 (21)★372 (22)★376 (43)★379 (43)★379 (43)★379 (43)★379 (43)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 5.2e4 (5e4)1.1e5 (1e4)1.3e5 (7644)1.4e5 (8251)1.4e5 (9380)1.5e5 (1e4)1.5e5 (9726)15/15
fmincon Hellwig 288 (99)346 (122)415 (89)441 (110)488 (111)681 (407)5740/15

Δ fopt
f42, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.3e4 (8116)1.7e4 (7775)1.9e4 (8395)2.0e4 (8673)2.2e4 (9197)2.6e4 (9266)1.4e5 (3e5)13/15
AL2-CMA-ES Dufosse 1.1e4 (4220)1.3e4 (4104)1.4e4 (4531)1.6e4 (4308)1.7e4 (4532)5.5e4 (4857)5.6e4 (5835)14/15
AL3-CMA-ES Dufosse 1.2e4 (5622)1.4e4 (6049)1.6e4 (6379)1.7e4 (6521)1.9e4 (6363)2.3e4 (6524)7.6e4 (6e4)14/15
AL4-CMA-ES Dufosse 1.2e4 (5067)1.6e4 (6337)1.8e4 (7846)1.9e4 (7913)2.1e4 (7174)2.5e4 (7673)4.9e4 (6e4)15/15
BPepsMAg Hellwig 4925 (2201)2.5e4 (8512)4.9e4 (7e4)1.3e5 (2e5)4.7e5 (5e5)1.3e6 (2e6)1.3e6 (1e6)6/15
COBYLA Dufosse 50 (7)★361 (23)★361 (23)★365 (23)★370 (54)★374 (54)★379 (87)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 8.8e4 (5e4)1.2e5 (4080)1.3e5 (1e4)1.3e5 (9212)1.4e5 (9729)1.5e5 (8638)1.5e5 (9132)15/15
fmincon Hellwig 390 (224)443 (257)507 (158)541 (158)636 (220)4818 (8227)5930/15

Δ fopt
f43, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.0e5 (8e4)1.3e5 (7e4)1.3e5 (7e4)1.3e5 (7e4)1.4e5 (7e4)1.4e5 (8e4)1.5e5 (8e4)15/15
AL2-CMA-ES Dufosse 9.3e4 (7e4)1.0e5 (8e4)1.1e5 (8e4)1.1e5 (8e4)1.1e5 (9e4)1.2e5 (9e4)1.2e5 (1e5)15/15
AL3-CMA-ES Dufosse 8.5e4 (3e4)8.8e4 (3e4)9.0e4 (3e4)9.3e4 (3e4)9.5e4 (3e4)1.0e5 (3e4)1.0e5 (3e4)15/15
AL4-CMA-ES Dufosse 7.2e4 (4e4)8.9e4 (3e4)9.2e4 (3e4)9.4e4 (3e4)9.7e4 (3e4)1.0e5 (3e4)1.0e5 (3e4)15/15
BPepsMAg Hellwig 7e50/15
COBYLA Dufosse 1e50/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1.4e7 (9e6)1.4e7 (2e7)1.4e7 (2e7)1.4e7 (1e7)1.4e7 (2e7)1.4e7 (2e7)1e60/15
fmincon Hellwig 11540/15

Δ fopt
f44, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.6e5 (1e5)1.7e5 (2e5)1.7e5 (2e5)1.7e5 (2e5)1.8e5 (2e5)1.9e5 (2e5)2.9e5 (5e5)12/15
AL2-CMA-ES Dufosse 1.4e5 (1e5)1.5e5 (1e5)1.7e5 (1e5)1.8e5 (1e5)1.8e5 (1e5)1.9e5 (2e5)2.1e5 (2e5)14/15
AL3-CMA-ES Dufosse 3.1e5 (3e5)3.2e5 (3e5)3.2e5 (3e5)3.3e5 (3e5)3.3e5 (3e5)3.4e5 (3e5)3.5e5 (3e5)12/15
AL4-CMA-ES Dufosse 2.8e5 (3e5)2.9e5 (3e5)3.0e5 (2e5)3.0e5 (3e5)3.1e5 (3e5)3.2e5 (3e5)3.3e5 (3e5)13/15
BPepsMAg Hellwig 7e50/15
COBYLA Dufosse 1e50/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1.4e7 (2e7)1e60/15
fmincon Hellwig 14580/15

Δ fopt
f45, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.2e6 (2e6)2.2e6 (3e6)2.2e6 (3e6)2.3e6 (2e6)3.5e6 (4e6)3.5e6 (3e6)3.5e6 (5e6)2/15
AL2-CMA-ES Dufosse 2.4e6 (2e6)3.6e6 (3e6)7.4e6 (1e7)5e50/15
AL3-CMA-ES Dufosse 7.4e6 (7e6)7.4e6 (9e6)7.4e6 (8e6)7.4e6 (1e7)7.5e6 (9e6)7.5e6 (6e6)5e50/15
AL4-CMA-ES Dufosse 7.2e6 (1e7)7.2e6 (9e6)7.2e6 (1e7)7.2e6 (8e6)7.2e6 (8e6)7.2e6 (9e6)5e50/15
BPepsMAg Hellwig 7e50/15
COBYLA Dufosse 6.9e5 (7e5)6.9e5 (7e5)6.9e5 (6e5)6.9e5 (8e5)6.9e5 (1e6)1e50/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1.4e7 (1e7)1.4e7 (1e7)1.4e7 (1e7)1.4e7 (2e7)1e60/15
fmincon Hellwig 14330/15

Δ fopt
f46, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5e50/15
AL2-CMA-ES Dufosse 7.5e6 (7e6)7.5e6 (1e7)5e50/15
AL3-CMA-ES Dufosse 5e50/15
AL4-CMA-ES Dufosse 5e50/15
BPepsMAg Hellwig 7e50/15
COBYLA Dufosse 1.8e4 (3e4)1.8e4 (3e4)2.3e4 (5e4)2.5e4 (5e4)2.9e4 (5e4)3.1e4 (5e4)3.1e4 (5e4)14/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1.4e7 (2e7)1e60/15
fmincon Hellwig 21950/15

Δ fopt
f47, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5e50/15
AL2-CMA-ES Dufosse 5e50/15
AL3-CMA-ES Dufosse 5e50/15
AL4-CMA-ES Dufosse 5e50/15
BPepsMAg Hellwig 7e50/15
COBYLA Dufosse 3146 (3027)3184 (3011)3223 (3022)3307 (3019)3528 (3030)3575 (3032)3601 (3028)15/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 6.6e6 (6e6)1e60/15
fmincon Hellwig 23180/15

Δ fopt
f48, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5e50/15
AL2-CMA-ES Dufosse 5e50/15
AL3-CMA-ES Dufosse 5e50/15
AL4-CMA-ES Dufosse 5e50/15
BPepsMAg Hellwig 7e50/15
COBYLA Dufosse 301 (550)★3331 (554)★3359 (556)★3380 (542)★3402 (554)★3454 (536)★3519 (534)★315/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 4.1e6 (6e6)6.6e6 (6e6)6.6e6 (7e6)6.6e6 (8e6)6.6e6 (7e6)6.6e6 (9e6)6.6e6 (6e6)2/15
fmincon Hellwig 2.7e4 (4e4)4.3e4 (7e4)4.5e4 (6e4)6.1e4 (5e4)6.2e4 (1e5)1.5e5 (2e5)3.1e5 (3e5)1/15

Δ fopt
f49, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.5e5 (1e5)2.3e5 (2e5)2.3e5 (2e5)2.3e5 (3e5)2.4e5 (2e5)2.4e5 (3e5)2.5e5 (3e5)13/15
AL2-CMA-ES Dufosse 1.5e5 (1e5)2.1e5 (3e5)2.1e5 (3e5)2.2e5 (3e5)2.2e5 (3e5)2.3e5 (3e5)2.3e5 (3e5)13/15
AL3-CMA-ES Dufosse 2.5e5 (3e5)2.8e5 (3e5)2.8e5 (3e5)2.8e5 (4e5)2.9e5 (3e5)3.0e5 (3e5)3.0e5 (4e5)12/15
AL4-CMA-ES Dufosse 1.8e5 (1e5)2.4e5 (2e5)2.4e5 (3e5)2.4e5 (2e5)2.5e5 (3e5)2.6e5 (3e5)2.6e5 (2e5)13/15
BPepsMAg Hellwig 7e50/15
COBYLA Dufosse 1e50/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1e60/15
fmincon Hellwig 11140/15

Δ fopt
f50, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5.4e5 (5e5)5.4e5 (5e5)5.5e5 (4e5)5.6e5 (6e5)5.6e5 (8e5)6.6e5 (5e5)8.2e5 (1e6)7/15
AL2-CMA-ES Dufosse 2.0e5 (2e5)2.1e5 (2e5)2.2e5 (2e5)2.5e5 (3e5)2.6e5 (3e5)2.7e5 (3e5)2.8e5 (3e5)13/15
AL3-CMA-ES Dufosse 5.0e5 (4e5)5.1e5 (6e5)5.2e5 (5e5)5.2e5 (6e5)5.3e5 (4e5)5.5e5 (4e5)5.5e5 (3e5)10/15
AL4-CMA-ES Dufosse 4.8e5 (6e5)4.9e5 (5e5)5.0e5 (5e5)5.0e5 (5e5)5.1e5 (5e5)5.2e5 (4e5)5.3e5 (5e5)10/15
BPepsMAg Hellwig 7e50/15
COBYLA Dufosse 1e50/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1e60/15
fmincon Hellwig 14420/15

Δ fopt
f51, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5e50/15
AL2-CMA-ES Dufosse 3.4e6 (3e6)3.4e6 (4e6)3.5e6 (6e6)7.1e6 (1e7)7.1e6 (6e6)7.1e6 (9e6)5e50/15
AL3-CMA-ES Dufosse 5e50/15
AL4-CMA-ES Dufosse 5e50/15
BPepsMAg Hellwig 7e50/15
COBYLA Dufosse 1e50/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1e60/15
fmincon Hellwig 16450/15

Δ fopt
f52, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5e50/15
AL2-CMA-ES Dufosse 5e50/15
AL3-CMA-ES Dufosse 5e50/15
AL4-CMA-ES Dufosse 5e50/15
BPepsMAg Hellwig 7e50/15
COBYLA Dufosse 2.5e5 (3e5)2.5e5 (3e5)2.5e5 (3e5)2.5e5 (2e5)2.5e5 (3e5)2.5e5 (3e5)2.5e5 (3e5)5/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1e60/15
fmincon Hellwig 16370/15

Δ fopt
f53, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5e50/15
AL2-CMA-ES Dufosse 5e50/15
AL3-CMA-ES Dufosse 5e50/15
AL4-CMA-ES Dufosse 5e50/15
BPepsMAg Hellwig 7e50/15
COBYLA Dufosse 2.2e4 (3e4)2.2e4 (3e4)2.3e4 (3e4)2.3e4 (3e4)2.3e4 (3e4)2.3e4 (3e4)2.3e4 (3e4)14/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 1e60/15
fmincon Hellwig 5.1e4 (5e4)5.1e4 (6e4)5.2e4 (5e4)5.3e4 (4e4)5.3e4 (7e4)16230/15

Δ fopt
f54, 10-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5e50/15
AL2-CMA-ES Dufosse 5e50/15
AL3-CMA-ES Dufosse 5e50/15
AL4-CMA-ES Dufosse 5e50/15
BPepsMAg Hellwig 7e50/15
COBYLA Dufosse 1933 (1672)★21971 (1684)★22051 (1992)★22145 (2507)★22165 (2512)★22219 (2515)★22243 (2498)★215/15
RandomSearch-5 Dufosse 2e60/15
epsMAg Hellwig 4.1e6 (5e6)6.6e6 (6e6)6.6e6 (5e6)6.6e6 (7e6)6.6e6 (8e6)6.6e6 (9e6)6.7e6 (7e6)2/15
fmincon Hellwig 5.7e4 (4e4)1.1e5 (1e5)1.7e5 (2e5)1.8e5 (2e5)1.8e5 (1e5)3e40/15

Previous dimension | Dimension = 20 | Next dimension

Δ fopt
f1, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3330 (533)4681 (730)5699 (913)6543 (1218)7360 (1206)8967 (1436)9830 (888)15/15
AL2-CMA-ES Dufosse 3290 (610)4167 (820)4998 (626)5884 (792)7199 (874)9742 (1220)1.1e4 (2094)15/15
AL3-CMA-ES Dufosse 3277 (466)4711 (703)5848 (870)6743 (1034)7603 (1085)9253 (966)1.0e4 (933)15/15
AL4-CMA-ES Dufosse 3339 (562)4819 (844)5963 (1160)6873 (1326)7615 (1297)9339 (1214)1.0e4 (1160)15/15
BPepsMAg Hellwig 4269 (837)9235 (1168)1.5e4 (1352)2.3e4 (2330)2.9e4 (2146)4.2e4 (1776)4.8e4 (2798)15/15
COBYLA Dufosse 210 (53)335 (32)473 (50)582 (36)693 (50)956 (104)1071 (78)15/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 8420 (2365)2.4e4 (2e4)8.5e4 (6e4)1.5e5 (8e4)2.0e5 (2e4)2.4e5 (6186)2.5e5 (9092)15/15
fmincon Hellwig 124 (42)★3141 (42)★3181 (71)★3227 (71)★3241 (29)★3315 (69)★3360 (110)★315/15

Δ fopt
f2, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5475 (1291)7051 (986)8167 (1111)9321 (1202)1.0e4 (1315)1.3e4 (1468)1.4e4 (1308)15/15
AL2-CMA-ES Dufosse 5564 (2156)6704 (2001)8435 (3188)9996 (4106)1.2e4 (2922)6.3e4 (3e4)4.8e5 (5e5)14/15
AL3-CMA-ES Dufosse 5766 (1395)7470 (1292)8842 (1535)1.0e4 (1901)1.1e4 (1639)1.3e4 (1868)1.5e4 (1741)15/15
AL4-CMA-ES Dufosse 5795 (1560)7224 (1103)8469 (1062)9735 (1092)1.1e4 (1088)1.3e4 (1176)1.4e4 (1329)15/15
BPepsMAg Hellwig 1.9e4 (2e4)2.7e4 (2e4)6.7e4 (9e4)9.0e4 (9e4)1.4e5 (1e5)2.9e5 (7e5)3.1e5 (7e5)13/15
COBYLA Dufosse 228 (25)339 (50)470 (50)595 (45)713 (48)977 (88)1089 (68)15/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 1.0e5 (1e5)1.6e5 (1e5)2.1e5 (7e4)2.3e5 (6e4)2.5e5 (5e4)2.8e5 (5e4)2.9e5 (5e4)15/15
fmincon Hellwig 229 (130)264 (129)330 (90)★2365 (110)★3386 (151)★3512 (218)★3791 (435)★312/15

Δ fopt
f3, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 9845 (1832)1.3e4 (2368)1.5e4 (2580)1.7e4 (3168)1.9e4 (3093)2.2e4 (3265)1.5e6 (2e6)6/15
AL2-CMA-ES Dufosse 1.0e4 (3551)1.4e4 (4260)1.6e4 (5530)1.9e4 (3650)2.2e4 (3324)4.1e6 (6e6)1e60/15
AL3-CMA-ES Dufosse 1.1e4 (2285)1.3e4 (3342)1.6e4 (3229)1.9e4 (3973)2.1e4 (4532)2.4e4 (4228)1.1e5 (8e4)14/15
AL4-CMA-ES Dufosse 1.0e4 (2436)1.3e4 (2925)1.6e4 (2815)1.8e4 (3441)2.0e4 (3659)2.3e4 (3507)1.1e5 (4e4)14/15
BPepsMAg Hellwig 3.3e4 (2e4)7.7e4 (5e4)1.4e5 (1e5)1.8e5 (2e5)2.5e5 (3e5)6.4e5 (7e5)1.0e6 (1e6)11/15
COBYLA Dufosse 200 (39)★3321 (44)442 (58)553 (49)665 (75)902 (67)1020 (83)15/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 1.6e5 (9e4)2.1e5 (6e4)2.9e5 (1e5)3.4e5 (1e5)3.8e5 (2e5)5.0e5 (3e5)5.7e5 (3e5)15/15
fmincon Hellwig 348 (106)402 (127)473 (129)510 (90)630 (146)758 (221)1.3e4 (2e4)1/15

Δ fopt
f4, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.7e4 (4796)2.5e4 (9137)3.3e4 (8743)3.7e4 (8551)4.0e4 (8208)4.0e6 (5e6)1e60/15
AL2-CMA-ES Dufosse 1.9e4 (6466)2.6e4 (6178)3.2e4 (6480)3.6e4 (5919)1.7e5 (3e5)1e60/15
AL3-CMA-ES Dufosse 1.7e4 (4109)2.5e4 (6081)3.3e4 (1e4)3.8e4 (1e4)4.1e4 (1e4)8.1e4 (4e4)1e60/15
AL4-CMA-ES Dufosse 1.8e4 (4415)2.5e4 (6186)3.2e4 (7922)3.8e4 (6614)4.1e4 (6974)6.6e4 (3e4)1e60/15
BPepsMAg Hellwig 3.8e4 (2e4)8.9e4 (4e4)1.6e5 (5e4)2.2e5 (5e4)2.9e5 (5e4)7.9e5 (8e5)4.6e6 (7e6)4/15
COBYLA Dufosse 214 (28)★2286 (48)★2568 (770)876 (834)951 (822)1318 (854)1561 (1108)15/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.1e5 (4e4)2.4e5 (4e4)2.7e5 (5e4)3.4e5 (1e5)4.3e5 (1e5)6.3e5 (3e5)1.3e6 (1e6)13/15
fmincon Hellwig 656 (168)734 (162)796 (141)844 (126)900 (162)1138 (550)10170/15

Δ fopt
f5, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.3e4 (9579)3.2e4 (1e4)4.0e4 (1e4)4.4e4 (1e4)4.7e4 (1e4)1e60/15
AL2-CMA-ES Dufosse 2.4e4 (7000)3.3e4 (7811)3.6e4 (6359)3.9e4 (7225)1.0e5 (1e5)1e60/15
AL3-CMA-ES Dufosse 2.6e4 (7132)3.4e4 (1e4)4.2e4 (1e4)4.6e4 (1e4)5.0e4 (1e4)9.8e5 (1e6)1e60/15
AL4-CMA-ES Dufosse 2.5e4 (9252)3.4e4 (1e4)4.1e4 (9502)4.5e4 (1e4)4.8e4 (1e4)1.0e6 (2e6)1.4e7 (3e7)1/15
BPepsMAg Hellwig 5.2e4 (2e4)1.3e5 (4e4)2.1e5 (5e4)3.1e5 (9e4)3.9e5 (1e5)5.8e5 (2e5)6.6e5 (1e5)15/15
COBYLA Dufosse 95 (28)★3150 (41)★3167 (58)★3187 (87)★3190 (101)★3210 (120)★3210 (120)★315/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.2e5 (3e4)2.6e5 (4e4)3.0e5 (5e4)3.3e5 (6e4)3.6e5 (7e4)3.9e5 (7e4)4.1e5 (7e4)15/15
fmincon Hellwig 792 (252)850 (252)887 (210)906 (231)965 (231)3908 (4714)7850 (8224)2/15

Δ fopt
f6, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.3e4 (2e4)3.9e4 (2e4)4.4e4 (2e4)4.8e4 (2e4)5.2e4 (2e4)1e60/15
AL2-CMA-ES Dufosse 2.6e4 (9304)3.0e4 (8762)3.4e4 (9403)3.7e4 (9310)4.0e4 (9316)4.6e4 (1e4)3.1e5 (8e5)12/15
AL3-CMA-ES Dufosse 2.6e4 (7745)3.2e4 (8084)3.7e4 (9644)4.0e4 (1e4)4.4e4 (1e4)1.4e7 (2e7)1e60/15
AL4-CMA-ES Dufosse 2.5e4 (9302)3.1e4 (9331)3.6e4 (9505)4.0e4 (1e4)4.3e4 (1e4)6.8e6 (7e6)1e60/15
BPepsMAg Hellwig 2.9e4 (8203)4.5e4 (1e4)6.4e4 (2e4)8.6e4 (2e4)1.0e5 (2e4)1.5e5 (3e4)1.8e5 (5e4)15/15
COBYLA Dufosse 63 (22)★371 (25)★399 (68)★3121 (92)★3128 (102)★3159 (151)★3168 (152)★315/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.5e5 (3e4)2.9e5 (4e4)3.1e5 (3e4)3.2e5 (3e4)3.4e5 (3e4)3.6e5 (3e4)3.8e5 (3e4)15/15
fmincon Hellwig 1360 (714)1483 (693)1522 (672)1576 (693)1576 (693)4102 (3894)16370/15

Δ fopt
f7, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.1e4 (2199)1.8e4 (4348)2.3e4 (4526)2.7e4 (3289)2.9e4 (4338)3.1e4 (3337)3.3e4 (2943)15/15
AL2-CMA-ES Dufosse 8970 (2130)1.4e4 (1486)2.0e4 (2493)2.3e4 (3017)2.5e4 (3086)2.8e4 (2144)3.0e4 (2372)★215/15
AL3-CMA-ES Dufosse 1.2e4 (3430)2.0e4 (6012)2.7e4 (7750)4.3e4 (1e4)1.0e5 (1e4)1.1e5 (2e4)1.1e5 (2e4)14/15
AL4-CMA-ES Dufosse 1.1e4 (2975)1.7e4 (4671)2.3e4 (4853)2.9e4 (6466)3.2e4 (7099)3.6e4 (1e4)3.9e4 (2e4)15/15
BPepsMAg Hellwig 8708 (5218)3.5e4 (2e4)4.2e5 (4e5)6.2e6 (8e6)1e60/15
COBYLA Dufosse 688 (671)1.7e5 (1e5)2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.9e4 (3e4)7.5e4 (3e4)2.4e5 (1e5)6.6e5 (1e6)1.6e6 (1e6)2e60/15
fmincon Hellwig 968 (493)4414 (7001)5.2e4 (5e4)5e40/15

Δ fopt
f8, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.2e5 (3e4)1.4e5 (3e4)2.0e5 (9e4)2.4e5 (9e4)3.3e5 (5e5)1.4e7 (2e7)1.4e7 (2e7)1/15
AL2-CMA-ES Dufosse 3.5e4 (3e4)1.2e5 (3e4)1.3e5 (4e4)2.2e5 (5e5)3.3e5 (8e5)1.2e6 (1e6)1.5e7 (2e7)1/15
AL3-CMA-ES Dufosse 3.1e5 (4e5)1.5e6 (1e6)2.4e6 (3e6)1.5e7 (1e7)1e60/15
AL4-CMA-ES Dufosse 3.0e5 (4e5)1.1e6 (9e5)1.8e6 (2e6)6.8e6 (5e6)7.0e6 (9e6)1.4e7 (1e7)1e60/15
BPepsMAg Hellwig 8.4e5 (8e5)9.8e6 (1e7)1e60/15
COBYLA Dufosse 1.6e4 (1e4)8.1e5 (9e5)2e50/15
RandomSearch-5 Dufosse 2.7e7 (2e7)4e60/15
epsMAg Hellwig 2.1e5 (2e5)2.7e6 (3e6)2.9e7 (5e7)2e60/15
fmincon Hellwig 1.4e4 (2e4)1.7e5 (2e5)5e40/15

Δ fopt
f9, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.4e5 (3e4)2.1e5 (7e4)2.5e5 (5e4)3.9e5 (2e5)5.7e5 (5e5)1e60/15
AL2-CMA-ES Dufosse 6.6e4 (1e4)8.4e4 (2e4)9.6e4 (2e4)1.3e5 (6e4)4.4e5 (5e5)1e60/15
AL3-CMA-ES Dufosse 1e60/15
AL4-CMA-ES Dufosse 1.1e6 (1e6)1.5e7 (1e7)1e60/15
BPepsMAg Hellwig 2.7e6 (3e6)1e60/15
COBYLA Dufosse 7220 (2e4)1.3e6 (1e6)2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 1.2e6 (2e6)2e60/15
fmincon Hellwig 4.0e4 (6e4)5e40/15

Δ fopt
f10, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.2e5 (1e5)3.0e5 (1e5)4.0e5 (1e5)7.8e5 (1e6)1.5e7 (1e7)1e60/15
AL2-CMA-ES Dufosse 8.2e4 (2e4)1.1e5 (2e4)1.3e5 (4e4)2.9e5 (5e5)8.3e5 (1e6)1e60/15
AL3-CMA-ES Dufosse 1e60/15
AL4-CMA-ES Dufosse 9.0e5 (9e5)3.4e6 (4e6)4.6e6 (5e6)1e60/15
BPepsMAg Hellwig 2.0e7 (2e7)1e60/15
COBYLA Dufosse 1.1e4 (1e4)★21.6e5 (3e5)8.3e5 (1e6)2.8e6 (3e6)2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 3.9e6 (4e6)2e60/15
fmincon Hellwig 1.3e5 (1e5)5e40/15

Δ fopt
f11, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.6e5 (6e4)1.8e5 (6e4)1.9e5 (6e4)1.9e5 (6e4)1.9e5 (6e4)1e60/15
AL2-CMA-ES Dufosse 5.8e4 (2e4)6.8e4 (2e4)7.5e4 (3e4)8.1e4 (3e4)5.2e5 (6e5)1e60/15
AL3-CMA-ES Dufosse 1.0e6 (1e6)6.8e6 (7e6)6.8e6 (5e6)6.8e6 (9e6)6.8e6 (7e6)6.8e6 (7e6)1e60/15
AL4-CMA-ES Dufosse 3.2e5 (1e5)6.6e5 (6e5)1.2e6 (2e6)1.9e6 (2e6)1.9e6 (2e6)2.4e6 (3e6)1e60/15
BPepsMAg Hellwig 3.4e6 (3e6)1e60/15
COBYLA Dufosse 237 (48)★3274 (59)★3330 (76)★3388 (51)★3435 (52)★3548 (47)★3593 (62)★315/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.1e6 (2e6)1.4e7 (2e7)2e60/15
fmincon Hellwig 4.9e4 (3e4)5.8e4 (4e4)7.0e4 (6e4)9.3e4 (1e5)2.2e5 (2e5)5e40/15

Δ fopt
f12, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 6.5e4 (3e4)7.1e4 (3e4)7.6e4 (3e4)7.9e4 (3e4)8.3e4 (3e4)1e60/15
AL2-CMA-ES Dufosse 3.7e4 (1e4)4.1e4 (1e4)4.5e4 (1e4)4.8e4 (1e4)5.1e4 (1e4)5.7e4 (1e4)1.3e5 (5e4)14/15
AL3-CMA-ES Dufosse 4.9e4 (2e4)5.4e4 (2e4)5.9e4 (2e4)6.3e4 (2e4)6.7e4 (2e4)2.9e6 (4e6)1e60/15
AL4-CMA-ES Dufosse 4.3e4 (2e4)4.8e4 (2e4)5.3e4 (2e4)5.7e4 (2e4)6.1e4 (2e4)4.1e6 (6e6)1e60/15
BPepsMAg Hellwig 1.3e5 (2e5)2.2e5 (3e5)3.3e5 (4e5)5.2e5 (7e5)6.1e5 (7e5)7.9e5 (8e5)8.6e5 (8e5)13/15
COBYLA Dufosse 191 (52)★3246 (42)★3300 (41)★3356 (24)★3401 (28)★3511 (46)★3633 (324)★315/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.6e5 (3e4)2.8e5 (4e4)3.1e5 (4e4)3.3e5 (3e4)3.4e5 (3e4)3.8e5 (3e4)3.9e5 (4e4)15/15
fmincon Hellwig 7.8e5 (6e5)7.9e5 (1e6)8.0e5 (9e5)5e40/15

Δ fopt
f13, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2829 (837)3400 (977)4509 (1041)6041 (1192)8228 (1882)1.4e4 (1437)1.6e4 (2918)15/15
AL2-CMA-ES Dufosse 2953 (716)3450 (661)4502 (794)6546 (2029)1.0e5 (1e5)3.8e5 (1e5)6.2e5 (2e5)14/15
AL3-CMA-ES Dufosse 3010 (428)3489 (465)4538 (978)5977 (1099)8033 (1790)1.5e4 (1904)1.7e4 (1671)15/15
AL4-CMA-ES Dufosse 2997 (918)3539 (1091)4153 (897)6239 (1442)8457 (1758)1.4e4 (1856)1.6e4 (3158)15/15
BPepsMAg Hellwig 143 (152)394 (422)680 (426)748 (787)748 (787)748 (787)748 (787)15/15
COBYLA Dufosse 45 (4)46 (0)46 (0)46 (0)★246 (0)★346 (0)★346 (0)★315/15
RandomSearch-5 Dufosse 439 (532)2959 (3177)5.9e4 (5e4)3.1e5 (4e5)3.9e6 (4e6)5.6e7 (4e7)4e60/15
epsMAg Hellwig 613 (494)1747 (232)1792 (31)1822 (25)1822 (25)1822 (25)1822 (25)15/15
fmincon Hellwig 72 (42)86 (42)95 (42)117 (42)151 (21)245 (126)493 (379)6/15

Δ fopt
f14, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 6322 (2334)7725 (2328)9955 (1769)1.3e4 (2622)1.6e4 (2174)9.6e4 (3e4)4.3e6 (6e6)3/15
AL2-CMA-ES Dufosse 6319 (2487)8188 (2453)2.7e5 (5e5)1.4e6 (2e6)2.6e6 (2e6)1e60/15
AL3-CMA-ES Dufosse 6626 (2040)7879 (1749)9920 (1925)1.3e4 (1873)1.6e4 (1501)2.2e4 (2274)4.9e4 (3e4)15/15
AL4-CMA-ES Dufosse 6069 (1336)7580 (1659)1.0e4 (1568)1.2e4 (2101)1.5e4 (1372)2.0e4 (2106)9.7e4 (9e4)15/15
BPepsMAg Hellwig 5641 (4709)9488 (8088)1.6e4 (1e4)4.6e4 (8e4)5.7e4 (8e4)1.2e5 (2e5)1.2e5 (2e5)15/15
COBYLA Dufosse 46 (1)★347 (1)★347 (1)★347 (1)★347 (1)★347 (1)★347 (1)★315/15
RandomSearch-5 Dufosse 2.9e5 (6e5)1.7e7 (2e7)4e60/15
epsMAg Hellwig 3.7e4 (6e4)7.5e4 (9e4)1.0e5 (1e5)1.3e5 (1e5)1.6e5 (2e5)1.8e5 (2e5)1.8e5 (2e5)15/15
fmincon Hellwig 245 (239)263 (218)316 (239)319 (239)341 (239)507 (281)6004 (8000)1/15

Δ fopt
f15, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.3e4 (2874)1.5e4 (2926)1.8e4 (2930)2.0e4 (2783)2.3e4 (2915)1.2e6 (1e6)1e60/15
AL2-CMA-ES Dufosse 1.5e4 (5825)1.7e4 (5412)5.2e5 (1e6)1.4e7 (1e7)1e60/15
AL3-CMA-ES Dufosse 1.3e4 (2152)1.6e4 (2479)1.8e4 (3389)2.0e4 (2735)2.2e4 (2913)2.7e4 (2621)7.9e5 (7e5)13/15
AL4-CMA-ES Dufosse 1.1e4 (1609)1.4e4 (1750)1.6e4 (1529)1.8e4 (1747)2.0e4 (1777)3.0e4 (4673)2.1e6 (1e6)6/15
BPepsMAg Hellwig 3.5e4 (6e4)1.5e5 (3e5)1.8e5 (4e5)2.7e5 (6e5)4.4e5 (7e5)5.3e5 (8e5)5.3e5 (8e5)12/15
COBYLA Dufosse 47 (1)★348 (2)★348 (2)★348 (2)★348 (2)★348 (2)★348 (2)★315/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 1.2e5 (1e5)1.8e5 (1e5)2.2e5 (1e5)2.4e5 (2e5)2.6e5 (2e5)3.0e5 (2e5)3.7e5 (4e5)15/15
fmincon Hellwig 255 (181)296 (202)346 (267)366 (287)405 (287)990 (682)1774 (1458)4/15

Δ fopt
f16, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.0e4 (7933)4.2e4 (1e4)4.6e4 (1e4)4.8e4 (1e4)5.1e4 (1e4)1e60/15
AL2-CMA-ES Dufosse 3.9e4 (6844)1.9e5 (5e5)1.4e7 (2e7)1e60/15
AL3-CMA-ES Dufosse 3.1e4 (7005)4.5e4 (1e4)5.1e4 (2e4)5.3e4 (2e4)5.6e4 (2e4)6.9e5 (8e5)1e60/15
AL4-CMA-ES Dufosse 2.9e4 (8205)4.0e4 (8629)4.5e4 (1e4)4.8e4 (1e4)5.1e4 (1e4)1.1e6 (1e6)1e60/15
BPepsMAg Hellwig 2.4e5 (3e5)3.4e6 (4e6)6.3e6 (8e6)6.3e6 (7e6)6.3e6 (9e6)2.1e7 (2e7)1e60/15
COBYLA Dufosse 51 (2)★351 (2)★351 (2)★351 (3)★351 (3)★351 (3)★351 (3)★315/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.1e5 (8e4)3.2e5 (1e5)4.0e5 (2e5)4.2e5 (2e5)4.4e5 (2e5)6.1e5 (3e5)7.2e5 (4e5)14/15
fmincon Hellwig 454 (273)653 (580)723 (601)776 (643)807 (643)2600 (2065)1.3e4 (2e4)1/15

Δ fopt
f17, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.6e4 (1e4)4.4e4 (1e4)4.8e4 (1e4)5.2e4 (1e4)5.6e4 (1e4)1e60/15
AL2-CMA-ES Dufosse 3.4e4 (5330)3.8e4 (5254)4.3e4 (5350)4.4e5 (8e5)1e60/15
AL3-CMA-ES Dufosse 3.3e4 (7531)4.4e4 (1e4)4.9e4 (1e4)5.3e4 (1e4)5.6e4 (9792)1e60/15
AL4-CMA-ES Dufosse 3.7e4 (1e4)4.7e4 (2e4)5.0e4 (2e4)5.4e4 (2e4)5.8e4 (2e4)1e60/15
BPepsMAg Hellwig 1.5e5 (8e4)3.2e5 (2e5)4.8e5 (2e5)5.6e5 (3e5)6.3e5 (3e5)8.9e5 (7e5)1.0e6 (7e5)13/15
COBYLA Dufosse 57 (20)★372 (41)★383 (61)★3102 (89)★3105 (89)★3122 (142)★3125 (142)★315/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.8e5 (4e4)3.5e5 (6e4)3.7e5 (7e4)3.9e5 (7e4)4.1e5 (7e4)4.4e5 (7e4)4.5e5 (7e4)15/15
fmincon Hellwig 789 (189)867 (233)895 (233)915 (212)1182 (556)3675 (3389)1.5e4 (2e4)1/15

Δ fopt
f18, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.1e4 (1e4)3.5e4 (1e4)3.9e4 (1e4)4.3e4 (1e4)4.7e4 (1e4)1e60/15
AL2-CMA-ES Dufosse 2.3e4 (4371)2.6e4 (3873)2.9e4 (4636)3.2e4 (4480)3.5e4 (5524)4.1e4 (5731)7.2e5 (1e6)9/15
AL3-CMA-ES Dufosse 2.6e4 (7164)3.1e4 (7296)3.4e4 (5976)3.9e4 (6375)4.2e4 (5747)1e60/15
AL4-CMA-ES Dufosse 2.4e4 (5930)2.9e4 (4492)3.3e4 (4506)3.7e4 (4579)4.0e4 (4753)1e60/15
BPepsMAg Hellwig 3.8e4 (2e4)5.3e4 (2e4)7.0e4 (3e4)8.6e4 (3e4)1.0e5 (4e4)1.4e5 (6e4)1.6e5 (7e4)15/15
COBYLA Dufosse 77 (42)★3140 (63)★3176 (278)★3210 (278)★3223 (278)★3334 (286)★3360 (292)★315/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.4e5 (2e4)2.6e5 (3e4)2.9e5 (4e4)3.1e5 (4e4)3.2e5 (4e4)3.5e5 (3e4)3.7e5 (3e4)15/15
fmincon Hellwig 1441 (966)1570 (882)1595 (882)1621 (903)1745 (1177)8315 (9280)15530/15

Δ fopt
f19, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 4.9e4 (3e4)1.1e5 (4e4)1.7e5 (3e4)2.4e5 (4e4)3.5e5 (4e4)1.5e6 (1e6)1.5e7 (2e7)1/15
AL2-CMA-ES Dufosse 1.8e4 (8927)6.2e4 (3e4)1.4e5 (7e4)2.2e5 (7e4)3.4e5 (1e5)1.4e6 (1e6)1e60/15
AL3-CMA-ES Dufosse 2.0e5 (3e5)1.1e6 (2e6)2.6e6 (3e6)7.2e6 (7e6)1e60/15
AL4-CMA-ES Dufosse 1.3e5 (1e5)4.1e5 (3e5)1.0e6 (8e5)4.8e6 (4e6)1e60/15
BPepsMAg Hellwig 1.9e4 (2e4)1.2e6 (1e6)2.0e7 (2e7)1e60/15
COBYLA Dufosse 523 (263)9.4e4 (2e5)2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.3e4 (2e4)1.8e5 (2e5)3.3e6 (4e6)2e60/15
fmincon Hellwig 1032 (848)1.5e4 (3e4)8.0e4 (2e5)5e40/15

Δ fopt
f20, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5.0e4 (3e4)9.6e4 (5e4)2.8e5 (3e5)7.2e5 (7e5)1.6e6 (2e6)1e60/15
AL2-CMA-ES Dufosse 4.4e4 (4e4)1.3e5 (1e5)1.8e5 (7e4)2.8e5 (1e5)5.9e5 (6e5)1e60/15
AL3-CMA-ES Dufosse 7.3e5 (9e5)2.5e6 (3e6)4.5e6 (6e6)7.5e6 (6e6)1e60/15
AL4-CMA-ES Dufosse 2.6e5 (4e5)8.1e5 (7e5)1.8e6 (2e6)4.7e6 (3e6)1e60/15
BPepsMAg Hellwig 2.3e5 (2e5)6.1e6 (5e6)1e60/15
COBYLA Dufosse 4046 (6278)4.8e5 (6e5)2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 1.7e5 (9e4)1.3e6 (1e6)2.9e7 (3e7)2e60/15
fmincon Hellwig 2818 (1951)6.6e4 (5e4)5e40/15

Δ fopt
f21, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.5e5 (5e4)1.0e6 (8e5)3.3e6 (2e6)1e60/15
AL2-CMA-ES Dufosse 1.5e5 (9e4)2.7e5 (1e5)5.3e5 (3e5)1.0e6 (1e6)1e60/15
AL3-CMA-ES Dufosse 7.1e6 (8e6)1e60/15
AL4-CMA-ES Dufosse 4.3e5 (3e5)2.1e6 (2e6)1e60/15
BPepsMAg Hellwig 1.8e6 (2e6)1e60/15
COBYLA Dufosse 2.4e4 (1e4)1.3e6 (1e6)2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 7.0e5 (8e5)2e60/15
fmincon Hellwig 2.4e4 (3e4)3.6e5 (3e5)5e40/15

Δ fopt
f22, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.1e5 (8e4)2.8e5 (1e5)3.8e5 (2e5)8.4e5 (6e5)1.4e7 (2e7)1e60/15
AL2-CMA-ES Dufosse 8.8e4 (3e4)1.1e5 (3e4)1.3e5 (3e4)1.6e5 (3e4)7.8e5 (8e5)1e60/15
AL3-CMA-ES Dufosse 6.8e6 (1e7)1.4e7 (2e7)1e60/15
AL4-CMA-ES Dufosse 1.0e6 (1e6)4.4e6 (5e6)1.4e7 (2e7)1e60/15
BPepsMAg Hellwig 2.0e7 (2e7)1e60/15
COBYLA Dufosse 3.0e4 (4e4)3.1e5 (2e5)3.0e6 (4e6)2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 3.6e6 (4e6)2e60/15
fmincon Hellwig 9.8e4 (1e5)3.7e5 (3e5)5e40/15

Δ fopt
f23, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.7e5 (7e4)1.9e5 (7e4)2.0e5 (7e4)2.0e5 (7e4)3.5e5 (5e5)1e60/15
AL2-CMA-ES Dufosse 6.5e4 (2e4)7.0e4 (2e4)7.3e4 (2e4)1.2e5 (1e5)1.3e6 (2e6)1e60/15
AL3-CMA-ES Dufosse 1.7e6 (2e6)1.4e7 (1e7)1.4e7 (2e7)1e60/15
AL4-CMA-ES Dufosse 3.5e5 (1e5)6.2e5 (5e5)1.3e6 (1e6)1.5e6 (2e6)1.5e6 (2e6)4.3e6 (3e6)1e60/15
BPepsMAg Hellwig 9.9e6 (2e7)1e60/15
COBYLA Dufosse 715 (1012)★3872 (1000)★31171 (2038)★31224 (2010)★31267 (2020)★31379 (2000)★31435 (2012)★315/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.3e6 (3e6)1.3e7 (1e7)1.4e7 (1e7)2.8e7 (3e7)2e60/15
fmincon Hellwig 4.6e4 (3e4)7.9e4 (6e4)1.2e5 (2e5)1.2e5 (1e5)7.5e5 (7e5)5e40/15

Δ fopt
f24, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5.4e4 (3e4)6.0e4 (3e4)6.5e4 (3e4)6.9e4 (3e4)7.3e4 (3e4)1e60/15
AL2-CMA-ES Dufosse 3.4e4 (1e4)3.9e4 (1e4)4.2e4 (1e4)4.5e4 (1e4)4.8e4 (1e4)5.4e4 (1e4)2.5e5 (5e5)13/15
AL3-CMA-ES Dufosse 5.3e4 (4e4)5.8e4 (4e4)6.3e4 (4e4)6.7e4 (4e4)7.1e4 (4e4)4.6e6 (4e6)1e60/15
AL4-CMA-ES Dufosse 5.1e4 (3e4)5.6e4 (3e4)6.2e4 (3e4)6.6e4 (3e4)7.0e4 (3e4)1.7e6 (2e6)1.5e7 (1e7)1/15
BPepsMAg Hellwig 1.9e5 (2e5)3.0e5 (3e5)3.9e5 (3e5)4.8e5 (3e5)6.3e5 (4e5)9.3e5 (7e5)1.0e6 (7e5)13/15
COBYLA Dufosse 215 (36)★3263 (40)★3316 (46)★3359 (31)★3417 (18)★3510 (51)★3689 (332)★315/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.5e5 (3e4)2.8e5 (4e4)3.1e5 (3e4)3.2e5 (3e4)3.4e5 (3e4)3.7e5 (3e4)3.9e5 (3e4)15/15
fmincon Hellwig 3.6e5 (5e5)3.6e5 (3e5)3.7e5 (6e5)3.7e5 (3e5)3.7e5 (5e5)5e40/15

Δ fopt
f25, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.4e4 (7e4)1.4e5 (1e5)4.4e5 (2e5)7.9e5 (2e5)2.3e6 (2e6)1e60/15
AL2-CMA-ES Dufosse 1.9e4 (2e4)7.7e4 (5e4)3.1e5 (1e5)9.8e5 (7e5)3.5e6 (3e6)1e60/15
AL3-CMA-ES Dufosse 1.3e5 (2e5)1.3e6 (1e6)1.4e7 (1e7)1e60/15
AL4-CMA-ES Dufosse 1.6e4 (4e4)3.8e5 (3e5)4.7e6 (7e6)1e60/15
BPepsMAg Hellwig 314 (408)1065 (876)4117 (4852)6.0e6 (6e6)1e60/15
COBYLA Dufosse 96 (49)144 (80)266 (43)469 (74)★32e50/15
RandomSearch-5 Dufosse 933 (1998)4383 (6507)5.5e4 (7e4)6.0e7 (8e7)4e60/15
epsMAg Hellwig 548 (468)1672 (481)1892 (72)9.8e5 (1e6)2e60/15
fmincon Hellwig 158 (172)206 (230)246 (209)1.6e5 (2e5)5e40/15

Δ fopt
f26, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.8e4 (2e4)1.3e5 (6e4)6.5e5 (6e5)4.8e6 (4e6)1e60/15
AL2-CMA-ES Dufosse 2.4e5 (5e5)5.2e5 (5e5)1.3e6 (2e6)1.4e7 (2e7)1e60/15
AL3-CMA-ES Dufosse 6.5e4 (9e4)6.8e5 (9e5)1.4e7 (1e7)1e60/15
AL4-CMA-ES Dufosse 6.3e4 (6e4)5.3e5 (4e5)3.5e6 (2e6)1e60/15
BPepsMAg Hellwig 7640 (7217)1.3e4 (9133)3.2e4 (6e4)3.6e6 (3e6)1e60/15
COBYLA Dufosse 326 (62)416 (100)471 (74)717 (1062)★33.0e6 (5e6)2e50/15
RandomSearch-5 Dufosse 1.6e6 (2e6)1.6e7 (2e7)4e60/15
epsMAg Hellwig 5.6e4 (9e4)1.0e5 (1e5)1.5e5 (2e5)2.9e6 (4e6)2e60/15
fmincon Hellwig 543 (312)635 (316)9429 (3e4)3.6e5 (3e5)5e40/15

Δ fopt
f27, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 9.3e4 (3e4)1.4e7 (1e7)1e60/15
AL2-CMA-ES Dufosse 1.1e6 (1e6)1.5e7 (2e7)1e60/15
AL3-CMA-ES Dufosse 1.1e5 (3e5)8.3e5 (2e6)7.4e6 (7e6)1e60/15
AL4-CMA-ES Dufosse 5.7e4 (6e4)6.2e5 (8e5)1.4e7 (1e7)1e60/15
BPepsMAg Hellwig 1.0e5 (2e5)2.8e5 (7e5)5.5e5 (7e5)2.5e6 (2e6)1e60/15
COBYLA Dufosse 530 (992)2068 (3325)2488 (3383)2629 (3359)★32.9e6 (3e6)2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.9e5 (2e5)4.7e5 (6e5)5.4e5 (9e5)1.7e6 (2e6)2e60/15
fmincon Hellwig 831 (292)930 (326)1025 (325)7.5e5 (1e6)5e40/15

Δ fopt
f28, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5.1e5 (5e5)1.4e7 (1e7)1e60/15
AL2-CMA-ES Dufosse 1e60/15
AL3-CMA-ES Dufosse 2.4e6 (2e6)6.9e6 (6e6)1e60/15
AL4-CMA-ES Dufosse 1.0e6 (1e6)3.3e6 (5e6)1.5e7 (2e7)1e60/15
BPepsMAg Hellwig 1.4e6 (2e6)2.0e7 (3e7)1e60/15
COBYLA Dufosse 9205 (4479)4.4e4 (8e4)1.4e5 (3e5)1.7e5 (2e5)2.7e5 (4e5)2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 9.5e5 (1e6)1.4e7 (3e7)2e60/15
fmincon Hellwig 2.0e4 (4e4)5.6e4 (5e4)9.5e4 (1e5)3.6e5 (4e5)5e40/15

Δ fopt
f29, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.9e5 (7e4)2.1e5 (7e4)2.3e5 (8e4)2.9e5 (9e4)4.6e5 (5e5)1e60/15
AL2-CMA-ES Dufosse 1.5e5 (7e4)2.6e5 (5e5)5.8e5 (1e6)1.6e6 (3e6)1.5e7 (1e7)1e60/15
AL3-CMA-ES Dufosse 3.1e6 (4e6)6.7e6 (7e6)6.8e6 (8e6)1.4e7 (1e7)1.4e7 (1e7)1.4e7 (2e7)1e60/15
AL4-CMA-ES Dufosse 7.9e5 (7e5)1.6e6 (2e6)2.0e6 (3e6)2.0e6 (2e6)2.0e6 (2e6)4.4e6 (4e6)1e60/15
BPepsMAg Hellwig 6.1e6 (6e6)2.0e7 (3e7)1e60/15
COBYLA Dufosse 911 (1024)★31554 (3019)★31729 (3059)★32424 (3020)★32475 (3017)★32574 (3029)★32632 (3022)★315/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 4.6e6 (5e6)1.3e7 (1e7)2e60/15
fmincon Hellwig 2.6e4 (3e4)4.8e4 (6e4)6.9e4 (6e4)7.2e4 (6e4)8.3e4 (8e4)5e40/15

Δ fopt
f30, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 4.3e4 (3e4)4.9e4 (2e4)5.3e4 (3e4)5.7e4 (3e4)6.1e4 (3e4)1.5e7 (1e7)1e60/15
AL2-CMA-ES Dufosse 2.9e4 (1e4)3.4e4 (1e4)3.8e4 (1e4)4.1e4 (1e4)4.4e4 (1e4)5.0e4 (1e4)2.2e5 (5e5)13/15
AL3-CMA-ES Dufosse 3.8e4 (2e4)4.3e4 (2e4)4.9e4 (2e4)5.3e4 (2e4)5.7e4 (2e4)3.0e6 (3e6)1e60/15
AL4-CMA-ES Dufosse 3.7e4 (2e4)4.3e4 (2e4)4.8e4 (2e4)5.2e4 (2e4)5.6e4 (2e4)4.7e6 (3e6)1e60/15
BPepsMAg Hellwig 1.1e5 (1e5)1.8e5 (2e5)2.7e5 (2e5)4.4e5 (2e5)5.4e5 (3e5)7.4e5 (3e5)8.4e5 (4e5)14/15
COBYLA Dufosse 209 (45)★3272 (39)★3315 (20)★3359 (29)★3418 (32)★3517 (42)★3590 (33)★315/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.6e5 (5e4)2.9e5 (5e4)3.1e5 (5e4)3.2e5 (4e4)3.4e5 (4e4)3.8e5 (5e4)3.9e5 (5e4)15/15
fmincon Hellwig 9.8e4 (1e5)1.6e5 (1e5)1.6e5 (2e5)1.6e5 (2e5)2.1e5 (2e5)5e40/15

Δ fopt
f31, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 6137 (747)8556 (1125)1.5e4 (1e4)3.4e4 (3e4)5.6e4 (3e4)7.5e4 (3e4)8.0e4 (2e4)15/15
AL2-CMA-ES Dufosse 5915 (797)7402 (709)9746 (1128)1.8e4 (1e4)2.7e4 (2e4)4.1e4 (2e4)4.6e4 (2e4)15/15
AL3-CMA-ES Dufosse 5786 (954)8111 (857)2.0e4 (1e4)1.1e5 (2e5)3.7e5 (5e5)7.9e5 (1e6)8.1e5 (7e5)10/15
AL4-CMA-ES Dufosse 6130 (1152)8083 (1147)1.4e4 (1824)9.0e4 (2e5)2.3e5 (3e5)3.7e5 (3e5)3.9e5 (4e5)14/15
BPepsMAg Hellwig 8084 (1883)1.5e4 (3236)2.1e4 (4185)2.9e4 (3244)2.8e5 (5e5)9.0e6 (1e7)1e60/15
COBYLA Dufosse 331 (56)★3455 (71)★3579 (58)★3681 (63)★3827 (85)★31.2e4 (1e4)4.2e4 (5e4)15/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.2e4 (1e4)1.0e5 (5e4)1.5e5 (5e4)1.9e5 (3e4)3.5e5 (2e4)5.8e6 (9e6)1.4e7 (1e7)2/15
fmincon Hellwig 651 (321)1060 (368)1314 (427)1547 (353)1.3e4 (2e4)34330/15

Δ fopt
f32, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.5e4 (9630)2.0e4 (1e4)2.3e4 (2e4)2.5e4 (2e4)2.7e4 (2e4)3.1e4 (2e4)1.0e5 (2e4)14/15
AL2-CMA-ES Dufosse 1.1e4 (4817)1.3e4 (6432)1.6e4 (6810)1.8e4 (6609)2.1e4 (8349)4.6e4 (4e4)4.9e5 (1e6)11/15
AL3-CMA-ES Dufosse 1.8e4 (7884)2.6e4 (2e4)3.2e4 (3e4)3.6e4 (3e4)4.0e4 (3e4)5.1e4 (4e4)5.5e4 (4e4)15/15
AL4-CMA-ES Dufosse 1.9e4 (1e4)2.6e4 (2e4)3.0e4 (2e4)3.3e4 (2e4)3.7e4 (3e4)4.4e4 (3e4)4.8e4 (4e4)15/15
BPepsMAg Hellwig 5.3e4 (5e4)3.2e5 (7e5)7.9e5 (1e6)2.0e6 (2e6)5.6e6 (6e6)1e60/15
COBYLA Dufosse 397 (203)★31048 (1048)5758 (8100)2.2e4 (3e4)1.1e5 (1e5)3.0e6 (3e6)2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 1.9e5 (8e4)2.6e5 (1e5)4.7e5 (2e5)5.6e5 (5e5)1.4e6 (2e6)4.6e6 (4e6)6.7e6 (4e6)4/15
fmincon Hellwig 1271 (550)2107 (962)2680 (864)3214 (889)3362 (1008)★29432 (8769)★22.3e4 (2e4)★23/15

Δ fopt
f33, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.0e4 (1e4)3.5e4 (1e4)3.9e4 (1e4)4.4e4 (1e4)4.7e4 (1e4)5.2e4 (1e4)9.3e5 (1e6)8/15
AL2-CMA-ES Dufosse 2.1e4 (6080)2.6e4 (6769)3.1e4 (6646)3.5e4 (6257)6.1e4 (5e4)4.3e6 (4e6)1.4e7 (2e7)1/15
AL3-CMA-ES Dufosse 3.1e4 (2e4)4.0e4 (2e4)4.6e4 (2e4)5.5e4 (2e4)6.4e4 (3e4)8.0e4 (3e4)8.4e4 (3e4)15/15
AL4-CMA-ES Dufosse 2.9e4 (9127)3.5e4 (1e4)4.1e4 (1e4)4.7e4 (2e4)5.5e4 (2e4)6.7e4 (2e4)7.0e4 (2e4)15/15
BPepsMAg Hellwig 1.8e5 (3e5)4.5e5 (6e5)8.0e5 (8e5)3.3e6 (3e6)6.2e6 (8e6)1e60/15
COBYLA Dufosse 423 (114)★3694 (279)★31894 (648)★21.5e4 (3e4)1.4e5 (1e5)2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.7e5 (1e5)3.5e5 (1e5)6.6e5 (8e5)1.1e6 (1e6)3.0e6 (4e6)9.4e6 (1e7)2e60/15
fmincon Hellwig 1871 (823)2199 (591)2374 (888)2455 (883)2534 (811)7966 (6092)★325550/15

Δ fopt
f34, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 4.9e4 (2e4)6.0e4 (3e4)7.1e4 (3e4)8.0e4 (3e4)8.4e4 (3e4)2.5e5 (5e5)1e60/15
AL2-CMA-ES Dufosse 4.3e4 (1e4)5.5e4 (1e4)6.2e4 (2e4)1.4e5 (3e5)3.2e5 (3e5)1e60/15
AL3-CMA-ES Dufosse 5.4e4 (2e4)6.8e4 (2e4)8.1e4 (2e4)9.5e4 (2e4)1.1e5 (2e4)1.3e5 (2e4)1.4e5 (2e4)15/15
AL4-CMA-ES Dufosse 5.4e4 (3e4)6.6e4 (3e4)7.8e4 (3e4)8.8e4 (3e4)1.0e5 (4e4)1.2e5 (4e4)2.8e5 (5e5)13/15
BPepsMAg Hellwig 7.5e4 (3e4)1.6e5 (1e5)2.7e5 (2e5)5.6e5 (3e5)1.4e6 (1e6)2.0e7 (2e7)1e60/15
COBYLA Dufosse 344 (95)★3504 (109)★3626 (108)★3770 (162)★3954 (104)★36957 (1e4)2.7e4 (5e4)15/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.3e5 (3e4)2.7e5 (5e4)3.3e5 (9e4)4.8e5 (1e5)7.3e5 (3e5)9.1e6 (9e6)2.9e7 (4e7)1/15
fmincon Hellwig 2717 (2406)2810 (2385)2918 (2364)3081 (2314)3929 (6145)9045 (7730)23290/15

Δ fopt
f35, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 7.2e4 (3e4)8.1e4 (3e4)8.8e4 (3e4)9.5e4 (3e4)1.0e5 (3e4)4.6e5 (5e5)1e60/15
AL2-CMA-ES Dufosse 5.6e4 (2e4)6.6e4 (2e4)7.3e4 (2e4)7.8e4 (2e4)3.2e5 (3e5)1e60/15
AL3-CMA-ES Dufosse 7.9e4 (4e4)9.0e4 (5e4)9.6e4 (4e4)1.0e5 (5e4)1.1e5 (5e4)1.1e5 (5e4)2.9e5 (4e5)14/15
AL4-CMA-ES Dufosse 8.0e4 (3e4)9.0e4 (3e4)9.7e4 (3e4)1.0e5 (3e4)1.1e5 (3e4)1.2e5 (3e4)5.0e5 (9e5)12/15
BPepsMAg Hellwig 1.1e5 (5e4)1.7e5 (8e4)2.8e5 (2e5)3.7e5 (2e5)4.6e5 (2e5)6.6e5 (2e5)7.4e5 (2e5)15/15
COBYLA Dufosse 215 (43)★3260 (53)★3309 (56)★3358 (39)★3385 (32)★3476 (55)★3490 (59)★315/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.4e5 (5e4)2.9e5 (6e4)3.2e5 (7e4)3.4e5 (8e4)3.6e5 (7e4)3.9e5 (7e4)4.1e5 (7e4)15/15
fmincon Hellwig 3583 (3119)3646 (3119)3692 (3140)3720 (3119)3749 (3140)5.7e4 (6e4)25190/15

Δ fopt
f36, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 8.6e4 (3e4)8.9e4 (3e4)9.3e4 (3e4)9.8e4 (3e4)1.0e5 (3e4)1.4e6 (2e6)6.9e6 (7e6)2/15
AL2-CMA-ES Dufosse 6.4e4 (2e4)6.8e4 (2e4)7.1e4 (2e4)7.5e4 (2e4)7.8e4 (2e4)8.8e4 (2e4)2.2e5 (2e5)14/15
AL3-CMA-ES Dufosse 7.4e4 (4e4)7.8e4 (4e4)8.1e4 (4e4)8.7e4 (4e4)9.1e4 (4e4)2.9e5 (3e5)1.4e7 (2e7)1/15
AL4-CMA-ES Dufosse 8.6e4 (5e4)9.0e4 (5e4)9.4e4 (5e4)9.8e4 (4e4)1.0e5 (5e4)1.7e5 (2e5)4.6e6 (4e6)3/15
BPepsMAg Hellwig 4.8e4 (1e4)6.7e4 (2e4)8.6e4 (2e4)1.0e5 (3e4)1.2e5 (4e4)1.6e5 (4e4)1.7e5 (4e4)15/15
COBYLA Dufosse 215 (41)★3248 (33)★3299 (40)★3330 (41)★3385 (72)★3441 (48)★3520 (70)★315/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.7e5 (3e4)2.8e5 (3e4)3.0e5 (2e4)3.1e5 (2e4)3.3e5 (2e4)3.6e5 (2e4)3.7e5 (2e4)15/15
fmincon Hellwig 3992 (4068)4085 (4110)4096 (4131)4440 (5931)4448 (4229)1.3e4 (2e4)24350/15

Δ fopt
f37, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5050 (607)7215 (1168)1.0e4 (989)1.3e4 (1044)1.5e4 (1230)2.0e4 (2100)2.4e4 (2297)15/15
AL2-CMA-ES Dufosse 4968 (995)7108 (1380)9568 (1414)1.2e4 (2084)1.4e4 (1732)1.9e4 (2611)2.3e4 (3880)15/15
AL3-CMA-ES Dufosse 4944 (795)7152 (649)9950 (701)1.3e4 (1235)1.6e4 (1997)2.1e4 (1589)2.5e4 (2155)15/15
AL4-CMA-ES Dufosse 5171 (772)7402 (1100)1.0e4 (1370)1.3e4 (1835)1.6e4 (1971)2.1e4 (2292)2.5e4 (2219)15/15
BPepsMAg Hellwig 2831 (238)5151 (801)1.1e4 (1612)1.8e4 (3960)2.7e4 (4590)4.9e4 (5780)6.1e4 (4752)15/15
COBYLA Dufosse 277 (31)★3554 (62)★32.1e4 (1e4)2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 5317 (1354)9612 (1687)1.6e4 (3146)5.2e4 (8e4)1.9e5 (1e5)2.4e5 (3e4)2.6e5 (3e4)15/15
fmincon Hellwig 755 (218)1327 (353)1806 (213)2025 (190)★32221 (216)★33586 (1690)★36987 (6286)★313/15

Δ fopt
f38, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 7355 (1390)1.0e4 (1360)1.4e4 (1794)1.6e4 (1018)1.9e4 (1964)2.7e4 (2429)3.3e4 (2926)15/15
AL2-CMA-ES Dufosse 7335 (1135)1.0e4 (1223)1.4e4 (2100)1.7e4 (2769)2.2e4 (7466)4.2e4 (1e4)1.5e5 (1e5)15/15
AL3-CMA-ES Dufosse 7539 (1297)1.1e4 (1424)1.4e4 (1480)1.7e4 (1660)2.0e4 (2096)2.7e4 (1996)3.2e4 (2494)15/15
AL4-CMA-ES Dufosse 7229 (1425)1.0e4 (1451)1.3e4 (1652)1.6e4 (2038)1.9e4 (2048)2.7e4 (2823)3.2e4 (2886)15/15
BPepsMAg Hellwig 5340 (2156)1.5e4 (3592)2.8e4 (4e4)4.4e4 (4e4)1.2e5 (2e5)2.2e5 (5e5)3.0e5 (5e5)14/15
COBYLA Dufosse 275 (42)★3554 (104)★34.6e4 (1e5)2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 8082 (1059)1.8e4 (1e4)8.4e4 (1e5)2.3e5 (2e5)2.8e5 (6e4)3.2e5 (6e4)3.4e5 (6e4)15/15
fmincon Hellwig 1132 (364)1695 (257)2041 (247)2281 (290)★32668 (381)★36005 (2874)★37.2e4 (5e4)2/15

Δ fopt
f39, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.3e4 (4927)1.8e4 (4710)2.1e4 (4553)2.6e4 (5455)3.2e4 (6198)4.7e4 (4667)5.3e4 (5990)15/15
AL2-CMA-ES Dufosse 1.3e4 (5806)1.7e4 (5188)2.4e4 (7684)3.7e4 (1e4)8.5e4 (5e4)3.6e5 (5e5)7.1e6 (5e6)2/15
AL3-CMA-ES Dufosse 1.3e4 (6535)1.9e4 (6658)2.3e4 (6039)2.9e4 (8006)3.4e4 (6642)4.6e4 (4781)5.3e4 (7127)15/15
AL4-CMA-ES Dufosse 1.1e4 (2270)1.6e4 (3643)2.1e4 (3208)2.6e4 (4573)3.2e4 (3070)4.6e4 (6429)5.2e4 (5499)15/15
BPepsMAg Hellwig 8312 (2480)2.9e4 (3e4)1.1e5 (2e5)4.8e5 (7e5)6.9e5 (1e6)1.5e6 (9e5)4.1e6 (4e6)4/15
COBYLA Dufosse 277 (55)★3577 (110)★34.3e4 (1e5)2.9e6 (3e6)2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.8e4 (2e4)1.1e5 (1e5)3.1e5 (7e4)4.5e5 (5e5)7.0e5 (1e6)1.1e6 (1e6)1.1e6 (1e6)12/15
fmincon Hellwig 1267 (241)1638 (245)2173 (397)2484 (582)★32962 (784)★31.2e4 (1e4)★386460/15

Δ fopt
f40, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.1e4 (9732)3.0e4 (1e4)4.0e4 (1e4)5.1e4 (1e4)6.2e4 (1e4)7.1e4 (1e4)2.1e6 (3e6)5/15
AL2-CMA-ES Dufosse 2.3e4 (1e4)3.0e4 (1e4)4.4e4 (2e4)1.1e5 (1e4)3.4e5 (4e5)1.4e7 (2e7)1.4e7 (1e7)1/15
AL3-CMA-ES Dufosse 1.9e4 (9942)3.0e4 (1e4)4.2e4 (2e4)5.4e4 (2e4)6.3e4 (2e4)7.5e4 (3e4)1.3e5 (2e5)15/15
AL4-CMA-ES Dufosse 2.2e4 (8666)3.1e4 (1e4)4.0e4 (1e4)5.2e4 (1e4)6.1e4 (2e4)7.3e4 (2e4)1.0e5 (6e4)15/15
BPepsMAg Hellwig 1.1e4 (4789)2.8e4 (2e4)5.5e4 (2e4)1.1e5 (3e4)2.1e5 (1e5)7.1e5 (1e6)1.2e6 (8e5)10/15
COBYLA Dufosse 246 (40)★3493 (96)★31616 (1554)3.8e4 (1e5)7.2e4 (1e5)4.2e5 (6e5)9.1e5 (8e5)3/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 1.5e5 (1e5)2.2e5 (1e5)3.0e5 (5e4)3.8e5 (1e5)4.3e5 (1e5)6.0e5 (3e5)7.3e5 (3e5)15/15
fmincon Hellwig 1336 (358)1761 (398)2115 (443)2535 (529)2658 (466)★25748 (5132)★22.4e4 (3e4)★22/15

Δ fopt
f41, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.0e4 (2e4)4.7e4 (3e4)5.8e4 (2e4)6.8e4 (2e4)7.8e4 (3e4)1.0e5 (3e4)1e60/15
AL2-CMA-ES Dufosse 3.7e4 (1e4)5.0e4 (1e4)6.1e4 (2e4)7.3e4 (1e4)3.4e5 (4e5)3.1e6 (5e6)4.4e6 (4e6)3/15
AL3-CMA-ES Dufosse 3.3e4 (1e4)5.2e4 (2e4)6.7e4 (2e4)7.6e4 (3e4)8.6e4 (3e4)9.8e4 (3e4)6.1e5 (1e6)11/15
AL4-CMA-ES Dufosse 3.3e4 (2e4)5.2e4 (2e4)6.9e4 (3e4)7.7e4 (3e4)8.7e4 (3e4)1.0e5 (3e4)1.3e6 (2e6)7/15
BPepsMAg Hellwig 1.3e4 (4711)3.2e4 (9626)7.3e4 (4e4)1.3e5 (5e4)1.9e5 (1e5)3.6e5 (2e5)4.5e5 (2e5)15/15
COBYLA Dufosse 189 (74)★3323 (138)★3466 (234)★3542 (380)★3634 (480)★3653 (504)★3658 (504)★315/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 1.6e5 (1e5)2.7e5 (3e4)2.9e5 (3e4)3.2e5 (5e4)3.4e5 (5e4)3.8e5 (7e4)4.0e5 (6e4)15/15
fmincon Hellwig 966 (378)1253 (356)1515 (338)1708 (334)1814 (321)4332 (4224)20820/15

Δ fopt
f42, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5.5e4 (2e4)6.6e4 (2e4)7.1e4 (2e4)7.7e4 (2e4)8.2e4 (2e4)1.7e5 (8e4)3.2e6 (3e6)4/15
AL2-CMA-ES Dufosse 4.3e4 (2e4)4.9e4 (2e4)5.3e4 (2e4)5.9e4 (2e4)6.3e4 (2e4)7.0e4 (2e4)3.3e5 (5e5)12/15
AL3-CMA-ES Dufosse 4.7e4 (2e4)5.5e4 (2e4)6.1e4 (3e4)6.6e4 (3e4)7.3e4 (3e4)1.1e5 (4e4)6.7e6 (5e6)2/15
AL4-CMA-ES Dufosse 5.7e4 (3e4)6.7e4 (3e4)7.3e4 (4e4)7.8e4 (4e4)8.5e4 (4e4)9.7e4 (4e4)2.5e6 (3e6)5/15
BPepsMAg Hellwig 1.8e4 (6220)2.9e4 (9130)4.6e4 (2e4)6.2e4 (3e4)8.0e4 (3e4)1.2e5 (4e4)1.5e5 (5e4)15/15
COBYLA Dufosse 77 (32)★3104 (52)★3118 (57)★3133 (106)★3133 (106)★3163 (160)★3175 (160)★315/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2.4e5 (3e4)2.7e5 (3e4)2.9e5 (3e4)3.0e5 (3e4)3.2e5 (3e4)3.5e5 (3e4)3.6e5 (3e4)15/15
fmincon Hellwig 1564 (777)1800 (756)1861 (798)1990 (799)2074 (778)1.7e4 (2e4)23090/15

Δ fopt
f43, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.3e5 (2e5)3.6e5 (3e5)3.7e5 (3e5)3.8e5 (3e5)3.9e5 (3e5)4.0e5 (4e5)4.1e5 (4e5)15/15
AL2-CMA-ES Dufosse 3.4e5 (3e5)4.1e5 (3e5)4.2e5 (3e5)4.4e5 (3e5)4.5e5 (4e5)4.7e5 (4e5)4.8e5 (4e5)15/15
AL3-CMA-ES Dufosse 3.0e5 (2e5)3.8e5 (1e5)3.9e5 (1e5)4.0e5 (1e5)4.1e5 (1e5)4.3e5 (1e5)4.4e5 (1e5)15/15
AL4-CMA-ES Dufosse 3.6e5 (3e5)4.1e5 (3e5)4.2e5 (3e5)4.3e5 (3e5)4.4e5 (3e5)4.6e5 (4e5)4.6e5 (4e5)15/15
BPepsMAg Hellwig 1e60/15
COBYLA Dufosse 2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2e60/15
fmincon Hellwig 32860/15

Δ fopt
f44, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 6.6e5 (5e5)6.7e5 (5e5)7.8e5 (5e5)9.4e5 (6e5)9.5e5 (1e6)1.1e6 (6e5)1.1e6 (1e6)9/15
AL2-CMA-ES Dufosse 6.0e5 (5e5)6.1e5 (7e5)6.3e5 (6e5)7.3e5 (7e5)7.4e5 (6e5)7.7e5 (9e5)1.0e6 (9e5)10/15
AL3-CMA-ES Dufosse 1.2e6 (9e5)1.2e6 (7e5)1.2e6 (1e6)1.6e6 (1e6)1.6e6 (1e6)2.1e6 (2e6)2.2e6 (1e6)6/15
AL4-CMA-ES Dufosse 9.6e5 (1e6)9.8e5 (9e5)9.9e5 (9e5)1.1e6 (8e5)1.1e6 (1e6)1.4e6 (1e6)1.6e6 (1e6)7/15
BPepsMAg Hellwig 1e60/15
COBYLA Dufosse 2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2e60/15
fmincon Hellwig 43230/15

Δ fopt
f45, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1e60/15
AL2-CMA-ES Dufosse 1e60/15
AL3-CMA-ES Dufosse 1e60/15
AL4-CMA-ES Dufosse 1e60/15
BPepsMAg Hellwig 1e60/15
COBYLA Dufosse 2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2e60/15
fmincon Hellwig 67420/15

Δ fopt
f46, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1e60/15
AL2-CMA-ES Dufosse 1e60/15
AL3-CMA-ES Dufosse 1e60/15
AL4-CMA-ES Dufosse 1e60/15
BPepsMAg Hellwig 1e60/15
COBYLA Dufosse 2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2e60/15
fmincon Hellwig 66430/15

Δ fopt
f47, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1e60/15
AL2-CMA-ES Dufosse 1e60/15
AL3-CMA-ES Dufosse 1e60/15
AL4-CMA-ES Dufosse 1e60/15
BPepsMAg Hellwig 1e60/15
COBYLA Dufosse 3.3e5 (3e5)3.3e5 (3e5)5.0e5 (5e5)5.0e5 (6e5)5.0e5 (5e5)5.0e5 (5e5)5.0e5 (7e5)5/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2e60/15
fmincon Hellwig 84190/15

Δ fopt
f48, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1e60/15
AL2-CMA-ES Dufosse 1e60/15
AL3-CMA-ES Dufosse 1e60/15
AL4-CMA-ES Dufosse 1e60/15
BPepsMAg Hellwig 1e60/15
COBYLA Dufosse 516 (44)★3571 (48)★3623 (51)★3666 (72)★3719 (73)★3819 (37)★3949 (344)★315/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2e60/15
fmincon Hellwig 5e40/15

Δ fopt
f49, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 4.4e5 (3e5)5.0e5 (3e5)5.1e5 (3e5)5.2e5 (3e5)5.3e5 (3e5)5.5e5 (3e5)5.6e5 (3e5)15/15
AL2-CMA-ES Dufosse 4.3e5 (3e5)4.9e5 (3e5)5.0e5 (3e5)5.2e5 (3e5)5.4e5 (3e5)5.6e5 (3e5)5.7e5 (3e5)15/15
AL3-CMA-ES Dufosse 4.8e5 (3e5)4.9e5 (3e5)5.0e5 (3e5)5.1e5 (3e5)5.3e5 (3e5)5.5e5 (3e5)5.6e5 (3e5)15/15
AL4-CMA-ES Dufosse 4.6e5 (3e5)5.4e5 (3e5)5.5e5 (3e5)5.6e5 (3e5)5.7e5 (3e5)5.9e5 (3e5)6.0e5 (3e5)14/15
BPepsMAg Hellwig 1e60/15
COBYLA Dufosse 2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2e60/15
fmincon Hellwig 30230/15

Δ fopt
f50, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 6.4e5 (6e5)6.5e5 (5e5)7.2e5 (6e5)8.6e5 (7e5)8.9e5 (7e5)1.2e6 (1e6)1.6e6 (1e6)7/15
AL2-CMA-ES Dufosse 8.3e5 (1e6)8.8e5 (6e5)9.2e5 (6e5)9.7e5 (9e5)9.8e5 (7e5)1.0e6 (6e5)1.0e6 (8e5)11/15
AL3-CMA-ES Dufosse 2.5e6 (2e6)2.5e6 (3e6)2.5e6 (3e6)2.5e6 (2e6)2.5e6 (3e6)2.5e6 (3e6)2.6e6 (3e6)5/15
AL4-CMA-ES Dufosse 1.2e6 (1e6)1.2e6 (1e6)1.4e6 (2e6)1.4e6 (1e6)1.4e6 (1e6)1.4e6 (1e6)1.4e6 (2e6)8/15
BPepsMAg Hellwig 1e60/15
COBYLA Dufosse 2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2e60/15
fmincon Hellwig 33740/15

Δ fopt
f51, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1e60/15
AL2-CMA-ES Dufosse 7.3e6 (7e6)7.4e6 (1e7)1.5e7 (2e7)1.5e7 (1e7)1.5e7 (2e7)1e60/15
AL3-CMA-ES Dufosse 1.5e7 (2e7)1.5e7 (2e7)1.5e7 (1e7)1.5e7 (1e7)1.5e7 (1e7)1.5e7 (1e7)1.5e7 (2e7)1/15
AL4-CMA-ES Dufosse 1e60/15
BPepsMAg Hellwig 1e60/15
COBYLA Dufosse 2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2e60/15
fmincon Hellwig 39170/15

Δ fopt
f52, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1e60/15
AL2-CMA-ES Dufosse 1e60/15
AL3-CMA-ES Dufosse 1e60/15
AL4-CMA-ES Dufosse 1e60/15
BPepsMAg Hellwig 1e60/15
COBYLA Dufosse 2e50/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2e60/15
fmincon Hellwig 73850/15

Δ fopt
f53, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1e60/15
AL2-CMA-ES Dufosse 1e60/15
AL3-CMA-ES Dufosse 1e60/15
AL4-CMA-ES Dufosse 1e60/15
BPepsMAg Hellwig 1e60/15
COBYLA Dufosse 1.3e6 (2e6)1.3e6 (1e6)1.3e6 (1e6)1.3e6 (1e6)1.3e6 (2e6)1.3e6 (1e6)1.3e6 (2e6)2/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2e60/15
fmincon Hellwig 66110/15

Δ fopt
f54, 20-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1e60/15
AL2-CMA-ES Dufosse 1e60/15
AL3-CMA-ES Dufosse 1e60/15
AL4-CMA-ES Dufosse 1e60/15
BPepsMAg Hellwig 1e60/15
COBYLA Dufosse 6691 (8095)★36739 (8060)★36792 (8069)★36840 (8067)★36894 (8080)★36986 (8084)★37794 (8078)★315/15
RandomSearch-5 Dufosse 4e60/15
epsMAg Hellwig 2e60/15
fmincon Hellwig 5e40/15

Previous dimension | Dimension = 40 | First dimension

Δ fopt
f1, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 8117 (1629)1.1e4 (2528)1.3e4 (3037)1.5e4 (3532)1.6e4 (3409)2.0e4 (3295)2.1e4 (3355)15/15
AL2-CMA-ES Dufosse 6438 (1057)7657 (1203)8814 (1355)1.1e4 (1498)1.2e4 (1105)1.7e4 (2825)1.8e4 (3374)15/15
AL3-CMA-ES Dufosse 8754 (1765)1.2e4 (3001)1.5e4 (3228)1.7e4 (3817)1.9e4 (3714)2.2e4 (4778)2.3e4 (4313)15/15
AL4-CMA-ES Dufosse 8274 (1196)1.2e4 (2402)1.4e4 (3042)1.6e4 (3405)1.8e4 (3635)2.1e4 (3701)2.3e4 (4728)15/15
BPepsMAg Hellwig 1.5e4 (2145)3.0e4 (2586)4.9e4 (2787)7.1e4 (2902)9.2e4 (2717)1.3e5 (4188)1.6e5 (4395)15/15
COBYLA Dufosse 584 (100)898 (219)1172 (195)1503 (205)1803 (177)6.6e5 (7e5)2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 3.1e4 (7794)1.3e5 (9e4)2.7e5 (1e5)3.6e5 (1e5)4.1e5 (3e4)4.7e5 (2e4)5.0e5 (3e4)15/15
fmincon Hellwig 272 (82)★3312 (125)★3363 (131)★3489 (83)★3501 (83)★3632 (126)★3689 (244)★315/15

Δ fopt
f2, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.4e4 (3637)1.6e4 (2702)1.9e4 (2415)2.1e4 (3092)2.3e4 (3161)2.8e4 (3092)3.1e4 (2471)15/15
AL2-CMA-ES Dufosse 1.1e4 (4381)1.3e4 (4252)1.7e4 (7007)2.1e4 (7196)2.3e4 (7286)4.6e4 (2e4)2.0e6 (3e6)8/15
AL3-CMA-ES Dufosse 1.5e4 (3822)1.8e4 (4048)2.1e4 (4555)2.3e4 (4737)2.6e4 (4939)3.0e4 (3941)3.3e4 (4035)15/15
AL4-CMA-ES Dufosse 1.5e4 (3911)1.8e4 (3971)2.0e4 (3877)2.3e4 (3738)2.5e4 (3607)3.0e4 (4296)3.2e4 (4032)15/15
BPepsMAg Hellwig 5.8e4 (4e4)1.0e5 (6e4)2.9e5 (5e5)3.1e5 (5e5)4.0e5 (6e5)5.5e5 (5e5)9.9e5 (1e6)12/15
COBYLA Dufosse 603 (75)901 (139)1168 (107)1507 (128)1919 (192)1.4e5 (1e5)2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 2.8e5 (2e5)4.2e5 (1e5)4.8e5 (1e5)5.2e5 (1e5)5.6e5 (1e5)6.3e5 (1e5)6.7e5 (1e5)15/15
fmincon Hellwig 421 (168)488 (171)★3635 (122)★3668 (124)★3736 (130)★31022 (342)★31390 (497)★313/15

Δ fopt
f3, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.4e4 (2920)3.1e4 (4515)3.6e4 (4516)4.0e4 (4749)4.3e4 (4981)4.9e4 (5245)5.6e6 (8e6)4/15
AL2-CMA-ES Dufosse 2.2e4 (8910)2.7e4 (6463)3.1e4 (9275)3.4e4 (9159)3.8e4 (7758)6.0e6 (7e6)2e60/15
AL3-CMA-ES Dufosse 2.6e4 (5373)3.3e4 (4813)3.9e4 (3484)4.5e4 (4279)4.9e4 (4954)5.6e4 (4584)2.0e5 (7e4)15/15
AL4-CMA-ES Dufosse 2.6e4 (4965)3.3e4 (6754)3.9e4 (6982)4.5e4 (7054)4.9e4 (7191)5.6e4 (7712)2.1e5 (3e4)14/15
BPepsMAg Hellwig 3.7e5 (3e5)4.8e5 (4e5)1.1e6 (1e6)2.2e6 (3e6)2.3e6 (4e6)3.3e6 (3e6)5.2e6 (6e6)6/15
COBYLA Dufosse 567 (115)840 (170)1101 (165)1435 (194)1740 (212)1.5e5 (2e5)2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 4.0e5 (2e5)6.1e5 (3e5)8.2e5 (3e5)1.0e6 (8e5)1.9e6 (2e6)4.1e6 (4e6)5.0e6 (6e6)8/15
fmincon Hellwig 648 (291)771 (251)898 (332)953 (415)★21165 (369)★31573 (576)★36676 (5384)★34/15

Δ fopt
f4, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5.5e4 (1e4)8.8e4 (2e4)1.0e5 (3e4)1.1e5 (3e4)1.2e5 (3e4)2e60/15
AL2-CMA-ES Dufosse 5.6e4 (1e4)6.2e4 (2e4)7.1e4 (2e4)8.4e4 (2e4)1.5e6 (3e6)2e60/15
AL3-CMA-ES Dufosse 5.5e4 (1e4)8.8e4 (2e4)1.2e5 (3e4)1.3e5 (3e4)1.5e5 (3e4)2.6e6 (3e6)2e60/15
AL4-CMA-ES Dufosse 5.7e4 (2e4)8.6e4 (3e4)1.1e5 (3e4)1.3e5 (3e4)1.4e5 (3e4)5.7e6 (7e6)2e60/15
BPepsMAg Hellwig 1.5e5 (5e4)2.9e5 (5e4)4.6e5 (9e4)7.2e5 (6e4)1.1e6 (7e5)4.0e7 (3e7)4.0e7 (6e7)1/15
COBYLA Dufosse 544 (92)★31646 (2291)4391 (4500)1.1e4 (1e4)2.0e4 (3e4)4.3e4 (5e4)1.2e5 (1e5)11/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 4.8e5 (8e4)7.1e5 (2e5)1.5e6 (3e5)1.9e6 (6e5)2.9e6 (2e6)1.1e7 (8e6)2.9e7 (3e7)2/15
fmincon Hellwig 1930 (537)2079 (531)2283 (495)2388 (574)2645 (486)6694 (6801)★24.9e4 (5e4)★21/15

Δ fopt
f5, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 7.8e4 (4e4)1.3e5 (3e4)1.4e5 (3e4)1.6e5 (3e4)1.8e5 (3e4)2e60/15
AL2-CMA-ES Dufosse 7.2e4 (1e4)8.1e4 (1e4)9.2e4 (1e4)1.5e5 (1e5)2.8e6 (3e6)2e60/15
AL3-CMA-ES Dufosse 7.8e4 (2e4)1.2e5 (3e4)1.5e5 (3e4)1.7e5 (3e4)1.9e5 (3e4)2e60/15
AL4-CMA-ES Dufosse 7.5e4 (3e4)1.2e5 (3e4)1.4e5 (3e4)1.6e5 (3e4)1.7e5 (3e4)2e60/15
BPepsMAg Hellwig 2.1e5 (9e4)4.4e5 (1e5)6.8e5 (1e5)9.1e5 (1e5)1.1e6 (1e5)1.4e6 (2e5)1.6e6 (2e5)15/15
COBYLA Dufosse 665 (650)★21199 (1276)1484 (1766)1766 (1884)1766 (1884)2887 (4192)3198 (4192)15/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 6.0e5 (1e5)9.5e5 (4e5)1.4e6 (4e5)1.8e6 (4e5)1.9e6 (4e5)2.1e6 (4e5)2.2e6 (4e5)15/15
fmincon Hellwig 2211 (533)2331 (451)2418 (451)2489 (451)2615 (410)4.2e4 (3e4)29510/15

Δ fopt
f6, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 9.0e4 (4e4)1.1e5 (4e4)1.3e5 (5e4)1.5e5 (5e4)1.6e5 (5e4)2e60/15
AL2-CMA-ES Dufosse 7.3e4 (3e4)8.2e4 (3e4)9.0e4 (3e4)9.8e4 (3e4)1.1e5 (3e4)1.2e5 (3e4)1.9e6 (3e6)8/15
AL3-CMA-ES Dufosse 7.4e4 (2e4)9.8e4 (3e4)1.2e5 (3e4)1.3e5 (3e4)1.5e5 (3e4)2e60/15
AL4-CMA-ES Dufosse 7.2e4 (2e4)9.7e4 (3e4)1.1e5 (3e4)1.3e5 (3e4)1.4e5 (3e4)2e60/15
BPepsMAg Hellwig 1.1e5 (3e4)1.5e5 (3e4)1.9e5 (4e4)2.2e5 (5e4)2.6e5 (5e4)3.3e5 (7e4)3.7e5 (9e4)15/15
COBYLA Dufosse 126 (40)★3503 (604)★3546 (604)★31059 (1634)★21059 (1634)★21059 (1634)★31059 (1634)★315/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 5.8e5 (1e5)6.6e5 (2e5)7.2e5 (2e5)7.7e5 (2e5)8.2e5 (2e5)9.2e5 (2e5)9.7e5 (2e5)15/15
fmincon Hellwig 5775 (5084)5895 (4879)5961 (4879)6054 (4879)6054 (4879)1.9e4 (2e4)51650/15

Δ fopt
f7, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.5e4 (1e4)5.5e4 (2e4)7.2e4 (2e4)8.4e4 (9596)9.3e4 (1e4)1.1e5 (1e4)1.1e5 (1e4)15/15
AL2-CMA-ES Dufosse 2.8e4 (7271)4.6e4 (8945)6.3e4 (1e4)7.6e4 (7147)8.5e4 (6455)9.8e4 (5797)1.0e5 (7613)15/15
AL3-CMA-ES Dufosse 4.4e4 (8034)6.7e4 (2e4)8.9e4 (2e4)1.0e5 (2e4)1.1e5 (2e4)1.3e5 (2e4)1.3e5 (2e4)15/15
AL4-CMA-ES Dufosse 3.9e4 (8188)6.0e4 (2e4)8.1e4 (2e4)9.5e4 (2e4)1.1e5 (2e4)1.2e5 (1e4)1.2e5 (1e4)15/15
BPepsMAg Hellwig 3.8e4 (2e4)2.8e5 (2e5)4.5e6 (7e6)3e60/15
COBYLA Dufosse 9519 (7766)3.1e6 (2e6)2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 8.5e4 (4e4)2.4e5 (5e4)4.6e5 (1e5)2.3e6 (1e6)1.9e7 (2e7)4e60/15
fmincon Hellwig 2686 (1470)9651 (1e4)★33.9e5 (4e5)9e40/15

Δ fopt
f8, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.2e5 (5e4)2.0e5 (2e5)3.5e5 (3e5)7.0e5 (6e5)1.2e6 (1e6)2e60/15
AL2-CMA-ES Dufosse 1.6e5 (2e5)2.9e5 (5e5)3.2e5 (5e5)5.8e5 (1e6)1.2e6 (2e6)8.5e6 (2e7)3.0e7 (2e7)1/15
AL3-CMA-ES Dufosse 1.3e6 (2e6)3.9e6 (4e6)9.0e6 (1e7)3.0e7 (2e7)2e60/15
AL4-CMA-ES Dufosse 1.5e6 (2e6)3.0e6 (3e6)8.5e6 (9e6)2.8e7 (3e7)2.9e7 (3e7)2e60/15
BPepsMAg Hellwig 6.3e6 (8e6)3e60/15
COBYLA Dufosse 1.8e5 (2e5)3.0e6 (3e6)2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 1.7e6 (2e6)1.8e7 (3e7)4e60/15
fmincon Hellwig 3.5e4 (4e4)5.8e5 (6e5)9e40/15

Δ fopt
f9, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.3e5 (2e5)5.1e5 (2e5)6.0e5 (3e5)8.6e5 (4e5)2.6e6 (3e6)2e60/15
AL2-CMA-ES Dufosse 2.1e5 (4e4)2.5e5 (5e4)3.2e5 (7e4)9.7e5 (1e6)5.2e6 (4e6)2e60/15
AL3-CMA-ES Dufosse 3.0e7 (3e7)2e60/15
AL4-CMA-ES Dufosse 1.5e7 (2e7)2e60/15
BPepsMAg Hellwig 3e60/15
COBYLA Dufosse 6.2e5 (6e5)2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 1.8e7 (2e7)4e60/15
fmincon Hellwig 1.1e5 (1e5)9e40/15

Δ fopt
f10, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 7.2e5 (3e5)8.4e5 (3e5)9.3e5 (3e5)1.5e6 (1e6)1.4e7 (2e7)2e60/15
AL2-CMA-ES Dufosse 3.1e5 (1e5)3.7e5 (1e5)4.9e5 (3e5)6.2e5 (4e5)9.2e6 (1e7)2e60/15
AL3-CMA-ES Dufosse 2e60/15
AL4-CMA-ES Dufosse 1.5e7 (2e7)2e60/15
BPepsMAg Hellwig 3e60/15
COBYLA Dufosse 2.1e5 (2e5)2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 3.0e7 (2e7)4e60/15
fmincon Hellwig 4.4e5 (4e5)9e40/15

Δ fopt
f11, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5.1e5 (2e5)6.3e5 (5e5)6.7e5 (5e5)1.0e6 (1e6)8.4e6 (1e7)2e60/15
AL2-CMA-ES Dufosse 2.4e5 (6e4)3.5e5 (1e5)6.1e5 (3e5)1.6e6 (2e6)2e60/15
AL3-CMA-ES Dufosse 2e60/15
AL4-CMA-ES Dufosse 1.2e6 (3e5)1.9e6 (9e5)3.3e6 (2e6)3.9e6 (3e6)4.5e6 (5e6)2e60/15
BPepsMAg Hellwig 3e60/15
COBYLA Dufosse 2103 (1132)★31.6e4 (1182)★21.6e4 (1224)★21.6e4 (1196)★21.6e4 (1196)★21.6e4 (1194)★21.6e4 (1198)★214/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 4e60/15
fmincon Hellwig 1.8e5 (2e5)1.9e5 (2e5)3.2e5 (4e5)6.6e5 (6e5)9e40/15

Δ fopt
f12, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.7e5 (7e5)3.9e5 (7e5)4.1e5 (7e5)4.3e5 (7e5)4.4e5 (7e5)3.0e7 (2e7)2e60/15
AL2-CMA-ES Dufosse 1.9e5 (3e5)2.0e5 (3e5)2.1e5 (3e5)2.2e5 (3e5)2.3e5 (3e5)2.5e5 (3e5)2.4e6 (4e6)7/15
AL3-CMA-ES Dufosse 1.2e5 (7e4)1.4e5 (7e4)1.6e5 (6e4)1.8e5 (7e4)2.0e5 (7e4)2e60/15
AL4-CMA-ES Dufosse 1.1e5 (6e4)1.3e5 (6e4)1.5e5 (6e4)1.7e5 (6e4)1.8e5 (6e4)2e60/15
BPepsMAg Hellwig 4.7e5 (5e5)8.3e5 (7e5)1.1e6 (1e6)1.4e6 (1e6)1.7e6 (2e6)2.1e6 (2e6)2.3e6 (2e6)12/15
COBYLA Dufosse 558 (88)★3676 (100)★3778 (86)★3865 (98)★3973 (115)★31154 (85)★31964 (1282)★315/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 6.2e5 (1e5)7.0e5 (1e5)7.6e5 (1e5)8.2e5 (1e5)8.9e5 (1e5)1.0e6 (1e5)1.1e6 (1e5)15/15
fmincon Hellwig 9e40/15

Δ fopt
f13, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 7147 (2435)8762 (2544)1.2e4 (3213)1.5e4 (3450)2.4e4 (7933)4.0e4 (1e4)4.9e4 (6626)15/15
AL2-CMA-ES Dufosse 5478 (1022)6462 (1345)9929 (2844)3.5e4 (8e4)8.8e5 (2e6)2e60/15
AL3-CMA-ES Dufosse 6276 (1589)7858 (1940)9787 (2552)1.4e4 (3935)2.1e4 (4864)4.0e4 (9558)5.3e4 (8711)15/15
AL4-CMA-ES Dufosse 7297 (3508)9028 (2742)1.0e4 (2482)1.4e4 (3438)2.3e4 (6034)3.9e4 (7132)4.7e4 (1e4)15/15
BPepsMAg Hellwig 295 (198)707 (850)1984 (1660)2100 (1660)2100 (1660)2100 (1660)2100 (1660)15/15
COBYLA Dufosse 81 (13)86 (0)86 (0)86 (0)★386 (0)★386 (0)★386 (0)★315/15
RandomSearch-5 Dufosse 322 (466)3847 (3353)6.0e4 (7e4)6.8e5 (4e5)8.1e6 (9e6)8e60/15
epsMAg Hellwig 1188 (976)4060 (2594)6529 (63)6818 (63)6818 (63)6818 (63)6818 (63)15/15
fmincon Hellwig 134 (84)168 (169)174 (169)250 (128)299 (128)344 (169)654 (490)9/15

Δ fopt
f14, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.8e4 (5076)2.2e4 (5888)2.9e4 (5786)3.8e4 (5171)4.9e4 (3274)1.6e6 (2e6)2.8e7 (2e7)1/15
AL2-CMA-ES Dufosse 4.1e4 (3e4)4.2e5 (1e6)2.2e6 (3e6)2e60/15
AL3-CMA-ES Dufosse 1.9e4 (6034)2.2e4 (5307)3.0e4 (5911)4.0e4 (6607)4.9e4 (6413)7.0e4 (9875)1.1e5 (5e4)15/15
AL4-CMA-ES Dufosse 2.0e4 (5764)2.3e4 (5547)2.9e4 (6548)3.8e4 (7935)5.1e4 (8961)7.1e4 (9840)1.3e5 (1e5)15/15
BPepsMAg Hellwig 1.5e4 (2e4)3.8e4 (2e4)5.2e4 (4e4)1.3e5 (2e5)1.5e5 (2e5)3.6e5 (4e5)3.7e5 (4e5)14/15
COBYLA Dufosse 87 (1)★287 (1)★387 (1)★387 (1)★387 (1)★387 (1)★387 (1)★315/15
RandomSearch-5 Dufosse 3.4e5 (4e5)1.5e7 (1e7)8e60/15
epsMAg Hellwig 1.5e5 (1e5)2.2e5 (2e5)2.6e5 (2e5)3.0e5 (2e5)3.2e5 (3e5)3.8e5 (3e5)4.0e5 (3e5)15/15
fmincon Hellwig 625 (648)666 (607)754 (607)765 (607)822 (607)913 (696)1181 (847)13/15

Δ fopt
f15, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.3e4 (7910)4.0e4 (9289)4.6e4 (9689)5.3e4 (1e4)5.9e4 (1e4)1.3e7 (2e7)2e60/15
AL2-CMA-ES Dufosse 1.6e6 (3e6)2e60/15
AL3-CMA-ES Dufosse 3.7e4 (7160)4.3e4 (6521)5.0e4 (7881)5.7e4 (9332)6.3e4 (8370)1.0e5 (1e5)2.8e6 (3e6)8/15
AL4-CMA-ES Dufosse 3.4e4 (6934)4.0e4 (6553)4.6e4 (7457)5.3e4 (6625)5.9e4 (7984)8.1e4 (1e4)2.7e6 (4e6)8/15
BPepsMAg Hellwig 6.1e4 (4e4)8.0e4 (3e4)9.6e4 (3e4)3.9e5 (5e5)4.2e5 (5e5)4.9e5 (7e5)7.1e5 (1e6)13/15
COBYLA Dufosse 88 (2)★388 (2)★388 (2)★388 (2)★388 (2)★388 (2)★388 (2)★315/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 2.4e5 (2e5)3.8e5 (2e5)4.3e5 (3e5)5.3e5 (3e5)5.6e5 (3e5)6.6e5 (4e5)7.4e5 (5e5)15/15
fmincon Hellwig 713 (420)787 (505)896 (515)913 (546)962 (505)1427 (1467)2505 (2822)7/15

Δ fopt
f16, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.1e5 (3e4)1.3e5 (3e4)1.4e5 (6e4)1.5e5 (5e4)6.3e5 (1e6)2e60/15
AL2-CMA-ES Dufosse 2e60/15
AL3-CMA-ES Dufosse 1.0e5 (3e4)1.4e5 (5e4)1.5e5 (5e4)1.6e5 (5e4)1.6e5 (5e4)2e60/15
AL4-CMA-ES Dufosse 1.0e5 (3e4)1.4e5 (3e4)1.5e5 (3e4)1.6e5 (5e4)1.7e5 (5e4)2e60/15
BPepsMAg Hellwig 1.5e6 (2e6)1.3e7 (2e7)1.3e7 (2e7)1.3e7 (1e7)4.2e7 (4e7)4.2e7 (5e7)4.2e7 (5e7)1/15
COBYLA Dufosse 94 (3)★395 (4)★395 (4)★395 (4)★395 (4)★395 (4)★395 (4)★315/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 6.9e5 (2e5)1.7e6 (5e5)2.3e6 (5e5)2.8e6 (2e6)3.1e6 (2e6)3.2e6 (3e6)4.3e6 (3e6)10/15
fmincon Hellwig 986 (493)1178 (411)1298 (452)1342 (493)1446 (534)4959 (4123)8329 (8248)3/15

Δ fopt
f17, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.8e5 (5e4)2.0e5 (5e4)2.2e5 (5e4)2.4e5 (5e4)5.7e6 (6e6)2e60/15
AL2-CMA-ES Dufosse 4.2e6 (7e6)2e60/15
AL3-CMA-ES Dufosse 1.8e5 (4e4)2.2e5 (7e4)2.4e5 (7e4)2.5e5 (8e4)2.7e5 (8e4)2e60/15
AL4-CMA-ES Dufosse 1.9e5 (6e4)2.3e5 (7e4)2.4e5 (7e4)2.6e5 (7e4)2.7e5 (7e4)2e60/15
BPepsMAg Hellwig 8.0e5 (5e5)1.3e6 (7e5)1.4e6 (6e5)1.6e6 (6e5)1.7e6 (6e5)2.3e6 (1e6)2.5e6 (1e6)13/15
COBYLA Dufosse 266 (530)★3650 (1096)★21623 (2740)1824 (2822)2948 (3828)3166 (3828)3193 (3828)15/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 1.3e6 (2e5)1.6e6 (2e5)1.8e6 (2e5)1.8e6 (2e5)1.9e6 (2e5)2.1e6 (2e5)2.1e6 (2e5)15/15
fmincon Hellwig 2408 (1476)2775 (1476)2895 (1517)3184 (1865)3242 (2116)1.6e4 (2e4)2.4e4 (3e4)2/15

Δ fopt
f18, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.3e5 (5e4)1.6e5 (7e4)1.7e5 (7e4)1.9e5 (7e4)3.5e5 (1e5)2e60/15
AL2-CMA-ES Dufosse 6.5e4 (2e4)7.3e4 (2e4)8.1e4 (2e4)9.0e4 (2e4)9.8e4 (2e4)1.1e5 (2e4)2.5e6 (3e6)7/15
AL3-CMA-ES Dufosse 8.2e4 (2e4)1.1e5 (2e4)1.2e5 (2e4)1.4e5 (2e4)1.5e5 (2e4)2e60/15
AL4-CMA-ES Dufosse 7.8e4 (1e4)1.0e5 (2e4)1.2e5 (2e4)1.3e5 (2e4)1.5e5 (2e4)2e60/15
BPepsMAg Hellwig 1.5e5 (3e4)2.0e5 (3e4)2.4e5 (5e4)2.8e5 (6e4)3.2e5 (6e4)4.0e5 (7e4)4.4e5 (8e4)15/15
COBYLA Dufosse 126 (41)★3126 (41)★3164 (153)★3234 (161)★3380 (532)★3430 (532)★3451 (532)★315/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 6.0e5 (1e5)6.6e5 (1e5)7.3e5 (1e5)7.8e5 (1e5)8.4e5 (1e5)9.4e5 (1e5)9.9e5 (1e5)15/15
fmincon Hellwig 5359 (4674)5507 (4510)5551 (4510)6000 (4551)6035 (4510)7177 (6600)63130/15

Δ fopt
f19, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.1e5 (4e4)2.9e5 (9e4)5.6e5 (2e5)7.9e5 (3e5)1.2e6 (3e5)2.5e6 (1e6)1.5e7 (1e7)2/15
AL2-CMA-ES Dufosse 6.5e4 (2e4)2.4e5 (8e4)5.3e5 (1e5)7.8e5 (2e5)1.2e6 (2e5)3.5e6 (2e6)3.0e7 (3e7)1/15
AL3-CMA-ES Dufosse 1.7e6 (2e6)3.1e6 (2e6)1.4e7 (2e7)3.0e7 (2e7)2e60/15
AL4-CMA-ES Dufosse 3.5e5 (3e5)1.8e6 (2e6)7.0e6 (8e6)2e60/15
BPepsMAg Hellwig 8.0e4 (5e4)3.2e6 (3e6)3e60/15
COBYLA Dufosse 1.2e4 (2e4)2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 8.5e4 (4e4)7.6e5 (3e5)1.4e7 (1e7)4e60/15
fmincon Hellwig 7525 (1e4)4.8e4 (6e4)9e40/15

Δ fopt
f20, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.2e5 (7e4)2.7e5 (1e5)9.5e5 (1e6)2.3e6 (3e6)7.1e6 (7e6)2e60/15
AL2-CMA-ES Dufosse 1.8e5 (2e5)3.0e5 (2e5)7.4e5 (5e5)1.5e6 (1e6)2.7e6 (2e6)2e60/15
AL3-CMA-ES Dufosse 1.2e6 (1e6)3.3e6 (4e6)1.4e7 (1e7)1.5e7 (1e7)2e60/15
AL4-CMA-ES Dufosse 5.8e5 (4e5)2.3e6 (2e6)9.2e6 (1e7)2.9e7 (4e7)3.0e7 (2e7)2e60/15
BPepsMAg Hellwig 3.1e6 (4e6)4.1e7 (5e7)3e60/15
COBYLA Dufosse 2.7e5 (2e5)2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 1.4e6 (2e6)1.4e7 (9e6)4e60/15
fmincon Hellwig 1.9e4 (4e4)1.8e5 (2e5)9e40/15

Δ fopt
f21, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5.2e5 (4e5)3.0e6 (3e6)3.0e7 (3e7)2e60/15
AL2-CMA-ES Dufosse 6.0e5 (3e5)1.3e6 (4e5)2.4e6 (2e6)9.8e6 (1e7)2e60/15
AL3-CMA-ES Dufosse 1.5e7 (1e7)2e60/15
AL4-CMA-ES Dufosse 2.1e6 (2e6)2e60/15
BPepsMAg Hellwig 1.3e7 (1e7)3e60/15
COBYLA Dufosse 6.8e5 (5e5)2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 1.2e7 (2e7)4e60/15
fmincon Hellwig 7.6e4 (6e4)9e40/15

Δ fopt
f22, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 8.7e5 (5e5)1.1e6 (5e5)1.6e6 (1e6)2.5e6 (1e6)2e60/15
AL2-CMA-ES Dufosse 3.8e5 (2e5)5.2e5 (3e5)6.9e5 (4e5)1.4e6 (1e6)2e60/15
AL3-CMA-ES Dufosse 2e60/15
AL4-CMA-ES Dufosse 5.5e6 (4e6)2.9e7 (3e7)3.0e7 (4e7)2e60/15
BPepsMAg Hellwig 3e60/15
COBYLA Dufosse 9.7e5 (1e6)2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 6.0e7 (7e7)4e60/15
fmincon Hellwig 3.2e5 (3e5)9e40/15

Δ fopt
f23, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5.3e5 (2e5)5.8e5 (2e5)6.2e5 (2e5)1.3e6 (1e6)1.3e7 (1e7)2e60/15
AL2-CMA-ES Dufosse 2.8e5 (2e5)5.0e5 (4e5)9.8e5 (8e5)3.2e6 (3e6)2e60/15
AL3-CMA-ES Dufosse 2e60/15
AL4-CMA-ES Dufosse 2.5e6 (2e6)4.7e6 (4e6)1.5e7 (2e7)1.5e7 (2e7)1.5e7 (2e7)2e60/15
BPepsMAg Hellwig 3e60/15
COBYLA Dufosse 1.5e4 (7175)★31.7e4 (1e4)★32.1e4 (1e4)★32.1e4 (1e4)★32.2e4 (1e4)★32.2e4 (1e4)★32.2e4 (1e4)★314/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 5.8e7 (5e7)4e60/15
fmincon Hellwig 3.0e5 (3e5)4.2e5 (3e5)4.4e5 (3e5)6.7e5 (9e5)9e40/15

Δ fopt
f24, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.4e5 (7e4)1.7e5 (7e4)1.9e5 (6e4)2.0e5 (6e4)2.2e5 (7e4)2e60/15
AL2-CMA-ES Dufosse 1.4e5 (1e5)1.5e5 (1e5)1.6e5 (1e5)1.7e5 (1e5)1.8e5 (1e5)1.9e5 (1e5)1.5e6 (3e6)10/15
AL3-CMA-ES Dufosse 1.3e5 (9e4)1.5e5 (9e4)1.7e5 (9e4)1.9e5 (1e5)2.1e5 (1e5)2e60/15
AL4-CMA-ES Dufosse 1.1e5 (3e4)1.4e5 (3e4)1.6e5 (3e4)1.7e5 (3e4)1.9e5 (3e4)2e60/15
BPepsMAg Hellwig 4.5e5 (2e5)8.7e5 (7e5)1.2e6 (1e6)1.7e6 (1e6)2.2e6 (2e6)3.2e6 (3e6)3.4e6 (3e6)9/15
COBYLA Dufosse 574 (78)★3664 (56)★3762 (111)★3856 (94)★3956 (70)★31160 (73)★31802 (1706)★315/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 6.7e5 (1e5)7.4e5 (1e5)8.0e5 (1e5)8.6e5 (1e5)9.6e5 (2e5)1.1e6 (3e5)1.2e6 (3e5)15/15
fmincon Hellwig 9e40/15

Δ fopt
f25, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.0e5 (3e5)8.0e5 (6e5)2.3e6 (3e6)1.5e7 (2e7)2e60/15
AL2-CMA-ES Dufosse 8.0e4 (1e5)3.5e5 (5e5)1.3e6 (1e6)9.1e6 (1e7)1.4e7 (2e7)2e60/15
AL3-CMA-ES Dufosse 1.4e6 (2e6)2.8e7 (3e7)2e60/15
AL4-CMA-ES Dufosse 8.0e5 (1e6)8.9e6 (9e6)2e60/15
BPepsMAg Hellwig 467 (581)1638 (1478)9500 (8752)3.8e7 (5e7)3e60/15
COBYLA Dufosse 146 (68)273 (167)432 (198)3.6e5 (5e5)2e50/15
RandomSearch-5 Dufosse 459 (621)1.0e4 (1e4)1.3e5 (2e5)8e60/15
epsMAg Hellwig 1019 (1210)3943 (3432)6206 (1748)1.8e7 (2e7)5.8e7 (7e7)4e60/15
fmincon Hellwig 317 (205)412 (348)506 (311)3.8e5 (5e5)1.3e6 (1e6)9e40/15

Δ fopt
f26, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.4e5 (1e5)5.3e5 (4e5)1.8e6 (1e6)1.4e7 (2e7)2e60/15
AL2-CMA-ES Dufosse 6.5e5 (6e5)6.0e6 (7e6)1.4e7 (1e7)2e60/15
AL3-CMA-ES Dufosse 6.3e5 (1e6)8.9e6 (1e7)2e60/15
AL4-CMA-ES Dufosse 1.1e6 (2e6)5.2e6 (3e6)2e60/15
BPepsMAg Hellwig 2.0e4 (1e4)4.3e4 (2e4)6.7e4 (2e4)1.9e7 (2e7)3e60/15
COBYLA Dufosse 353 (108)★3499 (85)★2644 (81)1.1e5 (1e5)★22e50/15
RandomSearch-5 Dufosse 3.1e6 (8e6)5.7e7 (6e7)8e60/15
epsMAg Hellwig 1.0e5 (2e5)2.4e5 (3e5)3.8e5 (4e5)1.2e7 (9e6)4e60/15
fmincon Hellwig 964 (460)8036 (1314)3.5e4 (5e4)9e40/15

Δ fopt
f27, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.3e6 (2e6)2.9e7 (3e7)2e60/15
AL2-CMA-ES Dufosse 1.4e7 (2e7)2e60/15
AL3-CMA-ES Dufosse 9.2e5 (2e6)2e60/15
AL4-CMA-ES Dufosse 5.1e5 (5e5)1.5e7 (2e7)2e60/15
BPepsMAg Hellwig 1.2e5 (2e5)2.3e5 (3e5)4.4e5 (5e5)3e60/15
COBYLA Dufosse 964 (1148)8636 (1e4)1.0e4 (1e4)1.0e5 (1e5)★32e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 5.3e5 (2e5)7.6e5 (4e5)9.8e5 (5e5)4e60/15
fmincon Hellwig 1205 (916)1422 (1133)3.5e4 (5e4)9e40/15

Δ fopt
f28, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 8.2e6 (2e7)2e60/15
AL2-CMA-ES Dufosse 2e60/15
AL3-CMA-ES Dufosse 4.8e6 (6e6)2e60/15
AL4-CMA-ES Dufosse 2.0e6 (2e6)2e60/15
BPepsMAg Hellwig 4.2e6 (4e6)1.9e7 (2e7)3e60/15
COBYLA Dufosse 8921 (1e4)1.7e5 (2e5)5.9e5 (7e5)8.4e5 (1e6)2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 6.2e6 (8e6)1.8e7 (1e7)6.0e7 (3e7)4e60/15
fmincon Hellwig 4.6e4 (5e4)8.4e4 (1e5)4.1e5 (4e5)9e40/15

Δ fopt
f29, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.9e7 (3e7)2.9e7 (5e7)2e60/15
AL2-CMA-ES Dufosse 2e60/15
AL3-CMA-ES Dufosse 2e60/15
AL4-CMA-ES Dufosse 1.5e7 (1e7)2e60/15
BPepsMAg Hellwig 2.1e7 (2e7)3e60/15
COBYLA Dufosse 1.7e4 (2e4)★39.2e4 (2e5)★21.1e5 (2e5)★21.1e5 (1e5)★21.1e5 (1e5)★21.1e5 (2e5)★21.2e5 (3e5)★210/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 2.8e7 (3e7)4e60/15
fmincon Hellwig 1.6e5 (2e5)4.4e5 (5e5)1.4e6 (1e6)1.4e6 (1e6)9e40/15

Δ fopt
f30, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.7e5 (1e5)3.0e5 (1e5)3.2e5 (1e5)3.4e5 (1e5)3.5e5 (1e5)2e60/15
AL2-CMA-ES Dufosse 3.7e5 (1e6)3.8e5 (1e6)3.9e5 (1e6)4.0e5 (1e6)4.1e5 (1e6)4.2e5 (1e6)3.5e6 (6e6)6/15
AL3-CMA-ES Dufosse 1.0e5 (4e4)1.3e5 (3e4)1.5e5 (3e4)1.7e5 (3e4)1.8e5 (3e4)2e60/15
AL4-CMA-ES Dufosse 1.0e5 (3e4)1.3e5 (3e4)1.5e5 (3e4)1.7e5 (3e4)1.8e5 (4e4)2e60/15
BPepsMAg Hellwig 4.5e5 (3e5)7.0e5 (6e5)9.1e5 (7e5)1.1e6 (8e5)1.5e6 (1e6)2.2e6 (2e6)2.6e6 (2e6)11/15
COBYLA Dufosse 443 (56)★3528 (57)★3641 (58)★3715 (63)★3831 (49)★31034 (76)★31602 (676)★315/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 8.1e5 (5e5)9.1e5 (5e5)1.0e6 (4e5)1.1e6 (6e5)1.2e6 (6e5)1.3e6 (6e5)1.4e6 (6e5)15/15
fmincon Hellwig 9e40/15

Δ fopt
f31, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.8e4 (2548)2.4e4 (2821)3.2e4 (3032)5.7e4 (5e4)9.3e4 (5e4)1.3e5 (4e4)1.4e5 (4e4)15/15
AL2-CMA-ES Dufosse 1.4e4 (3018)1.5e4 (3080)1.8e4 (3776)3.4e4 (2e4)5.3e4 (3e4)7.9e4 (3e4)8.7e4 (3e4)15/15
AL3-CMA-ES Dufosse 1.7e4 (2741)2.4e4 (3920)3.9e4 (2e4)1.5e5 (2e5)2.9e5 (4e5)5.2e5 (5e5)5.7e5 (5e5)15/15
AL4-CMA-ES Dufosse 1.7e4 (3419)2.6e4 (3251)4.9e4 (4111)1.2e5 (2e5)2.3e5 (3e5)3.8e5 (4e5)4.2e5 (4e5)15/15
BPepsMAg Hellwig 2.7e4 (6364)4.6e4 (7688)6.7e4 (8362)8.9e4 (8600)3.1e5 (2e4)3e60/15
COBYLA Dufosse 892 (85)1182 (103)1421 (141)★21704 (132)★35202 (4996)2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 9.1e4 (8e4)2.5e5 (6e4)3.4e5 (4e4)3.8e5 (3e4)4.2e5 (4e4)2.7e7 (4e7)5.7e7 (5e7)1/15
fmincon Hellwig 1013 (410)2041 (1047)2669 (780)3038 (789)2.0e4 (1e4)2.4e5 (3e5)2.4e5 (4e5)1/15

Δ fopt
f32, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 5.9e4 (3e4)6.6e4 (4e4)7.3e4 (4e4)7.8e4 (4e4)8.2e4 (4e4)8.8e4 (4e4)9.2e4 (4e4)15/15
AL2-CMA-ES Dufosse 2.9e4 (2e4)3.7e4 (2e4)4.4e4 (2e4)4.8e4 (2e4)5.3e4 (2e4)7.1e4 (5e4)8.2e4 (5e4)15/15
AL3-CMA-ES Dufosse 7.7e4 (5e4)1.1e5 (1e5)1.2e5 (1e5)1.4e5 (1e5)1.5e5 (1e5)1.7e5 (2e5)1.8e5 (2e5)15/15
AL4-CMA-ES Dufosse 6.4e4 (5e4)7.9e4 (5e4)1.0e5 (6e4)1.1e5 (7e4)1.3e5 (8e4)1.5e5 (1e5)1.6e5 (1e5)15/15
BPepsMAg Hellwig 3.2e5 (8e5)7.9e5 (1e6)1.9e6 (2e6)3.8e6 (4e6)2.0e7 (3e7)3e60/15
COBYLA Dufosse 792 (299)★32016 (2911)8454 (8262)1.1e5 (1e5)3.0e6 (3e6)2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 4.7e5 (2e5)9.0e5 (7e5)2.0e6 (2e6)3.6e6 (4e6)6.9e6 (8e6)5.9e7 (8e7)4e60/15
fmincon Hellwig 5460 (1665)1.2e4 (4466)1.7e4 (1e4)2.0e4 (2e4)2.2e4 (2e4)2.9e4 (4e4)5.3e4 (6e4)7/15

Δ fopt
f33, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 7.0e4 (3e4)8.4e4 (3e4)9.4e4 (3e4)1.0e5 (4e4)1.1e5 (4e4)1.2e5 (4e4)2.9e5 (6e4)14/15
AL2-CMA-ES Dufosse 5.5e4 (2e4)6.4e4 (2e4)7.2e4 (2e4)8.7e4 (4e4)1.3e5 (1e5)4.9e5 (4e5)3.2e6 (3e6)7/15
AL3-CMA-ES Dufosse 1.1e5 (7e4)1.3e5 (9e4)1.5e5 (1e5)1.7e5 (1e5)2.0e5 (1e5)2.7e5 (2e5)2.8e5 (2e5)15/15
AL4-CMA-ES Dufosse 9.0e4 (5e4)1.1e5 (5e4)1.2e5 (7e4)1.4e5 (7e4)1.6e5 (1e5)1.8e5 (1e5)1.9e5 (1e5)15/15
BPepsMAg Hellwig 1.3e6 (2e6)2.2e6 (3e6)3.1e6 (4e6)3.9e7 (3e7)4.0e7 (6e7)3e60/15
COBYLA Dufosse 951 (254)★33832 (4032)5.5e4 (1e5)9.1e5 (1e6)2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 7.3e5 (7e5)1.6e6 (2e6)3.2e6 (3e6)6.3e6 (8e6)2.7e7 (4e7)4e60/15
fmincon Hellwig 3872 (2219)5631 (2892)8369 (2879)1.0e4 (4647)★31.4e4 (8834)★33.2e4 (2e4)★31.1e5 (1e5)★32/15

Δ fopt
f34, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.0e5 (7e4)2.3e5 (7e4)2.7e5 (7e4)2.9e5 (7e4)3.0e5 (7e4)2.8e7 (2e7)2e60/15
AL2-CMA-ES Dufosse 1.3e5 (3e4)1.5e5 (4e4)1.7e5 (5e4)1.3e6 (1e6)8.4e6 (9e6)2e60/15
AL3-CMA-ES Dufosse 2.3e5 (8e4)3.0e5 (1e5)3.6e5 (1e5)4.3e5 (1e5)4.9e5 (1e5)5.7e5 (2e5)6.5e5 (3e5)15/15
AL4-CMA-ES Dufosse 2.1e5 (6e4)2.8e5 (7e4)3.3e5 (7e4)3.8e5 (7e4)4.2e5 (6e4)4.8e5 (8e4)6.4e5 (3e5)15/15
BPepsMAg Hellwig 3.2e5 (8e4)6.0e5 (1e5)1.0e6 (2e5)1.6e6 (4e5)6.4e6 (4e6)3e60/15
COBYLA Dufosse 836 (118)★31111 (124)★31568 (343)★33629 (4057)1.1e5 (2e5)2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 8.2e5 (2e5)1.6e6 (7e5)2.4e6 (5e5)3.2e6 (4e5)2.0e7 (2e7)4e60/15
fmincon Hellwig 8884 (4661)9174 (5008)9432 (4955)9551 (4808)9802 (4890)5.1e4 (7e4)94210/15

Δ fopt
f35, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2.9e5 (9e4)3.3e5 (9e4)3.8e5 (9e4)4.0e5 (9e4)4.1e5 (9e4)2e60/15
AL2-CMA-ES Dufosse 2.2e5 (5e4)2.3e5 (6e4)4.9e5 (4e5)1.3e7 (2e7)2.8e7 (4e7)2e60/15
AL3-CMA-ES Dufosse 3.3e5 (1e5)4.0e5 (1e5)4.3e5 (1e5)4.6e5 (2e5)4.9e5 (2e5)5.2e5 (1e5)6.3e6 (5e6)4/15
AL4-CMA-ES Dufosse 3.2e5 (1e5)3.8e5 (1e5)4.1e5 (1e5)4.4e5 (1e5)4.6e5 (1e5)5.0e5 (1e5)2.2e6 (3e6)10/15
BPepsMAg Hellwig 4.2e5 (9e4)7.6e5 (1e5)1.1e6 (2e5)1.3e6 (4e5)1.5e6 (4e5)1.8e6 (5e5)2.0e6 (4e5)15/15
COBYLA Dufosse 530 (85)★3640 (94)★3699 (105)★3798 (128)★3865 (89)★31045 (129)★31113 (115)★315/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 1.2e6 (4e5)1.7e6 (3e5)2.1e6 (6e5)2.5e6 (1e6)2.9e6 (2e6)3.3e6 (2e6)3.3e6 (2e6)13/15
fmincon Hellwig 1.4e4 (1e4)1.5e4 (1e4)1.5e4 (1e4)1.5e4 (1e4)1.5e4 (1e4)2.8e4 (3e4)1.1e5 (1e5)2/15

Δ fopt
f36, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 4.0e5 (1e5)4.1e5 (1e5)4.3e5 (1e5)4.5e5 (1e5)4.7e5 (1e5)4.2e6 (6e6)2e60/15
AL2-CMA-ES Dufosse 2.2e5 (1e5)2.3e5 (1e5)2.4e5 (1e5)2.5e5 (1e5)2.5e5 (1e5)2.7e5 (1e5)4.9e6 (4e6)5/15
AL3-CMA-ES Dufosse 3.2e5 (2e5)3.3e5 (1e5)3.5e5 (1e5)3.7e5 (1e5)3.9e5 (1e5)5.9e6 (8e6)2e60/15
AL4-CMA-ES Dufosse 3.2e5 (1e5)3.3e5 (1e5)3.4e5 (1e5)3.7e5 (1e5)3.9e5 (1e5)3.5e6 (3e6)2e60/15
BPepsMAg Hellwig 1.5e5 (3e4)1.9e5 (3e4)2.2e5 (4e4)2.6e5 (4e4)2.9e5 (4e4)3.7e5 (6e4)4.0e5 (7e4)15/15
COBYLA Dufosse 396 (266)533 (71)★3591 (83)★3693 (101)★3766 (72)★3949 (125)★31022 (93)★315/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 5.1e5 (4e5)6.7e5 (1e5)7.2e5 (1e5)7.8e5 (9e4)8.3e5 (9e4)9.3e5 (1e5)1.0e6 (1e5)15/15
fmincon Hellwig 2.0e4 (2e4)2.0e4 (2e4)2.0e4 (2e4)2.0e4 (2e4)2.0e4 (2e4)3.5e4 (4e4)1e40/15

Δ fopt
f37, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.2e4 (1415)1.7e4 (2715)2.6e4 (2893)3.4e4 (5292)4.2e4 (6614)6.2e4 (6395)7.6e4 (8462)15/15
AL2-CMA-ES Dufosse 1.2e4 (1401)1.7e4 (1856)2.5e4 (2439)3.1e4 (3006)3.8e4 (3199)5.6e4 (4181)6.9e4 (5736)15/15
AL3-CMA-ES Dufosse 1.2e4 (1433)1.7e4 (2116)2.7e4 (3214)3.6e4 (4980)4.5e4 (6473)6.5e4 (9076)7.9e4 (9818)15/15
AL4-CMA-ES Dufosse 1.1e4 (1504)1.7e4 (1989)2.6e4 (2401)3.4e4 (3797)4.3e4 (4185)6.4e4 (5782)7.6e4 (7001)15/15
BPepsMAg Hellwig 8206 (925)1.5e4 (2219)3.2e4 (3431)5.8e4 (4046)8.8e4 (6148)1.6e5 (8446)2.0e5 (6774)15/15
COBYLA Dufosse 688 (181)★31565 (288)★32e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 1.6e4 (2962)2.9e4 (3020)5.3e4 (7469)3.9e5 (3e5)6.1e5 (2e5)7.2e5 (2e5)7.7e5 (2e5)15/15
fmincon Hellwig 1601 (401)3178 (1197)5185 (910)★36148 (549)★36618 (595)★31.2e4 (4351)★37.4e4 (6e4)5/15

Δ fopt
f38, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.8e4 (3195)2.5e4 (4477)3.3e4 (5156)4.1e4 (5634)5.0e4 (7537)7.9e4 (7294)1.0e5 (2e4)15/15
AL2-CMA-ES Dufosse 1.8e4 (3998)2.5e4 (4546)5.1e4 (2e4)6.2e4 (4e4)8.1e4 (3e4)1.4e5 (9e4)8.1e5 (1e6)13/15
AL3-CMA-ES Dufosse 1.8e4 (3924)2.6e4 (4971)3.5e4 (4432)4.3e4 (6163)5.2e4 (5879)7.7e4 (8939)9.3e4 (9459)15/15
AL4-CMA-ES Dufosse 1.8e4 (3742)2.6e4 (4007)3.5e4 (4847)4.3e4 (5349)5.1e4 (7461)7.7e4 (1e4)9.4e4 (1e4)15/15
BPepsMAg Hellwig 2.4e4 (1e4)4.5e4 (2e4)7.4e4 (2e4)1.6e5 (3e4)2.2e5 (2e5)3.7e5 (3e5)4.3e5 (3e5)15/15
COBYLA Dufosse 733 (144)★31634 (255)★32e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 2.3e4 (3490)1.1e5 (1e5)2.4e5 (2e5)5.8e5 (3e4)6.7e5 (3e4)8.0e5 (4e4)8.7e5 (3e4)15/15
fmincon Hellwig 2191 (506)4380 (1339)5976 (850)★36873 (1066)★37991 (1172)★33.7e4 (2e4)★33.7e5 (4e5)1/15

Δ fopt
f39, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 3.1e4 (2e4)4.1e4 (1e4)5.4e4 (1e4)6.9e4 (2e4)8.3e4 (2e4)1.4e5 (2e4)3.2e6 (3e6)6/15
AL2-CMA-ES Dufosse 2.6e4 (7578)3.8e4 (1e4)9.3e4 (3e4)1.8e5 (1e5)5.2e5 (3e5)2.4e6 (2e6)2.9e7 (4e7)1/15
AL3-CMA-ES Dufosse 3.0e4 (1e4)4.1e4 (1e4)5.6e4 (2e4)7.2e4 (1e4)8.7e4 (2e4)1.3e5 (2e4)1.6e5 (2e4)15/15
AL4-CMA-ES Dufosse 2.9e4 (8740)4.1e4 (9025)5.4e4 (9485)6.9e4 (7786)8.5e4 (9433)1.3e5 (1e4)1.6e5 (1e4)15/15
BPepsMAg Hellwig 3.8e4 (2e4)9.7e4 (9e4)3.8e5 (3e5)1.3e6 (1e6)1.8e6 (2e6)3.7e6 (5e6)6.9e6 (1e7)5/15
COBYLA Dufosse 733 (127)★31781 (260)★32e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 1.2e5 (2e5)3.5e5 (1e5)5.9e5 (1e5)1.0e6 (7e5)1.2e6 (7e5)2.4e6 (2e6)4.2e6 (4e6)9/15
fmincon Hellwig 3650 (1576)5669 (933)7223 (999)★38082 (1037)★39588 (1279)★36.9e4 (8e4)★33e40/15

Δ fopt
f40, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 7.8e4 (4e4)1.3e5 (7e4)1.6e5 (7e4)2.2e5 (7e4)2.6e5 (6e4)5.8e6 (8e6)2e60/15
AL2-CMA-ES Dufosse 5.8e4 (1e4)4.4e5 (1e6)2.4e6 (2e6)4.9e6 (6e6)2.9e7 (2e7)2e60/15
AL3-CMA-ES Dufosse 9.4e4 (3e4)1.4e5 (4e4)1.8e5 (4e4)2.4e5 (6e4)2.9e5 (6e4)3.4e5 (6e4)1.5e6 (1e6)11/15
AL4-CMA-ES Dufosse 8.9e4 (3e4)1.3e5 (5e4)1.7e5 (5e4)2.2e5 (5e4)2.6e5 (6e4)3.1e5 (5e4)6.0e6 (8e6)4/15
BPepsMAg Hellwig 4.2e4 (1e4)1.0e5 (2e4)2.1e5 (5e4)3.9e5 (9e4)6.2e5 (1e5)8.6e6 (1e7)3e60/15
COBYLA Dufosse 659 (73)★31673 (250)★32.9e6 (3e6)2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 4.2e5 (4e5)7.3e5 (4e5)9.7e5 (3e5)1.5e6 (5e5)2.2e6 (1e6)6.8e6 (5e6)4e60/15
fmincon Hellwig 4594 (659)5823 (687)8079 (870)★39107 (1002)★39888 (1208)★37.3e4 (1e5)★32.2e5 (2e5)★31/15

Δ fopt
f41, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.2e5 (6e4)2.0e5 (7e4)2.5e5 (8e4)3.3e5 (1e5)3.5e5 (1e5)2e60/15
AL2-CMA-ES Dufosse 1.0e5 (4e4)1.5e5 (6e4)7.8e5 (2e6)8.3e6 (1e7)2e60/15
AL3-CMA-ES Dufosse 1.2e5 (4e4)1.9e5 (6e4)2.5e5 (7e4)3.1e5 (9e4)3.7e5 (1e5)5.2e5 (2e5)2e60/15
AL4-CMA-ES Dufosse 1.1e5 (3e4)1.9e5 (5e4)2.5e5 (7e4)3.2e5 (8e4)3.6e5 (1e5)7.4e5 (8e5)1.5e7 (2e7)2/15
BPepsMAg Hellwig 5.0e4 (2e4)1.3e5 (3e4)2.7e5 (6e4)4.7e5 (9e4)6.5e5 (1e5)9.6e5 (2e5)1.1e6 (1e5)15/15
COBYLA Dufosse 509 (97)★31179 (222)★35.4e4 (1e5)6.3e5 (7e5)2.9e6 (3e6)2.9e6 (4e6)2.9e6 (3e6)1/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 3.2e5 (2e5)7.6e5 (2e5)9.8e5 (3e5)1.3e6 (4e5)1.7e6 (6e5)2.8e6 (4e5)3.3e6 (4e5)15/15
fmincon Hellwig 3535 (984)4600 (1153)5767 (1357)6199 (1234)★27169 (1271)★33.6e4 (2e4)★372240/15

Δ fopt
f42, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 1.9e5 (9e4)2.3e5 (8e4)2.5e5 (9e4)2.7e5 (9e4)2.9e5 (1e5)2.1e6 (2e6)3.0e7 (3e7)1/15
AL2-CMA-ES Dufosse 1.5e5 (5e4)1.7e5 (6e4)1.8e5 (6e4)1.9e5 (6e4)2.0e5 (6e4)2.1e5 (6e4)1.6e6 (2e6)9/15
AL3-CMA-ES Dufosse 2.0e5 (9e4)2.3e5 (1e5)2.4e5 (1e5)2.7e5 (1e5)3.0e5 (1e5)2.7e6 (2e6)2e60/15
AL4-CMA-ES Dufosse 1.9e5 (1e5)2.1e5 (1e5)2.3e5 (1e5)2.6e5 (1e5)2.8e5 (1e5)2.4e6 (3e6)2e60/15
BPepsMAg Hellwig 6.8e4 (9510)1.1e5 (2e4)1.4e5 (2e4)1.8e5 (3e4)2.2e5 (3e4)2.9e5 (4e4)3.2e5 (5e4)15/15
COBYLA Dufosse 189 (30)★3196 (40)★3196 (40)★3227 (135)★3265 (144)★3350 (212)★3350 (212)★315/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 6.9e5 (1e5)7.4e5 (1e5)8.0e5 (1e5)8.5e5 (1e5)9.0e5 (1e5)1.0e6 (1e5)1.1e6 (1e5)15/15
fmincon Hellwig 6207 (3608)6623 (3527)6847 (3445)7153 (3240)9194 (4329)5.7e4 (6e4)65590/15

Δ fopt
f43, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2e60/15
AL2-CMA-ES Dufosse 2e60/15
AL3-CMA-ES Dufosse 2e60/15
AL4-CMA-ES Dufosse 2e60/15
BPepsMAg Hellwig 3e60/15
COBYLA Dufosse 2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 4e60/15
fmincon Hellwig 71820/15

Δ fopt
f44, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2e60/15
AL2-CMA-ES Dufosse 2e60/15
AL3-CMA-ES Dufosse 2e60/15
AL4-CMA-ES Dufosse 2e60/15
BPepsMAg Hellwig 3e60/15
COBYLA Dufosse 2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 4e60/15
fmincon Hellwig 2e40/15

Δ fopt
f45, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2e60/15
AL2-CMA-ES Dufosse 2e60/15
AL3-CMA-ES Dufosse 2e60/15
AL4-CMA-ES Dufosse 2e60/15
BPepsMAg Hellwig 3e60/15
COBYLA Dufosse 2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 4e60/15
fmincon Hellwig 2e40/15

Δ fopt
f46, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2e60/15
AL2-CMA-ES Dufosse 2e60/15
AL3-CMA-ES Dufosse 2e60/15
AL4-CMA-ES Dufosse 2e60/15
BPepsMAg Hellwig 3e60/15
COBYLA Dufosse 2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 4e60/15
fmincon Hellwig 2e40/15

Δ fopt
f47, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2e60/15
AL2-CMA-ES Dufosse 2e60/15
AL3-CMA-ES Dufosse 2e60/15
AL4-CMA-ES Dufosse 2e60/15
BPepsMAg Hellwig 3e60/15
COBYLA Dufosse 2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 4e60/15
fmincon Hellwig 4e40/15

Δ fopt
f48, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2e60/15
AL2-CMA-ES Dufosse 2e60/15
AL3-CMA-ES Dufosse 2e60/15
AL4-CMA-ES Dufosse 2e60/15
BPepsMAg Hellwig 3e60/15
COBYLA Dufosse 2450 (2056)★32538 (2054)★32642 (2048)★32727 (2046)★32833 (2056)★33041 (2074)★34753 (5748)★315/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 4e60/15
fmincon Hellwig 9e40/15

Δ fopt
f49, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2e60/15
AL2-CMA-ES Dufosse 2e60/15
AL3-CMA-ES Dufosse 2e60/15
AL4-CMA-ES Dufosse 2e60/15
BPepsMAg Hellwig 3e60/15
COBYLA Dufosse 2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 4e60/15
fmincon Hellwig 81140/15

Δ fopt
f50, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2e60/15
AL2-CMA-ES Dufosse 2.9e7 (3e7)2e60/15
AL3-CMA-ES Dufosse 2e60/15
AL4-CMA-ES Dufosse 2e60/15
BPepsMAg Hellwig 3e60/15
COBYLA Dufosse 2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 4e60/15
fmincon Hellwig 1e40/15

Δ fopt
f51, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2e60/15
AL2-CMA-ES Dufosse 2e60/15
AL3-CMA-ES Dufosse 2e60/15
AL4-CMA-ES Dufosse 2e60/15
BPepsMAg Hellwig 3e60/15
COBYLA Dufosse 2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 4e60/15
fmincon Hellwig 1e40/15

Δ fopt
f52, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2e60/15
AL2-CMA-ES Dufosse 2e60/15
AL3-CMA-ES Dufosse 2e60/15
AL4-CMA-ES Dufosse 2e60/15
BPepsMAg Hellwig 3e60/15
COBYLA Dufosse 2.9e6 (3e6)2.9e6 (2e6)2.9e6 (4e6)2.9e6 (2e6)2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 5.6e7 (6e7)5.6e7 (5e7)5.6e7 (5e7)5.6e7 (5e7)4e60/15
fmincon Hellwig 2e40/15

Δ fopt
f53, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2e60/15
AL2-CMA-ES Dufosse 2e60/15
AL3-CMA-ES Dufosse 2e60/15
AL4-CMA-ES Dufosse 2e60/15
BPepsMAg Hellwig 3e60/15
COBYLA Dufosse 2e50/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 4e60/15
fmincon Hellwig 4e40/15

Δ fopt
f54, 40-D
1e1
 
1e0
 
1e-1
 
1e-2
 
1e-3
 
1e-5
 
1e-6
 
#succ
 
AL1-CMA-ES Dufosse 2e60/15
AL2-CMA-ES Dufosse 2e60/15
AL3-CMA-ES Dufosse 2e60/15
AL4-CMA-ES Dufosse 2e60/15
BPepsMAg Hellwig 3e60/15
COBYLA Dufosse 4.6e4 (1e5)★24.6e4 (1e5)★34.6e4 (1e5)★34.7e4 (1e5)★34.7e4 (1e5)★34.7e4 (1e5)★36.6e4 (1e5)★313/15
RandomSearch-5 Dufosse 8e60/15
epsMAg Hellwig 5.6e7 (7e7)4e60/15
fmincon Hellwig 9e40/15

Expected runtime (ERT) to reach given targets, measured in number of evaluations, in different dimensions. For each function, the ERT  and, in braces as dispersion measure, the half difference between 10 and 90%-tile of (bootstrapped) runtimes is shown for the different target precision values as shown in the top row. #succ is the number of trials that reached the last target fopt+ 10−6. The median number of conducted function evaluations is additionally given in italics, if the target in the last column was never reached. Entries, succeeded by a star, are statistically significantly better (according to the rank-sum test) when compared to all other algorithms of the table, with p = 0.05 or p = 10−k when the number k following the star is larger than 1, with Bonferroni correction by the number of functions (54). Best results are printed in bold.