Overview page

Table showing the aRT in number of function evaluations divided by the best aRT measured during BBOB-2009

Last dimension | Dimension = 2 | Next dimension

Δ fopt
f1, 2-D		 1e1
2.0		 1e0
6.0		 1e-1
6.0		 1e-2
6.0		 1e-3
6.0		 1e-5
6.0		 1e-7
6.0		 #succ
15/15
BrentSTEPif-Posik 1.3 (0.9)1.4 (0.8)1.7 (0.2)1.8 (0.2)1.8 (0.2)1.8 (0.2)1.8 (0.2)15/15
BrentSTEPifeg-Posik 1.3 (0.9)1.4 (0.8)1.7 (0.2)1.8 (0.2)1.8 (0.2)1.8 (0.2)1.8 (0.3)15/15
BrentSTEPqi-Posik 1.3 (0.9)1.4 (0.8)1.7 (0.2)1.8 (0.2)1.8 (0.1)1.8 (0.2)1.8 (0.2)15/15
BrentSTEPrr-Posik 1.3 (1)1.4 (0.2)1.7 (0.3)1.8 (0.2)1.8 (0.2)1.8 (0.2)1.8 (0.2)15/15
CMA-CSA-Atamna 2.4 (2)2.6 (2)8.7 (4)14 (3)18 (6)27 (7)38 (5)15/15
CMA-MSR-Atamna 3.1 (2)3.2 (3)10 (6)18 (9)30 (7)45 (8)65 (5)15/15
CMA-TPA-Atamna 2.7 (2)5.4 (4)9.4 (4)14 (12)20 (9)32 (17)39 (16)15/15
GP1-CMAES-Bajer-2013instances 1.6 (3)2.6 (3)5.4 (2)7.2 (3)10 (4)14 (3)21 (3)15/15
GP1-CMAES-Bajer 2.0 (2)2.0 (1)6.0 (3)8.2 (2)11 (2)16 (2)22 (5)15/15
GP5-CMAES-Bajer-2013instances 2.5 (2)1.8 (0.5)2.6 (0.5)4.0 (2)4.3 (4)6.5 (4)13 (10)15/15
GP5-CMAES-Bajer 2.7 (2)1.8 (0.9)3.0 (2)4.0 (0.9)5.0 (1)6.5 (1)16 (4)15/15
IPOPCMAv3p61-Bajer-2013instances 4.0 (4)3.8 (4)9.2 (7)14 (7)19 (5)29 (5)40 (5)15/15
IPOPCMAv3p61-Bajer 2.6 (3)4.1 (3)9.3 (6)14 (6)19 (4)27 (6)39 (6)15/15
LHD-10xDefault-MATSuMoTo-Brockhoff 2.3 (2)4.1 (3)10 (0)10 (0.4)12 (0.4)46 (33)∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.1 (1)2.1 (0.3)2.8 (1)3.8 (1)5.1 (1)34 (17)∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.6 (3)2.1 (0.2)2.9 (0.8)4.2 (0.8)5.2 (0.8)43 (14)∞1000/15
RF1-CMAES-Bajer-2013instances 2.9 (2)3.4 (3)6.2 (3)8.9 (3)16 (7)35 (21)64 (66)10/15
RF1-CMAES-Bajer 2.8 (3)3.0 (4)7.1 (3)11 (2)16 (8)37 (11)59 (16)12/15
RF5-CMAES-Bajer-2013instances 2.8 (4)14 (16)39 (93)93 (149)120 (101)1207 (1009)1261 (2230)0/15
RF5-CMAES-Bajer 23 (8)21 (32)49 (51)192 (98)1263 (1402)∞∞5060/15
STEPif-Posik 1.3 (1)1.5 (0.6)2.1 (0.2)3.2 (0.7)3.7 (0.6)5.0 (0.8)5.9 (0.3)15/15
STEPifeg-Posik 1.3 (1)1.5 (0.6)2.1 (0.2)3.0 (0.4)3.5 (0.4)5.0 (0.6)5.9 (0.6)15/15
STEPrr-Posik 1.3 (1)1.5 (0.6)2.1 (0.2)2.8 (0.1)3.3 (0.2)4.4 (0.3)5.5 (0.2)15/15

Δ fopt
f2, 2-D		 1e1
16		 1e0
19		 1e-1
25		 1e-2
25		 1e-3
26		 1e-5
28		 1e-7
29		 #succ
15/15
BrentSTEPif-Posik 1.3 (0.4)1.2 (0.4)1.0 (0.3)1.0 (0.2)1.0 (0.2)1.1 (0.3)1.2 (0.2)15/15
BrentSTEPifeg-Posik 1.2 (0.2)1.2 (0.4)1.0 (0.3)1.1 (0.3)1.0 (0.2)1.1 (0.2)1.2 (0.2)15/15
BrentSTEPqi-Posik 1.1 (0.2)0.98 (0.2)0.81 (0.1)0.83 (0.1)0.87 (0.1)0.92 (0.1)1.1 (0.2)15/15
BrentSTEPrr-Posik 1.2 (0.4)1.2 (0.3)1.0 (0.3)1.1 (0.2)1.1 (0.3)1.1 (0.2)1.3 (0.3)15/15
CMA-CSA-Atamna 12 (6)15 (5)13 (3)15 (3)15 (4)16 (2)18 (2)15/15
CMA-MSR-Atamna 16 (8)17 (5)14 (2)16 (4)18 (3)20 (3)23 (3)15/15
CMA-TPA-Atamna 10 (6)12 (6)11 (2)13 (3)14 (3)15 (1)17 (2)15/15
GP1-CMAES-Bajer-2013instances 9.0 (8)13 (5)12 (3)12 (2)13 (3)15 (2)17 (6)12/15
GP1-CMAES-Bajer 10 (7)12 (3)10 (2)12 (5)12 (3)13 (4)14 (2)13/15
GP5-CMAES-Bajer-2013instances 4.3 (1)5.3 (2)4.5 (2)5.0 (2)5.3 (1)5.3 (1)6.9 (2)14/15
GP5-CMAES-Bajer 3.9 (3)6.2 (1)5.2 (2)6.0 (1)6.1 (1)6.5 (2)7.4 (2)14/15
IPOPCMAv3p61-Bajer-2013instances 12 (8)18 (11)20 (12)25 (11)31 (34)67 (50)∞5060/15
IPOPCMAv3p61-Bajer 9.5 (6)17 (8)18 (4)26 (16)35 (16)134 (73)∞5060/15
LHD-10xDefault-MATSuMoTo-Brockhoff 30 (36)∞∞∞∞∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 15 (11)∞∞∞∞∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 16 (22)∞∞∞∞∞∞1000/15
RF1-CMAES-Bajer-2013instances 30 (20)180 (80)291 (541)292 (339)∞∞∞5060/15
RF1-CMAES-Bajer 35 (42)378 (393)∞∞∞∞∞5060/15
RF5-CMAES-Bajer-2013instances 36 (48)114 (142)∞∞∞∞∞5020/15
RF5-CMAES-Bajer 72 (56)395 (398)∞∞∞∞∞5020/15
STEPif-Posik 1.6 (0.4)1.5 (0.5)1.3 (0.2)1.4 (0.2)1.4 (0.2)1.6 (0.3)1.7 (0.2)15/15
STEPifeg-Posik 1.6 (0.3)1.5 (0.4)1.3 (0.2)1.4 (0.3)1.4 (0.2)1.6 (0.2)1.7 (0.3)15/15
STEPrr-Posik 1.5 (0.2)1.4 (0.2)1.3 (0.2)1.4 (0.1)1.4 (0.2)1.6 (0.2)1.8 (0.4)15/15

Δ fopt
f3, 2-D		 1e1
15		 1e0
271		 1e-1
445		 1e-2
446		 1e-3
450		 1e-5
454		 1e-7
464		 #succ
15/15
BrentSTEPif-Posik 0.96 (0.6)0.19 (0.1)0.21 (0.2)0.21 (0.1)0.21 (0.1)0.22 (0.1)0.21 (0.2)15/15
BrentSTEPifeg-Posik 0.99 (0.7)0.19 (0.1)0.21 (0.2)0.21 (0.1)0.22 (0.1)0.22 (0.1)0.22 (0.1)15/15
BrentSTEPqi-Posik 0.94 (0.3)0.19 (0.1)0.20 (0.1)0.20 (0.1)0.20 (0.1)0.20 (0.1)0.20 (0.1)15/15
BrentSTEPrr-Posik 0.98 (0.2)0.18 (0.1)0.19 (0.1)0.20 (0.1)0.20 (0.1)0.21 (0.1)0.21 (0.1)15/15
CMA-CSA-Atamna 2.5 (2)2.7 (3)4.4 (2)4.9 (7)5.0 (5)5.2 (5)5.4 (7)15/15
CMA-MSR-Atamna 3.6 (4)3.8 (6)4.4 (7)6.0 (10)6.3 (11)6.7 (12)7.1 (15)15/15
CMA-TPA-Atamna 7.0 (14)4.7 (2)10 (11)10 (15)10 (6)11 (15)11 (9)15/15
GP1-CMAES-Bajer-2013instances 2.4 (2)2.9 (2)5.3 (5)5.4 (2)5.4 (3)8.2 (14)16 (17)1/15
GP1-CMAES-Bajer 3.1 (1)1.6 (2)5.0 (6)5.1 (11)5.1 (5)5.1 (3)5.1 (6)3/15
GP5-CMAES-Bajer-2013instances 5.0 (9)2.3 (3)∞∞∞∞∞5080/15
GP5-CMAES-Bajer 4.3 (8)3.0 (2)5.0 (3)7.5 (14)7.5 (11)7.4 (9)7.5 (12)1/15
IPOPCMAv3p61-Bajer-2013instances 2.9 (2)1.9 (2)3.5 (5)3.6 (3)3.6 (3)3.7 (5)3.8 (4)4/15
IPOPCMAv3p61-Bajer 3.5 (3)2.2 (2)16 (16)16 (30)16 (23)16 (13)16 (30)1/15
LHD-10xDefault-MATSuMoTo-Brockhoff 3.7 (3)5.4 (3)3.4 (4)∞∞∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.5 (0.7)0.73 (1)1.6 (3)∞∞∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.3 (2)1.6 (2)1.6 (2)3.3 (3)∞∞∞1000/15
RF1-CMAES-Bajer-2013instances 11 (18)13 (13)∞∞∞∞∞5060/15
RF1-CMAES-Bajer 5.6 (10)2.6 (5)2.6 (4)2.9 (4)3.8 (8)8.0 (5)8.1 (10)2/15
RF5-CMAES-Bajer-2013instances 17 (23)13 (25)∞∞∞∞∞5060/15
RF5-CMAES-Bajer 25 (42)26 (11)∞∞∞∞∞5080/15
STEPif-Posik 1.3 (0.7)0.24 (0.1)0.21 (0.1)0.22 (0.1)0.24 (0.0)0.25 (0.1)0.25 (0.0)15/15
STEPifeg-Posik 1.3 (0.8)0.23 (0.1)0.20 (0.0)0.21 (0.1)0.24 (0.0)0.25 (0.0)0.26 (0.0)15/15
STEPrr-Posik 1.3 (0.6)0.19 (0.1)0.18 (0.1)0.19 (0.1)0.22 (0.1)0.24 (0.1)0.26 (0.1)15/15

Δ fopt
f4, 2-D		 1e1
22		 1e0
344		 1e-1
459		 1e-2
496		 1e-3
523		 1e-5
544		 1e-7
566		 #succ
15/15
BrentSTEPif-Posik 0.91 (0.3)0.17 (0.1)0.22 (0.1)0.21 (0.1)0.21 (0.1)0.22 (0.1)0.27 (0.1)15/15
BrentSTEPifeg-Posik 0.91 (0.4)0.17 (0.1)0.21 (0.1)0.20 (0.1)0.20 (0.1)0.22 (0.1)0.28 (0.1)15/15
BrentSTEPqi-Posik 0.98 (0.6)0.17 (0.1)0.22 (0.1)0.21 (0.1)0.20 (0.1)0.22 (0.1)0.27 (0.1)15/15
BrentSTEPrr-Posik 0.93 (0.6)0.18 (0.1)0.21 (0.1)0.21 (0.1)0.21 (0.1)0.24 (0.1)0.31 (0.1)15/15
CMA-CSA-Atamna 2.3 (2)5.6 (6)21 (13)66 (37)75 (151)77 (55)76 (55)14/15
CMA-MSR-Atamna 6.1 (3)9.3 (11)242 (248)533 (635)1633 (1541)2407 (2406)2314 (2484)2/15
CMA-TPA-Atamna 2.8 (3)6.2 (5)34 (20)110 (230)109 (306)134 (127)131 (130)12/15
GP1-CMAES-Bajer-2013instances 2.2 (1)3.5 (3)3.6 (6)3.4 (4)6.8 (12)14 (20)∞5060/15
GP1-CMAES-Bajer 3.7 (7)5.0 (5)∞∞∞∞∞5060/15
GP5-CMAES-Bajer-2013instances 6.4 (20)2.6 (6)∞∞∞∞∞5080/15
GP5-CMAES-Bajer 2.8 (4)3.4 (3)∞∞∞∞∞5020/15
IPOPCMAv3p61-Bajer-2013instances 2.8 (2)4.8 (8)16 (18)15 (15)14 (12)14 (19)∞5060/15
IPOPCMAv3p61-Bajer 2.0 (1)∞∞∞∞∞∞5060/15
LHD-10xDefault-MATSuMoTo-Brockhoff 2.7 (1)4.3 (2)3.2 (4)∞∞∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.8 (1)4.3 (6)∞∞∞∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.7 (1)∞∞∞∞∞∞1000/15
RF1-CMAES-Bajer-2013instances 3.3 (3)∞∞∞∞∞∞5060/15
RF1-CMAES-Bajer 2.9 (1)∞∞∞∞∞∞5060/15
RF5-CMAES-Bajer-2013instances 16 (23)21 (8)∞∞∞∞∞5040/15
RF5-CMAES-Bajer 19 (11)21 (25)∞∞∞∞∞5020/15
STEPif-Posik 0.94 (0.4)0.28 (0.1)0.39 (0.2)0.45 (0.1)0.55 (0.1)0.61 (0.1)0.71 (0.2)15/15
STEPifeg-Posik 0.95 (0.4)0.27 (0.1)0.38 (0.2)0.45 (0.1)0.55 (0.1)0.63 (0.2)0.73 (0.1)15/15
STEPrr-Posik 0.95 (0.4)0.24 (0.0)0.36 (0.1)0.44 (0.1)0.56 (0.2)0.68 (0.1)0.82 (0.2)15/15

Δ fopt
f5, 2-D		 1e1
4.0		 1e0
4.0		 1e-1
4.0		 1e-2
4.0		 1e-3
4.0		 1e-5
4.0		 1e-7
4.0		 #succ
15/15
BrentSTEPif-Posik 1.6 (0.2)1.6 (0.1)1.6 (0.1)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)15/15
BrentSTEPifeg-Posik 1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)15/15
BrentSTEPqi-Posik 1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)15/15
BrentSTEPrr-Posik 1.6 (0.1)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)15/15
CMA-CSA-Atamna 2.7 (2)5.0 (2)5.2 (4)5.2 (3)5.2 (5)5.2 (4)5.2 (3)15/15
CMA-MSR-Atamna 2.9 (1)6.3 (3)6.7 (3)6.8 (2)6.8 (2)6.8 (4)6.8 (4)15/15
CMA-TPA-Atamna 1.9 (2)3.9 (2)4.4 (2)4.4 (2)4.4 (2)4.4 (2)4.4 (2)15/15
GP1-CMAES-Bajer-2013instances 2.2 (1)7.6 (13)10 (12)10 (24)10 (13)10 (12)10 (13)15/15
GP1-CMAES-Bajer 2.0 (0.8)24 (34)37 (221)51 (64)51 (63)51 (129)51 (65)11/15
GP5-CMAES-Bajer-2013instances 1.8 (1)4.1 (2)4.6 (0.9)4.8 (2)4.8 (3)4.8 (2)4.8 (2)15/15
GP5-CMAES-Bajer 1.5 (0.8)3.5 (1)3.8 (3)3.8 (2)3.8 (2)3.8 (2)3.8 (3)15/15
IPOPCMAv3p61-Bajer-2013instances 4.1 (5)14 (18)14 (10)14 (18)14 (18)14 (20)14 (15)15/15
IPOPCMAv3p61-Bajer 2.7 (1)7.8 (7)9.2 (5)10 (10)10 (6)10 (7)10 (5)15/15
LHD-10xDefault-MATSuMoTo-Brockhoff 3.1 (3)16 (0.3)16 (0.6)16 (0.6)16 (0.6)16 (0.6)16 (0.6)15/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.3 (1)3.5 (0.4)3.6 (0.6)3.6 (0.6)3.6 (0.4)3.6 (0.6)3.6 (0.6)15/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.2 (1)3.4 (0.7)3.9 (0.9)4.0 (0.6)4.0 (0.6)4.0 (0.6)4.0 (0.6)15/15
RF1-CMAES-Bajer-2013instances 1.6 (2)22 (18)24 (10)24 (32)24 (32)24 (21)24 (22)15/15
RF1-CMAES-Bajer 2.1 (1)23 (43)24 (23)25 (43)25 (21)25 (23)25 (101)14/15
RF5-CMAES-Bajer-2013instances 2.8 (3)64 (90)66 (51)67 (107)67 (57)67 (163)67 (102)12/15
RF5-CMAES-Bajer 4.3 (2)105 (89)106 (114)106 (80)106 (85)106 (35)106 (108)10/15
STEPif-Posik 1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.1)15/15
STEPifeg-Posik 1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)15/15
STEPrr-Posik 1.6 (0.1)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)15/15

Δ fopt
f6, 2-D		 1e1
13		 1e0
23		 1e-1
41		 1e-2
54		 1e-3
67		 1e-5
95		 1e-7
124		 #succ
15/15
BrentSTEPif-Posik 296 (450)438 (1233)761 (1336)1181 (1061)∞∞∞2e40/15
BrentSTEPifeg-Posik 369 (589)412 (452)318 (489)536 (363)871 (1549)1390 (1108)2219 (2185)1/15
BrentSTEPqi-Posik 299 (185)341 (579)397 (413)398 (661)515 (848)1408 (691)2248 (2642)1/15
BrentSTEPrr-Posik 361 (676)400 (1565)319 (704)434 (233)686 (781)1400 (2855)2208 (3023)1/15
CMA-CSA-Atamna 3.6 (11)4.2 (1.0)3.9 (3)4.2 (1)4.1 (1)4.2 (1)4.1 (0.9)15/15
CMA-MSR-Atamna 3.0 (4)5.2 (1)4.8 (2)5.0 (2)5.3 (1)5.3 (1)5.3 (0.8)15/15
CMA-TPA-Atamna 1.6 (2)3.6 (3)3.8 (3)3.8 (1)3.8 (2)3.8 (2)3.9 (1)15/15
GP1-CMAES-Bajer-2013instances 3.4 (3)4.9 (1)7.7 (4)19 (24)112 (213)∞∞5060/15
GP1-CMAES-Bajer 3.1 (5)6.5 (2)10 (11)18 (27)35 (30)80 (123)∞5060/15
GP5-CMAES-Bajer-2013instances 2.6 (6)9.1 (4)17 (13)44 (38)∞∞∞5060/15
GP5-CMAES-Bajer 4.6 (1)6.2 (12)7.8 (15)23 (14)∞∞∞5060/15
IPOPCMAv3p61-Bajer-2013instances 3.1 (5)4.6 (2)3.8 (1)4.1 (1)4.2 (1)4.8 (2)12 (10)2/15
IPOPCMAv3p61-Bajer 2.5 (2)4.4 (3)4.2 (2)4.0 (2)4.3 (0.9)4.8 (0.6)5.7 (1)2/15
LHD-10xDefault-MATSuMoTo-Brockhoff 1.5 (1)8.9 (11)∞∞∞∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.0 (3)12 (10)∞∞∞∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.9 (2)6.3 (8)∞∞∞∞∞1000/15
RF1-CMAES-Bajer-2013instances 11 (19)66 (150)∞∞∞∞∞5060/15
RF1-CMAES-Bajer 8.7 (2)14 (16)182 (173)∞∞∞∞5060/15
RF5-CMAES-Bajer-2013instances 9.2 (7)40 (40)∞∞∞∞∞5080/15
RF5-CMAES-Bajer 16 (19)55 (50)108 (115)165 (219)∞∞∞5160/15
STEPif-Posik 345 (946)315 (414)395 (870)549 (859)1261 (2288)2856 (3353)∞2e40/15
STEPifeg-Posik 267 (562)269 (452)245 (375)315 (320)890 (336)2843 (3205)2212 (6593)1/15
STEPrr-Posik 261 (491)240 (184)246 (279)300 (188)506 (2009)1333 (1457)2159 (2025)1/15

Δ fopt
f7, 2-D		 1e1
3.0		 1e0
21		 1e-1
60		 1e-2
193		 1e-3
217		 1e-5
217		 1e-7
241		 #succ
15/15
BrentSTEPif-Posik 1.9 (2)479 (765)456 (836)713 (684)1295 (948)1295 (2220)1166 (1582)1/15
BrentSTEPifeg-Posik 1.9 (1)487 (526)1428 (2208)681 (621)1295 (671)1295 (1896)1166 (1291)1/15
BrentSTEPqi-Posik 1.9 (1)258 (598)550 (911)712 (624)1295 (971)1295 (1480)1166 (437)1/15
BrentSTEPrr-Posik 1.9 (1)566 (1171)574 (544)702 (338)1295 (1711)1295 (1110)1166 (1478)1/15
CMA-CSA-Atamna 4.2 (3)5.8 (7)3.0 (4)1.2 (1.0)1.3 (1)1.3 (0.9)1.5 (2)15/15
CMA-MSR-Atamna 4.7 (5)1.9 (2)2.4 (0.8)1.1 (0.9)1.2 (1)1.2 (0.3)1.3 (0.3)15/15
CMA-TPA-Atamna 4.0 (4)1.9 (2)1.9 (0.9)0.91 (0.5)0.88 (0.3)0.88 (0.3)1.0 (0.5)15/15
GP1-CMAES-Bajer-2013instances 4.5 (6)2.3 (2)1.8 (0.8)1.1 (1)1.1 (1)1.1 (1)1.4 (1)8/15
GP1-CMAES-Bajer 4.1 (2)1.8 (3)2.3 (1)0.97 (2)1.0 (1)1.0 (0.5)1.4 (0.6)11/15
GP5-CMAES-Bajer-2013instances 3.6 (2)2.2 (1)2.6 (1)1.1 (0.6)1.1 (2)1.1 (1)1.7 (2)8/15
GP5-CMAES-Bajer 2.6 (1)1.3 (2)1.8 (2)0.97 (1.0)1.2 (2)1.2 (2)1.8 (2)5/15
IPOPCMAv3p61-Bajer-2013instances 4.2 (6)4.6 (5)3.2 (3)1.8 (1)1.7 (2)1.7 (0.6)2.1 (2)9/15
IPOPCMAv3p61-Bajer 3.4 (4)2.1 (2)2.6 (2)1.6 (1)1.9 (2)1.9 (1)1.9 (2)9/15
LHD-10xDefault-MATSuMoTo-Brockhoff 8.2 (7)2.7 (1.0)4.8 (4)∞∞∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 3.2 (3)1.2 (1)1.6 (2)1.7 (2)2.1 (2)2.1 (2)2.9 (3)0/15
RAND-2xDefault-MATSuMoTo-Brockhoff 4.0 (2)1.5 (2)1.1 (0.8)1.3 (2)6.7 (10)6.7 (9)6.0 (4)0/15
RF1-CMAES-Bajer-2013instances 4.3 (4)4.2 (5)4.7 (4)2.2 (2)2.7 (3)2.7 (2)3.8 (6)4/15
RF1-CMAES-Bajer 2.3 (3)1.9 (2)2.8 (3)2.3 (2)2.9 (3)2.9 (2)4.4 (5)3/15
RF5-CMAES-Bajer-2013instances 4.1 (5)3.5 (7)12 (16)42 (40)∞∞∞5500/15
RF5-CMAES-Bajer 7.6 (24)7.9 (8)12 (10)13 (26)13 (7)13 (16)35 (66)0/15
STEPif-Posik 2.0 (1)325 (932)704 (351)719 (676)∞∞∞2e40/15
STEPifeg-Posik 2.0 (1)367 (956)970 (2107)692 (569)1369 (1295)1369 (2705)1233 (1020)1/15
STEPrr-Posik 2.0 (1)384 (741)570 (586)723 (317)∞∞∞2e40/15

Δ fopt
f8, 2-D		 1e1
5.0		 1e0
12		 1e-1
37		 1e-2
46		 1e-3
86		 1e-5
94		 1e-7
112		 #succ
15/15
BrentSTEPif-Posik 2.3 (0.9)275 (410)2237 (2551)5997 (3054)3208 (3485)∞∞2e40/15
BrentSTEPifeg-Posik 2.3 (0.7)309 (747)2210 (1394)∞∞∞∞2e40/15
BrentSTEPqi-Posik 2.3 (0.6)408 (1101)1522 (2843)5837 (5760)∞∞∞2e40/15
BrentSTEPrr-Posik 2.3 (0.5)308 (229)3314 (4701)5737 (8057)∞∞∞2e40/15
CMA-CSA-Atamna 8.2 (5)17 (26)9.0 (9)10 (7)5.8 (4)6.1 (3)5.5 (3)15/15
CMA-MSR-Atamna 4.0 (3)15 (14)8.6 (5)9.0 (6)5.2 (2)5.6 (2)5.6 (2)15/15
CMA-TPA-Atamna 5.6 (4)7.7 (7)5.3 (3)5.6 (3)3.6 (1)3.9 (1)4.0 (1.0)15/15
GP1-CMAES-Bajer-2013instances 5.1 (2)8.5 (2)7.0 (11)13 (25)10 (4)10 (7)16 (12)2/15
GP1-CMAES-Bajer 4.0 (3)11 (31)12 (11)12 (28)7.1 (11)8.5 (9)9.0 (2)6/15
GP5-CMAES-Bajer-2013instances 3.6 (2)11 (17)8.9 (8)10 (13)5.7 (2)6.7 (4)6.0 (6)9/15
GP5-CMAES-Bajer 3.9 (6)12 (7)7.7 (10)10 (11)7.4 (7)12 (14)14 (9)3/15
IPOPCMAv3p61-Bajer-2013instances 5.9 (4)10 (5)6.7 (8)8.1 (2)5.6 (5)9.0 (2)11 (8)3/15
IPOPCMAv3p61-Bajer 10 (11)10 (23)8.8 (9)11 (9)7.2 (3)12 (9)13 (13)4/15
LHD-10xDefault-MATSuMoTo-Brockhoff 6.5 (6)10 (14)20 (22)∞∞∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 3.7 (3)4.0 (1)4.4 (5)15 (8)17 (8)∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 4.1 (1)3.9 (1)19 (21)∞∞∞∞1000/15
RF1-CMAES-Bajer-2013instances 12 (27)13 (27)15 (30)48 (35)44 (37)∞∞5060/15
RF1-CMAES-Bajer 5.8 (7)29 (44)44 (203)164 (173)∞∞∞5060/15
RF5-CMAES-Bajer-2013instances 27 (19)74 (46)91 (145)∞∞∞∞5060/15
RF5-CMAES-Bajer 42 (101)90 (144)94 (78)∞∞∞∞5020/15
STEPif-Posik 2.7 (0.5)337 (488)1370 (1643)1757 (1623)2932 (1892)∞∞2e40/15
STEPifeg-Posik 2.6 (0.7)355 (1453)1067 (1288)1763 (2504)∞∞∞2e40/15
STEPrr-Posik 2.7 (0.8)266 (207)1800 (2074)5122 (7420)∞∞∞2e40/15

Δ fopt
f9, 2-D		 1e1
1		 1e0
18		 1e-1
30		 1e-2
44		 1e-3
68		 1e-5
81		 1e-7
92		 #succ
15/15
BrentSTEPif-Posik 50 (214)129 (390)445 (452)1439 (1293)1953 (2515)∞∞2e40/15
BrentSTEPifeg-Posik 76 (218)153 (515)311 (314)679 (576)1935 (1906)∞∞2e40/15
BrentSTEPqi-Posik 73 (179)104 (120)483 (690)2764 (3889)3852 (3511)3234 (4174)∞2e40/15
BrentSTEPrr-Posik 62 (6)140 (348)502 (819)1830 (834)3916 (5603)∞∞2e40/15
CMA-CSA-Atamna 30 (20)5.7 (11)8.4 (9)8.0 (5)5.9 (3)5.7 (3)5.8 (1)15/15
CMA-MSR-Atamna 26 (21)7.1 (12)10 (6)8.8 (4)6.2 (5)6.4 (4)6.5 (2)15/15
CMA-TPA-Atamna 26 (24)6.7 (3)8.2 (3)7.1 (6)5.6 (2)5.4 (4)5.7 (3)15/15
GP1-CMAES-Bajer-2013instances 29 (9)7.7 (21)14 (21)17 (14)19 (22)21 (6)26 (14)3/15
GP1-CMAES-Bajer 23 (23)6.6 (12)17 (18)19 (28)24 (34)28 (31)26 (41)3/15
GP5-CMAES-Bajer-2013instances 19 (11)3.4 (1)5.3 (5)5.9 (4)4.4 (3)5.1 (5)4.8 (4)10/15
GP5-CMAES-Bajer 23 (6)3.4 (4)10 (9)11 (12)9.0 (4)9.3 (16)11 (12)5/15
IPOPCMAv3p61-Bajer-2013instances 23 (18)3.4 (2)6.6 (5)8.1 (5)5.9 (3)6.5 (2)11 (6)7/15
IPOPCMAv3p61-Bajer 26 (33)3.5 (6)4.9 (7)6.9 (6)5.7 (3)8.9 (0.9)11 (14)6/15
LHD-10xDefault-MATSuMoTo-Brockhoff 25 (19)3.9 (3)49 (50)∞∞∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 15 (10)2.5 (0.8)5.1 (4)11 (10)∞∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 16 (7)2.3 (0.7)12 (14)11 (14)∞∞∞1000/15
RF1-CMAES-Bajer-2013instances 20 (21)19 (46)30 (26)83 (89)110 (184)∞∞5060/15
RF1-CMAES-Bajer 25 (30)5.2 (8)29 (55)39 (40)111 (84)∞∞5060/15
RF5-CMAES-Bajer-2013instances 172 (286)34 (24)113 (76)164 (185)∞∞∞5040/15
RF5-CMAES-Bajer 23 (20)21 (43)37 (27)162 (267)106 (106)∞∞5040/15
STEPif-Posik 16 (11)120 (468)442 (519)970 (650)3814 (3954)3228 (2073)∞2e40/15
STEPifeg-Posik 22 (18)66 (65)373 (333)1286 (1683)1781 (1261)3222 (7418)∞2e40/15
STEPrr-Posik 19 (21)79 (408)432 (525)5429 (1e4)3513 (2456)∞∞2e40/15

Δ fopt
f10, 2-D		 1e1
30		 1e0
46		 1e-1
54		 1e-2
61		 1e-3
68		 1e-5
82		 1e-7
98		 #succ
15/15
BrentSTEPif-Posik 71 (204)196 (301)1079 (1435)2032 (1466)1822 (1519)∞∞84440/15
BrentSTEPifeg-Posik 38 (46)197 (253)1906 (2784)∞∞∞∞58830/15
BrentSTEPqi-Posik 135 (219)464 (453)1528 (1090)∞∞∞∞1e40/15
BrentSTEPrr-Posik 46 (57)238 (185)540 (457)1618 (796)∞∞∞66810/15
CMA-CSA-Atamna 7.5 (4)6.5 (2)6.2 (1)6.0 (1)5.8 (0.8)5.6 (0.8)5.3 (1)15/15
CMA-MSR-Atamna 7.4 (4)6.1 (2)5.8 (2)6.3 (0.6)6.3 (1)6.5 (1)6.6 (1)15/15
CMA-TPA-Atamna 6.3 (3)5.6 (2)5.9 (2)6.0 (0.7)5.9 (1)5.5 (0.7)5.3 (1)15/15
GP1-CMAES-Bajer-2013instances 4.5 (3)4.6 (1)4.7 (3)4.5 (1)4.5 (1)4.7 (0.7)4.8 (2)12/15
GP1-CMAES-Bajer 4.8 (4)5.0 (2)5.3 (1)5.1 (1)4.9 (0.7)4.6 (0.7)5.4 (3)11/15
GP5-CMAES-Bajer-2013instances 1.6 (0.7)1.8 (1)2.0 (0.5)2.0 (0.3)1.9 (0.4)1.8 (0.2)1.9 (0.3)12/15
GP5-CMAES-Bajer 2.3 (2)2.4 (1)2.2 (0.6)2.2 (1)2.2 (1)2.0 (0.8)2.4 (3)10/15
IPOPCMAv3p61-Bajer-2013instances 8.3 (6)8.6 (6)11 (10)17 (13)18 (21)23 (26)∞5060/15
IPOPCMAv3p61-Bajer 7.0 (4)7.6 (9)8.9 (6)10 (8)11 (9)30 (36)77 (70)1/15
LHD-10xDefault-MATSuMoTo-Brockhoff 16 (11)33 (36)∞∞∞∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 6.9 (4)∞∞∞∞∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 10 (18)∞∞∞∞∞∞1000/15
RF1-CMAES-Bajer-2013instances 19 (27)34 (36)∞∞∞∞∞5060/15
RF1-CMAES-Bajer 8.1 (6)15 (22)40 (39)∞∞∞∞5060/15
RF5-CMAES-Bajer-2013instances 14 (25)77 (120)140 (117)∞∞∞∞5020/15
RF5-CMAES-Bajer 22 (39)163 (245)∞∞∞∞∞5080/15
STEPif-Posik 12 (17)94 (54)321 (322)612 (259)549 (912)∞∞21780/15
STEPifeg-Posik 8.5 (10)80 (75)110 (58)309 (173)278 (419)∞∞21590/15
STEPrr-Posik 7.8 (9)70 (28)223 (401)642 (1210)∞∞∞21930/15

Δ fopt
f11, 2-D		 1e1
35		 1e0
45		 1e-1
50		 1e-2
62		 1e-3
67		 1e-5
81		 1e-7
97		 #succ
15/15
BrentSTEPif-Posik 45 (109)240 (270)1904 (1774)1536 (805)1421 (1297)∞∞54300/15
BrentSTEPifeg-Posik 58 (63)209 (211)435 (234)1492 (1777)1381 (1513)∞∞69260/15
BrentSTEPqi-Posik 60 (144)196 (542)270 (197)546 (581)1606 (2643)∞∞59980/15
BrentSTEPrr-Posik 59 (19)302 (445)636 (644)1619 (1468)1498 (1550)∞∞60000/15
CMA-CSA-Atamna 5.0 (2)6.4 (4)6.7 (1.0)5.9 (0.7)6.0 (0.6)5.6 (1)5.3 (0.9)15/15
CMA-MSR-Atamna 5.1 (2)5.7 (2)6.4 (2)5.6 (1)6.1 (0.9)6.5 (1)6.7 (0.8)15/15
CMA-TPA-Atamna 5.4 (3)6.0 (1)6.2 (1)5.7 (1)5.7 (0.7)5.6 (0.5)5.2 (1)15/15
GP1-CMAES-Bajer-2013instances 4.4 (4)4.9 (3)5.8 (2)5.0 (1)4.9 (0.6)4.6 (0.6)4.7 (1)11/15
GP1-CMAES-Bajer 4.6 (2)5.1 (3)5.7 (0.7)5.0 (1)5.0 (0.3)4.9 (0.3)4.6 (0.7)14/15
GP5-CMAES-Bajer-2013instances 1.5 (0.8)2.2 (0.8)2.5 (0.2)2.1 (0.4)2.2 (0.5)2.0 (0.3)2.1 (1.0)13/15
GP5-CMAES-Bajer 2.0 (1)2.5 (0.3)2.4 (0.4)2.1 (0.4)2.1 (0.3)1.9 (0.3)2.1 (0.6)12/15
IPOPCMAv3p61-Bajer-2013instances 7.3 (4)10 (9)12 (11)11 (7)14 (10)47 (72)∞5060/15
IPOPCMAv3p61-Bajer 6.1 (5)11 (11)13 (13)16 (12)18 (34)46 (44)∞5060/15
LHD-10xDefault-MATSuMoTo-Brockhoff 42 (83)∞∞∞∞∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 21 (21)16 (28)∞∞∞∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 7.2 (5)10 (18)∞∞∞∞∞1000/15
RF1-CMAES-Bajer-2013instances 14 (12)36 (48)73 (74)∞∞∞∞5060/15
RF1-CMAES-Bajer 13 (19)79 (68)144 (121)∞∞∞∞5060/15
RF5-CMAES-Bajer-2013instances 8.8 (18)79 (138)∞∞∞∞∞5080/15
RF5-CMAES-Bajer 17 (23)50 (50)∞∞∞∞∞5040/15
STEPif-Posik 13 (29)40 (41)98 (78)184 (186)544 (264)∞∞24050/15
STEPifeg-Posik 22 (93)65 (57)225 (379)182 (330)265 (304)465 (169)∞23910/15
STEPrr-Posik 22 (33)89 (95)168 (102)585 (576)542 (339)∞∞23570/15

Δ fopt
f12, 2-D		 1e1
35		 1e0
46		 1e-1
75		 1e-2
94		 1e-3
105		 1e-5
153		 1e-7
195		 #succ
15/15
BrentSTEPif-Posik 78 (33)132 (373)192 (406)232 (270)352 (322)242 (332)190 (243)4/15
BrentSTEPifeg-Posik 94 (420)156 (116)218 (266)294 (398)283 (382)254 (445)199 (105)4/15
BrentSTEPqi-Posik 92 (100)132 (278)163 (181)248 (212)306 (240)305 (276)240 (444)3/15
BrentSTEPrr-Posik 62 (287)148 (260)161 (269)204 (227)313 (341)295 (865)231 (252)3/15
CMA-CSA-Atamna 8.0 (4)11 (11)9.0 (10)8.6 (9)8.4 (15)7.3 (3)6.2 (8)15/15
CMA-MSR-Atamna 8.9 (4)12 (23)8.7 (8)9.0 (5)9.0 (7)7.4 (0.8)6.7 (7)15/15
CMA-TPA-Atamna 5.2 (2)7.0 (7)6.9 (9)6.9 (5)6.8 (0.9)5.7 (8)5.4 (4)15/15
GP1-CMAES-Bajer-2013instances 6.3 (5)7.0 (5)6.5 (5)7.3 (6)11 (11)49 (55)39 (71)0/15
GP1-CMAES-Bajer 5.6 (8)6.5 (8)5.2 (3)5.1 (1)8.0 (8)16 (24)∞5060/15
GP5-CMAES-Bajer-2013instances 3.0 (2)7.5 (10)4.9 (5)6.5 (3)7.6 (11)11 (7)18 (26)2/15
GP5-CMAES-Bajer 7.0 (10)5.8 (5)5.9 (3)6.9 (13)9.2 (9)8.2 (15)6.9 (6)4/15
IPOPCMAv3p61-Bajer-2013instances 4.5 (5)7.4 (4)6.5 (3)7.9 (9)17 (21)25 (26)∞5060/15
IPOPCMAv3p61-Bajer 10 (13)10 (9)11 (18)8.9 (7)18 (14)49 (63)∞5060/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 7.2 (4)31 (40)∞∞∞∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 7.0 (10)∞∞∞∞∞∞1000/15
RF1-CMAES-Bajer-2013instances 11 (18)20 (14)97 (54)78 (106)∞∞∞5060/15
RF1-CMAES-Bajer 7.2 (2)21 (21)96 (121)∞∞∞∞5060/15
RF5-CMAES-Bajer-2013instances 12 (11)80 (83)100 (122)∞∞∞∞5040/15
RF5-CMAES-Bajer 27 (40)∞∞∞∞∞∞5020/15
STEPif-Posik 29 (93)66 (107)49 (31)71 (99)79 (91)90 (121)71 (120)4/15
STEPifeg-Posik 17 (25)45 (138)39 (45)66 (59)73 (117)81 (47)64 (68)4/15
STEPrr-Posik 11 (9)44 (75)45 (82)85 (89)119 (235)83 (114)65 (87)4/15

Δ fopt
f13, 2-D		 1e1
23		 1e0
35		 1e-1
46		 1e-2
60		 1e-3
71		 1e-5
95		 1e-7
122		 #succ
15/15
BrentSTEPif-Posik 776 (1265)1796 (3687)5996 (7069)∞∞∞∞2e40/15
BrentSTEPifeg-Posik 532 (783)805 (968)1360 (1867)4694 (5393)∞∞∞2e40/15
BrentSTEPqi-Posik 423 (671)1046 (2722)2849 (3562)4857 (5493)∞∞∞2e40/15
BrentSTEPrr-Posik 483 (489)1255 (1474)2962 (4310)4875 (4421)4120 (3600)∞∞2e40/15
CMA-CSA-Atamna 2.9 (1)4.2 (2)4.7 (1)4.6 (1)4.6 (0.6)4.9 (0.5)4.8 (0.3)15/15
CMA-MSR-Atamna 3.7 (2)4.7 (1)5.7 (0.4)5.6 (0.8)5.7 (1)6.3 (0.7)6.3 (1)15/15
CMA-TPA-Atamna 4.4 (4)4.9 (3)5.1 (2)4.9 (1)5.5 (1)5.2 (0.6)5.4 (0.9)15/15
GP1-CMAES-Bajer-2013instances 2.7 (3)3.7 (3)5.3 (2)7.7 (6)11 (8)19 (24)∞5060/15
GP1-CMAES-Bajer 4.3 (2)4.0 (8)6.6 (11)7.4 (3)7.0 (5)40 (67)∞5060/15
GP5-CMAES-Bajer-2013instances 3.8 (7)4.6 (2)4.4 (4)4.4 (3)4.3 (3)8.5 (5)∞5060/15
GP5-CMAES-Bajer 2.1 (2)3.4 (3)3.0 (1)2.7 (3)3.0 (0.8)9.2 (12)∞5060/15
IPOPCMAv3p61-Bajer-2013instances 3.8 (3)5.6 (3)6.1 (2)7.3 (3)12 (12)∞∞5060/15
IPOPCMAv3p61-Bajer 3.2 (5)8.7 (5)8.3 (8)8.9 (2)10 (7)∞∞5060/15
LHD-10xDefault-MATSuMoTo-Brockhoff 2.8 (1)21 (26)∞∞∞∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.4 (0.6)4.2 (5)33 (37)∞∞∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.4 (0.7)4.0 (2)31 (54)∞∞∞∞1000/15
RF1-CMAES-Bajer-2013instances 7.8 (7)17 (20)21 (24)22 (36)52 (49)∞∞5060/15
RF1-CMAES-Bajer 7.2 (4)43 (40)∞∞∞∞∞5060/15
RF5-CMAES-Bajer-2013instances 11 (12)63 (80)161 (158)∞∞∞∞5080/15
RF5-CMAES-Bajer 20 (12)64 (91)∞∞∞∞∞5080/15
STEPif-Posik 403 (667)763 (1102)1739 (2161)4333 (3693)∞∞∞2e40/15
STEPifeg-Posik 553 (1104)1466 (1653)∞∞∞∞∞2e40/15
STEPrr-Posik 420 (454)1063 (2007)2586 (3555)4077 (6131)3451 (3153)∞∞2e40/15

Δ fopt
f14, 2-D		 1e1
1		 1e0
7.0		 1e-1
16		 1e-2
24		 1e-3
38		 1e-5
67		 1e-7
90		 #succ
15/15
BrentSTEPif-Posik 3.6 (4)9.2 (6)5.5 (3)15 (10)1122 (1247)4181 (4330)∞2e40/15
BrentSTEPifeg-Posik 3.6 (4)9.0 (11)5.5 (8)15 (30)691 (1616)4181 (2389)∞2e40/15
BrentSTEPqi-Posik 3.6 (4)6.0 (8)3.8 (7)8.0 (11)1166 (1771)∞∞2e40/15
BrentSTEPrr-Posik 3.6 (4)8.8 (14)5.3 (8)8.0 (13)574 (585)4181 (8063)3113 (1389)0/15
CMA-CSA-Atamna 1.9 (0.2)2.0 (2)3.6 (2)4.1 (3)4.2 (0.9)5.1 (1)5.4 (0.8)15/15
CMA-MSR-Atamna 3.8 (3)3.0 (2)4.5 (2)6.3 (2)5.7 (2)5.7 (0.8)6.2 (0.6)15/15
CMA-TPA-Atamna 3.9 (6)3.7 (2)4.9 (2)5.4 (2)4.8 (2)5.0 (1)5.5 (0.9)15/15
GP1-CMAES-Bajer-2013instances 2.3 (2)2.0 (2)2.1 (0.6)3.0 (2)4.8 (3)9.3 (9)84 (156)0/15
GP1-CMAES-Bajer 4.1 (5)2.1 (1)2.5 (1)2.9 (2)3.4 (2)8.0 (9)41 (49)1/15
GP5-CMAES-Bajer-2013instances 3.2 (4)2.4 (2)1.8 (1)1.9 (0.8)2.3 (1)4.2 (2)41 (69)0/15
GP5-CMAES-Bajer 1.8 (0)2.3 (2)2.0 (2)2.2 (3)2.3 (1)5.5 (5)82 (84)0/15
IPOPCMAv3p61-Bajer-2013instances 2.9 (5)3.2 (2)3.4 (2)4.7 (2)5.5 (2)6.6 (3)27 (25)0/15
IPOPCMAv3p61-Bajer 3.7 (6)2.6 (4)3.8 (1)4.9 (2)5.1 (2)7.2 (0.6)42 (22)0/15
LHD-10xDefault-MATSuMoTo-Brockhoff 2.3 (1)3.3 (4)4.5 (0.8)12 (13)39 (36)∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.3 (2)1.4 (1)1.6 (0.5)3.5 (5)∞∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.7 (0.8)2.0 (0.8)1.7 (0.5)4.8 (4)12 (11)∞∞1000/15
RF1-CMAES-Bajer-2013instances 2.6 (2)6.7 (2)6.4 (6)10 (8)37 (39)∞∞5060/15
RF1-CMAES-Bajer 2.7 (3)5.2 (5)6.2 (10)15 (15)19 (16)109 (140)83 (104)1/15
RF5-CMAES-Bajer-2013instances 1.8 (1)51 (112)56 (44)148 (118)∞∞∞5060/15
RF5-CMAES-Bajer 5.2 (4)23 (40)36 (54)68 (144)58 (64)∞∞5060/15
STEPif-Posik 3.6 (3)2.5 (2)2.3 (2)10 (18)2244 (4617)4182 (3733)∞2e40/15
STEPifeg-Posik 3.6 (4)2.4 (2)2.2 (2)7.2 (30)1246 (1157)4182 (8884)∞2e40/15
STEPrr-Posik 3.6 (4)2.2 (1.0)1.9 (0.7)3.9 (6)640 (1172)4182 (4853)∞2e40/15

Δ fopt
f15, 2-D		 1e1
37		 1e0
291		 1e-1
1033		 1e-2
1066		 1e-3
1113		 1e-5
1231		 1e-7
1412		 #succ
15/15
BrentSTEPif-Posik 22 (141)77 (35)80 (94)81 (40)79 (59)112 (182)∞2e40/15
BrentSTEPifeg-Posik 28 (11)116 (118)56 (64)55 (52)54 (105)71 (95)∞2e40/15
BrentSTEPqi-Posik 3.3 (2)49 (61)45 (63)44 (52)42 (77)50 (34)64 (41)2/15
BrentSTEPrr-Posik 4.2 (2)47 (38)44 (43)55 (52)54 (28)107 (118)192 (489)1/15
CMA-CSA-Atamna 1.1 (0.8)1.4 (1)1.5 (2)1.6 (2)1.6 (1.0)1.5 (1)1.4 (1.0)15/15
CMA-MSR-Atamna 0.87 (0.7)2.3 (3)2.6 (1)2.7 (2)2.7 (2)2.6 (2)2.4 (1)15/15
CMA-TPA-Atamna 1.5 (1)3.8 (4)2.3 (2)2.5 (2)2.4 (0.9)2.3 (2)2.2 (2)15/15
GP1-CMAES-Bajer-2013instances 1.3 (3)2.8 (3)1.6 (3)1.6 (2)1.6 (2)1.5 (0.4)1.7 (1)3/15
GP1-CMAES-Bajer 0.58 (0.4)1.3 (2)1.5 (2)2.1 (4)2.0 (2)1.9 (1)1.6 (1.0)3/15
GP5-CMAES-Bajer-2013instances 0.75 (0.4)1.6 (0.9)0.81 (2)0.93 (0.9)0.90 (2)0.83 (1)0.90 (1.0)3/15
GP5-CMAES-Bajer 0.50 (0.4)1.6 (0.9)3.4 (3)7.0 (6)6.7 (5)6.1 (5)5.3 (7)1/15
IPOPCMAv3p61-Bajer-2013instances 1.3 (1)2.3 (2)2.2 (2)2.2 (2)2.1 (3)1.9 (1)1.7 (2)2/15
IPOPCMAv3p61-Bajer 2.4 (0.8)2.3 (2)7.2 (10)7.0 (7)6.7 (9)6.1 (8)∞5060/15
LHD-10xDefault-MATSuMoTo-Brockhoff 2.2 (2)∞∞∞∞∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 0.90 (0.5)∞∞∞∞∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.4 (2)2.4 (3)1.4 (1)∞∞∞∞1000/15
RF1-CMAES-Bajer-2013instances 1.9 (4)5.5 (5)7.0 (6)6.8 (7)∞∞∞5060/15
RF1-CMAES-Bajer 0.95 (0.7)4.1 (1)3.4 (3)3.4 (5)3.3 (5)6.1 (4)5.3 (7)1/15
RF5-CMAES-Bajer-2013instances 6.1 (7)24 (17)∞∞∞∞∞5060/15
RF5-CMAES-Bajer 8.2 (7)24 (15)7.1 (7)6.9 (5)6.6 (14)∞∞5020/15
STEPif-Posik 1.7 (3)35 (44)27 (20)26 (31)26 (27)37 (40)89 (123)0/15
STEPifeg-Posik 1.7 (0.5)31 (10)37 (49)36 (62)35 (48)32 (50)30 (17)5/15
STEPrr-Posik 1.6 (0.4)29 (39)39 (44)38 (56)37 (67)44 (93)86 (157)2/15

Δ fopt
f16, 2-D		 1e1
9.0		 1e0
50		 1e-1
174		 1e-2
326		 1e-3
358		 1e-5
409		 1e-7
538		 #succ
15/15
BrentSTEPif-Posik 3.1 (3)8.6 (1)29 (39)37 (23)45 (88)151 (114)249 (326)2/15
BrentSTEPifeg-Posik 3.3 (3)18 (25)32 (52)46 (62)57 (65)149 (135)256 (169)2/15
BrentSTEPqi-Posik 2.9 (3)5.9 (2)28 (28)42 (37)72 (71)142 (211)251 (211)2/15
BrentSTEPrr-Posik 3.9 (7)6.9 (2)20 (39)36 (72)55 (50)146 (240)161 (152)2/15
CMA-CSA-Atamna 10 (27)5.9 (9)3.0 (3)2.0 (2)2.3 (4)2.4 (3)2.0 (1)15/15
CMA-MSR-Atamna 13 (71)11 (12)10 (8)5.4 (6)5.2 (6)4.9 (7)4.0 (5)15/15
CMA-TPA-Atamna 2.9 (4)4.2 (3)3.9 (6)2.5 (4)2.7 (4)2.8 (1)2.3 (3)15/15
GP1-CMAES-Bajer-2013instances 3.4 (3)6.4 (15)8.5 (16)6.8 (7)6.5 (11)5.9 (6)∞5060/15
GP1-CMAES-Bajer 1.7 (1)6.9 (5)6.5 (5)3.7 (5)6.2 (6)9.0 (10)14 (12)1/15
GP5-CMAES-Bajer-2013instances 8.3 (23)14 (22)4.8 (5)5.4 (5)6.6 (5)∞∞5060/15
GP5-CMAES-Bajer 1.6 (0.9)4.2 (4)5.3 (13)4.8 (5)6.0 (3)5.7 (4)∞5060/15
IPOPCMAv3p61-Bajer-2013instances 2.5 (2)3.9 (10)2.8 (3)2.1 (2)2.9 (2)3.2 (3)2.6 (4)5/15
IPOPCMAv3p61-Bajer 4.1 (4)5.5 (5)2.2 (3)1.4 (0.8)1.6 (0.7)1.9 (0.7)1.5 (0.5)8/15
LHD-10xDefault-MATSuMoTo-Brockhoff 3.1 (3)3.1 (3)8.5 (8)∞∞∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.2 (1)2.1 (2)2.6 (2)∞∞∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.6 (3)1.2 (1)1.9 (1)∞∞∞∞1000/15
RF1-CMAES-Bajer-2013instances 2.1 (3)8.1 (5)12 (18)11 (12)20 (24)18 (38)14 (15)1/15
RF1-CMAES-Bajer 6.8 (15)6.9 (18)12 (15)11 (14)10 (13)∞∞5060/15
RF5-CMAES-Bajer-2013instances 4.3 (2)10 (15)12 (14)∞∞∞∞5020/15
RF5-CMAES-Bajer 1.8 (2)13 (14)7.3 (10)11 (6)20 (15)∞∞5020/15
STEPif-Posik 2.3 (2)27 (14)29 (82)34 (30)35 (33)89 (51)242 (301)2/15
STEPifeg-Posik 2.4 (1)14 (99)21 (18)31 (18)33 (90)69 (49)89 (79)4/15
STEPrr-Posik 2.4 (2)17 (33)21 (31)19 (24)37 (61)102 (100)152 (205)2/15

Δ fopt
f17, 2-D		 1e1
3.0		 1e0
61		 1e-1
133		 1e-2
275		 1e-3
396		 1e-5
1086		 1e-7
1657		 #succ
15/15
BrentSTEPif-Posik 2.0 (1)35 (110)37 (48)73 (98)160 (243)∞∞2e40/15
BrentSTEPifeg-Posik 2.0 (2)6.2 (17)48 (71)59 (80)130 (151)∞∞2e40/15
BrentSTEPqi-Posik 2.0 (2)27 (27)33 (21)41 (31)64 (47)∞∞2e40/15
BrentSTEPrr-Posik 2.0 (1)32 (37)78 (84)88 (184)102 (139)∞∞2e40/15
CMA-CSA-Atamna 2.7 (1)2.0 (3)2.0 (3)1.5 (2)1.6 (1)1.8 (2)1.4 (0.9)15/15
CMA-MSR-Atamna 18 (53)4.5 (5)3.3 (3)2.6 (1)2.2 (1)1.9 (0.7)1.5 (0.7)15/15
CMA-TPA-Atamna 3.2 (2)1.1 (1)2.1 (2)2.0 (1)2.0 (1)1.8 (0.5)1.4 (0.8)15/15
GP1-CMAES-Bajer-2013instances 3.4 (5)4.1 (8)5.1 (6)5.8 (9)18 (23)∞∞5060/15
GP1-CMAES-Bajer 14 (43)2.8 (6)4.1 (5)2.7 (4)4.4 (5)∞∞5060/15
GP5-CMAES-Bajer-2013instances 6.8 (6)5.6 (9)5.1 (10)5.8 (6)9.0 (11)∞∞5080/15
GP5-CMAES-Bajer 14 (36)6.5 (8)6.3 (5)28 (43)∞∞∞5080/15
IPOPCMAv3p61-Bajer-2013instances 2.2 (3)3.0 (7)3.1 (5)2.6 (3)2.8 (4)∞∞5060/15
IPOPCMAv3p61-Bajer 2.9 (4)1.4 (2)2.0 (2)1.8 (3)1.7 (1)3.4 (3)∞5060/15
LHD-10xDefault-MATSuMoTo-Brockhoff 1.6 (1)1.3 (0.8)11 (17)∞∞∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.3 (0.6)1.1 (1)5.3 (4)∞∞∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.7 (1)0.69 (0.2)3.5 (2)∞∞∞∞1000/15
RF1-CMAES-Bajer-2013instances 2.3 (2)3.8 (13)6.5 (6)8.5 (7)9.2 (8)∞∞5060/15
RF1-CMAES-Bajer 2.7 (4)2.7 (2)2.8 (2)4.3 (11)9.3 (5)∞∞5060/15
RF5-CMAES-Bajer-2013instances 44 (126)16 (13)55 (51)∞∞∞∞5020/15
RF5-CMAES-Bajer 12 (39)12 (18)25 (59)27 (28)∞∞∞5020/15
STEPif-Posik 2.0 (1)4.1 (9)7.9 (17)10 (9)45 (80)264 (277)∞2e40/15
STEPifeg-Posik 2.0 (2)1.8 (2)6.6 (3)18 (22)34 (34)∞∞2e40/15
STEPrr-Posik 2.0 (2)1.8 (3)3.8 (4)22 (59)31 (25)∞∞2e40/15

Δ fopt
f18, 2-D		 1e1
19		 1e0
134		 1e-1
666		 1e-2
1249		 1e-3
1708		 1e-5
2438		 1e-7
2858		 #succ
15/15
BrentSTEPif-Posik 0.78 (0.2)149 (156)210 (186)∞∞∞∞2e40/15
BrentSTEPifeg-Posik 0.77 (0.2)120 (108)138 (229)∞∞∞∞2e40/15
BrentSTEPqi-Posik 0.77 (0.3)123 (175)74 (114)∞∞∞∞2e40/15
BrentSTEPrr-Posik 0.76 (0.2)113 (62)135 (114)∞∞∞∞2e40/15
CMA-CSA-Atamna 1.5 (2)3.9 (3)1.3 (1)0.94 (0.9)0.78 (0.3)1.1 (0.4)1.1 (0.4)15/15
CMA-MSR-Atamna 5.0 (1)5.8 (5)1.7 (1)1.2 (0.8)1.0 (0.5)1.1 (1)1.3 (0.7)15/15
CMA-TPA-Atamna 1.7 (1)3.8 (3)1.3 (1)0.91 (0.5)0.78 (0.3)1.0 (0.6)1.1 (0.5)15/15
GP1-CMAES-Bajer-2013instances 2.7 (1)5.4 (8)2.5 (3)6.0 (9)4.4 (4)∞∞5060/15
GP1-CMAES-Bajer 1.5 (2)3.4 (2)1.9 (2)2.9 (3)∞∞∞5060/15
GP5-CMAES-Bajer-2013instances 13 (11)7.1 (12)∞∞∞∞∞5020/15
GP5-CMAES-Bajer 6.3 (1)7.5 (7)5.3 (6)6.1 (4)4.4 (2)∞∞5020/15
IPOPCMAv3p61-Bajer-2013instances 1.3 (0.8)3.4 (5)1.8 (3)1.4 (0.9)2.2 (3)∞∞5060/15
IPOPCMAv3p61-Bajer 0.97 (0.8)4.1 (2)5.2 (6)2.8 (2)2.2 (1)∞∞5060/15
LHD-10xDefault-MATSuMoTo-Brockhoff 1.9 (1)2.7 (4)∞∞∞∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.3 (0.6)1.3 (2)2.2 (3)∞∞∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.1 (0.6)2.0 (2)∞∞∞∞∞1000/15
RF1-CMAES-Bajer-2013instances 1.4 (0.7)8.4 (13)∞∞∞∞∞5060/15
RF1-CMAES-Bajer 1.6 (1)8.5 (7)11 (13)∞∞∞∞5060/15
RF5-CMAES-Bajer-2013instances 7.1 (0.6)12 (12)∞∞∞∞∞5020/15
RF5-CMAES-Bajer 2.1 (0.6)15 (18)∞∞∞∞∞5080/15
STEPif-Posik 0.86 (0.3)140 (225)85 (143)∞∞∞∞2e40/15
STEPifeg-Posik 0.88 (0.6)90 (135)94 (60)∞∞∞∞2e40/15
STEPrr-Posik 0.88 (0.2)147 (207)125 (154)233 (449)∞∞∞2e40/15

Δ fopt
f19, 2-D		 1e1
1		 1e0
1		 1e-1
26		 1e-2
216		 1e-3
227		 1e-5
252		 1e-7
276		 #succ
15/15
BrentSTEPif-Posik 4.7 (4)22 (20)4.3 (3)33 (54)117 (110)235 (141)1040 (834)1/15
BrentSTEPifeg-Posik 4.7 (4)23 (17)4.0 (3)15 (10)70 (51)533 (518)∞2e40/15
BrentSTEPqi-Posik 4.7 (4)23 (23)3.8 (2)35 (42)66 (168)245 (164)1025 (871)0/15
BrentSTEPrr-Posik 4.7 (4)21 (31)3.7 (3)28 (34)124 (209)352 (421)∞2e40/15
CMA-CSA-Atamna 5.5 (4)29 (27)21 (35)13 (14)13 (17)17 (10)15 (12)15/15
CMA-MSR-Atamna 4.5 (4)31 (22)12 (10)13 (14)18 (9)33 (13)125 (189)13/15
CMA-TPA-Atamna 3.3 (2)38 (50)6.3 (3)6.2 (5)7.1 (7)7.9 (6)7.6 (5)15/15
GP1-CMAES-Bajer-2013instances 5.6 (6)34 (26)11 (23)16 (12)16 (27)∞∞5060/15
GP1-CMAES-Bajer 4.3 (4)51 (93)3.7 (3)10 (14)31 (27)∞∞5060/15
GP5-CMAES-Bajer-2013instances 4.0 (5)164 (183)18 (21)16 (27)16 (11)29 (36)∞5040/15
GP5-CMAES-Bajer 4.6 (2)42 (74)7.6 (7)10 (8)16 (6)15 (15)∞5080/15
IPOPCMAv3p61-Bajer-2013instances 5.2 (4)29 (15)14 (21)34 (36)∞∞∞5060/15
IPOPCMAv3p61-Bajer 4.1 (4)57 (132)12 (25)5.5 (8)10 (15)10 (6)13 (18)2/15
LHD-10xDefault-MATSuMoTo-Brockhoff 4.1 (5)35 (37)18 (18)6.9 (9)∞∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 3.9 (3)41 (40)8.4 (13)∞∞∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 3.7 (3)42 (65)16 (14)6.6 (2)∞∞∞1000/15
RF1-CMAES-Bajer-2013instances 8.6 (8)46 (17)20 (24)10 (13)15 (30)∞∞5060/15
RF1-CMAES-Bajer 6.3 (6)178 (262)15 (19)∞∞∞∞5060/15
RF5-CMAES-Bajer-2013instances 6.6 (4)51 (65)12 (16)∞∞∞∞5040/15
RF5-CMAES-Bajer 6.9 (18)93 (146)16 (17)34 (45)32 (25)∞∞5080/15
STEPif-Posik 5.8 (7)20 (9)6.3 (10)25 (33)116 (222)339 (254)∞2e40/15
STEPifeg-Posik 5.9 (7)20 (11)6.9 (4)31 (46)61 (45)245 (409)539 (474)1/15
STEPrr-Posik 5.8 (10)19 (39)5.2 (4)28 (36)110 (197)231 (232)∞2e40/15

Δ fopt
f20, 2-D		 1e1
4.0		 1e0
61		 1e-1
365		 1e-2
366		 1e-3
366		 1e-5
370		 1e-7
375		 #succ
15/15
BrentSTEPif-Posik 15 (15)140 (226)30 (26)32 (62)40 (45)56 (57)80 (98)6/15
BrentSTEPifeg-Posik 14 (14)62 (95)19 (21)20 (24)21 (38)23 (30)36 (37)12/15
BrentSTEPqi-Posik 12 (3)33 (52)13 (18)14 (22)15 (28)18 (24)28 (22)11/15
BrentSTEPrr-Posik 14 (58)40 (77)26 (52)26 (24)27 (25)29 (51)34 (40)10/15
CMA-CSA-Atamna 2.6 (3)5.4 (5)8.2 (9)9.2 (5)10 (11)10 (12)10 (11)15/15
CMA-MSR-Atamna 2.0 (2)12 (12)28 (33)45 (30)70 (22)98 (120)102 (136)15/15
CMA-TPA-Atamna 4.0 (4)18 (25)13 (13)15 (14)16 (19)17 (7)17 (18)15/15
GP1-CMAES-Bajer-2013instances 1.9 (2)8.2 (10)4.2 (2)4.3 (5)6.2 (7)6.3 (3)9.5 (11)2/15
GP1-CMAES-Bajer 2.2 (1)7.0 (13)5.8 (5)9.3 (15)9.5 (8)9.5 (9)9.5 (9)2/15
GP5-CMAES-Bajer-2013instances 2.0 (2)12 (15)9.3 (8)9.4 (10)9.4 (7)9.4 (13)9.4 (7)2/15
GP5-CMAES-Bajer 2.1 (3)7.4 (10)4.3 (6)6.0 (5)6.0 (10)9.1 (13)9.0 (10)2/15
IPOPCMAv3p61-Bajer-2013instances 2.2 (2)25 (37)20 (16)20 (12)20 (41)20 (31)20 (18)1/15
IPOPCMAv3p61-Bajer 3.0 (2)25 (24)20 (34)∞∞∞∞5060/15
LHD-10xDefault-MATSuMoTo-Brockhoff 3.2 (1)12 (17)∞∞∞∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.2 (1)25 (28)∞∞∞∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.3 (1)7.7 (6)∞∞∞∞∞1000/15
RF1-CMAES-Bajer-2013instances 2.2 (1)19 (22)∞∞∞∞∞5060/15
RF1-CMAES-Bajer 1.4 (1)9.0 (20)10 (13)∞∞∞∞5060/15
RF5-CMAES-Bajer-2013instances 33 (61)39 (59)20 (31)∞∞∞∞5040/15
RF5-CMAES-Bajer 15 (23)35 (28)21 (20)∞∞∞∞5080/15
STEPif-Posik 4.7 (5)44 (90)18 (16)19 (30)20 (16)25 (17)35 (26)11/15
STEPifeg-Posik 4.5 (5)36 (2)11 (11)12 (10)13 (15)20 (22)32 (16)12/15
STEPrr-Posik 3.8 (5)35 (82)16 (14)16 (14)17 (31)22 (29)37 (39)11/15

Δ fopt
f21, 2-D		 1e1
2.0		 1e0
51		 1e-1
174		 1e-2
276		 1e-3
290		 1e-5
324		 1e-7
330		 #succ
15/15
BrentSTEPif-Posik 1.8 (1)90 (2)38 (58)28 (37)30 (35)40 (36)48 (40)8/15
BrentSTEPifeg-Posik 1.8 (2)24 (45)26 (17)17 (55)17 (35)19 (14)34 (54)11/15
BrentSTEPqi-Posik 1.8 (0.9)19 (35)32 (20)21 (54)21 (33)23 (46)39 (27)9/15
BrentSTEPrr-Posik 1.8 (2)41 (11)38 (75)25 (37)24 (92)24 (26)35 (43)11/15
CMA-CSA-Atamna 1.3 (1)2.6 (4)3.3 (3)3.0 (1)3.4 (5)3.2 (3)3.3 (3)15/15
CMA-MSR-Atamna 1.6 (0.5)11 (13)120 (170)82 (422)229 (351)315 (776)310 (764)10/15
CMA-TPA-Atamna 1.2 (0.6)59 (25)49 (163)32 (79)62 (374)131 (255)136 (3)13/15
GP1-CMAES-Bajer-2013instances 1.5 (2)10 (10)3.8 (4)3.1 (2)3.1 (5)2.9 (2)4.6 (6)4/15
GP1-CMAES-Bajer 1.1 (0.8)4.4 (5)2.3 (5)1.6 (1)1.6 (1)1.5 (1)1.7 (0.8)8/15
GP5-CMAES-Bajer-2013instances 1.3 (2)8.4 (11)5.4 (12)4.3 (5)5.2 (6)4.8 (11)6.8 (9)2/15
GP5-CMAES-Bajer 1.3 (0.6)9.0 (6)4.2 (8)4.1 (4)3.9 (3)3.7 (5)6.4 (10)2/15
IPOPCMAv3p61-Bajer-2013instances 1.3 (0.8)3.5 (13)4.7 (4)5.4 (7)5.2 (10)4.8 (5)4.8 (4)4/15
IPOPCMAv3p61-Bajer 0.80 (0.6)3.3 (6)2.8 (2)2.3 (2)2.3 (5)2.7 (3)2.8 (2)6/15
LHD-10xDefault-MATSuMoTo-Brockhoff 1.1 (1)0.99 (0.8)0.68 (0.5)0.68 (0.4)1.2 (2)∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.1 (0.9)0.58 (0.6)0.34 (0.2)0.38 (0.4)0.77 (0.9)2.3 (4)∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.2 (0.8)0.71 (0.4)0.32 (0.1)0.41 (0.3)0.44 (0.3)1.1 (2)∞1000/15
RF1-CMAES-Bajer-2013instances 1 (0.6)16 (35)19 (20)12 (22)11 (9)10 (10)10 (5)2/15
RF1-CMAES-Bajer 1.0 (0.9)12 (8)12 (40)7.7 (9)7.4 (8)6.7 (9)11 (21)1/15
RF5-CMAES-Bajer-2013instances 1.4 (1)4.1 (2)6.9 (6)7.9 (6)7.6 (5)6.9 (11)11 (15)0/15
RF5-CMAES-Bajer 1.5 (0.8)10 (5)5.7 (4)4.4 (3)5.7 (12)∞∞5060/15
STEPif-Posik 1.7 (2)90 (322)59 (144)38 (30)38 (46)36 (53)45 (54)10/15
STEPifeg-Posik 1.7 (2)76 (70)55 (53)35 (134)35 (23)36 (23)42 (46)9/15
STEPrr-Posik 1.7 (1)77 (34)65 (105)48 (54)46 (46)43 (32)62 (47)8/15

Δ fopt
f22, 2-D		 1e1
5.0		 1e0
27		 1e-1
168		 1e-2
218		 1e-3
249		 1e-5
289		 1e-7
306		 #succ
15/15
BrentSTEPif-Posik 2.1 (2)60 (198)80 (118)263 (456)230 (181)∞∞2e40/15
BrentSTEPifeg-Posik 2.3 (2)23 (24)94 (131)150 (328)196 (303)∞∞2e40/15
BrentSTEPqi-Posik 2.7 (4)24 (56)90 (209)154 (353)235 (301)∞∞2e40/15
BrentSTEPrr-Posik 2.5 (4)50 (66)85 (116)151 (321)144 (150)971 (1246)∞2e40/15
CMA-CSA-Atamna 2.3 (4)16 (31)14 (8)12 (3)10 (6)15 (36)15 (35)15/15
CMA-MSR-Atamna 2.3 (2)21 (33)18 (10)75 (231)75 (34)115 (349)115 (491)13/15
CMA-TPA-Atamna 1.2 (1)13 (13)7.6 (4)65 (4)63 (11)111 (186)105 (158)13/15
GP1-CMAES-Bajer-2013instances 8.7 (26)6.0 (0.5)6.8 (10)5.3 (7)4.7 (9)5.6 (11)5.6 (6)3/15
GP1-CMAES-Bajer 1.1 (0.8)8.2 (16)3.8 (6)5.0 (5)6.1 (5)5.3 (3)5.4 (6)4/15
GP5-CMAES-Bajer-2013instances 1.4 (0.8)3.9 (5)2.1 (1)1.7 (2)1.6 (0.9)2.3 (2)4.1 (3)3/15
GP5-CMAES-Bajer 1.3 (0.7)4.8 (8)2.1 (4)2.0 (3)2.3 (7)2.1 (2)3.1 (2)4/15
IPOPCMAv3p61-Bajer-2013instances 1.5 (2)4.6 (3)4.2 (2)4.2 (4)3.9 (4)3.6 (4)3.6 (2)6/15
IPOPCMAv3p61-Bajer 1.7 (2)8.4 (15)3.4 (2)3.5 (5)3.3 (2)2.9 (4)2.9 (3)7/15
LHD-10xDefault-MATSuMoTo-Brockhoff 1.1 (0.7)1.8 (2)0.81 (0.6)1.7 (1)6.0 (7)∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.7 (1)1.5 (2)1.9 (3)2.1 (2)6.0 (7)∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.0 (1)1.6 (1)0.58 (0.3)1.0 (1)1.4 (3)5.1 (5)∞1000/15
RF1-CMAES-Bajer-2013instances 1.1 (1)15 (24)12 (14)9.5 (5)8.5 (8)7.3 (9)24 (26)1/15
RF1-CMAES-Bajer 1.8 (2)6.7 (19)3.9 (8)6.5 (9)9.0 (13)8.3 (6)12 (10)2/15
RF5-CMAES-Bajer-2013instances 1.7 (1)19 (33)12 (20)16 (15)∞∞∞5020/15
RF5-CMAES-Bajer 2.0 (1)16 (8)44 (30)34 (37)∞∞∞5080/15
STEPif-Posik 2.3 (1)27 (3)103 (67)133 (214)360 (331)966 (1828)∞2e40/15
STEPifeg-Posik 2.2 (3)16 (2)84 (59)144 (70)182 (100)969 (1506)∞2e40/15
STEPrr-Posik 2.2 (0.8)28 (27)88 (70)158 (241)266 (301)969 (1159)∞2e40/15

Δ fopt
f23, 2-D		 1e1
8.0		 1e0
193		 1e-1
234		 1e-2
263		 1e-3
299		 1e-5
348		 1e-7
379		 #succ
15/15
BrentSTEPif-Posik 1.9 (2)1.7 (2)34 (15)253 (269)∞∞∞2e40/15
BrentSTEPifeg-Posik 1.9 (2)1.5 (2)22 (19)1072 (591)∞∞∞2e40/15
BrentSTEPqi-Posik 1.8 (1)2.2 (2)36 (51)339 (713)∞∞∞2e40/15
BrentSTEPrr-Posik 2.0 (1)2.1 (2)24 (11)504 (419)948 (1927)815 (1353)748 (1243)1/15
CMA-CSA-Atamna 3.1 (3)4.5 (3)10 (16)9.3 (15)8.5 (8)7.8 (6)7.6 (11)15/15
CMA-MSR-Atamna 2.2 (2)7.7 (12)9.3 (5)9.0 (11)10 (9)9.2 (8)9.3 (9)15/15
CMA-TPA-Atamna 1.8 (2)8.8 (8)21 (29)19 (25)18 (18)17 (32)16 (7)15/15
GP1-CMAES-Bajer-2013instances 2.1 (1)18 (20)32 (23)29 (18)∞∞∞5060/15
GP1-CMAES-Bajer 2.4 (2)12 (12)32 (74)28 (21)∞∞∞5060/15
GP5-CMAES-Bajer-2013instances 1.9 (2)2.5 (3)3.0 (5)4.6 (3)4.2 (5)∞∞5020/15
GP5-CMAES-Bajer 1.3 (2)6.2 (4)10 (5)8.6 (8)12 (17)∞∞5080/15
IPOPCMAv3p61-Bajer-2013instances 0.97 (3)6.8 (5)16 (13)14 (17)∞∞∞5060/15
IPOPCMAv3p61-Bajer 2.2 (3)6.9 (14)16 (32)29 (21)∞∞∞5060/15
LHD-10xDefault-MATSuMoTo-Brockhoff 1.5 (0.8)∞∞∞∞∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.4 (2)∞∞∞∞∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.0 (2)7.7 (7)∞∞∞∞∞1000/15
RF1-CMAES-Bajer-2013instances 1.8 (0.8)8.7 (7)∞∞∞∞∞5020/15
RF1-CMAES-Bajer 2.3 (2)19 (23)∞∞∞∞∞5020/15
RF5-CMAES-Bajer-2013instances 1.5 (0.8)4.9 (5)31 (36)∞∞∞∞5040/15
RF5-CMAES-Bajer 2.4 (3)8.1 (7)∞∞∞∞∞5040/15
STEPif-Posik 1.8 (2)3.5 (2)93 (61)∞∞∞∞2e40/15
STEPifeg-Posik 1.8 (1)3.3 (2)59 (29)1117 (735)∞∞∞2e40/15
STEPrr-Posik 1.8 (2)3.4 (2)57 (60)1110 (400)∞∞∞2e40/15

Δ fopt
f24, 2-D		 1e1
18		 1e0
857		 1e-1
8515		 1e-2
23399		 1e-3
24113		 1e-5
24721		 1e-7
24721		 #succ
5/15
BrentSTEPif-Posik 1.8 (2)32 (33)31 (17)∞∞∞∞2e40/15
BrentSTEPifeg-Posik 1.7 (2)46 (108)∞∞∞∞∞2e40/15
BrentSTEPqi-Posik 2.7 (6)25 (28)30 (22)11 (9)∞∞∞2e40/15
BrentSTEPrr-Posik 1.9 (2)34 (27)30 (39)∞∞∞∞2e40/15
CMA-CSA-Atamna 1.4 (1)161 (195)153 (177)∞∞∞∞2e50/15
CMA-MSR-Atamna 4.6 (0.7)94 (183)37 (36)57 (48)55 (47)54 (106)54 (43)2/15
CMA-TPA-Atamna 1.5 (1)94 (205)154 (141)57 (55)118 (98)115 (128)115 (116)1/15
GP1-CMAES-Bajer-2013instances 3.2 (8)4.0 (3)0.88 (0.9)∞∞∞∞5060/15
GP1-CMAES-Bajer 1.2 (1)8.4 (6)∞∞∞∞∞5060/15
GP5-CMAES-Bajer-2013instances 4.4 (4)2.7 (2)0.84 (0.8)∞∞∞∞5060/15
GP5-CMAES-Bajer 3.8 (3)8.6 (14)∞∞∞∞∞5080/15
IPOPCMAv3p61-Bajer-2013instances 1.1 (0.8)8.6 (4)∞∞∞∞∞5060/15
IPOPCMAv3p61-Bajer 1.6 (0.6)4.1 (9)∞∞∞∞∞5060/15
LHD-10xDefault-MATSuMoTo-Brockhoff 1.7 (2)∞∞∞∞∞∞1000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.1 (2)∞∞∞∞∞∞1000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.4 (1)∞∞∞∞∞∞1000/15
RF1-CMAES-Bajer-2013instances 0.89 (0.9)8.6 (7)∞∞∞∞∞5060/15
RF1-CMAES-Bajer 1.6 (1)4.1 (4)∞∞∞∞∞5060/15
RF5-CMAES-Bajer-2013instances 3.2 (7)8.4 (17)∞∞∞∞∞5080/15
RF5-CMAES-Bajer 3.0 (2)∞∞∞∞∞∞5060/15
STEPif-Posik 1.5 (2)35 (36)31 (45)∞∞∞∞2e40/15
STEPifeg-Posik 1.5 (1.0)26 (22)∞∞∞∞∞2e40/15
STEPrr-Posik 1.6 (0.4)31 (36)32 (44)∞∞∞∞2e40/15

Previous dimension | Dimension = 3 | Next dimension

Δ fopt
f1, 3-D		 1e1
4.0		 1e0
8.0		 1e-1
8.0		 1e-2
8.0		 1e-3
8.0		 1e-5
8.0		 1e-7
8.0		 #succ
15/15
BrentSTEPif-Posik 1.4 (0.9)1.8 (0.3)1.9 (0.3)2.0 (0.3)2.1 (0.3)2.1 (0.2)2.1 (0.3)15/15
BrentSTEPifeg-Posik 1.4 (1)1.8 (0.3)1.9 (0.3)2.0 (0.3)2.1 (0.2)2.1 (0.2)2.1 (0.2)15/15
BrentSTEPqi-Posik 1.4 (1)1.8 (0.3)1.9 (0.2)2.0 (0.3)2.1 (0.2)2.1 (0.2)2.1 (0.3)15/15
BrentSTEPrr-Posik 1.4 (1)1.8 (0.2)1.9 (0.4)2.0 (0.2)2.1 (0.2)2.1 (0.2)2.1 (0.3)15/15
CMA-CSA-Atamna 5.0 (6)6.1 (3)13 (4)18 (6)24 (4)36 (5)46 (3)15/15
CMA-MSR-Atamna 2.2 (3)5.8 (3)16 (6)27 (6)38 (7)57 (6)74 (10)15/15
CMA-TPA-Atamna 3.0 (3)7.9 (5)14 (6)19 (8)23 (6)37 (7)49 (13)15/15
GP1-CMAES-Bajer-2013instances 2.9 (2)4.4 (2)7.3 (2)10 (2)13 (3)19 (4)27 (5)15/15
GP1-CMAES-Bajer 2.1 (2)4.3 (2)6.9 (1)10 (1)13 (2)21 (2)29 (4)15/15
GP5-CMAES-Bajer-2013instances 2.5 (2)2.7 (2)3.7 (0.7)4.6 (0.9)5.6 (1)7.7 (1)25 (22)15/15
GP5-CMAES-Bajer 2.4 (2)2.7 (1)3.7 (0.7)4.8 (1.0)5.6 (1)7.7 (2)23 (6)15/15
IPOPCMAv3p61-Bajer-2013instances 2.5 (2)6.5 (4)12 (3)18 (5)23 (5)34 (4)46 (6)15/15
IPOPCMAv3p61-Bajer 2.6 (2)6.3 (4)13 (5)19 (4)24 (6)35 (6)48 (5)15/15
LHD-10xDefault-MATSuMoTo-Brockhoff 3.2 (3)9.3 (2)10 (0.5)12 (0.6)13 (0.5)66 (132)∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.0 (2)2.4 (0.3)3.2 (0.8)4.7 (0.9)6.3 (0.9)∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.0 (2)2.5 (0.3)3.6 (0.6)5.0 (1)6.5 (2)276 (141)∞1500/15
RF1-CMAES-Bajer-2013instances 2.0 (2)4.8 (1)8.4 (3)14 (4)21 (9)60 (25)102 (106)9/15
RF1-CMAES-Bajer 2.9 (3)5.3 (2)9.5 (5)20 (3)29 (29)77 (36)140 (201)7/15
RF5-CMAES-Bajer-2013instances 10 (2)22 (40)94 (83)306 (352)1331 (1866)∞∞7530/15
RF5-CMAES-Bajer 19 (61)43 (45)208 (354)696 (1016)1408 (995)∞∞7600/15
STEPif-Posik 1.4 (1)1.9 (0.2)2.4 (0.3)3.7 (0.9)4.7 (0.9)5.9 (1)6.8 (0.4)15/15
STEPifeg-Posik 1.4 (1)1.9 (0.2)2.4 (0.3)3.5 (0.4)4.2 (0.6)5.8 (1.0)6.8 (0.5)15/15
STEPrr-Posik 1.4 (0.9)1.9 (0.2)2.4 (0.2)3.1 (0.2)3.7 (0.3)5.0 (0.3)6.2 (0.2)15/15

Δ fopt
f2, 3-D		 1e1
38		 1e0
42		 1e-1
43		 1e-2
44		 1e-3
45		 1e-5
47		 1e-7
48		 #succ
15/15
BrentSTEPif-Posik 0.67 (0.2)0.72 (0.2)0.79 (0.2)0.85 (0.2)0.98 (0.2)1.0 (0.1)1.2 (0.2)15/15
BrentSTEPifeg-Posik 0.65 (0.3)0.68 (0.2)0.76 (0.2)0.84 (0.2)0.97 (0.1)1.0 (0.1)1.2 (0.2)15/15
BrentSTEPqi-Posik 0.60 (0.1)0.58 (0.1)0.61 (0.1)0.66 (0.1)0.74 (0.1)★20.82 (0.0)★30.96 (0.1)★15/15
BrentSTEPrr-Posik 0.66 (0.1)0.67 (0.2)0.72 (0.1)0.78 (0.2)0.91 (0.2)1.0 (0.2)1.2 (0.2)15/15
CMA-CSA-Atamna 9.4 (3)12 (4)13 (3)14 (2)14 (1)16 (2)17 (1)15/15
CMA-MSR-Atamna 10 (3)12 (3)13 (1)15 (2)16 (2)18 (3)21 (2)15/15
CMA-TPA-Atamna 8.4 (5)12 (4)13 (5)14 (2)15 (3)17 (3)18 (3)15/15
GP1-CMAES-Bajer-2013instances 8.0 (4)10 (4)12 (5)13 (2)14 (2)16 (2)28 (15)5/15
GP1-CMAES-Bajer 8.6 (4)11 (4)11 (3)12 (3)13 (1)15 (1)22 (12)5/15
GP5-CMAES-Bajer-2013instances 3.4 (1.0)4.1 (2)4.7 (1)5.0 (0.8)5.3 (1)5.6 (1)13 (16)8/15
GP5-CMAES-Bajer 3.4 (1)4.0 (1)4.3 (0.8)4.6 (0.6)5.0 (1)5.1 (1.0)10 (2)6/15
IPOPCMAv3p61-Bajer-2013instances 13 (11)24 (56)42 (27)64 (47)∞∞∞7510/15
IPOPCMAv3p61-Bajer 12 (9)17 (9)40 (45)83 (74)123 (138)∞∞7510/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 281 (321)258 (210)∞∞∞∞∞7510/15
RF1-CMAES-Bajer 92 (50)268 (148)262 (218)∞∞∞∞7510/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞7600/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞7530/15
STEPif-Posik 1.1 (0.3)1.1 (0.3)1.2 (0.2)1.2 (0.2)1.3 (0.1)1.4 (0.2)1.5 (0.2)15/15
STEPifeg-Posik 1.1 (0.2)1.1 (0.2)1.2 (0.1)1.3 (0.2)1.3 (0.2)1.4 (0.1)1.6 (0.2)15/15
STEPrr-Posik 1.0 (0.0)1.0 (0.2)1.1 (0.1)1.2 (0.0)1.3 (0.1)1.4 (0.1)1.6 (0.1)15/15

Δ fopt
f3, 3-D		 1e1
38		 1e0
822		 1e-1
830		 1e-2
835		 1e-3
842		 1e-5
847		 1e-7
853		 #succ
15/15
BrentSTEPif-Posik 0.83 (0.6)0.12 (0.0)0.18 (0.1)0.18 (0.1)0.18 (0.1)0.18 (0.1)0.18 (0.1)15/15
BrentSTEPifeg-Posik 0.80 (0.5)0.12 (0.1)0.18 (0.1)0.18 (0.0)0.18 (0.1)0.18 (0.1)0.18 (0.1)15/15
BrentSTEPqi-Posik 0.80 (0.2)0.12 (0.1)0.17 (0.1)0.17 (0.1)0.17 (0.1)0.17 (0.1)0.17 (0.1)15/15
BrentSTEPrr-Posik 0.74 (0.5)0.12 (0.0)0.16 (0.1)0.17 (0.1)0.17 (0.0)0.17 (0.1)0.18 (0.1)15/15
CMA-CSA-Atamna 8.1 (14)2.9 (2)8.7 (7)9.4 (15)10 (7)10 (5)10 (5)15/15
CMA-MSR-Atamna 8.0 (11)3.5 (3)10 (9)11 (13)11 (15)12 (16)13 (6)15/15
CMA-TPA-Atamna 3.5 (5)2.9 (3)13 (10)13 (9)13 (9)14 (13)14 (13)15/15
GP1-CMAES-Bajer-2013instances 4.7 (6)1.6 (4)4.3 (7)6.4 (9)6.5 (9)6.5 (18)13 (11)1/15
GP1-CMAES-Bajer 4.1 (6)1.3 (2)4.1 (2)4.1 (7)4.1 (3)4.2 (3)4.3 (4)2/15
GP5-CMAES-Bajer-2013instances 2.4 (2)13 (19)∞∞∞∞∞7600/15
GP5-CMAES-Bajer 2.5 (3)3.1 (6)∞∞∞∞∞7600/15
IPOPCMAv3p61-Bajer-2013instances 5.1 (6)4.1 (6)13 (13)13 (16)13 (11)13 (8)13 (10)1/15
IPOPCMAv3p61-Bajer 5.5 (2)13 (11)∞∞∞∞∞7510/15
LHD-10xDefault-MATSuMoTo-Brockhoff 5.0 (6)2.7 (2)∞∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.1 (2)∞∞∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 3.0 (1)2.7 (4)2.7 (2)∞∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 8.5 (8)∞∞∞∞∞∞7510/15
RF1-CMAES-Bajer 5.7 (11)∞∞∞∞∞∞7510/15
RF5-CMAES-Bajer-2013instances 26 (16)∞∞∞∞∞∞7600/15
RF5-CMAES-Bajer 28 (26)∞∞∞∞∞∞7600/15
STEPif-Posik 0.98 (0.4)0.15 (0.1)0.18 (0.1)0.19 (0.0)0.21 (0.0)0.23 (0.0)0.23 (0.0)15/15
STEPifeg-Posik 0.98 (0.3)0.14 (0.1)0.18 (0.1)0.19 (0.0)0.21 (0.0)0.23 (0.0)0.23 (0.0)15/15
STEPrr-Posik 0.98 (0.4)0.12 (0.0)0.17 (0.1)0.18 (0.0)0.19 (0.0)0.22 (0.0)0.23 (0.0)15/15

Δ fopt
f4, 3-D		 1e1
40		 1e0
808		 1e-1
866		 1e-2
921		 1e-3
952		 1e-5
1015		 1e-7
1044		 #succ
15/15
BrentSTEPif-Posik 1.5 (0.7)0.18 (0.1)0.29 (0.1)0.28 (0.2)0.28 (0.1)0.28 (0.1)0.31 (0.1)15/15
BrentSTEPifeg-Posik 1.4 (0.7)0.18 (0.0)0.28 (0.1)0.27 (0.1)0.27 (0.2)0.27 (0.1)0.31 (0.1)15/15
BrentSTEPqi-Posik 1.4 (0.7)0.20 (0.1)0.26 (0.1)0.25 (0.1)0.25 (0.1)0.25 (0.1)0.31 (0.1)15/15
BrentSTEPrr-Posik 1.4 (0.6)0.18 (0.1)0.23 (0.1)0.22 (0.1)0.23 (0.1)0.26 (0.1)0.34 (0.2)15/15
CMA-CSA-Atamna 5.8 (1)359 (391)4872 (3652)4581 (4746)4432 (4508)4157 (2e4)4041 (3895)1/15
CMA-MSR-Atamna 8.6 (10)632 (407)∞∞∞∞∞3e50/15
CMA-TPA-Atamna 7.3 (3)269 (560)5064 (6187)∞∞∞∞3e50/15
GP1-CMAES-Bajer-2013instances 8.3 (3)∞∞∞∞∞∞7510/15
GP1-CMAES-Bajer 10 (6)∞∞∞∞∞∞7510/15
GP5-CMAES-Bajer-2013instances 8.4 (10)∞∞∞∞∞∞7550/15
GP5-CMAES-Bajer 9.2 (7)∞∞∞∞∞∞7600/15
IPOPCMAv3p61-Bajer-2013instances 11 (15)14 (22)∞∞∞∞∞7510/15
IPOPCMAv3p61-Bajer 4.6 (3)14 (13)∞∞∞∞∞7510/15
LHD-10xDefault-MATSuMoTo-Brockhoff 11 (19)∞∞∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 18 (26)∞∞∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 7.7 (8)∞∞∞∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 125 (127)∞∞∞∞∞∞7510/15
RF1-CMAES-Bajer 58 (33)∞∞∞∞∞∞7510/15
RF5-CMAES-Bajer-2013instances 270 (307)∞∞∞∞∞∞7530/15
RF5-CMAES-Bajer 279 (246)∞∞∞∞∞∞7600/15
STEPif-Posik 1.2 (0.2)0.26 (0.1)0.47 (0.2)0.58 (0.2)0.72 (0.2)0.97 (0.2)1.0 (0.2)15/15
STEPifeg-Posik 1.2 (0.5)0.26 (0.1)0.44 (0.2)0.55 (0.1)0.70 (0.2)0.98 (0.2)1.0 (0.1)15/15
STEPrr-Posik 1.2 (0.5)0.26 (0.1)0.41 (0.1)0.52 (0.2)0.64 (0.2)0.96 (0.2)1.1 (0.1)15/15

Δ fopt
f5, 3-D		 1e1
7.0		 1e0
7.0		 1e-1
7.0		 1e-2
7.0		 1e-3
7.0		 1e-5
7.0		 1e-7
7.0		 #succ
15/15
BrentSTEPif-Posik 1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)15/15
BrentSTEPifeg-Posik 1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)15/15
BrentSTEPqi-Posik 1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)15/15
BrentSTEPrr-Posik 1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)15/15
CMA-CSA-Atamna 2.8 (4)4.8 (4)5.2 (2)5.2 (2)5.2 (3)5.2 (2)5.2 (2)15/15
CMA-MSR-Atamna 2.6 (2)4.6 (2)4.6 (2)4.6 (3)4.6 (2)4.6 (2)4.6 (2)15/15
CMA-TPA-Atamna 2.4 (1.0)3.5 (2)3.6 (2)3.6 (1)3.6 (1)3.6 (2)3.6 (2)15/15
GP1-CMAES-Bajer-2013instances 2.2 (0.6)16 (13)23 (12)23 (79)23 (33)23 (12)23 (29)14/15
GP1-CMAES-Bajer 2.9 (2)11 (23)20 (7)20 (54)20 (31)20 (25)20 (24)14/15
GP5-CMAES-Bajer-2013instances 2.1 (1)3.6 (2)4.4 (3)4.4 (4)4.4 (2)4.4 (3)4.4 (4)15/15
GP5-CMAES-Bajer 2.1 (0.6)3.6 (2)4.5 (2)4.5 (2)4.5 (2)4.5 (2)4.5 (2)15/15
IPOPCMAv3p61-Bajer-2013instances 3.8 (2)7.4 (14)9.5 (8)9.5 (10)9.5 (11)9.5 (5)9.5 (13)15/15
IPOPCMAv3p61-Bajer 3.6 (2)14 (9)15 (6)15 (11)15 (14)15 (19)15 (17)15/15
LHD-10xDefault-MATSuMoTo-Brockhoff 9.0 (3)12 (0.4)12 (0.4)12 (0.4)12 (0.4)12 (0.4)12 (0.4)15/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.4 (0)2.7 (0.4)2.9 (0.7)2.9 (0.4)2.9 (0.7)2.9 (0.7)2.9 (0.7)15/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.4 (0.0)2.7 (0.4)2.9 (0.4)2.9 (0.4)2.9 (0.4)2.9 (0.3)2.9 (0.4)15/15
RF1-CMAES-Bajer-2013instances 2.8 (2)17 (11)18 (5)18 (29)18 (38)18 (38)18 (38)15/15
RF1-CMAES-Bajer 3.6 (4)15 (9)23 (34)25 (33)25 (19)25 (35)25 (8)15/15
RF5-CMAES-Bajer-2013instances 15 (27)95 (92)141 (143)142 (296)142 (145)142 (162)142 (83)7/15
RF5-CMAES-Bajer 20 (10)47 (74)76 (105)90 (97)90 (113)90 (97)90 (60)10/15
STEPif-Posik 1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)15/15
STEPifeg-Posik 1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0)15/15
STEPrr-Posik 1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)1.3 (0.1)15/15

Δ fopt
f6, 3-D		 1e1
34		 1e0
56		 1e-1
90		 1e-2
117		 1e-3
149		 1e-5
215		 1e-7
265		 #succ
15/15
BrentSTEPif-Posik 207 (206)609 (790)769 (1175)1724 (1700)∞∞∞3e40/15
BrentSTEPifeg-Posik 145 (223)413 (261)563 (877)1053 (900)1340 (4077)∞∞3e40/15
BrentSTEPqi-Posik 228 (855)329 (881)343 (252)484 (895)672 (550)∞∞3e40/15
BrentSTEPrr-Posik 113 (23)504 (291)576 (584)808 (685)1388 (1416)∞∞3e40/15
CMA-CSA-Atamna 1.5 (0.6)2.6 (0.8)2.3 (0.8)2.6 (0.8)2.7 (0.5)2.7 (0.3)2.9 (0.3)15/15
CMA-MSR-Atamna 2.7 (2)3.8 (1)3.5 (1)3.7 (1)3.7 (0.9)3.7 (0.5)3.9 (0.3)15/15
CMA-TPA-Atamna 3.1 (2)3.5 (1)3.1 (0.9)3.2 (0.8)3.1 (0.8)2.9 (0.5)3.0 (0.5)15/15
GP1-CMAES-Bajer-2013instances 2.7 (2)4.9 (5)14 (20)96 (77)∞∞∞7510/15
GP1-CMAES-Bajer 3.0 (2)7.6 (6)14 (22)47 (46)∞∞∞7510/15
GP5-CMAES-Bajer-2013instances 2.5 (3)15 (13)125 (177)∞∞∞∞7600/15
GP5-CMAES-Bajer 4.4 (7)33 (36)∞∞∞∞∞7530/15
IPOPCMAv3p61-Bajer-2013instances 2.8 (3)3.7 (1)3.4 (0.9)3.5 (0.7)3.3 (0.8)3.6 (0.4)∞7510/15
IPOPCMAv3p61-Bajer 2.0 (1)3.1 (0.6)3.1 (0.7)3.1 (0.8)3.0 (0.6)3.7 (2)10 (10)0/15
LHD-10xDefault-MATSuMoTo-Brockhoff 4.2 (5)∞∞∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 4.7 (7)∞∞∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 3.0 (4)∞∞∞∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 13 (8)58 (64)∞∞∞∞∞7510/15
RF1-CMAES-Bajer 5.1 (9)60 (76)120 (109)∞∞∞∞7510/15
RF5-CMAES-Bajer-2013instances 42 (28)∞∞∞∞∞∞7600/15
RF5-CMAES-Bajer 55 (37)∞∞∞∞∞∞7620/15
STEPif-Posik 105 (229)325 (243)1008 (846)1682 (1214)∞∞∞3e40/15
STEPifeg-Posik 80 (38)293 (590)457 (423)596 (730)848 (944)1976 (2409)∞3e40/15
STEPrr-Posik 75 (214)188 (144)419 (431)526 (976)578 (689)1817 (3519)∞3e40/15

Δ fopt
f7, 3-D		 1e1
11		 1e0
65		 1e-1
342		 1e-2
464		 1e-3
482		 1e-5
482		 1e-7
535		 #succ
15/15
BrentSTEPif-Posik 63 (0.5)314 (213)199 (267)425 (422)∞∞∞3e40/15
BrentSTEPifeg-Posik 50 (184)301 (680)131 (178)201 (308)901 (1173)901 (1157)812 (972)0/15
BrentSTEPqi-Posik 173 (920)279 (248)206 (435)285 (206)442 (500)442 (219)398 (638)2/15
BrentSTEPrr-Posik 136 (46)316 (363)197 (270)442 (325)∞∞∞3e40/15
CMA-CSA-Atamna 2.9 (2)1.8 (0.9)0.75 (0.8)0.75 (0.6)0.93 (0.5)0.93 (0.5)0.91 (0.4)15/15
CMA-MSR-Atamna 3.6 (4)1.7 (0.5)1.2 (0.6)1.3 (1)1.3 (1)1.3 (1)1.4 (1.0)15/15
CMA-TPA-Atamna 3.9 (4)3.0 (4)1.0 (0.8)0.87 (0.6)0.99 (0.5)0.99 (0.6)1.0 (0.5)15/15
GP1-CMAES-Bajer-2013instances 2.1 (2)1.2 (1)0.89 (1)0.98 (1)1.4 (0.8)1.4 (1)1.7 (1)5/15
GP1-CMAES-Bajer 2.3 (0.5)1.6 (1)0.81 (0.3)0.96 (0.3)1.0 (1)1.0 (0.8)1.5 (1.0)5/15
GP5-CMAES-Bajer-2013instances 2.1 (1)0.95 (0.9)0.49 (0.3)0.69 (0.6)1.2 (1)1.2 (1)1.6 (3)3/15
GP5-CMAES-Bajer 2.5 (1)2.2 (3)0.85 (0.7)1.7 (2)2.8 (4)2.8 (2)3.2 (4)2/15
IPOPCMAv3p61-Bajer-2013instances 5.1 (2)2.8 (2)1.2 (0.6)1.1 (0.8)1.1 (1)1.1 (0.8)1.2 (0.3)11/15
IPOPCMAv3p61-Bajer 3.0 (2)2.1 (3)1.2 (2)1.2 (1)1.2 (2)1.2 (0.8)1.3 (1)10/15
LHD-10xDefault-MATSuMoTo-Brockhoff 3.8 (4)2.5 (3)3.2 (3)∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.9 (2)1.7 (1)1.8 (3)∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.5 (2)1.2 (0.7)3.2 (1)4.7 (3)4.5 (5)4.5 (7)∞1500/15
RF1-CMAES-Bajer-2013instances 7.8 (16)4.2 (2)2.9 (3)7.5 (14)11 (8)11 (14)21 (12)1/15
RF1-CMAES-Bajer 5.0 (5)5.2 (6)3.7 (3)7.5 (10)11 (7)11 (16)∞7600/15
RF5-CMAES-Bajer-2013instances 10 (27)26 (20)∞∞∞∞∞7550/15
RF5-CMAES-Bajer 6.3 (9)22 (39)32 (36)∞∞∞∞7620/15
STEPif-Posik 63 (232)203 (279)115 (69)276 (485)419 (502)419 (286)378 (366)2/15
STEPifeg-Posik 39 (47)165 (163)132 (191)205 (167)417 (579)417 (469)376 (676)2/15
STEPrr-Posik 101 (94)249 (534)116 (100)286 (279)∞∞∞3e40/15

Δ fopt
f8, 3-D		 1e1
27		 1e0
45		 1e-1
152		 1e-2
179		 1e-3
188		 1e-5
198		 1e-7
208		 #succ
15/15
BrentSTEPif-Posik 5.8 (12)113 (222)266 (359)∞∞∞∞3e40/15
BrentSTEPifeg-Posik 7.4 (9)99 (67)397 (245)1161 (1184)2255 (1218)∞∞3e40/15
BrentSTEPqi-Posik 6.3 (14)177 (611)787 (1181)2193 (1566)∞∞∞3e40/15
BrentSTEPrr-Posik 3.7 (8)209 (324)593 (502)715 (1016)1046 (1883)∞∞3e40/15
CMA-CSA-Atamna 3.4 (1)6.2 (3)3.3 (1)3.5 (1)3.7 (0.6)4.0 (1)4.3 (0.9)15/15
CMA-MSR-Atamna 3.2 (2)10 (11)4.5 (3)4.5 (2)4.7 (2)5.1 (2)5.5 (1)15/15
CMA-TPA-Atamna 3.7 (2)8.2 (4)3.7 (3)3.9 (2)4.1 (2)4.5 (2)4.7 (1)15/15
GP1-CMAES-Bajer-2013instances 2.6 (1)13 (15)13 (15)19 (23)28 (40)28 (46)53 (230)1/15
GP1-CMAES-Bajer 2.6 (1)15 (17)36 (54)∞∞∞∞7510/15
GP5-CMAES-Bajer-2013instances 2.3 (2)6.5 (12)4.4 (4)8.9 (5)18 (20)26 (43)25 (16)2/15
GP5-CMAES-Bajer 1.9 (0.7)9.3 (9)7.5 (4)18 (13)17 (25)17 (11)16 (16)3/15
IPOPCMAv3p61-Bajer-2013instances 3.4 (0.6)7.9 (6)5.4 (5)6.1 (3)7.9 (9)18 (19)27 (29)0/15
IPOPCMAv3p61-Bajer 3.0 (0.4)7.6 (3)4.6 (2)8.0 (6)11 (13)18 (20)18 (12)1/15
LHD-10xDefault-MATSuMoTo-Brockhoff 8.8 (3)50 (43)∞∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.7 (2)12 (14)∞∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.7 (3)8.9 (11)∞∞∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 8.4 (16)112 (101)∞∞∞∞∞7510/15
RF1-CMAES-Bajer 8.3 (5)49 (96)34 (26)∞∞∞∞7510/15
RF5-CMAES-Bajer-2013instances 31 (28)237 (293)∞∞∞∞∞7530/15
RF5-CMAES-Bajer 51 (43)248 (256)∞∞∞∞∞7530/15
STEPif-Posik 1.4 (1)155 (419)260 (343)2116 (1808)2015 (2232)∞∞3e40/15
STEPifeg-Posik 1.3 (1)67 (120)123 (193)254 (195)∞∞∞3e40/15
STEPrr-Posik 1.2 (0.9)123 (250)211 (294)653 (756)1956 (3967)∞∞3e40/15

Δ fopt
f9, 3-D		 1e1
21		 1e0
65		 1e-1
127		 1e-2
149		 1e-3
159		 1e-5
169		 1e-7
178		 #succ
15/15
BrentSTEPif-Posik 12 (15)952 (1862)3292 (4205)∞∞∞∞3e40/15
BrentSTEPifeg-Posik 14 (11)153 (213)∞∞∞∞∞3e40/15
BrentSTEPqi-Posik 8.4 (12)108 (142)1513 (1634)1291 (1201)2527 (3104)∞∞3e40/15
BrentSTEPrr-Posik 8.0 (13)110 (48)3049 (2806)∞∞∞∞3e40/15
CMA-CSA-Atamna 3.7 (1)4.8 (5)4.0 (2)4.2 (2)4.5 (3)4.8 (2)5.1 (2)15/15
CMA-MSR-Atamna 5.7 (5)8.6 (4)6.1 (4)6.0 (2)5.9 (2)6.3 (2)7.0 (2)15/15
CMA-TPA-Atamna 4.3 (2)6.9 (3)5.4 (3)5.4 (2)5.5 (2)5.8 (2)6.1 (3)15/15
GP1-CMAES-Bajer-2013instances 3.4 (1)15 (14)26 (17)36 (37)34 (39)64 (133)61 (60)1/15
GP1-CMAES-Bajer 3.6 (2)6.4 (9)12 (21)17 (20)22 (45)32 (43)63 (55)1/15
GP5-CMAES-Bajer-2013instances 2.4 (1)5.4 (7)8.8 (10)12 (15)21 (10)20 (29)19 (20)1/15
GP5-CMAES-Bajer 2.3 (2)7.9 (15)9.1 (14)23 (25)22 (19)21 (22)30 (39)2/15
IPOPCMAv3p61-Bajer-2013instances 3.5 (2)4.7 (1)5.2 (3)8.3 (6)13 (10)16 (13)31 (36)1/15
IPOPCMAv3p61-Bajer 4.8 (3)4.1 (4)4.9 (3)7.4 (7)9.4 (10)33 (33)63 (71)0/15
LHD-10xDefault-MATSuMoTo-Brockhoff 10 (7)∞∞∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.4 (1)17 (5)18 (12)∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.5 (1)11 (10)18 (15)∞∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 8.0 (7)35 (53)84 (98)∞∞∞∞7510/15
RF1-CMAES-Bajer 4.9 (3)15 (17)∞∞∞∞∞7510/15
RF5-CMAES-Bajer-2013instances 36 (18)78 (79)∞∞∞∞∞7530/15
RF5-CMAES-Bajer 44 (51)∞∞∞∞∞∞7600/15
STEPif-Posik 1.8 (1)153 (147)3111 (3338)∞∞∞∞3e40/15
STEPifeg-Posik 1.9 (2)76 (154)1594 (2226)∞∞∞∞3e40/15
STEPrr-Posik 1.5 (0.7)117 (194)906 (651)∞∞∞∞2e40/15

Δ fopt
f10, 3-D		 1e1
114		 1e0
152		 1e-1
168		 1e-2
180		 1e-3
194		 1e-5
218		 1e-7
242		 #succ
15/15
BrentSTEPif-Posik 783 (1335)1254 (1889)∞∞∞∞∞1e40/15
BrentSTEPifeg-Posik 805 (899)1212 (1283)1154 (1234)1078 (647)∞∞∞1e40/15
BrentSTEPqi-Posik 442 (586)725 (526)∞∞∞∞∞2e40/15
BrentSTEPrr-Posik 732 (883)1157 (981)∞∞∞∞∞1e40/15
CMA-CSA-Atamna 3.3 (2)3.0 (0.3)3.0 (0.9)3.2 (0.8)3.3 (0.4)3.3 (0.4)3.4 (0.2)15/15
CMA-MSR-Atamna 3.8 (2)3.4 (1)3.5 (0.9)3.7 (1)3.8 (0.9)4.0 (0.7)4.4 (0.5)15/15
CMA-TPA-Atamna 3.3 (0.8)3.1 (0.7)3.4 (0.4)3.5 (0.4)3.5 (0.7)3.5 (0.5)3.5 (0.5)15/15
GP1-CMAES-Bajer-2013instances 2.5 (0.8)2.8 (1.0)3.1 (0.7)3.1 (0.6)3.3 (0.7)3.8 (3)4.9 (2)4/15
GP1-CMAES-Bajer 2.6 (1)3.0 (1)3.0 (0.7)3.4 (0.6)3.7 (0.4)3.9 (3)5.0 (6)2/15
GP5-CMAES-Bajer-2013instances 1.2 (0.4)1.1 (0.4)1.2 (0.2)1.3 (0.4)1.2 (0.2)1.2 (0.3)1.9 (0.9)9/15
GP5-CMAES-Bajer 1.2 (0.3)1.2 (0.5)1.3 (0.3)1.3 (0.3)1.3 (0.1)1.3 (0.3)1.6 (1)5/15
IPOPCMAv3p61-Bajer-2013instances 3.9 (4)4.4 (3)6.1 (3)10 (19)19 (16)∞∞7510/15
IPOPCMAv3p61-Bajer 4.2 (1.0)11 (10)22 (36)62 (82)∞∞∞7510/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 47 (64)∞∞∞∞∞∞7510/15
RF1-CMAES-Bajer 21 (20)72 (78)∞∞∞∞∞7510/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞7530/15
RF5-CMAES-Bajer 99 (90)∞∞∞∞∞∞7600/15
STEPif-Posik 285 (273)482 (339)∞∞∞∞∞44820/15
STEPifeg-Posik 286 (272)467 (405)∞∞∞∞∞44860/15
STEPrr-Posik 161 (271)194 (334)413 (386)∞∞∞∞36480/15

Δ fopt
f11, 3-D		 1e1
67		 1e0
105		 1e-1
227		 1e-2
263		 1e-3
277		 1e-5
302		 1e-7
327		 #succ
15/15
BrentSTEPif-Posik 164 (171)422 (375)879 (1439)∞∞∞∞1e40/15
BrentSTEPifeg-Posik 124 (125)401 (757)∞∞∞∞∞1e40/15
BrentSTEPqi-Posik 218 (168)1152 (1279)∞∞∞∞∞2e40/15
BrentSTEPrr-Posik 147 (161)539 (698)811 (1989)∞∞∞∞1e40/15
CMA-CSA-Atamna 4.6 (1)4.5 (1)2.5 (0.4)2.3 (0.3)2.3 (0.5)2.5 (0.6)2.5 (0.3)15/15
CMA-MSR-Atamna 5.8 (4)4.6 (1)2.5 (0.5)2.4 (0.4)2.5 (0.5)2.8 (0.4)3.2 (0.3)15/15
CMA-TPA-Atamna 4.8 (3)4.5 (1)2.5 (0.4)2.4 (0.4)2.5 (0.6)2.6 (0.4)2.6 (0.3)15/15
GP1-CMAES-Bajer-2013instances 4.8 (3)4.4 (1)2.3 (0.4)2.2 (0.4)2.4 (1)3.1 (0.3)5.5 (2)2/15
GP1-CMAES-Bajer 5.6 (4)5.8 (4)3.0 (2)3.2 (5)3.3 (1)5.9 (4)8.6 (4)2/15
GP5-CMAES-Bajer-2013instances 2.1 (1)1.8 (0.6)0.96 (0.2)0.90 (0.2)0.91 (0.3)0.92 (0.2)1.7 (1)5/15
GP5-CMAES-Bajer 1.9 (0.8)1.7 (0.5)0.95 (0.2)0.90 (0.1)0.95 (0.1)0.96 (0.1)1.3 (0.5)6/15
IPOPCMAv3p61-Bajer-2013instances 8.8 (5)12 (4)16 (8)42 (53)40 (42)∞∞7510/15
IPOPCMAv3p61-Bajer 6.8 (12)19 (25)15 (24)21 (24)20 (31)∞∞7510/15
LHD-10xDefault-MATSuMoTo-Brockhoff 33 (16)∞∞∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 16 (14)∞∞∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 11 (15)∞∞∞∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 46 (54)101 (91)47 (63)∞∞∞∞7510/15
RF1-CMAES-Bajer 27 (20)101 (277)∞∞∞∞∞7510/15
RF5-CMAES-Bajer-2013instances 34 (42)∞∞∞∞∞∞7530/15
RF5-CMAES-Bajer 20 (17)∞∞∞∞∞∞7530/15
STEPif-Posik 76 (230)365 (401)∞∞∞∞∞75790/15
STEPifeg-Posik 51 (140)359 (281)∞∞∞∞∞75330/15
STEPrr-Posik 68 (77)307 (598)227 (196)∞∞∞∞65630/15

Δ fopt
f12, 3-D		 1e1
65		 1e0
168		 1e-1
338		 1e-2
401		 1e-3
445		 1e-5
696		 1e-7
790		 #succ
15/15
BrentSTEPif-Posik 62 (232)80 (96)108 (90)380 (558)∞∞∞96900/15
BrentSTEPifeg-Posik 59 (73)48 (26)75 (85)171 (259)332 (386)∞∞89870/15
BrentSTEPqi-Posik 70 (46)71 (135)107 (226)488 (614)439 (405)∞∞1e40/15
BrentSTEPrr-Posik 61 (77)46 (23)44 (47)152 (107)∞∞∞76340/15
CMA-CSA-Atamna 6.7 (7)5.1 (3)3.8 (3)4.0 (3)4.0 (2)3.7 (7)3.8 (2)15/15
CMA-MSR-Atamna 10 (21)6.7 (11)4.6 (5)4.6 (2)4.7 (9)3.9 (4)4.0 (2)15/15
CMA-TPA-Atamna 7.6 (4)5.0 (6)3.2 (5)3.0 (4)3.0 (4)2.4 (2)2.7 (3)15/15
GP1-CMAES-Bajer-2013instances 5.8 (5)4.3 (5)3.4 (6)5.2 (10)8.2 (6)∞∞7510/15
GP1-CMAES-Bajer 8.4 (5)4.8 (11)3.7 (3)4.9 (3)25 (14)∞∞7510/15
GP5-CMAES-Bajer-2013instances 7.7 (12)4.9 (5)6.7 (7)8.1 (15)12 (13)∞∞7530/15
GP5-CMAES-Bajer 5.0 (6)3.4 (6)3.1 (2)3.5 (8)12 (25)∞∞7530/15
IPOPCMAv3p61-Bajer-2013instances 7.7 (11)5.9 (5)15 (11)28 (25)∞∞∞7510/15
IPOPCMAv3p61-Bajer 6.8 (4)4.3 (1)4.8 (2)∞∞∞∞7510/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 11 (9)13 (8)∞∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 11 (12)∞∞∞∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 14 (13)20 (19)33 (41)28 (52)25 (38)∞∞7510/15
RF1-CMAES-Bajer 13 (22)11 (12)∞∞∞∞∞7510/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞7530/15
RF5-CMAES-Bajer 168 (204)∞∞∞∞∞∞7530/15
STEPif-Posik 10 (20)19 (26)26 (37)∞∞∞∞32480/15
STEPifeg-Posik 8.3 (5)20 (11)36 (101)131 (133)∞∞∞34950/15
STEPrr-Posik 14 (32)19 (41)35 (18)62 (53)112 (92)∞∞34190/15

Δ fopt
f13, 3-D		 1e1
49		 1e0
85		 1e-1
108		 1e-2
136		 1e-3
215		 1e-5
281		 1e-7
365		 #succ
15/15
BrentSTEPif-Posik 302 (244)706 (1471)1558 (3271)2701 (2737)∞∞∞3e40/15
BrentSTEPifeg-Posik 293 (287)554 (1217)1558 (2953)∞∞∞∞3e40/15
BrentSTEPqi-Posik 185 (329)407 (306)1056 (560)2768 (4951)∞∞∞3e40/15
BrentSTEPrr-Posik 171 (221)662 (1065)1575 (2399)1260 (2620)∞∞∞2e40/15
CMA-CSA-Atamna 4.6 (3)4.5 (1)4.4 (0.6)4.2 (0.7)3.1 (0.5)3.4 (0.3)3.2 (0.3)15/15
CMA-MSR-Atamna 4.0 (1)4.2 (1)4.7 (2)4.8 (0.8)3.6 (0.6)3.7 (0.3)3.6 (0.5)15/15
CMA-TPA-Atamna 3.5 (1.0)3.6 (1)4.3 (1)4.6 (0.5)3.6 (0.6)3.5 (0.2)3.4 (0.7)15/15
GP1-CMAES-Bajer-2013instances 5.1 (2)5.7 (5)11 (16)18 (25)51 (80)∞∞7510/15
GP1-CMAES-Bajer 4.4 (0.8)6.2 (8)31 (19)40 (26)∞∞∞7510/15
GP5-CMAES-Bajer-2013instances 1.2 (0.5)2.6 (0.9)3.4 (0.8)3.4 (3)4.0 (4)∞∞7530/15
GP5-CMAES-Bajer 2.3 (2)2.8 (2)3.5 (1)3.9 (5)3.9 (1)∞∞7530/15
IPOPCMAv3p61-Bajer-2013instances 7.3 (9)6.7 (4)8.7 (5)11 (4)13 (10)∞∞7510/15
IPOPCMAv3p61-Bajer 5.9 (7)5.9 (1)10 (9)13 (15)26 (65)∞∞7510/15
LHD-10xDefault-MATSuMoTo-Brockhoff 4.0 (5)∞∞∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.7 (2)4.6 (3)∞∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.8 (2)26 (25)∞∞∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 13 (8)60 (113)∞∞∞∞∞7510/15
RF1-CMAES-Bajer 12 (8)132 (126)∞∞∞∞∞7510/15
RF5-CMAES-Bajer-2013instances 39 (53)126 (154)∞∞∞∞∞7600/15
RF5-CMAES-Bajer 23 (33)∞∞∞∞∞∞7600/15
STEPif-Posik 141 (75)776 (770)1357 (1444)2338 (1485)∞∞∞2e40/15
STEPifeg-Posik 218 (233)479 (521)1451 (1145)2427 (5671)∞∞∞2e40/15
STEPrr-Posik 131 (107)633 (1086)928 (1036)1199 (1062)∞∞∞2e40/15

Δ fopt
f14, 3-D		 1e1
2.0		 1e0
17		 1e-1
28		 1e-2
43		 1e-3
71		 1e-5
110		 1e-7
194		 #succ
15/15
BrentSTEPif-Posik 1.9 (2)5.4 (4)5.0 (10)188 (354)6285 (8876)∞∞3e40/15
BrentSTEPifeg-Posik 1.9 (0.8)4.8 (8)4.4 (8)33 (16)1329 (1987)∞∞3e40/15
BrentSTEPqi-Posik 1.9 (2)4.0 (0.9)3.3 (6)15 (13)1022 (1080)∞∞3e40/15
BrentSTEPrr-Posik 1.9 (2)5.5 (7)4.6 (7)28 (42)779 (1178)∞∞3e40/15
CMA-CSA-Atamna 4.2 (6)2.3 (3)3.7 (0.7)4.1 (2)4.4 (1)5.1 (0.8)4.2 (0.2)15/15
CMA-MSR-Atamna 2.7 (3)3.2 (3)4.5 (2)5.8 (1.0)5.1 (1)5.6 (0.7)4.5 (0.9)15/15
CMA-TPA-Atamna 4.8 (4)3.5 (2)4.5 (0.8)4.2 (1)3.9 (1.0)4.9 (0.6)4.1 (0.6)15/15
GP1-CMAES-Bajer-2013instances 4.3 (6)2.5 (1)2.8 (1)3.5 (0.9)6.3 (3)23 (26)∞7510/15
GP1-CMAES-Bajer 3.6 (4)2.1 (0.6)2.6 (0.8)3.3 (1)4.1 (3)48 (88)∞7510/15
GP5-CMAES-Bajer-2013instances 3.7 (2)1.8 (1)1.8 (0.8)2.2 (1)3.6 (4)31 (28)∞7530/15
GP5-CMAES-Bajer 4.0 (4)1.8 (0.6)1.7 (0.5)1.9 (0.3)2.1 (0.6)32 (21)∞7600/15
IPOPCMAv3p61-Bajer-2013instances 2.4 (3)3.1 (2)3.6 (1)4.0 (1)4.4 (1)8.9 (2)∞7510/15
IPOPCMAv3p61-Bajer 4.0 (3)3.6 (3)4.3 (2)5.2 (0.8)5.4 (1)16 (12)∞7510/15
LHD-10xDefault-MATSuMoTo-Brockhoff 1.7 (2)4.1 (0.6)3.9 (0.3)8.3 (4)∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.1 (0.8)1.4 (0.3)1.7 (0.6)24 (24)∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.6 (2)1.4 (0.5)1.9 (0.3)12 (6)∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 3.2 (7)7.7 (5)14 (27)24 (26)71 (124)∞∞7510/15
RF1-CMAES-Bajer 4.2 (5)3.2 (0.8)6.6 (8)10 (6)23 (12)∞∞7510/15
RF5-CMAES-Bajer-2013instances 2.1 (2)24 (54)41 (39)72 (97)151 (90)∞∞7530/15
RF5-CMAES-Bajer 3.3 (4)37 (29)59 (59)∞∞∞∞7530/15
STEPif-Posik 1.9 (0.8)1.7 (0.8)2.4 (1)21 (44)2772 (4333)∞∞3e40/15
STEPifeg-Posik 1.9 (3)1.6 (1)2.1 (2)12 (10)618 (702)∞∞3e40/15
STEPrr-Posik 1.9 (2)1.4 (0.7)1.6 (1)12 (16)1294 (726)∞∞3e40/15

Δ fopt
f15, 3-D		 1e1
121		 1e0
1372		 1e-1
6285		 1e-2
8282		 1e-3
8429		 1e-5
8787		 1e-7
9041		 #succ
15/15
BrentSTEPif-Posik 62 (77)291 (305)∞∞∞∞∞3e40/15
BrentSTEPifeg-Posik 50 (60)84 (62)30 (50)23 (7)23 (17)22 (26)46 (79)0/15
BrentSTEPqi-Posik 84 (113)60 (107)63 (78)48 (67)47 (60)45 (34)45 (36)0/15
BrentSTEPrr-Posik 80 (122)47 (54)31 (39)23 (26)23 (29)22 (18)22 (25)2/15
CMA-CSA-Atamna 1.2 (0.6)1.3 (1)0.83 (0.6)0.64 (0.6)0.65 (0.6)0.65 (0.6)0.66 (0.6)15/15
CMA-MSR-Atamna 2.7 (5)1.8 (2)0.72 (0.4)0.56 (0.5)0.57 (0.7)0.58 (0.4)0.60 (0.3)15/15
CMA-TPA-Atamna 1.00 (0.5)1.6 (1)1.1 (0.7)0.91 (0.4)0.91 (0.5)0.91 (0.4)0.92 (0.7)15/15
GP1-CMAES-Bajer-2013instances 2.2 (2)1.7 (2)1.7 (1)1.3 (3)1.3 (1)1.3 (2)1.2 (0.7)0/15
GP1-CMAES-Bajer 0.92 (0.4)0.87 (1)1.8 (1)∞∞∞∞7510/15
GP5-CMAES-Bajer-2013instances 0.74 (0.5)3.8 (4)∞∞∞∞∞7600/15
GP5-CMAES-Bajer 0.88 (1.0)7.8 (6)1.7 (2)1.3 (0.8)1.3 (2)1.2 (3)1.2 (2)1/15
IPOPCMAv3p61-Bajer-2013instances 0.98 (0.5)1.4 (0.9)∞∞∞∞∞7510/15
IPOPCMAv3p61-Bajer 1.1 (0.4)1.8 (1)∞∞∞∞∞7510/15
LHD-10xDefault-MATSuMoTo-Brockhoff 1.6 (0.3)∞∞∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.1 (1)∞∞∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 0.72 (0.5)1.6 (2)0.35 (0.3)∞∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 1.0 (0.9)∞∞∞∞∞∞7510/15
RF1-CMAES-Bajer 2.0 (2)3.8 (2)1.7 (2)1.3 (2)1.3 (2)∞∞7510/15
RF5-CMAES-Bajer-2013instances 4.7 (8)∞∞∞∞∞∞7600/15
RF5-CMAES-Bajer 8.2 (14)∞∞∞∞∞∞7600/15
STEPif-Posik 51 (104)88 (82)∞∞∞∞∞3e40/15
STEPifeg-Posik 32 (50)41 (19)21 (26)16 (22)16 (13)24 (31)47 (24)1/15
STEPrr-Posik 25 (5)33 (22)∞∞∞∞∞3e40/15

Δ fopt
f16, 3-D		 1e1
41		 1e0
319		 1e-1
582		 1e-2
789		 1e-3
1864		 1e-5
3204		 1e-7
3361		 #succ
15/15
BrentSTEPif-Posik 1.9 (2)24 (40)57 (63)168 (183)∞∞∞3e40/15
BrentSTEPifeg-Posik 1.6 (2)20 (18)74 (61)163 (172)108 (138)∞∞3e40/15
BrentSTEPqi-Posik 1.9 (4)26 (38)63 (43)164 (102)217 (250)∞∞3e40/15
BrentSTEPrr-Posik 1.5 (2)19 (24)144 (102)161 (184)107 (57)∞∞3e40/15
CMA-CSA-Atamna 1.7 (2)3.1 (5)3.5 (4)2.7 (3)1.2 (1)0.74 (0.7)0.75 (0.7)15/15
CMA-MSR-Atamna 6.6 (10)7.1 (5)5.3 (8)4.4 (8)3.0 (6)1.9 (3)1.9 (1)15/15
CMA-TPA-Atamna 3.2 (2)4.8 (5)3.6 (6)3.9 (7)1.7 (2)1.1 (1.0)1.1 (0.5)15/15
GP1-CMAES-Bajer-2013instances 1.2 (0.8)3.1 (2)3.2 (2)6.6 (8)2.8 (2)1.7 (1)∞7510/15
GP1-CMAES-Bajer 1.4 (1.0)5.3 (8)5.8 (3)14 (11)∞∞∞7510/15
GP5-CMAES-Bajer-2013instances 0.78 (0.6)3.6 (4)4.1 (7)4.4 (4)2.9 (3)3.4 (5)∞7600/15
GP5-CMAES-Bajer 1.9 (0.6)2.7 (2)2.2 (3)2.5 (2)2.8 (2)∞∞7600/15
IPOPCMAv3p61-Bajer-2013instances 1.6 (1)1.7 (1)1.8 (1)2.0 (2)1.1 (2)0.66 (0.6)1.1 (1)2/15
IPOPCMAv3p61-Bajer 1.2 (1)1.9 (1)3.4 (2)4.4 (7)1.9 (2)1.1 (0.9)1.6 (1)2/15
LHD-10xDefault-MATSuMoTo-Brockhoff 0.98 (1)1.2 (2)3.8 (7)∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.0 (1)1.00 (1)3.7 (4)∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.3 (1)1.0 (2)∞∞∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 1.0 (1)3.4 (4)4.0 (3)4.3 (2)∞∞∞7510/15
RF1-CMAES-Bajer 1.3 (0.4)2.2 (8)5.7 (6)∞∞∞∞7510/15
RF5-CMAES-Bajer-2013instances 2.7 (0.5)4.6 (5)9.1 (14)∞∞∞∞7600/15
RF5-CMAES-Bajer 3.0 (5)11 (12)19 (12)14 (12)6.0 (4)∞∞7530/15
STEPif-Posik 1.0 (0.6)12 (20)36 (92)91 (65)111 (101)∞∞3e40/15
STEPifeg-Posik 1.0 (0.6)10 (20)28 (61)265 (310)112 (151)∞∞3e40/15
STEPrr-Posik 1.2 (0.7)19 (19)47 (40)257 (155)∞∞∞3e40/15

Δ fopt
f17, 3-D		 1e1
4.0		 1e0
78		 1e-1
282		 1e-2
491		 1e-3
1134		 1e-5
2347		 1e-7
3469		 #succ
15/15
BrentSTEPif-Posik 2.6 (4)54 (111)143 (111)267 (482)385 (506)∞∞3e40/15
BrentSTEPifeg-Posik 3.3 (6)47 (22)304 (460)879 (961)384 (238)∞∞3e40/15
BrentSTEPqi-Posik 2.7 (3)70 (26)73 (81)180 (298)187 (113)∞∞3e40/15
BrentSTEPrr-Posik 4.7 (11)53 (13)116 (186)248 (289)374 (381)∞∞3e40/15
CMA-CSA-Atamna 2.0 (2)1.2 (0.1)0.93 (0.2)1.3 (1)0.78 (0.8)0.86 (0.4)0.81 (0.6)15/15
CMA-MSR-Atamna 2.8 (3)3.3 (7)2.3 (2)1.9 (1)0.97 (0.7)1.1 (0.6)1.0 (0.4)15/15
CMA-TPA-Atamna 4.0 (5)1.5 (0.7)0.85 (0.5)0.78 (0.3)0.77 (0.6)1.2 (1)1.2 (0.6)15/15
GP1-CMAES-Bajer-2013instances 2.1 (3)2.4 (5)1.5 (0.8)3.0 (3)3.2 (4)∞∞7510/15
GP1-CMAES-Bajer 3.0 (2)1.7 (3)1.7 (0.9)3.2 (4)10 (22)∞∞7510/15
GP5-CMAES-Bajer-2013instances 2.9 (3)4.2 (4)3.5 (4)22 (19)∞∞∞7530/15
GP5-CMAES-Bajer 8.2 (22)2.6 (4)4.6 (6)11 (19)∞∞∞7600/15
IPOPCMAv3p61-Bajer-2013instances 4.8 (7)1.6 (0.8)0.94 (0.3)0.92 (0.2)0.74 (0.9)4.8 (3)∞7510/15
IPOPCMAv3p61-Bajer 3.4 (4)3.0 (5)1.6 (2)1.3 (0.5)0.80 (1)2.4 (3)∞7510/15
LHD-10xDefault-MATSuMoTo-Brockhoff 2.5 (3)1.7 (2)7.9 (13)∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.1 (2)1.4 (3)∞∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.4 (2)1.0 (0.4)2.6 (3)∞∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 3.7 (3)6.2 (10)8.2 (11)22 (19)∞∞∞7510/15
RF1-CMAES-Bajer 3.5 (2)5.9 (14)11 (10)22 (20)10 (7)∞∞7510/15
RF5-CMAES-Bajer-2013instances 19 (32)12 (16)40 (25)∞∞∞∞7600/15
RF5-CMAES-Bajer 16 (3)13 (20)∞∞∞∞∞7600/15
STEPif-Posik 4.2 (10)30 (169)69 (73)268 (344)∞∞∞3e40/15
STEPifeg-Posik 3.5 (12)47 (193)48 (77)193 (126)∞∞∞3e40/15
STEPrr-Posik 3.3 (6)15 (52)51 (47)184 (459)378 (516)∞∞3e40/15

Δ fopt
f18, 3-D		 1e1
40		 1e0
145		 1e-1
1289		 1e-2
3084		 1e-3
3523		 1e-5
4738		 1e-7
5527		 #succ
15/15
BrentSTEPif-Posik 1.3 (2)210 (247)149 (104)∞∞∞∞3e40/15
BrentSTEPifeg-Posik 1.6 (0.3)132 (219)324 (470)∞∞∞∞3e40/15
BrentSTEPqi-Posik 1.1 (2)127 (284)332 (659)∞∞∞∞3e40/15
BrentSTEPrr-Posik 17 (2)72 (149)151 (198)∞∞∞∞3e40/15
CMA-CSA-Atamna 1.4 (0.8)3.1 (9)1.2 (1)0.71 (0.8)0.81 (0.7)0.85 (0.5)0.95 (0.5)15/15
CMA-MSR-Atamna 1.4 (0.7)5.1 (4)1.1 (0.6)0.73 (1)0.96 (0.6)0.96 (0.4)1.0 (0.5)15/15
CMA-TPA-Atamna 1.7 (1)4.2 (8)1.0 (0.9)0.55 (0.3)0.75 (0.4)0.85 (0.4)0.93 (0.2)15/15
GP1-CMAES-Bajer-2013instances 1.3 (1)3.7 (3)2.6 (4)3.6 (5)∞∞∞7510/15
GP1-CMAES-Bajer 1.1 (0.7)2.3 (2)1.4 (3)1.8 (2)∞∞∞7510/15
GP5-CMAES-Bajer-2013instances 5.7 (6)3.3 (3)2.5 (3)3.5 (3)∞∞∞7600/15
GP5-CMAES-Bajer 1.2 (0.4)3.3 (8)8.4 (11)∞∞∞∞7530/15
IPOPCMAv3p61-Bajer-2013instances 1.8 (0.9)4.2 (3)2.0 (2)1.2 (2)1.6 (3)∞∞7510/15
IPOPCMAv3p61-Bajer 1.6 (1)2.6 (3)1.9 (1)1.7 (2)3.2 (2)∞∞7510/15
LHD-10xDefault-MATSuMoTo-Brockhoff 2.1 (0.2)15 (13)∞∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 0.93 (0.9)2.4 (3)∞∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 0.97 (1.0)2.7 (3)∞∞∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 7.7 (0.8)12 (21)4.1 (4)∞∞∞∞7510/15
RF1-CMAES-Bajer 1.6 (0.6)9.0 (12)1.8 (1)3.5 (3)∞∞∞7510/15
RF5-CMAES-Bajer-2013instances 5.1 (6)16 (12)∞∞∞∞∞7600/15
RF5-CMAES-Bajer 11 (14)23 (23)∞∞∞∞∞7530/15
STEPif-Posik 3.8 (2)110 (99)142 (184)∞∞∞∞3e40/15
STEPifeg-Posik 1.5 (1)74 (95)93 (89)∞∞∞∞3e40/15
STEPrr-Posik 1.2 (2)90 (96)93 (150)∞∞∞∞3e40/15

Δ fopt
f19, 3-D		 1e1
1		 1e0
1		 1e-1
109		 1e-2
6764		 1e-3
7367		 1e-5
7399		 1e-7
7441		 #succ
15/15
BrentSTEPif-Posik 8.3 (5)242 (164)36 (8)30 (31)57 (43)∞∞3e40/15
BrentSTEPifeg-Posik 8.3 (7)220 (261)17 (6)61 (86)∞∞∞3e40/15
BrentSTEPqi-Posik 8.3 (6)253 (228)46 (85)10 (9)55 (52)∞∞3e40/15
BrentSTEPrr-Posik 8.3 (8)237 (160)33 (28)66 (58)∞∞∞3e40/15
CMA-CSA-Atamna 11 (11)352 (553)39 (21)2.1 (1.0)2.4 (3)2.5 (3)2.5 (2)15/15
CMA-MSR-Atamna 8.8 (11)251 (590)96 (108)46 (94)94 (153)122 (154)122 (176)4/15
CMA-TPA-Atamna 8.7 (5)172 (100)41 (60)2.3 (3)2.8 (2)2.9 (3)2.9 (4)15/15
GP1-CMAES-Bajer-2013instances 6.1 (7)154 (138)48 (43)∞∞∞∞7530/15
GP1-CMAES-Bajer 10 (6)160 (63)48 (105)∞∞∞∞7530/15
GP5-CMAES-Bajer-2013instances 10 (12)282 (222)104 (190)∞∞∞∞7620/15
GP5-CMAES-Bajer 7.3 (8)143 (219)21 (27)∞∞∞∞7620/15
IPOPCMAv3p61-Bajer-2013instances 9.4 (10)189 (107)∞∞∞∞∞7510/15
IPOPCMAv3p61-Bajer 7.5 (6)126 (114)∞∞∞∞∞7510/15
LHD-10xDefault-MATSuMoTo-Brockhoff 8.9 (16)522 (509)∞∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 8.1 (6)229 (154)∞∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 8.3 (4)455 (364)∞∞∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 10 (9)210 (274)24 (38)∞∞∞∞7510/15
RF1-CMAES-Bajer 11 (12)157 (54)98 (114)∞∞∞∞7510/15
RF5-CMAES-Bajer-2013instances 8.1 (8)456 (251)∞∞∞∞∞7550/15
RF5-CMAES-Bajer 6.8 (8)425 (650)102 (107)∞∞∞∞7550/15
STEPif-Posik 8.7 (6)338 (305)36 (82)63 (111)∞∞∞3e40/15
STEPifeg-Posik 8.7 (7)289 (469)19 (34)63 (86)59 (39)∞∞3e40/15
STEPrr-Posik 8.7 (8)433 (1023)21 (37)19 (23)∞∞∞3e40/15

Δ fopt
f20, 3-D		 1e1
8.0		 1e0
385		 1e-1
2291		 1e-2
2398		 1e-3
2481		 1e-5
2573		 1e-7
2776		 #succ
15/15
BrentSTEPif-Posik 3.9 (7)17 (37)87 (121)84 (115)81 (228)80 (122)76 (45)1/15
BrentSTEPifeg-Posik 5.1 (2)13 (38)17 (25)16 (21)16 (13)16 (18)18 (24)7/15
BrentSTEPqi-Posik 3.1 (4)11 (14)31 (20)30 (54)29 (34)37 (70)35 (31)4/15
BrentSTEPrr-Posik 2.4 (1)14 (12)19 (29)19 (14)18 (15)24 (29)23 (45)6/15
CMA-CSA-Atamna 2.4 (2)4.5 (3)3.6 (5)3.7 (3)3.6 (4)3.7 (4)3.5 (4)15/15
CMA-MSR-Atamna 2.9 (2)13 (10)151 (119)269 (259)261 (499)253 (426)235 (298)5/15
CMA-TPA-Atamna 3.9 (3)7.6 (12)10 (8)10 (12)10 (4)10 (14)10 (11)15/15
GP1-CMAES-Bajer-2013instances 2.8 (3)3.7 (8)∞∞∞∞∞7510/15
GP1-CMAES-Bajer 2.0 (2)5.6 (8)2.2 (2)4.5 (5)4.4 (3)4.3 (5)4.0 (5)1/15
GP5-CMAES-Bajer-2013instances 1.8 (2)2.0 (3)∞∞∞∞∞7600/15
GP5-CMAES-Bajer 2.2 (2)4.8 (4)∞∞∞∞∞7600/15
IPOPCMAv3p61-Bajer-2013instances 3.6 (3)4.5 (4)∞∞∞∞∞7510/15
IPOPCMAv3p61-Bajer 3.5 (2)8.3 (10)4.7 (4)4.6 (7)4.4 (6)4.3 (5)4.0 (6)1/15
LHD-10xDefault-MATSuMoTo-Brockhoff 4.3 (4)∞∞∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.1 (0.9)∞∞∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.1 (1)∞∞∞∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 8.6 (11)5.9 (12)∞∞∞∞∞7510/15
RF1-CMAES-Bajer 3.3 (2)13 (28)∞∞∞∞∞7510/15
RF5-CMAES-Bajer-2013instances 40 (22)∞∞∞∞∞∞7600/15
RF5-CMAES-Bajer 23 (36)∞∞∞∞∞∞7600/15
STEPif-Posik 3.4 (4)10 (18)20 (10)20 (20)19 (24)22 (13)26 (53)4/15
STEPifeg-Posik 3.0 (2)7.3 (9)19 (14)18 (16)17 (30)21 (37)25 (25)5/15
STEPrr-Posik 2.7 (2)9.0 (16)17 (15)16 (14)16 (9)15 (30)20 (16)6/15

Δ fopt
f21, 3-D		 1e1
6.0		 1e0
184		 1e-1
425		 1e-2
439		 1e-3
458		 1e-5
469		 1e-7
482		 #succ
14/15
BrentSTEPif-Posik 1.5 (1)104 (83)114 (93)145 (176)143 (168)192 (304)265 (173)3/15
BrentSTEPifeg-Posik 1.5 (2)105 (127)55 (43)55 (52)60 (42)75 (84)148 (124)4/15
BrentSTEPqi-Posik 1.5 (1)167 (317)120 (111)118 (122)114 (149)142 (199)188 (228)4/15
BrentSTEPrr-Posik 1.5 (1)141 (246)145 (102)142 (398)137 (228)141 (224)268 (561)3/15
CMA-CSA-Atamna 1.3 (0.9)6.7 (3)5.9 (7)6.5 (10)6.8 (6)7.0 (9)7.1 (13)15/15
CMA-MSR-Atamna 2.0 (2)17 (37)154 (346)251 (354)240 (168)235 (482)229 (163)11/15
CMA-TPA-Atamna 1.6 (2)2.1 (2)17 (51)20 (16)20 (30)59 (322)58 (187)14/15
GP1-CMAES-Bajer-2013instances 0.92 (0.8)17 (34)25 (16)24 (42)23 (18)23 (20)∞7510/15
GP1-CMAES-Bajer 1.9 (1)2.4 (6)2.8 (3)3.6 (6)3.5 (4)3.5 (4)4.0 (4)4/15
GP5-CMAES-Bajer-2013instances 1.4 (0.9)4.0 (4)5.6 (9)5.5 (4)5.3 (3)7.2 (7)22 (22)1/15
GP5-CMAES-Bajer 1.9 (2)4.4 (15)4.2 (4)4.2 (2)4.0 (4)5.5 (7)∞7530/15
IPOPCMAv3p61-Bajer-2013instances 1.9 (1)4.3 (4)7.2 (11)11 (18)11 (13)11 (14)11 (8)2/15
IPOPCMAv3p61-Bajer 1.3 (2)27 (60)25 (43)24 (40)23 (23)23 (24)22 (19)1/15
LHD-10xDefault-MATSuMoTo-Brockhoff 1.7 (1)0.75 (0.2)0.66 (0.4)1.2 (1.0)1.6 (2)4.8 (5)∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.2 (0.7)1.2 (1)1.7 (1)2.5 (2)4.9 (6)∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.2 (2)1.0 (1.0)1.2 (4)2.5 (2)∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 2.1 (2)5.0 (5)5.0 (12)5.0 (4)5.0 (7)6.8 (14)7.1 (8)2/15
RF1-CMAES-Bajer 1.6 (0.8)8.8 (11)12 (12)12 (8)23 (23)23 (36)22 (22)1/15
RF5-CMAES-Bajer-2013instances 1.9 (1)8.0 (12)13 (17)26 (34)∞∞∞7600/15
RF5-CMAES-Bajer 1.3 (2)9.1 (8)7.7 (16)11 (10)11 (6)∞∞7530/15
STEPif-Posik 2.1 (2)106 (163)142 (230)138 (101)134 (148)147 (77)258 (295)3/15
STEPifeg-Posik 1.9 (2)111 (109)77 (40)76 (74)74 (129)113 (322)159 (93)4/15
STEPrr-Posik 1.9 (2)163 (367)195 (300)190 (138)183 (228)184 (186)407 (561)2/15

Δ fopt
f22, 3-D		 1e1
18		 1e0
170		 1e-1
354		 1e-2
362		 1e-3
384		 1e-5
401		 1e-7
414		 #succ
15/15
BrentSTEPif-Posik 10 (30)219 (279)245 (188)373 (191)1094 (1263)1048 (948)1019 (1871)1/15
BrentSTEPifeg-Posik 7.7 (4)87 (231)73 (47)144 (131)240 (307)335 (206)1080 (1015)0/15
BrentSTEPqi-Posik 4.8 (11)130 (284)108 (65)210 (211)359 (469)527 (754)∞3e40/15
BrentSTEPrr-Posik 3.9 (7)146 (318)187 (346)344 (312)525 (876)1068 (616)1059 (760)0/15
CMA-CSA-Atamna 1.4 (1)11 (12)227 (201)363 (9)399 (507)705 (959)683 (1277)7/15
CMA-MSR-Atamna 2.0 (3)5.9 (14)36 (115)107 (62)207 (371)199 (383)193 (364)12/15
CMA-TPA-Atamna 1.9 (1)19 (50)267 (569)305 (602)424 (1021)646 (1125)1335 (1481)5/15
GP1-CMAES-Bajer-2013instances 1.7 (2)3.8 (3)4.6 (3)6.4 (9)6.2 (8)8.9 (8)13 (19)2/15
GP1-CMAES-Bajer 1.3 (1)7.8 (5)9.0 (7)9.1 (7)8.7 (19)8.6 (8)8.5 (12)3/15
GP5-CMAES-Bajer-2013instances 4.3 (5)10 (9)10 (11)10 (5)9.2 (10)27 (60)26 (37)0/15
GP5-CMAES-Bajer 6.3 (11)4.6 (7)9.1 (13)9.1 (10)8.7 (11)13 (13)∞7600/15
IPOPCMAv3p61-Bajer-2013instances 2.1 (1)10 (18)15 (13)14 (24)14 (12)13 (9)13 (12)2/15
IPOPCMAv3p61-Bajer 4.5 (2)4.5 (2)6.7 (5)6.7 (5)6.4 (11)6.2 (7)6.2 (4)4/15
LHD-10xDefault-MATSuMoTo-Brockhoff 1.7 (1)0.88 (0.7)3.0 (4)∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.4 (1.0)2.2 (2)∞∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 0.98 (0.5)1.1 (2)3.1 (3)∞∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 1.7 (1)5.5 (12)14 (22)29 (21)28 (11)27 (20)∞7510/15
RF1-CMAES-Bajer 4.4 (11)13 (24)∞∞∞∞∞7510/15
RF5-CMAES-Bajer-2013instances 6.9 (15)11 (11)15 (13)31 (32)∞∞∞7530/15
RF5-CMAES-Bajer 4.3 (8)29 (32)∞∞∞∞∞7600/15
STEPif-Posik 3.3 (8)67 (193)181 (282)377 (242)1100 (936)1118 (1457)∞3e40/15
STEPifeg-Posik 1.9 (1)61 (61)77 (61)105 (236)192 (289)1059 (1721)∞3e40/15
STEPrr-Posik 1.5 (2)66 (242)50 (43)84 (162)243 (173)527 (692)∞3e40/15

Δ fopt
f23, 3-D		 1e1
3.0		 1e0
407		 1e-1
906		 1e-2
1215		 1e-3
2214		 1e-5
2293		 1e-7
2393		 #succ
15/15
BrentSTEPif-Posik 3.3 (4)2.1 (2)158 (160)∞∞∞∞3e40/15
BrentSTEPifeg-Posik 3.3 (2)1.5 (1.0)220 (234)∞∞∞∞3e40/15
BrentSTEPqi-Posik 3.2 (3)2.1 (1)56 (45)∞∞∞∞3e40/15
BrentSTEPrr-Posik 3.4 (3)1.6 (2)486 (481)∞∞∞∞3e40/15
CMA-CSA-Atamna 2.9 (8)6.2 (6)14 (35)11 (41)6.1 (23)6.1 (4)6.0 (14)15/15
CMA-MSR-Atamna 2.3 (2)4.2 (4)3.3 (2)2.7 (2)1.6 (1)1.7 (0.7)1.8 (1)15/15
CMA-TPA-Atamna 3.6 (2)9.4 (6)13 (5)11 (27)5.9 (2)5.9 (24)5.9 (14)15/15
GP1-CMAES-Bajer-2013instances 2.9 (1)13 (12)∞∞∞∞∞7530/15
GP1-CMAES-Bajer 3.3 (6)3.2 (6)∞∞∞∞∞7530/15
GP5-CMAES-Bajer-2013instances 5.0 (4)1.1 (1)2.7 (2)∞∞∞∞7530/15
GP5-CMAES-Bajer 3.1 (4)1.2 (1)5.7 (6)8.9 (5)4.9 (9)∞∞7530/15
IPOPCMAv3p61-Bajer-2013instances 3.8 (5)6.3 (7)∞∞∞∞∞7510/15
IPOPCMAv3p61-Bajer 3.7 (4)4.6 (3)12 (16)∞∞∞∞7510/15
LHD-10xDefault-MATSuMoTo-Brockhoff 5.6 (7)∞∞∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 3.5 (2)∞∞∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 3.9 (5)∞∞∞∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 4.4 (4)∞∞∞∞∞∞7530/15
RF1-CMAES-Bajer 1.7 (1)27 (39)∞∞∞∞∞7530/15
RF5-CMAES-Bajer-2013instances 3.1 (4)8.1 (6)∞∞∞∞∞7620/15
RF5-CMAES-Bajer 2.6 (1)13 (15)∞∞∞∞∞7550/15
STEPif-Posik 3.2 (4)2.7 (2)111 (99)∞∞∞∞3e40/15
STEPifeg-Posik 3.2 (3)2.5 (0.9)146 (75)∞∞∞∞3e40/15
STEPrr-Posik 3.2 (2)1.9 (1)493 (440)∞∞∞∞3e40/15

Δ fopt
f24, 3-D		 1e1
97		 1e0
10391		 1e-1
1.0e5		 1e-2
3.6e5		 1e-3
3.6e5		 1e-5
3.6e5		 1e-7
3.6e5		 #succ
2/15
BrentSTEPif-Posik 4.5 (6)12 (19)∞∞∞∞∞3e40/15
BrentSTEPifeg-Posik 4.1 (4)39 (65)∞∞∞∞∞3e40/15
BrentSTEPqi-Posik 5.0 (6)39 (33)∞∞∞∞∞3e40/15
BrentSTEPrr-Posik 3.0 (4)18 (10)∞∞∞∞∞3e40/15
CMA-CSA-Atamna 1.8 (2)116 (123)∞∞∞∞∞3e50/15
CMA-MSR-Atamna 2.4 (0.8)45 (102)19 (11)∞∞∞∞3e50/15
CMA-TPA-Atamna 2.5 (1)117 (123)∞∞∞∞∞3e50/15
GP1-CMAES-Bajer-2013instances 1.5 (1)∞∞∞∞∞∞7510/15
GP1-CMAES-Bajer 1.3 (0.8)∞∞∞∞∞∞7530/15
GP5-CMAES-Bajer-2013instances 1.5 (2)1.0 (1)∞∞∞∞∞7600/15
GP5-CMAES-Bajer 2.8 (2)1.0 (0.9)∞∞∞∞∞7550/15
IPOPCMAv3p61-Bajer-2013instances 2.0 (2)∞∞∞∞∞∞7510/15
IPOPCMAv3p61-Bajer 2.4 (2)∞∞∞∞∞∞7510/15
LHD-10xDefault-MATSuMoTo-Brockhoff 11 (21)∞∞∞∞∞∞1500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 3.5 (7)∞∞∞∞∞∞1500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 11 (5)∞∞∞∞∞∞1500/15
RF1-CMAES-Bajer-2013instances 2.6 (2)∞∞∞∞∞∞7510/15
RF1-CMAES-Bajer 3.3 (5)∞∞∞∞∞∞7510/15
RF5-CMAES-Bajer-2013instances 6.1 (9)∞∞∞∞∞∞7550/15
RF5-CMAES-Bajer 6.0 (3)∞∞∞∞∞∞7550/15
STEPif-Posik 2.4 (2)18 (18)∞∞∞∞∞3e40/15
STEPifeg-Posik 2.3 (3)8.9 (7)∞∞∞∞∞3e40/15
STEPrr-Posik 1.8 (2)39 (29)3.9 (3)∞∞∞∞3e40/15

Previous dimension | Dimension = 5 | Next dimension

Δ fopt
f1, 5-D		 1e1
11		 1e0
12		 1e-1
12		 1e-2
12		 1e-3
12		 1e-5
12		 1e-7
12		 #succ
15/15
BrentSTEPif-Posik 1.6 (0.2)2.0 (0.2)2.2 (0.2)2.2 (0.2)2.3 (0.1)2.3 (0.1)2.3 (0.1)15/15
BrentSTEPifeg-Posik 1.6 (0.2)2.0 (0.2)2.2 (0.1)2.2 (0.1)2.3 (0.1)2.3 (0.1)2.3 (0.1)15/15
BrentSTEPqi-Posik 1.6 (0.2)2.0 (0.2)2.2 (0.2)2.2 (0.2)2.3 (0.1)2.3 (0.2)2.3 (0.1)15/15
BrentSTEPrr-Posik 1.6 (0.4)2.0 (0.2)2.2 (0.3)2.2 (0.1)2.3 (0.2)2.3 (0.1)2.3 (0.1)15/15
CMA-CSA-Atamna 3.8 (2)10 (3)16 (3)22 (3)29 (5)41 (3)52 (6)15/15
CMA-MSR-Atamna 3.6 (2)12 (3)21 (6)32 (3)41 (6)63 (3)83 (8)15/15
CMA-TPA-Atamna 3.2 (3)9.3 (4)14 (7)20 (4)25 (6)37 (7)48 (5)15/15
GP1-CMAES-Bajer-2013instances 2.3 (1)6.1 (2)9.2 (2)13 (2)16 (3)21 (2)31 (6)15/15
GP1-CMAES-Bajer 2.5 (2)6.5 (1)10 (2)13 (2)16 (2)23 (3)32 (5)15/15
GP5-CMAES-Bajer-2013instances 1.7 (0.8)3.0 (0.4)3.9 (0.6)5.2 (0.5)6.3 (0.5)8.5 (1)45 (44)11/15
GP5-CMAES-Bajer 1.7 (0.5)3.0 (0.4)4.0 (0.5)5.1 (0.6)6.1 (0.4)9.4 (3)35 (13)14/15
IPOPCMAv3p61-Bajer-2013instances 2.5 (1)10 (2)16 (4)22 (2)27 (5)39 (6)52 (5)15/15
IPOPCMAv3p61-Bajer 2.7 (3)10 (6)16 (3)22 (3)28 (6)41 (5)53 (10)15/15
LHD-10xDefault-MATSuMoTo-Brockhoff 5.6 (5)10 (0.1)12 (1)13 (1)15 (0.9)∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.1 (0.2)3.4 (0.6)5.0 (0.9)8.9 (12)29 (21)∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.0 (0.5)3.1 (0.9)4.6 (0.7)8.2 (3)65 (94)∞∞2500/15
RF1-CMAES-Bajer-2013instances 2.8 (0.8)7.6 (1)14 (3)28 (54)52 (33)229 (120)1508 (2595)1/15
RF1-CMAES-Bajer 2.6 (2)8.3 (2)15 (10)25 (14)44 (36)217 (118)758 (917)1/15
RF5-CMAES-Bajer-2013instances 2.4 (1)43 (40)93 (54)1541 (1098)∞∞∞12520/15
RF5-CMAES-Bajer 2.2 (1)42 (34)163 (104)1563 (2249)∞∞∞12520/15
STEPif-Posik 1.6 (0.5)2.1 (0.2)2.9 (0.2)4.5 (0.8)5.4 (0.8)6.9 (0.6)7.8 (0.4)15/15
STEPifeg-Posik 1.6 (0.5)2.1 (0.2)2.9 (0.1)4.1 (0.5)5.1 (0.9)6.9 (1)7.9 (0.5)15/15
STEPrr-Posik 1.6 (0.3)2.1 (0.1)2.9 (0.1)3.6 (0.2)4.2 (0.2)5.7 (0.1)6.9 (0.1)15/15

Δ fopt
f2, 5-D		 1e1
83		 1e0
87		 1e-1
88		 1e-2
89		 1e-3
90		 1e-5
92		 1e-7
94		 #succ
15/15
BrentSTEPif-Posik 0.63 (0.1)0.66 (0.2)0.73 (0.1)0.76 (0.1)0.84 (0.1)0.95 (0.2)1.0 (0.2)15/15
BrentSTEPifeg-Posik 0.64 (0.2)0.66 (0.3)0.72 (0.1)0.77 (0.2)0.84 (0.1)0.96 (0.2)1.1 (0.2)15/15
BrentSTEPqi-Posik 0.46 (0.1)0.46 (0.1)★0.50 (0.0)★20.55 (0.0)★20.59 (0.1)★30.70 (0.1)★20.83 (0.1)★15/15
BrentSTEPrr-Posik 0.56 (0.2)0.59 (0.1)0.63 (0.1)0.72 (0.1)0.79 (0.1)0.90 (0.2)1.0 (0.2)15/15
CMA-CSA-Atamna 11 (2)13 (1)14 (0.8)14 (1)15 (1)16 (1)17 (2)15/15
CMA-MSR-Atamna 12 (3)13 (2)14 (1)15 (2)16 (1)18 (1)20 (3)15/15
CMA-TPA-Atamna 10 (3)12 (2)14 (3)15 (3)15 (2)17 (0.8)18 (3)15/15
GP1-CMAES-Bajer-2013instances 9.2 (4)15 (5)27 (21)28 (15)33 (49)67 (27)200 (204)0/15
GP1-CMAES-Bajer 8.9 (3)11 (4)24 (23)33 (15)34 (32)68 (106)∞12580/15
GP5-CMAES-Bajer-2013instances 3.8 (1)4.4 (1)5.0 (1)5.4 (2)5.6 (1)6.5 (1)12 (8)2/15
GP5-CMAES-Bajer 4.1 (2)4.8 (1)5.3 (2)5.7 (2)6.9 (8)7.1 (2)15 (18)0/15
IPOPCMAv3p61-Bajer-2013instances 26 (16)215 (242)∞∞∞∞∞12580/15
IPOPCMAv3p61-Bajer 18 (2)68 (91)∞∞∞∞∞12580/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞12580/15
RF1-CMAES-Bajer ∞∞∞∞∞∞∞12580/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞12600/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞12520/15
STEPif-Posik 0.74 (0.2)0.96 (0.2)1.00 (0.3)1.1 (0.2)1.1 (0.2)1.3 (0.1)1.3 (0.1)15/15
STEPifeg-Posik 0.75 (0.1)0.91 (0.2)0.96 (0.2)1.1 (0.2)1.1 (0.2)1.3 (0.1)1.3 (0.1)15/15
STEPrr-Posik 0.72 (0.0)0.82 (0.1)0.88 (0.1)0.98 (0.1)1.1 (0.1)1.2 (0.0)1.4 (0.1)15/15

Δ fopt
f3, 5-D		 1e1
716		 1e0
1622		 1e-1
1637		 1e-2
1642		 1e-3
1646		 1e-5
1650		 1e-7
1654		 #succ
15/15
BrentSTEPif-Posik 0.11 (0.1)0.14 (0.0)0.19 (0.1)0.19 (0.1)0.19 (0.1)0.19 (0.1)0.19 (0.1)15/15
BrentSTEPifeg-Posik 0.11 (0.1)0.13 (0.0)0.18 (0.0)0.19 (0.0)0.19 (0.1)0.19 (0.1)0.19 (0.0)15/15
BrentSTEPqi-Posik 0.10 (0.1)0.13 (0.0)0.18 (0.1)0.18 (0.1)0.18 (0.1)0.18 (0.1)0.18 (0.0)15/15
BrentSTEPrr-Posik 0.09 (0.1)0.13 (0.0)0.16 (0.0)0.17 (0.0)0.17 (0.1)0.18 (0.0)0.18 (0.1)15/15
CMA-CSA-Atamna 1.4 (1)32 (11)623 (845)622 (917)620 (608)619 (450)618 (617)5/15
CMA-MSR-Atamna 1.7 (2)5.7 (3)36 (10)36 (14)36 (84)37 (11)38 (14)14/15
CMA-TPA-Atamna 0.81 (0.7)9.3 (7)632 (1465)630 (1006)629 (1390)628 (838)627 (1664)5/15
GP1-CMAES-Bajer-2013instances 1.6 (1.0)∞∞∞∞∞∞12580/15
GP1-CMAES-Bajer 1.5 (2)∞∞∞∞∞∞12580/15
GP5-CMAES-Bajer-2013instances 2.6 (3)∞∞∞∞∞∞12620/15
GP5-CMAES-Bajer 25 (40)∞∞∞∞∞∞12620/15
IPOPCMAv3p61-Bajer-2013instances 1.1 (1.0)5.5 (7)∞∞∞∞∞12580/15
IPOPCMAv3p61-Bajer 1.3 (0.6)∞∞∞∞∞∞12580/15
LHD-10xDefault-MATSuMoTo-Brockhoff 1.0 (0.7)∞∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.5 (4)∞∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 0.58 (0.5)∞∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 3.0 (3)∞∞∞∞∞∞12580/15
RF1-CMAES-Bajer 1.6 (2)∞∞∞∞∞∞12580/15
RF5-CMAES-Bajer-2013instances 6.1 (5)∞∞∞∞∞∞12520/15
RF5-CMAES-Bajer 4.7 (4)∞∞∞∞∞∞12520/15
STEPif-Posik 0.13 (0.0)0.15 (0.1)0.17 (0.0)0.19 (0.0)0.20 (0.0)0.20 (0.0)0.21 (0.0)15/15
STEPifeg-Posik 0.13 (0.0)0.14 (0.0)0.16 (0.0)0.18 (0.0)0.19 (0.0)0.20 (0.0)0.21 (0.0)15/15
STEPrr-Posik 0.12 (0.0)0.12 (0.0)0.14 (0.0)0.15 (0.0)0.16 (0.0)0.17 (0.0)0.20 (0.1)15/15

Δ fopt
f4, 5-D		 1e1
809		 1e0
1633		 1e-1
1688		 1e-2
1758		 1e-3
1817		 1e-5
1886		 1e-7
1903		 #succ
15/15
BrentSTEPif-Posik 0.15 (0.1)0.23 (0.1)0.37 (0.2)0.36 (0.2)0.35 (0.1)0.35 (0.1)0.37 (0.1)15/15
BrentSTEPifeg-Posik 0.15 (0.0)0.22 (0.1)0.38 (0.1)0.37 (0.1)0.36 (0.2)0.36 (0.1)0.38 (0.1)15/15
BrentSTEPqi-Posik 0.17 (0.1)0.21 (0.1)0.33 (0.1)0.32 (0.1)0.31 (0.1)0.31 (0.1)0.37 (0.0)15/15
BrentSTEPrr-Posik 0.15 (0.1)0.21 (0.1)0.29 (0.1)0.29 (0.1)0.30 (0.1)0.32 (0.1)0.40 (0.1)15/15
CMA-CSA-Atamna 2.2 (1)∞∞∞∞∞∞5e50/15
CMA-MSR-Atamna 2.2 (2)∞∞∞∞∞∞5e50/15
CMA-TPA-Atamna 2.7 (2)∞∞∞∞∞∞5e50/15
GP1-CMAES-Bajer-2013instances 4.4 (3)∞∞∞∞∞∞12580/15
GP1-CMAES-Bajer 5.0 (3)∞∞∞∞∞∞12580/15
GP5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞12540/15
GP5-CMAES-Bajer ∞∞∞∞∞∞∞12600/15
IPOPCMAv3p61-Bajer-2013instances 2.5 (2)∞∞∞∞∞∞12580/15
IPOPCMAv3p61-Bajer 1.4 (1)∞∞∞∞∞∞12580/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 11 (7)∞∞∞∞∞∞12580/15
RF1-CMAES-Bajer 22 (17)∞∞∞∞∞∞12580/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞12520/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞12600/15
STEPif-Posik 0.15 (0.1)0.27 (0.1)0.46 (0.1)0.63 (0.2)0.71 (0.2)0.92 (0.2)0.94 (0.2)15/15
STEPifeg-Posik 0.15 (0.0)0.26 (0.1)0.44 (0.1)0.60 (0.3)0.69 (0.2)0.91 (0.2)0.94 (0.1)15/15
STEPrr-Posik 0.14 (0.0)0.24 (0.1)0.40 (0.1)0.53 (0.1)0.61 (0.1)0.87 (0.1)0.94 (0.1)15/15

Δ fopt
f5, 5-D		 1e1
10		 1e0
10		 1e-1
10		 1e-2
10		 1e-3
10		 1e-5
10		 1e-7
10		 #succ
15/15
BrentSTEPif-Posik 1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)15/15
BrentSTEPifeg-Posik 1.5 (0.1)1.5 (0)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)15/15
BrentSTEPqi-Posik 1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)15/15
BrentSTEPrr-Posik 1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)15/15
CMA-CSA-Atamna 3.6 (2)5.0 (2)5.2 (2)5.2 (1)5.2 (2)5.2 (2)5.2 (2)15/15
CMA-MSR-Atamna 4.2 (2)5.8 (2)5.9 (3)5.9 (3)5.9 (3)5.9 (3)5.9 (2)15/15
CMA-TPA-Atamna 4.0 (3)5.0 (2)5.1 (2)5.1 (2)5.1 (2)5.1 (2)5.1 (2)15/15
GP1-CMAES-Bajer-2013instances 4.0 (1)15 (34)25 (6)26 (48)26 (48)26 (48)26 (59)15/15
GP1-CMAES-Bajer 5.2 (3)21 (27)33 (54)34 (41)34 (32)34 (49)34 (49)14/15
GP5-CMAES-Bajer-2013instances 2.8 (0.8)6.1 (5)6.4 (4)6.4 (4)6.4 (3)6.4 (4)6.4 (3)15/15
GP5-CMAES-Bajer 2.4 (0.6)3.8 (2)5.1 (2)5.2 (2)5.2 (2)5.2 (2)5.2 (2)15/15
IPOPCMAv3p61-Bajer-2013instances 8.6 (4)17 (19)21 (11)21 (22)21 (14)21 (9)21 (9)15/15
IPOPCMAv3p61-Bajer 5.0 (2)17 (14)21 (19)22 (16)22 (13)22 (18)22 (17)15/15
LHD-10xDefault-MATSuMoTo-Brockhoff 12 (0.2)13 (0.3)13 (0.3)13 (0.1)13 (0.2)13 (0)13 (0.2)15/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.6 (0.1)3.0 (0.4)3.0 (0.5)3.1 (0.5)3.5 (0.6)3.5 (3)3.5 (0.6)15/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.6 (0.1)3.1 (0.3)3.1 (0.1)3.1 (0.2)3.1 (0.2)3.1 (0.2)3.1 (0.2)15/15
RF1-CMAES-Bajer-2013instances 9.0 (1)36 (38)42 (15)44 (45)45 (35)45 (31)45 (42)15/15
RF1-CMAES-Bajer 7.2 (2)45 (25)49 (26)50 (55)51 (56)51 (29)51 (47)14/15
RF5-CMAES-Bajer-2013instances 15 (27)94 (163)123 (122)124 (51)137 (84)137 (190)137 (97)10/15
RF5-CMAES-Bajer 28 (32)111 (182)171 (87)235 (125)239 (206)239 (240)239 (267)6/15
STEPif-Posik 1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)15/15
STEPifeg-Posik 1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)15/15
STEPrr-Posik 1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)15/15

Δ fopt
f6, 5-D		 1e1
114		 1e0
214		 1e-1
281		 1e-2
404		 1e-3
580		 1e-5
1038		 1e-7
1332		 #succ
15/15
BrentSTEPif-Posik 159 (207)484 (735)2385 (3392)∞∞∞∞5e40/15
BrentSTEPifeg-Posik 77 (192)122 (175)346 (394)∞∞∞∞5e40/15
BrentSTEPqi-Posik 68 (10)108 (378)347 (224)821 (623)1220 (2286)∞∞5e40/15
BrentSTEPrr-Posik 59 (99)106 (129)270 (218)1696 (1975)∞∞∞5e40/15
CMA-CSA-Atamna 2.0 (0.7)1.9 (0.3)2.0 (0.4)1.8 (0.2)1.5 (0.2)1.2 (0.2)1.1 (0.1)15/15
CMA-MSR-Atamna 2.5 (0.3)2.0 (0.6)2.1 (0.4)1.9 (0.3)1.6 (0.2)1.2 (0.2)1.2 (0.2)15/15
CMA-TPA-Atamna 2.2 (0.9)1.9 (0.3)1.9 (0.4)1.7 (0.5)1.4 (0.1)1.0 (0.1)1.0 (0.1)15/15
GP1-CMAES-Bajer-2013instances 2.5 (0.5)10 (7)67 (54)∞∞∞∞12580/15
GP1-CMAES-Bajer 2.5 (2)4.6 (4)32 (21)∞∞∞∞12580/15
GP5-CMAES-Bajer-2013instances 6.4 (12)∞∞∞∞∞∞12600/15
GP5-CMAES-Bajer 7.0 (13)83 (72)∞∞∞∞∞12600/15
IPOPCMAv3p61-Bajer-2013instances 2.1 (0.6)2.2 (0.5)2.2 (0.5)1.9 (0.6)1.9 (1)2.9 (3)∞12580/15
IPOPCMAv3p61-Bajer 1.6 (0.9)1.8 (0.4)1.9 (0.3)1.7 (0.3)1.5 (0.2)1.4 (1.0)14 (16)0/15
LHD-10xDefault-MATSuMoTo-Brockhoff 16 (16)∞∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 9.4 (12)∞∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 32 (65)∞∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 16 (19)∞∞∞∞∞∞12580/15
RF1-CMAES-Bajer 12 (8)∞∞∞∞∞∞12580/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞12600/15
RF5-CMAES-Bajer 165 (75)∞∞∞∞∞∞12600/15
STEPif-Posik 76 (96)219 (265)716 (629)∞∞∞∞5e40/15
STEPifeg-Posik 37 (96)91 (115)176 (223)857 (1382)1218 (2046)∞∞5e40/15
STEPrr-Posik 43 (49)55 (21)130 (226)∞∞∞∞4e40/15

Δ fopt
f7, 5-D		 1e1
24		 1e0
324		 1e-1
1171		 1e-2
1451		 1e-3
1572		 1e-5
1572		 1e-7
1597		 #succ
15/15
BrentSTEPif-Posik 555 (764)1036 (1322)∞∞∞∞∞5e40/15
BrentSTEPifeg-Posik 723 (1228)753 (467)∞∞∞∞∞5e40/15
BrentSTEPqi-Posik 370 (425)725 (1400)∞∞∞∞∞5e40/15
BrentSTEPrr-Posik 259 (277)1049 (1996)∞∞∞∞∞5e40/15
CMA-CSA-Atamna 4.8 (3)1.3 (0.5)0.87 (0.4)0.80 (0.5)0.80 (0.6)0.80 (0.5)0.86 (0.6)15/15
CMA-MSR-Atamna 5.2 (5)1.1 (1)0.94 (0.8)0.90 (0.5)0.90 (0.3)0.90 (0.3)0.92 (0.3)15/15
CMA-TPA-Atamna 4.0 (2)0.98 (0.5)0.93 (0.3)0.86 (0.6)0.82 (0.4)0.82 (0.6)0.83 (0.4)15/15
GP1-CMAES-Bajer-2013instances 3.9 (5)1.4 (1)0.81 (0.8)2.2 (1.0)3.7 (6)3.7 (6)5.6 (6)2/15
GP1-CMAES-Bajer 3.6 (3)1.2 (0.3)0.99 (1)6.3 (10)5.9 (4)5.9 (4)5.8 (6)1/15
GP5-CMAES-Bajer-2013instances 2.1 (0.8)0.82 (0.6)0.61 (0.3)∞∞∞∞12600/15
GP5-CMAES-Bajer 1.6 (1)0.46 (0.5)0.69 (0.5)12 (15)11 (12)11 (8)∞12700/15
IPOPCMAv3p61-Bajer-2013instances 5.0 (6)1.5 (1)1.6 (1)1.8 (2)2.6 (4)2.6 (2)3.5 (0.8)3/15
IPOPCMAv3p61-Bajer 4.7 (3)1.4 (0.4)2.2 (3)2.3 (2)2.8 (2)2.8 (4)5.5 (7)1/15
LHD-10xDefault-MATSuMoTo-Brockhoff 6.1 (1)5.5 (5)∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 4.9 (4)11 (18)∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 4.0 (4)11 (5)∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 11 (20)10 (13)∞∞∞∞∞12600/15
RF1-CMAES-Bajer 6.8 (9)9.2 (7)∞∞∞∞∞12540/15
RF5-CMAES-Bajer-2013instances 19 (29)17 (19)∞∞∞∞∞12700/15
RF5-CMAES-Bajer 20 (12)56 (44)∞∞∞∞∞12700/15
STEPif-Posik 126 (316)204 (137)∞∞∞∞∞5e40/15
STEPifeg-Posik 180 (384)276 (319)620 (678)∞∞∞∞5e40/15
STEPrr-Posik 59 (66)306 (212)621 (699)502 (391)∞∞∞5e40/15

Δ fopt
f8, 5-D		 1e1
73		 1e0
273		 1e-1
336		 1e-2
372		 1e-3
391		 1e-5
410		 1e-7
422		 #succ
15/15
BrentSTEPif-Posik 77 (117)74 (58)364 (230)∞∞∞∞5e40/15
BrentSTEPifeg-Posik 24 (31)94 (139)595 (492)542 (593)1721 (3175)∞∞5e40/15
BrentSTEPqi-Posik 12 (9)58 (88)952 (688)∞∞∞∞5e40/15
BrentSTEPrr-Posik 19 (12)52 (102)403 (839)815 (836)∞∞∞4e40/15
CMA-CSA-Atamna 3.0 (0.8)5.1 (3)5.3 (4)5.4 (4)5.5 (4)5.7 (4)6.0 (3)15/15
CMA-MSR-Atamna 4.7 (1)3.6 (3)4.1 (0.4)4.3 (1)4.3 (2)4.7 (0.6)5.1 (0.7)15/15
CMA-TPA-Atamna 4.1 (2)6.0 (4)6.2 (4)6.2 (3)6.3 (3)6.5 (3)6.7 (3)15/15
GP1-CMAES-Bajer-2013instances 3.2 (0.7)10 (7)56 (64)∞∞∞∞12580/15
GP1-CMAES-Bajer 2.8 (2)13 (9)∞∞∞∞∞12580/15
GP5-CMAES-Bajer-2013instances 10 (22)∞∞∞∞∞∞12600/15
GP5-CMAES-Bajer 14 (5)∞∞∞∞∞∞12600/15
IPOPCMAv3p61-Bajer-2013instances 4.0 (3)5.6 (3)18 (20)50 (46)48 (42)∞∞12580/15
IPOPCMAv3p61-Bajer 3.2 (0.5)3.0 (0.7)8.8 (11)25 (19)∞∞∞12580/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 16 (26)∞∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 8.7 (12)∞∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 10 (19)68 (47)∞∞∞∞∞12580/15
RF1-CMAES-Bajer 12 (15)∞∞∞∞∞∞12580/15
RF5-CMAES-Bajer-2013instances 255 (232)∞∞∞∞∞∞12520/15
RF5-CMAES-Bajer 114 (145)∞∞∞∞∞∞12520/15
STEPif-Posik 4.6 (2)93 (141)172 (240)855 (1782)∞∞∞5e40/15
STEPifeg-Posik 3.0 (2)61 (102)163 (149)570 (489)1698 (3210)1621 (1846)∞4e40/15
STEPrr-Posik 2.1 (2)54 (159)178 (125)1661 (3994)∞∞∞4e40/15

Δ fopt
f9, 5-D		 1e1
35		 1e0
127		 1e-1
214		 1e-2
263		 1e-3
300		 1e-5
335		 1e-7
369		 #succ
15/15
BrentSTEPif-Posik 36 (113)1130 (1551)3088 (3234)∞∞∞∞5e40/15
BrentSTEPifeg-Posik 14 (34)663 (1167)3062 (2012)∞∞∞∞5e40/15
BrentSTEPqi-Posik 11 (22)453 (637)1405 (1886)∞∞∞∞5e40/15
BrentSTEPrr-Posik 14 (14)811 (1328)2783 (3124)∞∞∞∞4e40/15
CMA-CSA-Atamna 5.6 (1)10 (9)7.7 (6)7.1 (5)6.7 (3)6.5 (1)6.4 (0.4)15/15
CMA-MSR-Atamna 7.1 (1)9.4 (2)7.5 (4)6.8 (4)6.3 (3)6.3 (5)6.4 (3)15/15
CMA-TPA-Atamna 5.3 (2)5.8 (2)5.2 (2)5.0 (2)4.8 (2)4.9 (1)4.8 (0.9)15/15
GP1-CMAES-Bajer-2013instances 8.1 (12)47 (58)88 (94)∞∞∞∞12580/15
GP1-CMAES-Bajer 5.3 (2)70 (92)∞∞∞∞∞12580/15
GP5-CMAES-Bajer-2013instances 13 (21)67 (142)83 (116)68 (69)60 (37)53 (37)49 (38)0/15
GP5-CMAES-Bajer 26 (20)68 (79)84 (127)∞∞∞∞12600/15
IPOPCMAv3p61-Bajer-2013instances 7.4 (2)7.3 (1.0)14 (14)35 (50)63 (68)∞∞12580/15
IPOPCMAv3p61-Bajer 7.4 (3)8.7 (6)14 (13)36 (34)∞∞∞12580/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 25 (20)∞∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 20 (36)∞∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 30 (20)145 (139)∞∞∞∞∞12580/15
RF1-CMAES-Bajer 28 (29)141 (163)∞∞∞∞∞12580/15
RF5-CMAES-Bajer-2013instances 254 (186)∞∞∞∞∞∞12520/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞12520/15
STEPif-Posik 23 (67)1540 (1881)∞∞∞∞∞5e40/15
STEPifeg-Posik 5.8 (5)500 (1214)3141 (2885)∞∞∞∞5e40/15
STEPrr-Posik 4.5 (1)327 (380)2886 (2457)∞∞∞∞4e40/15

Δ fopt
f10, 5-D		 1e1
349		 1e0
500		 1e-1
574		 1e-2
607		 1e-3
626		 1e-5
829		 1e-7
880		 #succ
15/15
BrentSTEPif-Posik ∞∞∞∞∞∞∞3e40/15
BrentSTEPifeg-Posik ∞∞∞∞∞∞∞3e40/15
BrentSTEPqi-Posik ∞∞∞∞∞∞∞3e40/15
BrentSTEPrr-Posik ∞∞∞∞∞∞∞2e40/15
CMA-CSA-Atamna 2.5 (0.5)2.1 (0.2)2.0 (0.3)2.0 (0.2)2.1 (0.1)1.8 (0.1)1.8 (0.1)15/15
CMA-MSR-Atamna 2.6 (0.8)2.1 (0.5)2.1 (0.3)2.2 (0.1)2.3 (0.3)2.0 (0.1)2.2 (0.2)15/15
CMA-TPA-Atamna 2.5 (0.9)2.2 (0.3)2.1 (0.2)2.1 (0.1)2.2 (0.1)1.8 (0.1)1.8 (0.1)15/15
GP1-CMAES-Bajer-2013instances 2.7 (2)2.8 (2)3.7 (3)4.1 (1)4.1 (3)11 (10)21 (18)1/15
GP1-CMAES-Bajer 2.1 (2)2.1 (0.4)2.9 (2)3.7 (3)3.7 (7)11 (6)∞12580/15
GP5-CMAES-Bajer-2013instances 0.95 (0.2)0.86 (0.2)0.83 (0.2)0.84 (0.3)0.86 (0.2)0.70 (0.2)1.5 (0.8)1/15
GP5-CMAES-Bajer 1.1 (1)0.91 (0.3)0.88 (0.8)0.90 (0.5)0.97 (0.2)0.78 (0.2)2.3 (1)0/15
IPOPCMAv3p61-Bajer-2013instances 6.7 (8)7.0 (8)16 (12)∞∞∞∞12580/15
IPOPCMAv3p61-Bajer 4.8 (4)6.9 (8)8.1 (7)16 (10)∞∞∞12580/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞12580/15
RF1-CMAES-Bajer ∞∞∞∞∞∞∞12580/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞12600/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞12520/15
STEPif-Posik ∞∞∞∞∞∞∞1e40/15
STEPifeg-Posik ∞∞∞∞∞∞∞1e40/15
STEPrr-Posik ∞∞∞∞∞∞∞1e40/15

Δ fopt
f11, 5-D		 1e1
143		 1e0
202		 1e-1
763		 1e-2
977		 1e-3
1177		 1e-5
1467		 1e-7
1673		 #succ
15/15
BrentSTEPif-Posik 497 (538)∞∞∞∞∞∞3e40/15
BrentSTEPifeg-Posik 916 (647)∞∞∞∞∞∞3e40/15
BrentSTEPqi-Posik 888 (804)∞∞∞∞∞∞4e40/15
BrentSTEPrr-Posik 631 (590)∞∞∞∞∞∞3e40/15
CMA-CSA-Atamna 4.9 (1.0)4.3 (1.0)1.3 (0.1)1.1 (0.1)0.99 (0.1)0.91 (0.1)0.88 (0.1)15/15
CMA-MSR-Atamna 5.9 (1.0)5.0 (0.8)1.5 (0.2)1.3 (0.2)1.2 (0.1)1.1 (0.1)1.1 (0.1)15/15
CMA-TPA-Atamna 5.1 (0.8)4.6 (0.6)1.3 (0.1)1.1 (0.1)1.0 (0.1)0.91 (0.1)0.89 (0.0)15/15
GP1-CMAES-Bajer-2013instances 5.3 (0.4)6.6 (0.6)4.7 (2)6.3 (6)8.0 (10)∞∞12580/15
GP1-CMAES-Bajer 5.0 (2)4.9 (0.9)2.1 (0.5)2.7 (2)4.0 (5)∞∞12580/15
GP5-CMAES-Bajer-2013instances 3.2 (1)3.3 (2)1.2 (0.8)1.3 (0.7)1.1 (1)0.92 (0.9)1.4 (2)1/15
GP5-CMAES-Bajer 2.4 (0.5)3.6 (5)1.1 (0.9)1.0 (1)0.87 (0.4)0.72 (0.8)1.4 (0.6)3/15
IPOPCMAv3p61-Bajer-2013instances 12 (8)∞∞∞∞∞∞12580/15
IPOPCMAv3p61-Bajer 8.9 (5)31 (22)∞∞∞∞∞12580/15
LHD-10xDefault-MATSuMoTo-Brockhoff 25 (40)∞∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 62 (55)∞∞∞∞∞∞12580/15
RF1-CMAES-Bajer ∞∞∞∞∞∞∞12580/15
RF5-CMAES-Bajer-2013instances 130 (143)∞∞∞∞∞∞12600/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞12520/15
STEPif-Posik 1010 (693)1492 (1131)∞∞∞∞∞2e40/15
STEPifeg-Posik 312 (282)∞∞∞∞∞∞2e40/15
STEPrr-Posik 378 (511)∞∞∞∞∞∞2e40/15

Δ fopt
f12, 5-D		 1e1
108		 1e0
268		 1e-1
371		 1e-2
413		 1e-3
461		 1e-5
1303		 1e-7
1494		 #succ
15/15
BrentSTEPif-Posik 91 (133)157 (135)790 (1369)710 (1025)∞∞∞2e40/15
BrentSTEPifeg-Posik 75 (65)144 (128)389 (284)∞∞∞∞2e40/15
BrentSTEPqi-Posik 67 (94)42 (55)119 (74)392 (308)722 (590)∞∞2e40/15
BrentSTEPrr-Posik 50 (51)51 (48)210 (308)∞∞∞∞2e40/15
CMA-CSA-Atamna 10 (6)7.1 (6)6.9 (8)7.2 (4)7.4 (5)3.5 (4)3.5 (5)15/15
CMA-MSR-Atamna 7.7 (4)5.4 (1)5.5 (2)5.8 (3)6.0 (4)2.7 (1)2.8 (0.9)15/15
CMA-TPA-Atamna 8.3 (8)6.1 (7)6.0 (8)6.2 (0.7)6.2 (6)2.7 (3)2.9 (2)15/15
GP1-CMAES-Bajer-2013instances 4.8 (2)6.2 (8)16 (13)46 (28)∞∞∞12580/15
GP1-CMAES-Bajer 6.9 (8)5.8 (1)9.2 (6)45 (51)∞∞∞12580/15
GP5-CMAES-Bajer-2013instances 16 (28)8.5 (7)15 (13)∞∞∞∞12580/15
GP5-CMAES-Bajer 7.0 (12)4.8 (6)15 (31)21 (27)∞∞∞12580/15
IPOPCMAv3p61-Bajer-2013instances 7.6 (0.8)10 (13)15 (15)22 (25)40 (39)∞∞12580/15
IPOPCMAv3p61-Bajer 7.3 (3)9.2 (8)49 (49)44 (49)∞∞∞12580/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 34 (32)∞∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 13 (9)22 (31)∞∞∞∞∞12580/15
RF1-CMAES-Bajer 15 (7)21 (26)∞∞∞∞∞12580/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞12600/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞12520/15
STEPif-Posik 35 (50)56 (60)∞∞∞∞∞60440/15
STEPifeg-Posik 25 (33)50 (63)∞∞∞∞∞60820/15
STEPrr-Posik 7.7 (7)21 (68)33 (79)100 (100)∞∞∞58700/15

Δ fopt
f13, 5-D		 1e1
132		 1e0
195		 1e-1
250		 1e-2
319		 1e-3
1310		 1e-5
1752		 1e-7
2255		 #succ
15/15
BrentSTEPif-Posik 463 (509)3269 (5054)∞∞∞∞∞4e40/15
BrentSTEPifeg-Posik 325 (345)1563 (1083)2520 (2212)∞∞∞∞4e40/15
BrentSTEPqi-Posik 381 (327)977 (1115)2437 (1261)∞∞∞∞4e40/15
BrentSTEPrr-Posik 371 (431)1462 (1285)1178 (705)∞∞∞∞4e40/15
CMA-CSA-Atamna 3.4 (2)3.4 (1)4.1 (1)3.9 (0.7)1.1 (0.1)1.1 (0.1)1.1 (0.2)15/15
CMA-MSR-Atamna 3.2 (0.6)3.6 (0.8)3.8 (0.5)4.0 (0.7)1.2 (0.1)1.2 (0.1)1.1 (0.1)15/15
CMA-TPA-Atamna 2.9 (0.8)3.8 (1)4.1 (2)4.1 (1)1.2 (0.2)1.3 (0.1)1.2 (0.2)15/15
GP1-CMAES-Bajer-2013instances 3.2 (3)20 (21)73 (98)∞∞∞∞12580/15
GP1-CMAES-Bajer 3.3 (4)20 (38)35 (48)∞∞∞∞12580/15
GP5-CMAES-Bajer-2013instances 1.5 (2)3.5 (4)10 (12)27 (37)∞∞∞12600/15
GP5-CMAES-Bajer 1.8 (3)5.0 (8)12 (13)27 (26)∞∞∞12600/15
IPOPCMAv3p61-Bajer-2013instances 4.2 (3)8.1 (6)10 (6)59 (185)∞∞∞12580/15
IPOPCMAv3p61-Bajer 4.7 (2)5.5 (6)10 (6)19 (26)14 (17)∞∞12580/15
LHD-10xDefault-MATSuMoTo-Brockhoff 2.2 (2)6.3 (9)∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 3.0 (2)5.9 (8)∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 3.7 (3)5.9 (10)∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 16 (17)44 (40)72 (161)58 (78)∞∞∞12580/15
RF1-CMAES-Bajer 10 (5)92 (139)73 (116)∞∞∞∞12580/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞12520/15
RF5-CMAES-Bajer 135 (174)∞∞∞∞∞∞12600/15
STEPif-Posik 237 (246)491 (521)∞∞∞∞∞4e40/15
STEPifeg-Posik 170 (62)659 (566)2383 (2898)∞∞∞∞4e40/15
STEPrr-Posik 181 (305)512 (405)1159 (1101)∞∞∞∞4e40/15

Δ fopt
f14, 5-D		 1e1
10		 1e0
41		 1e-1
58		 1e-2
90		 1e-3
139		 1e-5
251		 1e-7
476		 #succ
15/15
BrentSTEPif-Posik 1.4 (0.8)6.5 (7)12 (7)415 (666)5275 (6927)∞∞5e40/15
BrentSTEPifeg-Posik 1.4 (1)6.5 (8)11 (10)30 (27)2523 (2142)∞∞5e40/15
BrentSTEPqi-Posik 1.4 (0.7)4.6 (5)6.7 (5)24 (27)5072 (7287)∞∞5e40/15
BrentSTEPrr-Posik 1.4 (1)5.7 (6)10 (9)29 (16)∞∞∞5e40/15
CMA-CSA-Atamna 1.7 (1)2.7 (1)3.6 (0.8)3.7 (0.7)3.8 (1)3.9 (0.5)3.0 (0.3)15/15
CMA-MSR-Atamna 2.5 (3)3.3 (0.7)4.8 (1)5.0 (0.9)4.4 (0.8)4.1 (0.5)3.1 (0.4)15/15
CMA-TPA-Atamna 2.0 (3)3.3 (2)3.7 (1)3.9 (1)3.8 (1)4.0 (0.5)3.1 (0.3)15/15
GP1-CMAES-Bajer-2013instances 1.5 (2)1.9 (0.4)2.8 (0.4)3.4 (1)6.4 (3)∞∞12580/15
GP1-CMAES-Bajer 1.4 (0.9)2.1 (0.9)2.6 (0.5)3.3 (1)6.7 (8)75 (60)∞12580/15
GP5-CMAES-Bajer-2013instances 1.7 (0.8)1.5 (0.5)1.7 (0.6)2.2 (1)8.9 (11)∞∞12600/15
GP5-CMAES-Bajer 1.7 (0.8)1.6 (0.8)2.0 (0.8)2.8 (3)7.9 (6)∞∞12600/15
IPOPCMAv3p61-Bajer-2013instances 2.3 (2)3.5 (1)4.1 (1)4.2 (1)4.6 (2)24 (12)∞12580/15
IPOPCMAv3p61-Bajer 1.8 (2)2.8 (1)3.9 (0.5)3.9 (0.9)4.2 (1.0)19 (10)∞12580/15
LHD-10xDefault-MATSuMoTo-Brockhoff 1.2 (3)3.3 (0.4)3.4 (0.5)42 (48)∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.5 (1)1.6 (0.6)3.6 (2)41 (53)∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.3 (1)2.2 (3)4.9 (5)∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 2.0 (2)3.6 (9)5.7 (5)12 (22)30 (24)∞∞12580/15
RF1-CMAES-Bajer 1.2 (1.0)2.5 (2)5.7 (6)16 (11)64 (104)∞∞12580/15
RF5-CMAES-Bajer-2013instances 1.1 (1.0)39 (26)152 (160)∞∞∞∞12600/15
RF5-CMAES-Bajer 6.9 (0.8)29 (27)100 (64)∞∞∞∞12600/15
STEPif-Posik 1.5 (0.8)1.9 (2)2.9 (1)92 (121)∞∞∞5e40/15
STEPifeg-Posik 1.5 (1)1.8 (2)3.0 (4)33 (109)5120 (3688)∞∞5e40/15
STEPrr-Posik 1.5 (0.8)1.5 (0.4)2.0 (1)12 (12)2350 (2244)∞∞5e40/15

Δ fopt
f15, 5-D		 1e1
511		 1e0
9310		 1e-1
19369		 1e-2
19743		 1e-3
20073		 1e-5
20769		 1e-7
21359		 #succ
14/15
BrentSTEPif-Posik 226 (311)∞∞∞∞∞∞5e40/15
BrentSTEPifeg-Posik 176 (188)∞∞∞∞∞∞5e40/15
BrentSTEPqi-Posik 213 (231)∞∞∞∞∞∞5e40/15
BrentSTEPrr-Posik 372 (535)∞∞∞∞∞∞5e40/15
CMA-CSA-Atamna 1.1 (0.7)1.1 (0.9)0.91 (0.4)0.92 (0.4)0.92 (0.4)0.92 (0.5)0.92 (0.2)15/15
CMA-MSR-Atamna 1.9 (2)0.95 (0.5)0.89 (0.7)0.89 (0.7)0.91 (0.3)0.93 (0.7)0.95 (0.5)15/15
CMA-TPA-Atamna 1.9 (1)0.90 (0.7)0.87 (0.3)0.88 (0.7)0.88 (0.6)0.88 (0.5)0.89 (0.4)15/15
GP1-CMAES-Bajer-2013instances 2.9 (4)∞∞∞∞∞∞12580/15
GP1-CMAES-Bajer 1.6 (2)∞∞∞∞∞∞12580/15
GP5-CMAES-Bajer-2013instances 4.6 (4)∞∞∞∞∞∞12620/15
GP5-CMAES-Bajer 5.0 (4)∞∞∞∞∞∞12620/15
IPOPCMAv3p61-Bajer-2013instances 1.2 (1)∞∞∞∞∞∞12580/15
IPOPCMAv3p61-Bajer 1.2 (0.3)∞∞∞∞∞∞12580/15
LHD-10xDefault-MATSuMoTo-Brockhoff 1.7 (1)∞∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.2 (1)∞∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.7 (0.7)∞∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 1.0 (0.8)∞∞∞∞∞∞12580/15
RF1-CMAES-Bajer 3.1 (3)∞∞∞∞∞∞12580/15
RF5-CMAES-Bajer-2013instances 11 (20)∞∞∞∞∞∞12600/15
RF5-CMAES-Bajer 35 (31)∞∞∞∞∞∞12520/15
STEPif-Posik 98 (132)∞∞∞∞∞∞4e40/15
STEPifeg-Posik 51 (154)∞∞∞∞∞∞5e40/15
STEPrr-Posik 72 (215)∞∞∞∞∞∞5e40/15

Δ fopt
f16, 5-D		 1e1
120		 1e0
612		 1e-1
2662		 1e-2
10163		 1e-3
10449		 1e-5
11644		 1e-7
12095		 #succ
15/15
BrentSTEPif-Posik 10 (35)63 (83)247 (591)∞∞∞∞5e40/15
BrentSTEPifeg-Posik 1.3 (1)158 (227)271 (121)∞∞∞∞5e40/15
BrentSTEPqi-Posik 2.5 (1)93 (117)264 (163)∞∞∞∞5e40/15
BrentSTEPrr-Posik 1.4 (3)67 (59)263 (139)∞∞∞∞5e40/15
CMA-CSA-Atamna 2.2 (2)1.9 (2)1.4 (1)0.49 (0.4)0.54 (0.2)0.55 (0.3)0.56 (0.3)15/15
CMA-MSR-Atamna 5.9 (11)5.8 (3)4.7 (5)1.6 (1)1.6 (2)1.5 (2)1.5 (1)15/15
CMA-TPA-Atamna 1.8 (1)3.1 (3)1.8 (3)0.56 (0.6)0.62 (0.8)0.62 (0.3)0.65 (0.5)15/15
GP1-CMAES-Bajer-2013instances 1.2 (0.9)3.8 (4)6.8 (6)1.8 (1)1.8 (2)∞∞12580/15
GP1-CMAES-Bajer 1.1 (0.7)2.1 (3)3.3 (3)∞∞∞∞12580/15
GP5-CMAES-Bajer-2013instances 1.3 (1)4.7 (6)1.5 (3)1.8 (3)∞∞∞12600/15
GP5-CMAES-Bajer 0.77 (0.7)2.3 (1)3.2 (2)∞∞∞∞12600/15
IPOPCMAv3p61-Bajer-2013instances 2.4 (2)6.8 (6)∞∞∞∞∞12580/15
IPOPCMAv3p61-Bajer 1.6 (1)1.8 (1)2.2 (5)0.90 (2)0.89 (0.7)∞∞12580/15
LHD-10xDefault-MATSuMoTo-Brockhoff 1.5 (0.7)6.1 (9)∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.2 (4)∞∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.7 (2)6.0 (6)∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 1.8 (1)3.6 (4)3.2 (1)∞∞∞∞12580/15
RF1-CMAES-Bajer 1.5 (0.7)4.0 (5)3.3 (6)1.8 (4)∞∞∞12580/15
RF5-CMAES-Bajer-2013instances 1.7 (5)9.0 (12)∞∞∞∞∞12600/15
RF5-CMAES-Bajer 1.5 (3)29 (25)∞∞∞∞∞12600/15
STEPif-Posik 0.69 (0.4)52 (44)268 (325)∞∞∞∞5e40/15
STEPifeg-Posik 0.62 (0.6)46 (39)47 (49)∞∞∞∞5e40/15
STEPrr-Posik 0.68 (0.7)28 (31)132 (127)∞∞∞∞5e40/15

Δ fopt
f17, 5-D		 1e1
5.0		 1e0
215		 1e-1
899		 1e-2
2861		 1e-3
3669		 1e-5
6351		 1e-7
7934		 #succ
15/15
BrentSTEPif-Posik 7.3 (28)174 (205)794 (486)∞∞∞∞5e40/15
BrentSTEPifeg-Posik 6.6 (13)173 (286)∞∞∞∞∞5e40/15
BrentSTEPqi-Posik 4.3 (4)142 (171)779 (1317)∞∞∞∞5e40/15
BrentSTEPrr-Posik 4.5 (4)313 (544)408 (306)∞∞∞∞5e40/15
CMA-CSA-Atamna 4.4 (4)0.98 (0.3)0.53 (0.2)1.0 (0.6)1.2 (1)1.1 (0.4)1.3 (0.5)15/15
CMA-MSR-Atamna 4.3 (3)0.93 (0.1)0.97 (2)0.83 (0.6)0.82 (0.5)0.96 (0.5)1.1 (0.8)15/15
CMA-TPA-Atamna 24 (145)2.6 (10)1.6 (1)0.97 (0.4)0.94 (0.5)0.88 (0.8)1.0 (0.6)15/15
GP1-CMAES-Bajer-2013instances 4.7 (4)0.67 (0.3)0.80 (0.5)0.89 (1)∞∞∞12580/15
GP1-CMAES-Bajer 2.9 (3)0.83 (0.7)1.3 (1)0.73 (0.5)∞∞∞12580/15
GP5-CMAES-Bajer-2013instances 3.8 (5)1.8 (2)10 (9)∞∞∞∞12580/15
GP5-CMAES-Bajer 2.5 (2)1.8 (3)9.3 (6)∞∞∞∞12600/15
IPOPCMAv3p61-Bajer-2013instances 4.3 (3)1.1 (1)0.66 (0.7)0.46 (0.5)0.95 (1)∞∞12580/15
IPOPCMAv3p61-Bajer 3.8 (2)1.7 (3)0.99 (0.7)0.40 (0.2)0.55 (0.3)∞∞12580/15
LHD-10xDefault-MATSuMoTo-Brockhoff 2.1 (2)2.6 (1)∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.5 (1)2.4 (2)∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.4 (2)5.3 (6)∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 3.1 (3)4.0 (6)10 (21)∞∞∞∞12580/15
RF1-CMAES-Bajer 4.5 (4)3.7 (3)∞∞∞∞∞12580/15
RF5-CMAES-Bajer-2013instances 5.0 (6)13 (10)∞∞∞∞∞12520/15
RF5-CMAES-Bajer 14 (4)15 (14)10 (18)∞∞∞∞12520/15
STEPif-Posik 4.0 (1)136 (238)360 (332)∞∞∞∞5e40/15
STEPifeg-Posik 4.0 (3)128 (411)172 (171)∞∞∞∞5e40/15
STEPrr-Posik 4.1 (3)239 (233)226 (307)∞∞∞∞5e40/15

Δ fopt
f18, 5-D		 1e1
103		 1e0
378		 1e-1
3968		 1e-2
8451		 1e-3
9280		 1e-5
10905		 1e-7
12469		 #succ
15/15
BrentSTEPif-Posik 95 (169)229 (184)∞∞∞∞∞5e40/15
BrentSTEPifeg-Posik 103 (153)159 (163)∞∞∞∞∞5e40/15
BrentSTEPqi-Posik 129 (213)553 (809)∞∞∞∞∞4e40/15
BrentSTEPrr-Posik 169 (141)213 (119)166 (163)∞∞∞∞5e40/15
CMA-CSA-Atamna 1.3 (0.6)2.3 (5)0.61 (0.6)0.54 (0.5)0.74 (0.5)0.77 (0.4)0.90 (0.4)15/15
CMA-MSR-Atamna 1.1 (0.6)5.0 (7)1.0 (0.9)0.70 (0.6)1.0 (0.8)1.2 (0.8)1.3 (0.5)15/15
CMA-TPA-Atamna 0.93 (0.7)1.8 (4)0.67 (0.4)0.59 (0.4)0.69 (0.5)0.70 (0.3)0.85 (0.5)15/15
GP1-CMAES-Bajer-2013instances 1.0 (0.7)1.8 (2)1.4 (1)∞∞∞∞12580/15
GP1-CMAES-Bajer 0.90 (0.5)0.96 (1)0.65 (0.8)∞∞∞∞12580/15
GP5-CMAES-Bajer-2013instances 2.0 (3)14 (14)∞∞∞∞∞12600/15
GP5-CMAES-Bajer 1.4 (0.2)7.8 (7)4.5 (6)2.1 (5)∞∞∞12600/15
IPOPCMAv3p61-Bajer-2013instances 1.2 (0.5)1.3 (0.3)0.47 (0.6)1.1 (0.8)2.0 (2)∞∞12580/15
IPOPCMAv3p61-Bajer 0.98 (0.3)1.9 (3)0.80 (0.3)2.2 (2)∞∞∞12580/15
LHD-10xDefault-MATSuMoTo-Brockhoff 1.4 (0.4)10 (13)∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.5 (2)9.4 (14)∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.6 (2)10 (11)∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 0.75 (0.5)5.6 (3)∞∞∞∞∞12580/15
RF1-CMAES-Bajer 1.1 (0.6)10 (15)∞∞∞∞∞12580/15
RF5-CMAES-Bajer-2013instances 5.2 (4)24 (26)∞∞∞∞∞12600/15
RF5-CMAES-Bajer 4.4 (5)16 (11)∞∞∞∞∞12520/15
STEPif-Posik 27 (87)194 (169)169 (298)∞∞∞∞5e40/15
STEPifeg-Posik 22 (69)188 (119)∞∞∞∞∞5e40/15
STEPrr-Posik 81 (153)85 (147)∞∞∞∞∞5e40/15

Δ fopt
f19, 5-D		 1e1
1		 1e0
1		 1e-1
242		 1e-2
1.0e5		 1e-3
1.2e5		 1e-5
1.2e5		 1e-7
1.2e5		 #succ
15/15
BrentSTEPif-Posik 16 (19)3125 (1802)694 (992)∞∞∞∞5e40/15
BrentSTEPifeg-Posik 17 (10)2964 (5197)910 (1079)∞∞∞∞5e40/15
BrentSTEPqi-Posik 22 (13)3284 (3704)1441 (2320)∞∞∞∞5e40/15
BrentSTEPrr-Posik 17 (19)4781 (4402)926 (607)∞∞∞∞5e40/15
CMA-CSA-Atamna 19 (12)2971 (3354)153 (101)0.86 (0.5)0.83 (0.4)0.83 (0.7)0.84 (0.5)15/15
CMA-MSR-Atamna 31 (8)2573 (4888)306 (100)67 (76)∞∞∞5e50/15
CMA-TPA-Atamna 25 (22)959 (560)84 (91)0.68 (0.6)0.78 (0.6)0.80 (0.6)0.80 (0.7)15/15
GP1-CMAES-Bajer-2013instances 25 (16)2568 (3384)∞∞∞∞∞12600/15
GP1-CMAES-Bajer 23 (11)2991 (2472)76 (62)∞∞∞∞12580/15
GP5-CMAES-Bajer-2013instances 15 (18)1496 (1828)∞∞∞∞∞12620/15
GP5-CMAES-Bajer 19 (12)1364 (1690)∞∞∞∞∞12700/15
IPOPCMAv3p61-Bajer-2013instances 23 (18)3070 (2962)∞∞∞∞∞12580/15
IPOPCMAv3p61-Bajer 23 (34)1962 (1750)∞∞∞∞∞12580/15
LHD-10xDefault-MATSuMoTo-Brockhoff 39 (53)∞∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 23 (11)∞∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 20 (20)∞∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 24 (25)1868 (2090)∞∞∞∞∞12580/15
RF1-CMAES-Bajer 22 (21)1929 (1866)∞∞∞∞∞12580/15
RF5-CMAES-Bajer-2013instances 18 (16)1379 (1363)∞∞∞∞∞12620/15
RF5-CMAES-Bajer 32 (22)1.9e4 (2e4)∞∞∞∞∞12620/15
STEPif-Posik 14 (12)3090 (755)1386 (1671)∞∞∞∞5e40/15
STEPifeg-Posik 14 (13)5045 (1e4)478 (512)∞∞∞∞5e40/15
STEPrr-Posik 14 (13)3069 (1e4)672 (789)∞∞∞∞5e40/15

Δ fopt
f20, 5-D		 1e1
16		 1e0
851		 1e-1
38111		 1e-2
51362		 1e-3
54470		 1e-5
54861		 1e-7
55313		 #succ
14/15
BrentSTEPif-Posik 2.1 (3)23 (76)5.8 (5)4.3 (4)6.5 (9)6.5 (5)6.5 (6)1/15
BrentSTEPifeg-Posik 2.2 (4)9.3 (11)18 (22)13 (17)13 (12)13 (9)13 (23)1/15
BrentSTEPqi-Posik 1.8 (0.9)8.7 (16)8.8 (7)6.6 (9)6.2 (6)6.2 (8)13 (23)0/15
BrentSTEPrr-Posik 1.9 (1)11 (19)9.3 (10)7.0 (6)6.6 (8)13 (12)∞5e40/15
CMA-CSA-Atamna 3.7 (1)9.2 (6)1.1 (0.7)0.83 (0.2)0.80 (0.6)0.82 (0.5)0.84 (0.6)15/15
CMA-MSR-Atamna 4.8 (4)1666 (2519)∞∞∞∞∞5e50/15
CMA-TPA-Atamna 3.9 (2)17 (16)2.0 (0.9)1.5 (0.9)1.5 (0.7)1.5 (0.7)1.5 (0.7)15/15
GP1-CMAES-Bajer-2013instances 3.1 (2)11 (9)∞∞∞∞∞12580/15
GP1-CMAES-Bajer 2.8 (1)∞∞∞∞∞∞12580/15
GP5-CMAES-Bajer-2013instances 2.2 (0.8)∞∞∞∞∞∞12600/15
GP5-CMAES-Bajer 2.1 (1)∞∞∞∞∞∞12620/15
IPOPCMAv3p61-Bajer-2013instances 4.2 (1)21 (19)∞∞∞∞∞12580/15
IPOPCMAv3p61-Bajer 4.9 (2)4.6 (7)∞∞∞∞∞12580/15
LHD-10xDefault-MATSuMoTo-Brockhoff 6.4 (3)∞∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.5 (0.2)∞∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.5 (0.8)∞∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 4.0 (2)∞∞∞∞∞∞12580/15
RF1-CMAES-Bajer 3.9 (4)∞∞∞∞∞∞12580/15
RF5-CMAES-Bajer-2013instances 31 (28)∞∞∞∞∞∞12600/15
RF5-CMAES-Bajer 13 (15)∞∞∞∞∞∞12600/15
STEPif-Posik 1.9 (0.8)6.6 (8)3.7 (7)2.9 (1)2.7 (3)3.7 (7)3.8 (4)2/15
STEPifeg-Posik 1.9 (0.8)3.1 (4)3.9 (5)2.9 (3)2.7 (3)2.8 (6)2.9 (3)3/15
STEPrr-Posik 1.8 (1)2.8 (8)3.1 (5)2.3 (4)2.2 (2)2.8 (2)4.0 (4)1/15

Δ fopt
f21, 5-D		 1e1
41		 1e0
1157		 1e-1
1674		 1e-2
1692		 1e-3
1705		 1e-5
1729		 1e-7
1757		 #succ
14/15
BrentSTEPif-Posik 77 (6)174 (130)125 (107)196 (416)197 (170)202 (55)208 (349)0/15
BrentSTEPifeg-Posik 9.3 (29)90 (109)63 (125)62 (112)63 (94)67 (77)92 (78)2/15
BrentSTEPqi-Posik 14 (47)121 (175)84 (135)84 (40)84 (88)121 (94)210 (192)0/15
BrentSTEPrr-Posik 11 (36)67 (97)56 (82)67 (51)67 (74)72 (124)203 (396)0/15
CMA-CSA-Atamna 1.9 (1)55 (151)119 (386)148 (396)147 (380)145 (410)143 (156)9/15
CMA-MSR-Atamna 5.3 (12)206 (287)388 (644)384 (698)382 (762)376 (639)371 (361)6/15
CMA-TPA-Atamna 2.2 (0.6)88 (195)116 (108)115 (162)114 (150)113 (109)112 (144)10/15
GP1-CMAES-Bajer-2013instances 1.3 (0.5)1.9 (4)1.7 (1)1.7 (2)2.2 (3)2.3 (3)2.4 (3)4/15
GP1-CMAES-Bajer 1.1 (0.9)4.4 (5)5.0 (6)5.0 (3)5.0 (4)5.0 (3)10 (18)1/15
GP5-CMAES-Bajer-2013instances 1.4 (0.4)1.4 (1)1.5 (1)1.9 (1)1.9 (2)10 (14)∞12520/15
GP5-CMAES-Bajer 5.2 (18)16 (15)∞∞∞∞∞12600/15
IPOPCMAv3p61-Bajer-2013instances 4.3 (32)15 (16)∞∞∞∞∞12580/15
IPOPCMAv3p61-Bajer 1.7 (1)15 (18)11 (13)11 (7)10 (15)10 (17)10 (6)1/15
LHD-10xDefault-MATSuMoTo-Brockhoff 2.0 (1)1.0 (1.0)2.2 (2)∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.3 (0.6)0.94 (1)2.1 (2)∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.4 (0.3)1.5 (1)2.1 (2)∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 3.5 (2)4.5 (6)3.2 (5)5.1 (8)11 (12)∞∞12580/15
RF1-CMAES-Bajer 1.6 (1)2.4 (2)5.1 (6)5.1 (11)10 (18)10 (11)∞12580/15
RF5-CMAES-Bajer-2013instances 3.7 (2)7.8 (14)∞∞∞∞∞12600/15
RF5-CMAES-Bajer 5.6 (11)4.7 (6)∞∞∞∞∞12600/15
STEPif-Posik 1.2 (2)96 (60)84 (142)84 (104)84 (111)129 (189)206 (149)1/15
STEPifeg-Posik 1.1 (1)80 (97)56 (68)55 (52)55 (106)71 (107)94 (134)2/15
STEPrr-Posik 1.1 (2)93 (140)85 (48)84 (182)84 (47)88 (103)129 (105)3/15

Δ fopt
f22, 5-D		 1e1
71		 1e0
386		 1e-1
938		 1e-2
980		 1e-3
1008		 1e-5
1040		 1e-7
1068		 #succ
14/15
BrentSTEPif-Posik 102 (201)236 (407)236 (373)739 (382)∞∞∞5e40/15
BrentSTEPifeg-Posik 34 (6)80 (20)129 (171)341 (434)710 (1017)∞∞5e40/15
BrentSTEPqi-Posik 31 (26)55 (102)85 (65)335 (229)333 (462)∞∞5e40/15
BrentSTEPrr-Posik 37 (96)110 (126)129 (105)350 (536)709 (1402)∞∞5e40/15
CMA-CSA-Atamna 4.1 (6)135 (161)345 (193)426 (1409)535 (656)519 (1099)506 (722)6/15
CMA-MSR-Atamna 14 (22)458 (524)531 (573)508 (671)494 (633)479 (213)467 (498)7/15
CMA-TPA-Atamna 2.5 (5)224 (456)323 (646)310 (881)301 (250)293 (340)285 (631)8/15
GP1-CMAES-Bajer-2013instances 3.6 (9)9.3 (11)19 (29)18 (13)18 (16)17 (15)17 (29)1/15
GP1-CMAES-Bajer 4.2 (13)22 (23)19 (17)18 (25)18 (21)17 (27)17 (15)1/15
GP5-CMAES-Bajer-2013instances 4.3 (8)10 (11)9.2 (11)8.8 (8)8.6 (5)∞∞12540/15
GP5-CMAES-Bajer 3.7 (9)6.9 (13)4.0 (5)3.9 (5)4.0 (4)18 (18)∞12600/15
IPOPCMAv3p61-Bajer-2013instances 5.8 (9)5.6 (4)20 (30)19 (10)18 (28)18 (16)18 (13)1/15
IPOPCMAv3p61-Bajer 5.7 (14)46 (47)∞∞∞∞∞12580/15
LHD-10xDefault-MATSuMoTo-Brockhoff 1.9 (0.4)2.3 (2)∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.4 (2)3.0 (2)∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 0.79 (0.5)4.5 (6)∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 5.5 (5)3.0 (3)∞∞∞∞∞12580/15
RF1-CMAES-Bajer 7.7 (0.7)13 (20)19 (18)∞∞∞∞12580/15
RF5-CMAES-Bajer-2013instances 7.3 (9)21 (16)∞∞∞∞∞12600/15
RF5-CMAES-Bajer 11 (12)46 (77)∞∞∞∞∞12600/15
STEPif-Posik 117 (1)131 (162)350 (734)754 (638)∞∞∞5e40/15
STEPifeg-Posik 123 (39)104 (99)129 (369)724 (790)∞∞∞5e40/15
STEPrr-Posik 62 (212)67 (52)67 (147)237 (455)738 (1092)∞∞5e40/15

Δ fopt
f23, 5-D		 1e1
3.0		 1e0
518		 1e-1
14249		 1e-2
27890		 1e-3
31654		 1e-5
33030		 1e-7
34256		 #succ
15/15
BrentSTEPif-Posik 2.6 (2)3.3 (5)∞∞∞∞∞5e40/15
BrentSTEPifeg-Posik 2.6 (2)4.3 (5)50 (55)∞∞∞∞5e40/15
BrentSTEPqi-Posik 2.6 (3)6.6 (9)50 (43)∞∞∞∞5e40/15
BrentSTEPrr-Posik 2.6 (2)3.7 (3)50 (31)∞∞∞∞5e40/15
CMA-CSA-Atamna 2.3 (3)13 (12)4.7 (8)2.5 (2)2.2 (3)2.2 (3)2.1 (3)15/15
CMA-MSR-Atamna 2.5 (2)3.2 (7)0.91 (1)0.52 (0.3)0.48 (0.2)0.51 (0.2)0.53 (0.6)15/15
CMA-TPA-Atamna 3.2 (3)16 (7)8.1 (18)4.2 (6)3.8 (13)3.8 (2)3.7 (5)13/15
GP1-CMAES-Bajer-2013instances 1.9 (3)4.9 (4)∞∞∞∞∞12580/15
GP1-CMAES-Bajer 2.3 (0.8)11 (10)∞∞∞∞∞12600/15
GP5-CMAES-Bajer-2013instances 2.4 (1)2.2 (2)∞∞∞∞∞12520/15
GP5-CMAES-Bajer 2.1 (2)1.4 (1.0)∞∞∞∞∞12600/15
IPOPCMAv3p61-Bajer-2013instances 2.3 (4)12 (5)∞∞∞∞∞12580/15
IPOPCMAv3p61-Bajer 2.5 (3)17 (8)∞∞∞∞∞12580/15
LHD-10xDefault-MATSuMoTo-Brockhoff 3.9 (4)6.8 (7)∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff 3.1 (3)∞∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.5 (2)7.1 (8)∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 1.8 (2)∞∞∞∞∞∞12600/15
RF1-CMAES-Bajer 1.8 (0.9)∞∞∞∞∞∞12600/15
RF5-CMAES-Bajer-2013instances 2.4 (2)∞∞∞∞∞∞12880/15
RF5-CMAES-Bajer 2.8 (3)36 (49)∞∞∞∞∞12880/15
STEPif-Posik 3.4 (5)2.8 (1)∞∞∞∞∞5e40/15
STEPifeg-Posik 3.4 (2)2.7 (3)50 (54)∞∞∞∞5e40/15
STEPrr-Posik 3.4 (6)2.5 (5)∞∞∞∞∞5e40/15

Δ fopt
f24, 5-D		 1e1
1622		 1e0
2.2e5		 1e-1
6.4e6		 1e-2
9.6e6		 1e-3
9.6e6		 1e-5
1.3e7		 1e-7
1.3e7		 #succ
3/15
BrentSTEPif-Posik 41 (44)∞∞∞∞∞∞4e40/15
BrentSTEPifeg-Posik 21 (35)∞∞∞∞∞∞5e40/15
BrentSTEPqi-Posik 38 (81)∞∞∞∞∞∞5e40/15
BrentSTEPrr-Posik 29 (21)∞∞∞∞∞∞5e40/15
CMA-CSA-Atamna 2.0 (2)∞∞∞∞∞∞5e50/15
CMA-MSR-Atamna 1.3 (2)33 (43)1.1 (1)∞∞∞∞5e50/15
CMA-TPA-Atamna 1.3 (0.6)10 (19)∞∞∞∞∞5e50/15
GP1-CMAES-Bajer-2013instances 2.1 (2)∞∞∞∞∞∞12580/15
GP1-CMAES-Bajer 2.0 (2)∞∞∞∞∞∞12580/15
GP5-CMAES-Bajer-2013instances 1.1 (0.8)∞∞∞∞∞∞12600/15
GP5-CMAES-Bajer 2.3 (1)0.08 (0.1)∞∞∞∞∞12620/15
IPOPCMAv3p61-Bajer-2013instances 2.0 (2)∞∞∞∞∞∞12580/15
IPOPCMAv3p61-Bajer 11 (19)∞∞∞∞∞∞12580/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞2500/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞2500/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞2500/15
RF1-CMAES-Bajer-2013instances 5.5 (10)∞∞∞∞∞∞12580/15
RF1-CMAES-Bajer 11 (17)∞∞∞∞∞∞12580/15
RF5-CMAES-Bajer-2013instances 5.2 (4)∞∞∞∞∞∞12600/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞12520/15
STEPif-Posik 15 (22)∞∞∞∞∞∞4e40/15
STEPifeg-Posik 15 (29)∞∞∞∞∞∞5e40/15
STEPrr-Posik 21 (21)∞∞∞∞∞∞5e40/15

Previous dimension | Dimension = 10 | Next dimension

Δ fopt
f1, 10-D		 1e1
22		 1e0
23		 1e-1
23		 1e-2
23		 1e-3
23		 1e-5
23		 1e-7
23		 #succ
15/15
BrentSTEPif-Posik 1.8 (0.1)2.2 (0.1)2.3 (0.2)2.3 (0.2)2.3 (0.3)2.3 (0.2)2.4 (0.2)15/15
BrentSTEPifeg-Posik 1.8 (0.1)2.2 (0.1)2.3 (0.2)2.3 (0.1)2.3 (0.2)2.3 (0.2)2.4 (0.2)15/15
BrentSTEPqi-Posik 1.8 (0.1)2.2 (0.1)2.3 (0.2)2.3 (0.2)2.3 (0.3)2.3 (0.2)2.4 (0.2)15/15
BrentSTEPrr-Posik 1.8 (0.1)2.2 (0.2)2.3 (0.1)2.3 (0.2)2.3 (0.3)2.3 (0.2)2.4 (0.2)15/15
CMA-CSA-Atamna 6.4 (2)12 (2)18 (3)25 (3)31 (4)44 (5)56 (4)15/15
CMA-MSR-Atamna 7.0 (3)15 (3)24 (3)34 (4)42 (4)60 (6)78 (5)15/15
CMA-TPA-Atamna 6.2 (2)11 (3)16 (2)21 (4)26 (3)36 (5)46 (5)15/15
GP1-CMAES-Bajer-2013instances 3.7 (0.9)6.9 (0.9)10 (0.9)13 (2)16 (1)24 (2)34 (5)15/15
GP1-CMAES-Bajer 4.1 (1)6.8 (0.5)10 (1)14 (0.6)17 (2)25 (4)36 (5)15/15
GP5-CMAES-Bajer-2013instances 2.3 (0.5)3.3 (0.2)4.4 (0.3)5.6 (0.6)6.7 (0.7)9.0 (0.7)39 (23)4/15
GP5-CMAES-Bajer 2.3 (0.6)3.2 (0.2)4.3 (0.2)5.5 (0.6)6.7 (0.5)9.0 (0.7)41 (22)4/15
IPOPCMAv3p61-Bajer-2013instances 6.5 (2)13 (4)19 (4)26 (5)32 (4)45 (4)59 (6)15/15
IPOPCMAv3p61-Bajer 5.8 (4)13 (3)19 (0.9)25 (4)32 (3)45 (3)59 (5)15/15
LHD-10xDefault-MATSuMoTo-Brockhoff 10 (0.1)10 (0.2)12 (1.0)14 (0.8)15 (0.9)∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.9 (0.5)6.4 (1)8.9 (0.8)27 (31)101 (93)∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 3.1 (0.4)5.3 (1)7.7 (1)22 (8)74 (32)∞∞5000/15
RF1-CMAES-Bajer-2013instances 5.1 (2)11 (5)18 (13)28 (19)41 (41)81 (22)246 (402)3/15
RF1-CMAES-Bajer 4.9 (0.9)10 (4)17 (5)25 (8)35 (17)67 (14)231 (213)4/15
RF5-CMAES-Bajer-2013instances 3.8 (1)29 (27)220 (76)∞∞∞∞25140/15
RF5-CMAES-Bajer 4.5 (4)42 (41)289 (203)∞∞∞∞25140/15
STEPif-Posik 1.9 (0.1)2.4 (0.2)3.3 (0.5)5.1 (0.9)6.2 (0.5)7.6 (0.9)8.7 (0.3)15/15
STEPifeg-Posik 1.9 (0.1)2.4 (0.2)3.2 (0.3)4.5 (0.8)5.5 (0.7)7.3 (1.0)8.8 (0.4)15/15
STEPrr-Posik 1.9 (0.1)2.4 (0.1)3.2 (0.2)3.9 (0.2)4.7 (0.1)6.1 (0.1)7.5 (0.2)15/15

Δ fopt
f2, 10-D		 1e1
187		 1e0
190		 1e-1
191		 1e-2
191		 1e-3
193		 1e-5
194		 1e-7
195		 #succ
15/15
BrentSTEPif-Posik 0.64 (0.2)0.73 (0.2)0.77 (0.1)0.83 (0.1)0.86 (0.0)0.95 (0.1)1.0 (0.1)15/15
BrentSTEPifeg-Posik 0.63 (0.2)0.70 (0.2)0.74 (0.2)0.83 (0.1)0.86 (0.1)0.96 (0.1)1.0 (0.1)15/15
BrentSTEPqi-Posik 0.41 (0.0)★0.43 (0.0)★30.45 (0.0)★40.50 (0.0)★40.54 (0.0)★40.69 (0.1)★30.86 (0.2)★15/15
BrentSTEPrr-Posik 0.55 (0.1)0.62 (0.1)0.67 (0.2)0.71 (0.1)0.76 (0.1)0.94 (0.1)1.0 (0.1)15/15
CMA-CSA-Atamna 14 (3)16 (3)17 (3)18 (2)19 (2)20 (1)22 (1)15/15
CMA-MSR-Atamna 16 (4)18 (2)19 (3)21 (1)22 (1)24 (1)25 (1)15/15
CMA-TPA-Atamna 15 (4)17 (4)19 (2)20 (1)21 (0.7)22 (2)23 (2)15/15
GP1-CMAES-Bajer-2013instances 33 (27)∞∞∞∞∞∞25020/15
GP1-CMAES-Bajer 32 (42)∞∞∞∞∞∞25020/15
GP5-CMAES-Bajer-2013instances 6.1 (3)8.5 (3)12 (7)13 (8)13 (4)14 (8)96 (103)0/15
GP5-CMAES-Bajer 9.2 (8)15 (15)19 (20)19 (4)19 (17)20 (46)46 (45)0/15
IPOPCMAv3p61-Bajer-2013instances ∞∞∞∞∞∞∞25020/15
IPOPCMAv3p61-Bajer ∞∞∞∞∞∞∞25020/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25020/15
RF1-CMAES-Bajer ∞∞∞∞∞∞∞25020/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25040/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞25140/15
STEPif-Posik 0.82 (0.3)0.89 (0.2)1.1 (0.2)1.1 (0.2)1.2 (0.3)1.3 (0.1)1.4 (0.1)15/15
STEPifeg-Posik 0.77 (0.1)0.84 (0.2)1.00 (0.2)1.1 (0.2)1.2 (0.3)1.3 (0.2)1.4 (0.1)15/15
STEPrr-Posik 0.69 (0.1)0.76 (0.1)0.87 (0.1)0.94 (0.1)1.0 (0.1)1.2 (0.1)1.4 (0.1)15/15

Δ fopt
f3, 10-D		 1e1
1739		 1e0
3600		 1e-1
3609		 1e-2
3636		 1e-3
3642		 1e-5
3646		 1e-7
3651		 #succ
15/15
BrentSTEPif-Posik 0.15 (0.1)0.16 (0.0)0.19 (0.1)0.19 (0.0)0.19 (0.0)0.19 (0.0)0.19 (0.0)15/15
BrentSTEPifeg-Posik 0.16 (0.0)0.16 (0.0)0.19 (0.0)0.19 (0.0)0.19 (0.0)0.19 (0.0)0.19 (0.0)15/15
BrentSTEPqi-Posik 0.16 (0.1)0.14 (0.0)0.18 (0.0)0.18 (0.0)0.18 (0.0)0.18 (0.0)0.18 (0.0)15/15
BrentSTEPrr-Posik 0.15 (0.0)0.14 (0.0)0.17 (0.0)0.17 (0.0)0.17 (0.0)0.18 (0.0)0.19 (0.0)15/15
CMA-CSA-Atamna 3.9 (3)1132 (1324)∞∞∞∞∞1e60/15
CMA-MSR-Atamna 4.1 (3)20 (11)35 (23)36 (24)37 (7)39 (28)41 (53)15/15
CMA-TPA-Atamna 2.7 (3)278 (211)3905 (6048)3876 (3519)3870 (3375)3867 (4127)3862 (4743)1/15
GP1-CMAES-Bajer-2013instances 4.9 (4)∞∞∞∞∞∞25020/15
GP1-CMAES-Bajer 4.5 (9)∞∞∞∞∞∞25020/15
GP5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25260/15
GP5-CMAES-Bajer ∞∞∞∞∞∞∞25180/15
IPOPCMAv3p61-Bajer-2013instances 4.7 (4)∞∞∞∞∞∞25020/15
IPOPCMAv3p61-Bajer 3.0 (1)∞∞∞∞∞∞25020/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances 21 (28)∞∞∞∞∞∞25020/15
RF1-CMAES-Bajer ∞∞∞∞∞∞∞25020/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25040/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞25040/15
STEPif-Posik 0.16 (0.0)0.17 (0.0)0.18 (0.0)0.19 (0.0)0.19 (0.0)0.20 (0.0)0.20 (0.0)15/15
STEPifeg-Posik 0.15 (0.0)0.15 (0.0)0.16 (0.0)0.17 (0.0)0.18 (0.0)0.19 (0.0)0.19 (1e-2)15/15
STEPrr-Posik 0.13 (0.0)0.14 (0.0)0.15 (0.0)0.16 (0.0)0.17 (0.0)0.18 (0.0)0.20 (0.0)15/15

Δ fopt
f4, 10-D		 1e1
2234		 1e0
3626		 1e-1
3660		 1e-2
3695		 1e-3
3707		 1e-5
3744		 1e-7
28767		 #succ
12/15
BrentSTEPif-Posik 0.14 (0.0)0.28 (0.0)0.37 (0.1)0.36 (0.1)0.36 (0.1)0.36 (0.1)0.05 (0.0)15/15
BrentSTEPifeg-Posik 0.14 (0.0)0.27 (0.0)0.35 (0.2)0.35 (0.1)0.35 (0.1)0.35 (0.1)0.05 (0.0)15/15
BrentSTEPqi-Posik 0.16 (0.1)0.24 (0.1)0.32 (0.1)0.32 (0.1)0.32 (0.1)0.32 (0.1)0.05 (8e-3)15/15
BrentSTEPrr-Posik 0.13 (0.0)0.22 (0.1)0.28 (0.1)0.29 (0.1)0.30 (0.1)0.34 (0.1)0.06 (0.0)15/15
CMA-CSA-Atamna 7.7 (9)∞∞∞∞∞∞1e60/15
CMA-MSR-Atamna 10 (8)∞∞∞∞∞∞1e60/15
CMA-TPA-Atamna 4.9 (3)∞∞∞∞∞∞1e60/15
GP1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25020/15
GP1-CMAES-Bajer ∞∞∞∞∞∞∞25020/15
GP5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25160/15
GP5-CMAES-Bajer ∞∞∞∞∞∞∞25160/15
IPOPCMAv3p61-Bajer-2013instances 8.0 (11)∞∞∞∞∞∞25020/15
IPOPCMAv3p61-Bajer 7.8 (5)∞∞∞∞∞∞25020/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25020/15
RF1-CMAES-Bajer ∞∞∞∞∞∞∞25020/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25040/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞25140/15
STEPif-Posik 0.14 (0.0)0.35 (0.1)0.47 (0.1)0.61 (0.2)0.77 (0.1)0.87 (0.0)0.12 (1e-2)15/15
STEPifeg-Posik 0.14 (0.0)0.34 (0.2)0.46 (0.1)0.59 (0.1)0.73 (0.2)0.84 (0.1)0.11 (5e-3)15/15
STEPrr-Posik 0.13 (0.0)0.29 (0.1)0.42 (0.0)0.54 (0.1)0.68 (0.1)0.82 (0.1)0.12 (0.0)15/15

Δ fopt
f5, 10-D		 1e1
20		 1e0
20		 1e-1
20		 1e-2
20		 1e-3
20		 1e-5
20		 1e-7
20		 #succ
15/15
BrentSTEPif-Posik 1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)15/15
BrentSTEPifeg-Posik 1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)15/15
BrentSTEPqi-Posik 1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)15/15
BrentSTEPrr-Posik 1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)15/15
CMA-CSA-Atamna 4.8 (1)6.1 (2)6.2 (2)6.2 (2)6.2 (2)6.2 (2)6.2 (2)15/15
CMA-MSR-Atamna 3.9 (2)5.3 (1)5.4 (1)5.4 (1)5.4 (1)5.4 (1.0)5.4 (2)15/15
CMA-TPA-Atamna 4.2 (2)4.9 (2)5.0 (1)5.0 (2)5.0 (2)5.0 (1)5.0 (2)15/15
GP1-CMAES-Bajer-2013instances 5.4 (3)35 (57)41 (35)42 (22)42 (45)42 (58)42 (27)15/15
GP1-CMAES-Bajer 5.8 (2)38 (46)59 (47)59 (69)59 (74)59 (63)59 (49)13/15
GP5-CMAES-Bajer-2013instances 3.0 (0.8)5.2 (2)5.4 (1)5.5 (4)5.5 (2)5.5 (4)5.5 (3)15/15
GP5-CMAES-Bajer 3.5 (1)5.1 (2)6.0 (2)6.1 (1)6.1 (2)6.1 (2)6.1 (1)15/15
IPOPCMAv3p61-Bajer-2013instances 12 (12)23 (15)28 (7)30 (12)30 (12)30 (12)30 (13)15/15
IPOPCMAv3p61-Bajer 13 (5)25 (9)30 (16)30 (10)30 (16)30 (16)30 (18)15/15
LHD-10xDefault-MATSuMoTo-Brockhoff 11 (0.1)12 (0.2)12 (0.2)12 (0.2)12 (0.2)12 (0.3)12 (0.2)15/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.6 (0.1)3.0 (0.1)3.0 (0.2)3.0 (0.1)3.0 (0.4)3.0 (0.1)3.0 (0.3)15/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.7 (0.1)3.0 (0.2)3.1 (0.2)3.1 (0.1)3.1 (0.1)3.1 (0.2)3.1 (0.2)15/15
RF1-CMAES-Bajer-2013instances 18 (28)31 (17)34 (13)34 (20)35 (35)35 (29)35 (14)15/15
RF1-CMAES-Bajer 13 (9)34 (23)36 (22)38 (24)38 (22)38 (16)38 (21)15/15
RF5-CMAES-Bajer-2013instances 18 (9)62 (74)80 (18)106 (104)121 (132)121 (220)121 (137)10/15
RF5-CMAES-Bajer 41 (29)89 (177)113 (53)117 (55)118 (186)118 (46)118 (85)11/15
STEPif-Posik 1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)15/15
STEPifeg-Posik 1.5 (0)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)15/15
STEPrr-Posik 1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)15/15

Δ fopt
f6, 10-D		 1e1
412		 1e0
623		 1e-1
826		 1e-2
1039		 1e-3
1292		 1e-5
1841		 1e-7
2370		 #succ
15/15
BrentSTEPif-Posik 705 (1157)∞∞∞∞∞∞9e40/15
BrentSTEPifeg-Posik 291 (217)2075 (3544)∞∞∞∞∞9e40/15
BrentSTEPqi-Posik 225 (124)467 (617)∞∞∞∞∞9e40/15
BrentSTEPrr-Posik 372 (365)889 (1429)∞∞∞∞∞9e40/15
CMA-CSA-Atamna 1.9 (0.2)1.9 (0.2)1.9 (0.3)1.9 (0.3)1.8 (0.3)1.7 (0.2)1.6 (0.2)15/15
CMA-MSR-Atamna 1.5 (0.3)1.7 (0.2)1.7 (0.3)1.8 (0.4)1.7 (0.3)1.6 (0.3)1.6 (0.3)15/15
CMA-TPA-Atamna 1.8 (0.5)1.7 (0.4)1.7 (0.3)1.7 (0.4)1.6 (0.3)1.5 (0.2)1.5 (0.2)15/15
GP1-CMAES-Bajer-2013instances 3.0 (0.9)9.0 (12)∞∞∞∞∞25020/15
GP1-CMAES-Bajer 3.5 (2)29 (13)45 (39)∞∞∞∞25020/15
GP5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25160/15
GP5-CMAES-Bajer ∞∞∞∞∞∞∞25160/15
IPOPCMAv3p61-Bajer-2013instances 1.7 (0.6)1.8 (0.7)1.8 (0.6)2.0 (0.4)2.4 (1)∞∞25020/15
IPOPCMAv3p61-Bajer 1.6 (0.5)1.7 (0.2)1.7 (0.3)1.8 (0.3)2.1 (2)∞∞25020/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances 43 (26)∞∞∞∞∞∞25020/15
RF1-CMAES-Bajer 87 (68)59 (64)∞∞∞∞∞25020/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25180/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞25180/15
STEPif-Posik 199 (339)486 (390)∞∞∞∞∞1e50/15
STEPifeg-Posik 85 (302)477 (520)∞∞∞∞∞9e40/15
STEPrr-Posik 81 (55)170 (118)692 (1040)∞∞∞∞8e40/15

Δ fopt
f7, 10-D		 1e1
172		 1e0
1611		 1e-1
4195		 1e-2
5099		 1e-3
5141		 1e-5
5141		 1e-7
5389		 #succ
15/15
BrentSTEPif-Posik 879 (1009)∞∞∞∞∞∞1e50/15
BrentSTEPifeg-Posik 1097 (1197)∞∞∞∞∞∞1e50/15
BrentSTEPqi-Posik 929 (988)∞∞∞∞∞∞1e50/15
BrentSTEPrr-Posik 892 (1610)∞∞∞∞∞∞1e50/15
CMA-CSA-Atamna 2.2 (0.9)1.2 (0.6)0.68 (0.5)0.78 (0.3)0.78 (0.4)0.78 (0.3)0.76 (0.3)15/15
CMA-MSR-Atamna 1.9 (0.6)1.6 (1)0.88 (0.3)0.86 (0.3)0.86 (0.3)0.86 (0.3)0.83 (0.3)15/15
CMA-TPA-Atamna 1.7 (0.6)1.2 (1.0)0.85 (0.3)0.77 (0.3)0.78 (0.3)0.78 (0.3)0.88 (0.4)15/15
GP1-CMAES-Bajer-2013instances 1.6 (0.8)0.99 (0.6)4.4 (3)7.4 (14)7.3 (9)7.3 (9)∞25140/15
GP1-CMAES-Bajer 1.5 (0.1)1.3 (1)2.2 (2)∞∞∞∞25040/15
GP5-CMAES-Bajer-2013instances 1.0 (0.1)1.1 (0.8)∞∞∞∞∞25160/15
GP5-CMAES-Bajer 0.93 (0.7)0.65 (1)8.5 (7)∞∞∞∞25260/15
IPOPCMAv3p61-Bajer-2013instances 2.6 (3)1.6 (2)4.1 (3)∞∞∞∞25040/15
IPOPCMAv3p61-Bajer 2.4 (0.6)2.5 (4)8.9 (7)∞∞∞∞25040/15
LHD-10xDefault-MATSuMoTo-Brockhoff 10 (4)∞∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 42 (21)∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 12 (13)∞∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances 13 (14)∞∞∞∞∞∞25160/15
RF1-CMAES-Bajer 11 (10)∞∞∞∞∞∞25160/15
RF5-CMAES-Bajer-2013instances 31 (18)∞∞∞∞∞∞25260/15
RF5-CMAES-Bajer 24 (33)∞∞∞∞∞∞25260/15
STEPif-Posik 166 (153)∞∞∞∞∞∞1e50/15
STEPifeg-Posik 280 (71)∞∞∞∞∞∞1e50/15
STEPrr-Posik 216 (463)∞∞∞∞∞∞1e50/15

Δ fopt
f8, 10-D		 1e1
326		 1e0
921		 1e-1
1114		 1e-2
1217		 1e-3
1267		 1e-5
1315		 1e-7
1343		 #succ
15/15
BrentSTEPif-Posik 75 (56)729 (1943)∞∞∞∞∞1e50/15
BrentSTEPifeg-Posik 22 (18)73 (35)355 (357)527 (265)1077 (1250)∞∞9e40/15
BrentSTEPqi-Posik 15 (16)75 (147)239 (324)1084 (1671)1045 (1277)∞∞9e40/15
BrentSTEPrr-Posik 21 (24)68 (51)97 (78)1058 (1192)∞∞∞9e40/15
CMA-CSA-Atamna 3.1 (2)5.1 (3)5.0 (4)4.9 (1.0)4.9 (0.7)5.0 (3)5.1 (2)15/15
CMA-MSR-Atamna 2.7 (1)5.4 (4)5.2 (0.4)5.1 (6)5.1 (2)5.2 (0.4)5.4 (3)15/15
CMA-TPA-Atamna 3.4 (2)5.4 (4)5.2 (2)5.1 (2)5.1 (3)5.2 (3)5.3 (2)15/15
GP1-CMAES-Bajer-2013instances 3.1 (2)∞∞∞∞∞∞25020/15
GP1-CMAES-Bajer 4.3 (4)41 (32)∞∞∞∞∞25020/15
GP5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25160/15
GP5-CMAES-Bajer 110 (185)∞∞∞∞∞∞25140/15
IPOPCMAv3p61-Bajer-2013instances 2.1 (0.7)∞∞∞∞∞∞25020/15
IPOPCMAv3p61-Bajer 2.5 (0.6)∞∞∞∞∞∞25020/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 23 (13)∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances 5.8 (5)∞∞∞∞∞∞25020/15
RF1-CMAES-Bajer 5.1 (5)∞∞∞∞∞∞25020/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25140/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞25140/15
STEPif-Posik 7.5 (9)71 (73)199 (323)1086 (320)∞∞∞9e40/15
STEPifeg-Posik 3.6 (2)110 (207)273 (305)∞∞∞∞9e40/15
STEPrr-Posik 2.8 (3)110 (91)354 (505)504 (371)1019 (1146)∞∞9e40/15

Δ fopt
f9, 10-D		 1e1
200		 1e0
648		 1e-1
857		 1e-2
993		 1e-3
1065		 1e-5
1138		 1e-7
1185		 #succ
15/15
BrentSTEPif-Posik 247 (447)∞∞∞∞∞∞9e40/15
BrentSTEPifeg-Posik 47 (93)956 (985)∞∞∞∞∞9e40/15
BrentSTEPqi-Posik 37 (22)905 (2231)∞∞∞∞∞9e40/15
BrentSTEPrr-Posik 37 (10)875 (804)∞∞∞∞∞9e40/15
CMA-CSA-Atamna 3.3 (1)5.0 (1)4.7 (0.9)4.4 (1.0)4.4 (0.7)4.4 (0.6)4.5 (0.4)15/15
CMA-MSR-Atamna 4.0 (0.7)5.3 (3)4.9 (2)4.6 (1)4.5 (4)4.6 (2)4.8 (1)15/15
CMA-TPA-Atamna 3.7 (2)4.7 (0.9)4.7 (2)4.5 (1)4.4 (1)4.4 (0.8)4.4 (1)15/15
GP1-CMAES-Bajer-2013instances 4.3 (3)57 (132)44 (40)∞∞∞∞25020/15
GP1-CMAES-Bajer 4.1 (3)∞∞∞∞∞∞25020/15
GP5-CMAES-Bajer-2013instances 84 (85)∞∞∞∞∞∞25260/15
GP5-CMAES-Bajer 85 (110)55 (71)43 (43)37 (33)∞∞∞25160/15
IPOPCMAv3p61-Bajer-2013instances 3.5 (0.4)∞∞∞∞∞∞25020/15
IPOPCMAv3p61-Bajer 4.0 (2)∞∞∞∞∞∞25020/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances 16 (11)∞∞∞∞∞∞25020/15
RF1-CMAES-Bajer 10 (20)∞∞∞∞∞∞25020/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25040/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞25040/15
STEPif-Posik 37 (115)2159 (2024)∞∞∞∞∞9e40/15
STEPifeg-Posik 46 (38)∞∞∞∞∞∞9e40/15
STEPrr-Posik 22 (41)∞∞∞∞∞∞9e40/15

Δ fopt
f10, 10-D		 1e1
1835		 1e0
2172		 1e-1
2455		 1e-2
2728		 1e-3
2802		 1e-5
4543		 1e-7
4739		 #succ
15/15
BrentSTEPif-Posik ∞∞∞∞∞∞∞7e40/15
BrentSTEPifeg-Posik ∞∞∞∞∞∞∞7e40/15
BrentSTEPqi-Posik ∞∞∞∞∞∞∞8e40/15
BrentSTEPrr-Posik ∞∞∞∞∞∞∞5e40/15
CMA-CSA-Atamna 1.5 (0.2)1.4 (0.2)1.4 (0.1)1.3 (0.1)1.3 (0.1)0.88 (0.1)0.90 (0.1)15/15
CMA-MSR-Atamna 1.5 (0.2)1.6 (0.2)1.5 (0.1)1.4 (0.1)1.5 (0.1)1.00 (0.1)1.0 (0.1)15/15
CMA-TPA-Atamna 1.5 (0.4)1.5 (0.3)1.5 (0.2)1.4 (0.1)1.4 (0.1)0.93 (0.0)0.94 (0.0)15/15
GP1-CMAES-Bajer-2013instances 4.0 (3)∞∞∞∞∞∞25020/15
GP1-CMAES-Bajer 6.6 (4)17 (25)∞∞∞∞∞25020/15
GP5-CMAES-Bajer-2013instances 0.82 (0.2)0.97 (0.6)1.0 (1)0.96 (0.1)0.96 (0.8)0.62 (0.3)2.6 (3)0/15
GP5-CMAES-Bajer 0.59 (0.1)0.71 (0.3)0.77 (0.2)0.73 (0.5)0.74 (0.6)0.52 (0.4)3.8 (5)0/15
IPOPCMAv3p61-Bajer-2013instances 20 (31)17 (23)∞∞∞∞∞25020/15
IPOPCMAv3p61-Bajer ∞∞∞∞∞∞∞25020/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25020/15
RF1-CMAES-Bajer ∞∞∞∞∞∞∞25020/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25040/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞25040/15
STEPif-Posik ∞∞∞∞∞∞∞4e40/15
STEPifeg-Posik ∞∞∞∞∞∞∞4e40/15
STEPrr-Posik ∞∞∞∞∞∞∞3e40/15

Δ fopt
f11, 10-D		 1e1
266		 1e0
1041		 1e-1
2602		 1e-2
2954		 1e-3
3338		 1e-5
4092		 1e-7
4843		 #succ
15/15
BrentSTEPif-Posik ∞∞∞∞∞∞∞8e40/15
BrentSTEPifeg-Posik ∞∞∞∞∞∞∞7e40/15
BrentSTEPqi-Posik ∞∞∞∞∞∞∞8e40/15
BrentSTEPrr-Posik ∞∞∞∞∞∞∞4e40/15
CMA-CSA-Atamna 6.8 (0.8)2.0 (0.1)0.87 (0.0)0.82 (0.0)0.78 (0.1)0.71 (0.0)0.67 (0.1)15/15
CMA-MSR-Atamna 7.3 (0.8)2.3 (0.1)1.0 (0.1)0.97 (0.1)0.92 (0.1)0.84 (0.1)0.80 (0.0)15/15
CMA-TPA-Atamna 6.6 (0.8)2.1 (0.3)0.93 (0.1)0.89 (0.1)0.84 (0.0)0.75 (0.0)0.69 (0.0)15/15
GP1-CMAES-Bajer-2013instances 27 (24)∞∞∞∞∞∞25020/15
GP1-CMAES-Bajer 46 (33)∞∞∞∞∞∞25020/15
GP5-CMAES-Bajer-2013instances 7.9 (6)6.7 (3)4.6 (2)4.1 (4)3.7 (7)3.0 (2)7.7 (7)0/15
GP5-CMAES-Bajer 13 (8)18 (20)14 (14)∞∞∞∞25020/15
IPOPCMAv3p61-Bajer-2013instances ∞∞∞∞∞∞∞25020/15
IPOPCMAv3p61-Bajer ∞∞∞∞∞∞∞25020/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25020/15
RF1-CMAES-Bajer ∞∞∞∞∞∞∞25020/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25140/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞25140/15
STEPif-Posik ∞∞∞∞∞∞∞6e40/15
STEPifeg-Posik ∞∞∞∞∞∞∞6e40/15
STEPrr-Posik ∞∞∞∞∞∞∞3e40/15

Δ fopt
f12, 10-D		 1e1
515		 1e0
896		 1e-1
1240		 1e-2
1390		 1e-3
1569		 1e-5
3660		 1e-7
5154		 #succ
15/15
BrentSTEPif-Posik 353 (207)∞∞∞∞∞∞5e40/15
BrentSTEPifeg-Posik 262 (436)∞∞∞∞∞∞5e40/15
BrentSTEPqi-Posik 42 (35)83 (87)148 (123)634 (418)∞∞∞6e40/15
BrentSTEPrr-Posik 62 (125)346 (322)∞∞∞∞∞5e40/15
CMA-CSA-Atamna 4.2 (4)4.6 (4)4.9 (4)5.1 (4)5.1 (3)2.7 (0.9)2.2 (0.8)15/15
CMA-MSR-Atamna 4.9 (4)5.4 (3)5.3 (2)5.4 (3)5.3 (2)2.7 (0.9)2.2 (0.6)15/15
CMA-TPA-Atamna 3.6 (3)4.2 (3)4.6 (3)4.7 (2)4.6 (2)2.4 (0.8)1.9 (0.5)15/15
GP1-CMAES-Bajer-2013instances 2.9 (1.0)3.8 (3)6.6 (6)26 (24)23 (27)∞∞25020/15
GP1-CMAES-Bajer 3.9 (3)4.5 (6)5.2 (4)6.2 (4)∞∞∞25020/15
GP5-CMAES-Bajer-2013instances 21 (26)19 (16)30 (30)∞∞∞∞25140/15
GP5-CMAES-Bajer 14 (26)19 (18)29 (16)26 (42)∞∞∞25060/15
IPOPCMAv3p61-Bajer-2013instances 2.8 (5)5.5 (9)5.1 (4)13 (10)23 (41)∞∞25020/15
IPOPCMAv3p61-Bajer 3.2 (4)5.5 (11)29 (28)26 (21)∞∞∞25020/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances 4.2 (3)5.9 (8)10 (12)13 (13)∞∞∞25020/15
RF1-CMAES-Bajer 4.0 (3)7.5 (7)14 (13)∞∞∞∞25020/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25040/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞25140/15
STEPif-Posik 99 (144)∞∞∞∞∞∞2e40/15
STEPifeg-Posik 74 (93)∞∞∞∞∞∞2e40/15
STEPrr-Posik 20 (16)53 (100)84 (96)∞∞∞∞2e40/15

Δ fopt
f13, 10-D		 1e1
387		 1e0
596		 1e-1
797		 1e-2
1014		 1e-3
4587		 1e-5
6208		 1e-7
7779		 #succ
15/15
BrentSTEPif-Posik 453 (1013)∞∞∞∞∞∞9e40/15
BrentSTEPifeg-Posik 59 (32)216 (158)∞∞∞∞∞9e40/15
BrentSTEPqi-Posik 42 (43)271 (441)1573 (2174)∞∞∞∞9e40/15
BrentSTEPrr-Posik 49 (6)359 (341)1569 (2542)∞∞∞∞9e40/15
CMA-CSA-Atamna 3.2 (1)3.3 (2)3.6 (3)3.7 (2)1.0 (0.4)1.1 (0.5)1.2 (0.5)15/15
CMA-MSR-Atamna 2.2 (0.4)2.8 (1)4.3 (2)4.1 (1)1.00 (0.3)0.98 (0.2)1.1 (0.7)15/15
CMA-TPA-Atamna 2.5 (2)3.7 (2)4.4 (2)4.3 (2)1.1 (0.3)1.2 (0.5)1.3 (0.4)15/15
GP1-CMAES-Bajer-2013instances 2.5 (1)8.1 (9)8.0 (8)12 (15)∞∞∞25020/15
GP1-CMAES-Bajer 5.5 (3)14 (16)47 (64)∞∞∞∞25020/15
GP5-CMAES-Bajer-2013instances 1.9 (2)8.1 (10)10 (7)17 (31)∞∞∞25060/15
GP5-CMAES-Bajer 4.3 (4)6.8 (4)45 (51)35 (45)7.8 (9)∞∞25160/15
IPOPCMAv3p61-Bajer-2013instances 3.1 (2)7.0 (5)46 (107)36 (52)∞∞∞25020/15
IPOPCMAv3p61-Bajer 5.3 (7)7.9 (11)23 (24)∞∞∞∞25020/15
LHD-10xDefault-MATSuMoTo-Brockhoff 2.3 (4)∞∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.0 (2)∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.0 (1)∞∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances 7.8 (13)29 (29)46 (67)∞∞∞∞25020/15
RF1-CMAES-Bajer 7.0 (8)29 (36)46 (45)37 (23)∞∞∞25020/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25140/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞25040/15
STEPif-Posik 21 (42)171 (197)∞∞∞∞∞8e40/15
STEPifeg-Posik 23 (52)218 (249)1591 (1751)∞∞∞∞8e40/15
STEPrr-Posik 27 (40)120 (116)215 (378)∞∞∞∞9e40/15

Δ fopt
f14, 10-D		 1e1
37		 1e0
98		 1e-1
133		 1e-2
205		 1e-3
392		 1e-5
687		 1e-7
4305		 #succ
15/15
BrentSTEPif-Posik 1.4 (1)22 (6)90 (232)767 (1043)∞∞∞1e50/15
BrentSTEPifeg-Posik 1.4 (0.1)10 (11)14 (17)39 (24)∞∞∞1e50/15
BrentSTEPqi-Posik 1.3 (0.8)5.5 (6)7.8 (4)27 (13)∞∞∞1e50/15
BrentSTEPrr-Posik 1.3 (0.8)8.5 (8)12 (7)30 (14)3805 (2169)∞∞1e50/15
CMA-CSA-Atamna 2.7 (2)3.2 (0.9)4.0 (0.2)4.0 (0.6)3.3 (0.3)3.5 (0.1)0.85 (0.1)15/15
CMA-MSR-Atamna 3.1 (1)3.4 (0.8)4.3 (0.6)4.2 (0.3)3.4 (0.3)3.5 (0.4)0.90 (0.1)15/15
CMA-TPA-Atamna 3.0 (2)3.1 (0.5)3.5 (0.5)3.5 (0.3)3.0 (0.4)3.5 (0.3)0.92 (0.0)15/15
GP1-CMAES-Bajer-2013instances 2.0 (0.9)2.2 (0.7)3.0 (0.7)3.6 (0.4)4.4 (1)∞∞25020/15
GP1-CMAES-Bajer 1.8 (1)2.2 (0.5)3.0 (0.6)3.6 (1)4.8 (0.9)∞∞25020/15
GP5-CMAES-Bajer-2013instances 1.6 (0.6)1.6 (0.6)3.3 (0.9)4.0 (0.4)27 (24)∞∞25260/15
GP5-CMAES-Bajer 1.7 (0.9)1.6 (0.6)1.8 (0.6)2.2 (0.5)20 (24)∞∞25140/15
IPOPCMAv3p61-Bajer-2013instances 2.4 (2)3.2 (0.9)3.9 (0.9)4.2 (0.7)3.8 (0.4)∞∞25020/15
IPOPCMAv3p61-Bajer 2.4 (1)3.2 (0.7)3.9 (1.0)4.2 (0.8)3.8 (0.4)∞∞25020/15
LHD-10xDefault-MATSuMoTo-Brockhoff 5.8 (0.4)4.1 (3)8.9 (7)∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.1 (0.6)4.2 (2)55 (33)∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.8 (0.5)4.3 (2)17 (20)∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances 2.2 (0.6)3.4 (2)5.1 (3)8.8 (3)94 (110)∞∞25020/15
RF1-CMAES-Bajer 1.9 (1)3.1 (2)4.5 (3)7.7 (3)∞∞∞25020/15
RF5-CMAES-Bajer-2013instances 5.8 (14)33 (19)∞∞∞∞∞25040/15
RF5-CMAES-Bajer 2.7 (2)40 (42)282 (203)∞∞∞∞25140/15
STEPif-Posik 1.3 (0.2)1.9 (1)3.7 (3)63 (90)∞∞∞1e50/15
STEPifeg-Posik 1.3 (1)1.6 (0.8)2.7 (1)19 (15)∞∞∞1e50/15
STEPrr-Posik 1.2 (0.2)1.4 (0.4)2.1 (1)9.3 (8)3733 (4211)∞∞1e50/15

Δ fopt
f15, 10-D		 1e1
4774		 1e0
39246		 1e-1
73643		 1e-2
74669		 1e-3
75790		 1e-5
77814		 1e-7
79834		 #succ
12/15
BrentSTEPif-Posik ∞∞∞∞∞∞∞9e40/15
BrentSTEPifeg-Posik ∞∞∞∞∞∞∞9e40/15
BrentSTEPqi-Posik ∞∞∞∞∞∞∞9e40/15
BrentSTEPrr-Posik ∞∞∞∞∞∞∞9e40/15
CMA-CSA-Atamna 0.95 (0.4)1.0 (0.8)1.00 (0.6)1.0 (0.6)1.0 (0.4)1.0 (0.5)1.0 (0.6)15/15
CMA-MSR-Atamna 1.2 (1)0.98 (0.3)0.92 (0.4)0.94 (0.2)0.96 (0.5)0.99 (0.5)1.0 (0.7)15/15
CMA-TPA-Atamna 0.82 (0.5)1.1 (0.9)1.0 (0.5)1.0 (0.6)1.0 (0.4)1.0 (0.6)1.0 (0.5)15/15
GP1-CMAES-Bajer-2013instances 3.7 (5)∞∞∞∞∞∞25020/15
GP1-CMAES-Bajer 1.7 (2)∞∞∞∞∞∞25020/15
GP5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25160/15
GP5-CMAES-Bajer ∞∞∞∞∞∞∞25180/15
IPOPCMAv3p61-Bajer-2013instances 2.4 (3)∞∞∞∞∞∞25020/15
IPOPCMAv3p61-Bajer 1.8 (2)∞∞∞∞∞∞25020/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances 7.6 (16)∞∞∞∞∞∞25020/15
RF1-CMAES-Bajer 2.3 (4)∞∞∞∞∞∞25020/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25040/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞25040/15
STEPif-Posik ∞∞∞∞∞∞∞9e40/15
STEPifeg-Posik ∞∞∞∞∞∞∞9e40/15
STEPrr-Posik ∞∞∞∞∞∞∞9e40/15

Δ fopt
f16, 10-D		 1e1
425		 1e0
7029		 1e-1
15779		 1e-2
45669		 1e-3
51151		 1e-5
65798		 1e-7
71570		 #succ
15/15
BrentSTEPif-Posik 38 (50)96 (94)∞∞∞∞∞9e40/15
BrentSTEPifeg-Posik 36 (39)201 (161)∞∞∞∞∞1e50/15
BrentSTEPqi-Posik 60 (39)∞∞∞∞∞∞1e50/15
BrentSTEPrr-Posik 18 (2)∞∞∞∞∞∞1e50/15
CMA-CSA-Atamna 1.8 (0.5)0.82 (1)1.0 (0.9)0.61 (0.3)0.59 (0.5)0.50 (0.4)0.48 (0.4)15/15
CMA-MSR-Atamna 1.5 (3)1.0 (0.6)1.2 (1)1.1 (0.3)2.6 (1)2.2 (4)2.1 (4)15/15
CMA-TPA-Atamna 3.1 (2)1.0 (0.7)1.0 (0.6)0.54 (0.3)0.70 (0.6)0.58 (0.6)0.56 (0.4)15/15
GP1-CMAES-Bajer-2013instances 1.1 (0.4)2.4 (2)∞∞∞∞∞25020/15
GP1-CMAES-Bajer 0.94 (0.3)0.71 (0.8)∞∞∞∞∞25020/15
GP5-CMAES-Bajer-2013instances 0.39 (0.1)1.6 (1)∞∞∞∞∞25140/15
GP5-CMAES-Bajer 0.36 (0.1)1.1 (2)∞∞∞∞∞25140/15
IPOPCMAv3p61-Bajer-2013instances 2.4 (0.7)0.63 (0.7)2.4 (4)∞∞∞∞25020/15
IPOPCMAv3p61-Bajer 2.0 (0.9)0.46 (0.3)∞∞∞∞∞25020/15
LHD-10xDefault-MATSuMoTo-Brockhoff 1.6 (2)∞∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 5.4 (5)∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.8 (2)∞∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances 1.3 (0.9)2.4 (1)∞∞∞∞∞25020/15
RF1-CMAES-Bajer 1.4 (0.4)1.5 (2)∞∞∞∞∞25020/15
RF5-CMAES-Bajer-2013instances 3.6 (11)∞∞∞∞∞∞25280/15
RF5-CMAES-Bajer 3.7 (5)∞∞∞∞∞∞25140/15
STEPif-Posik 4.2 (5)205 (193)∞∞∞∞∞1e50/15
STEPifeg-Posik 5.9 (9)206 (557)∞∞∞∞∞1e50/15
STEPrr-Posik 4.5 (7)212 (164)∞∞∞∞∞1e50/15

Δ fopt
f17, 10-D		 1e1
26		 1e0
429		 1e-1
2203		 1e-2
6329		 1e-3
9851		 1e-5
20190		 1e-7
26503		 #succ
15/15
BrentSTEPif-Posik 1.4 (1)3320 (4600)∞∞∞∞∞1e50/15
BrentSTEPifeg-Posik 1.4 (0.9)∞∞∞∞∞∞1e50/15
BrentSTEPqi-Posik 1.4 (0.4)∞∞∞∞∞∞1e50/15
BrentSTEPrr-Posik 1.4 (0.9)∞∞∞∞∞∞1e50/15
CMA-CSA-Atamna 3.5 (1)2.1 (0.3)1.0 (0.1)0.72 (0.6)0.81 (0.8)0.86 (0.2)1.1 (0.4)15/15
CMA-MSR-Atamna 2.1 (1)3.1 (8)1.3 (1)1.4 (1)1.2 (0.6)1.0 (0.3)1.4 (0.6)15/15
CMA-TPA-Atamna 2.4 (2)0.93 (0.2)1.3 (1.0)1.2 (2)1.1 (0.4)0.99 (0.4)1.3 (0.6)15/15
GP1-CMAES-Bajer-2013instances 1.7 (0.7)0.84 (0.5)2.6 (5)∞∞∞∞25020/15
GP1-CMAES-Bajer 2.0 (1)1.6 (2)2.8 (5)∞∞∞∞25020/15
GP5-CMAES-Bajer-2013instances 1.7 (0.9)6.7 (7)∞∞∞∞∞25260/15
GP5-CMAES-Bajer 1.3 (1)3.2 (6)16 (32)∞∞∞∞25160/15
IPOPCMAv3p61-Bajer-2013instances 2.4 (2)1.2 (0.3)0.64 (0.6)0.60 (0.2)1.8 (3)∞∞25020/15
IPOPCMAv3p61-Bajer 2.7 (1)1.1 (0.3)0.66 (1)0.85 (0.4)3.8 (6)∞∞25020/15
LHD-10xDefault-MATSuMoTo-Brockhoff 3.6 (4)∞∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.7 (1)∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.8 (0.5)17 (29)∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances 1.8 (2)13 (16)∞∞∞∞∞25020/15
RF1-CMAES-Bajer 2.3 (0.9)6.1 (18)∞∞∞∞∞25020/15
RF5-CMAES-Bajer-2013instances 1.6 (0.9)21 (29)∞∞∞∞∞25140/15
RF5-CMAES-Bajer 1.7 (0.8)21 (22)∞∞∞∞∞25040/15
STEPif-Posik 1.3 (0.4)∞∞∞∞∞∞1e50/15
STEPifeg-Posik 1.3 (0.7)1668 (1669)∞∞∞∞∞1e50/15
STEPrr-Posik 1.3 (0.6)∞∞∞∞∞∞1e50/15

Δ fopt
f18, 10-D		 1e1
238		 1e0
836		 1e-1
7012		 1e-2
15928		 1e-3
27536		 1e-5
37234		 1e-7
42708		 #succ
15/15
BrentSTEPif-Posik 1179 (1783)∞∞∞∞∞∞1e50/15
BrentSTEPifeg-Posik 644 (847)∞∞∞∞∞∞1e50/15
BrentSTEPqi-Posik 808 (1969)∞∞∞∞∞∞9e40/15
BrentSTEPrr-Posik 607 (904)∞∞∞∞∞∞9e40/15
CMA-CSA-Atamna 1.3 (0.4)1.0 (0.4)0.64 (0.5)0.79 (0.6)0.70 (0.3)0.78 (0.3)0.90 (0.2)15/15
CMA-MSR-Atamna 1.1 (0.4)2.1 (2)1.2 (2)0.77 (0.5)0.74 (0.4)0.76 (0.4)0.81 (0.2)15/15
CMA-TPA-Atamna 1.1 (0.3)1.9 (3)0.73 (0.4)0.82 (0.9)0.66 (0.4)0.66 (0.3)0.71 (0.2)15/15
GP1-CMAES-Bajer-2013instances 0.97 (0.4)2.3 (5)5.2 (3)∞∞∞∞25020/15
GP1-CMAES-Bajer 1.0 (0.5)2.0 (2)1.6 (2)∞∞∞∞25020/15
GP5-CMAES-Bajer-2013instances 1.2 (0.3)13 (38)∞∞∞∞∞25140/15
GP5-CMAES-Bajer 1.8 (0.9)13 (23)∞∞∞∞∞25160/15
IPOPCMAv3p61-Bajer-2013instances 1.3 (0.8)1.7 (2)1.2 (0.9)∞∞∞∞25020/15
IPOPCMAv3p61-Bajer 1.3 (0.3)1.8 (4)0.73 (2)∞∞∞∞25020/15
LHD-10xDefault-MATSuMoTo-Brockhoff 3.4 (2)∞∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 5.6 (4)∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 15 (24)∞∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances 1.1 (0.3)20 (28)∞∞∞∞∞25020/15
RF1-CMAES-Bajer 1.2 (0.5)20 (17)∞∞∞∞∞25020/15
RF5-CMAES-Bajer-2013instances 7.5 (13)∞∞∞∞∞∞25040/15
RF5-CMAES-Bajer 8.4 (5)∞∞∞∞∞∞25040/15
STEPif-Posik 399 (676)∞∞∞∞∞∞1e50/15
STEPifeg-Posik 299 (218)∞∞∞∞∞∞1e50/15
STEPrr-Posik 324 (542)∞∞∞∞∞∞9e40/15

Δ fopt
f19, 10-D		 1e1
1		 1e0
1		 1e-1
10609		 1e-2
9.8e5		 1e-3
1.4e6		 1e-5
1.4e6		 1e-7
1.4e6		 #succ
15/15
BrentSTEPif-Posik 35 (5)6.6e5 (5e5)∞∞∞∞∞1e50/15
BrentSTEPifeg-Posik 35 (13)1.4e6 (1e6)∞∞∞∞∞1e50/15
BrentSTEPqi-Posik 35 (9)4.5e5 (4e5)∞∞∞∞∞1e50/15
BrentSTEPrr-Posik 35 (23)3.3e5 (2e5)∞∞∞∞∞1e50/15
CMA-CSA-Atamna 85 (40)1.1e4 (2e4)12 (6)0.42 (0.2)0.33 (0.2)0.33 (0.2)0.33 (0.1)15/15
CMA-MSR-Atamna 87 (33)5820 (8258)21 (6)∞∞∞∞1e60/15
CMA-TPA-Atamna 73 (56)1.2e4 (4492)12 (8)0.49 (0.2)0.51 (0.5)0.51 (0.2)0.51 (0.2)13/15
GP1-CMAES-Bajer-2013instances 59 (24)1.8e4 (3e4)∞∞∞∞∞25040/15
GP1-CMAES-Bajer 68 (38)3.7e4 (5e4)∞∞∞∞∞25140/15
GP5-CMAES-Bajer-2013instances 42 (14)∞∞∞∞∞∞25280/15
GP5-CMAES-Bajer 45 (6)3.6e4 (5e4)∞∞∞∞∞25480/15
IPOPCMAv3p61-Bajer-2013instances 92 (33)3.8e4 (1e4)∞∞∞∞∞25040/15
IPOPCMAv3p61-Bajer 105 (38)3.8e4 (3e4)∞∞∞∞∞25140/15
LHD-10xDefault-MATSuMoTo-Brockhoff 182 (56)∞∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 61 (22)∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 67 (47)∞∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances 69 (35)6979 (7531)∞∞∞∞∞25020/15
RF1-CMAES-Bajer 77 (34)∞∞∞∞∞∞25140/15
RF5-CMAES-Bajer-2013instances 64 (21)∞∞∞∞∞∞25160/15
RF5-CMAES-Bajer 67 (54)3.6e4 (4e4)∞∞∞∞∞25160/15
STEPif-Posik 44 (18)1.1e5 (2e5)∞∞∞∞∞1e50/15
STEPifeg-Posik 45 (49)1.2e5 (1e5)∞∞∞∞∞1e50/15
STEPrr-Posik 45 (6)1.1e5 (7e4)∞∞∞∞∞1e50/15

Δ fopt
f20, 10-D		 1e1
32		 1e0
15426		 1e-1
5.5e5		 1e-2
5.7e5		 1e-3
5.7e5		 1e-5
5.8e5		 1e-7
5.9e5		 #succ
15/15
BrentSTEPif-Posik 2.0 (1)3.5 (7)∞∞∞∞∞1e50/15
BrentSTEPifeg-Posik 1.9 (0.5)3.2 (3)∞∞∞∞∞1e50/15
BrentSTEPqi-Posik 1.8 (0.6)3.4 (8)∞∞∞∞∞1e50/15
BrentSTEPrr-Posik 1.9 (0.7)2.8 (4)∞∞∞∞∞1e50/15
CMA-CSA-Atamna 5.3 (0.7)1.8 (1)0.39 (0.1)0.39 (0.2)0.39 (0.2)0.40 (0.2)0.40 (0.2)15/15
CMA-MSR-Atamna 5.9 (1)∞∞∞∞∞∞1e60/15
CMA-TPA-Atamna 5.1 (1)18 (16)27 (18)26 (24)26 (38)26 (41)25 (26)1/15
GP1-CMAES-Bajer-2013instances 4.0 (1)∞∞∞∞∞∞25020/15
GP1-CMAES-Bajer 3.7 (0.9)∞∞∞∞∞∞25020/15
GP5-CMAES-Bajer-2013instances 2.3 (0.6)∞∞∞∞∞∞25260/15
GP5-CMAES-Bajer 2.6 (1)∞∞∞∞∞∞25140/15
IPOPCMAv3p61-Bajer-2013instances 6.5 (2)2.3 (2)∞∞∞∞∞25020/15
IPOPCMAv3p61-Bajer 5.9 (2)∞∞∞∞∞∞25020/15
LHD-10xDefault-MATSuMoTo-Brockhoff 7.7 (0.7)∞∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.9 (0.9)∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 3.4 (1)∞∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances 5.5 (2)∞∞∞∞∞∞25020/15
RF1-CMAES-Bajer 5.2 (2)∞∞∞∞∞∞25020/15
RF5-CMAES-Bajer-2013instances 21 (30)∞∞∞∞∞∞25140/15
RF5-CMAES-Bajer 15 (5)∞∞∞∞∞∞25040/15
STEPif-Posik 2.0 (0.7)0.87 (0.6)∞∞∞∞∞1e50/15
STEPifeg-Posik 2.0 (0.3)1.4 (1)∞∞∞∞∞1e50/15
STEPrr-Posik 1.9 (0.5)1.9 (2)∞∞∞∞∞1e50/15

Δ fopt
f21, 10-D		 1e1
130		 1e0
2236		 1e-1
4392		 1e-2
4487		 1e-3
4618		 1e-5
5074		 1e-7
11329		 #succ
15/15
BrentSTEPif-Posik 332 (261)301 (570)∞∞∞∞∞1e50/15
BrentSTEPifeg-Posik 172 (387)308 (425)337 (125)330 (256)320 (368)293 (508)∞1e50/15
BrentSTEPqi-Posik 151 (263)188 (174)331 (433)325 (318)316 (217)292 (350)∞1e50/15
BrentSTEPrr-Posik 159 (410)196 (86)161 (127)158 (75)154 (195)282 (508)127 (190)1/15
CMA-CSA-Atamna 7.7 (5)166 (222)184 (484)181 (246)176 (211)161 (240)73 (123)7/15
CMA-MSR-Atamna 10 (13)331 (561)219 (377)215 (234)209 (357)190 (447)85 (111)7/15
CMA-TPA-Atamna 4.8 (9)132 (387)118 (241)116 (263)113 (192)103 (178)46 (67)8/15
GP1-CMAES-Bajer-2013instances 2.4 (5)2.4 (4)8.1 (8)7.9 (14)7.7 (14)7.1 (5)3.2 (5)1/15
GP1-CMAES-Bajer 8.5 (10)∞∞∞∞∞∞25020/15
GP5-CMAES-Bajer-2013instances 3.7 (7)4.8 (6)3.9 (4)3.8 (7)3.9 (5)∞∞25060/15
GP5-CMAES-Bajer 3.5 (2)5.0 (6)4.1 (3)4.1 (3)8.2 (13)∞∞25260/15
IPOPCMAv3p61-Bajer-2013instances 10 (12)4.7 (6)8.1 (7)8.0 (7)7.8 (5)7.1 (5)3.2 (5)1/15
IPOPCMAv3p61-Bajer 7.0 (25)∞∞∞∞∞∞25020/15
LHD-10xDefault-MATSuMoTo-Brockhoff 2.7 (1)3.3 (3)∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.3 (2)3.2 (6)∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.2 (0.2)1.00 (0.6)1.7 (3)∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances 9.1 (24)5.0 (10)∞∞∞∞∞25020/15
RF1-CMAES-Bajer 15 (19)∞∞∞∞∞∞25020/15
RF5-CMAES-Bajer-2013instances 13 (19)∞∞∞∞∞∞25140/15
RF5-CMAES-Bajer 16 (10)∞∞∞∞∞∞25140/15
STEPif-Posik 111 (314)304 (244)∞∞∞∞∞1e50/15
STEPifeg-Posik 79 (10)187 (410)∞∞∞∞∞1e50/15
STEPrr-Posik 78 (261)141 (103)103 (201)101 (118)99 (103)91 (108)63 (89)0/15

Δ fopt
f22, 10-D		 1e1
98		 1e0
2839		 1e-1
6353		 1e-2
6620		 1e-3
6798		 1e-5
8296		 1e-7
10351		 #succ
15/15
BrentSTEPif-Posik 958 (1023)151 (132)222 (224)∞∞∞∞1e50/15
BrentSTEPifeg-Posik 645 (870)77 (92)49 (71)105 (151)210 (180)∞∞1e50/15
BrentSTEPqi-Posik 524 (646)76 (97)107 (98)213 (166)209 (158)∞∞1e50/15
BrentSTEPrr-Posik 643 (659)66 (51)105 (115)213 (290)209 (261)∞∞1e50/15
CMA-CSA-Atamna 19 (39)327 (627)1309 (962)1257 (384)1224 (2116)1003 (1069)804 (575)1/15
CMA-MSR-Atamna 45 (17)583 (589)1826 (2090)1753 (2311)1707 (1790)1399 (846)1121 (1061)1/15
CMA-TPA-Atamna 454 (11)307 (461)1269 (1505)1218 (1880)1186 (870)972 (1216)779 (656)1/15
GP1-CMAES-Bajer-2013instances 3.7 (8)1.9 (2)∞∞∞∞∞25020/15
GP1-CMAES-Bajer 14 (13)∞∞∞∞∞∞25020/15
GP5-CMAES-Bajer-2013instances 12 (13)1.6 (2)2.9 (4)5.7 (8)5.5 (9)∞∞25160/15
GP5-CMAES-Bajer 8.0 (15)1.6 (2)2.7 (3)2.7 (3)5.5 (6)∞∞25160/15
IPOPCMAv3p61-Bajer-2013instances 16 (19)13 (24)∞∞∞∞∞25020/15
IPOPCMAv3p61-Bajer 9.1 (13)12 (15)∞∞∞∞∞25020/15
LHD-10xDefault-MATSuMoTo-Brockhoff 4.2 (3)1.3 (1)∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 3.0 (4)∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 3.4 (5)∞∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances 13 (26)5.9 (6)∞∞∞∞∞25020/15
RF1-CMAES-Bajer 17 (26)3.7 (4)∞∞∞∞∞25020/15
RF5-CMAES-Bajer-2013instances 18 (32)5.9 (6)∞∞∞∞∞25140/15
RF5-CMAES-Bajer 59 (57)∞∞∞∞∞∞25140/15
STEPif-Posik 632 (1184)98 (64)104 (103)∞∞∞∞1e50/15
STEPifeg-Posik 308 (389)38 (46)50 (50)215 (132)∞∞∞1e50/15
STEPrr-Posik 553 (694)60 (89)38 (17)212 (238)∞∞∞1e50/15

Δ fopt
f23, 10-D		 1e1
3.0		 1e0
915		 1e-1
16425		 1e-2
1.8e5		 1e-3
2.0e5		 1e-5
2.1e5		 1e-7
2.1e5		 #succ
15/15
BrentSTEPif-Posik 2.3 (3)12 (21)∞∞∞∞∞1e50/15
BrentSTEPifeg-Posik 2.3 (1)13 (16)∞∞∞∞∞1e50/15
BrentSTEPqi-Posik 2.3 (2)13 (17)∞∞∞∞∞1e50/15
BrentSTEPrr-Posik 2.3 (2)11 (15)∞∞∞∞∞1e50/15
CMA-CSA-Atamna 2.8 (4)23 (15)7.0 (10)7.5 (10)8.7 (6)8.5 (5)8.3 (9)6/15
CMA-MSR-Atamna 4.4 (8)2.9 (4)1.4 (1)0.43 (0.4)0.41 (0.4)0.44 (0.4)0.47 (0.5)15/15
CMA-TPA-Atamna 2.3 (3)12 (26)4.9 (2)3.8 (4)3.5 (5)3.4 (3)3.4 (3)10/15
GP1-CMAES-Bajer-2013instances 2.0 (2)2.7 (3)∞∞∞∞∞25020/15
GP1-CMAES-Bajer 1.8 (3)2.7 (2)∞∞∞∞∞25020/15
GP5-CMAES-Bajer-2013instances 1.7 (2)0.92 (0.2)∞∞∞∞∞25140/15
GP5-CMAES-Bajer 1.9 (1)0.79 (1)∞∞∞∞∞25140/15
IPOPCMAv3p61-Bajer-2013instances 2.1 (3)∞∞∞∞∞∞25140/15
IPOPCMAv3p61-Bajer 2.1 (2)∞∞∞∞∞∞25040/15
LHD-10xDefault-MATSuMoTo-Brockhoff 1.5 (0.8)∞∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.9 (2)∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.2 (1)∞∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances 2.3 (1)∞∞∞∞∞∞25060/15
RF1-CMAES-Bajer 1.7 (0.9)∞∞∞∞∞∞25060/15
RF5-CMAES-Bajer-2013instances 1.9 (0.8)∞∞∞∞∞∞25480/15
RF5-CMAES-Bajer 2.3 (2)∞∞∞∞∞∞25480/15
STEPif-Posik 2.3 (2)6.4 (0.9)∞∞∞∞∞1e50/15
STEPifeg-Posik 2.3 (3)4.6 (2)∞∞∞∞∞1e50/15
STEPrr-Posik 2.3 (3)5.7 (8)∞∞∞∞∞1e50/15

Δ fopt
f24, 10-D		 1e1
98761		 1e0
1.0e6		 1e-1
7.5e7		 1e-2
7.5e7		 1e-3
7.5e7		 1e-5
7.5e7		 1e-7
7.5e7		 #succ
1/15
BrentSTEPif-Posik ∞∞∞∞∞∞∞9e40/15
BrentSTEPifeg-Posik ∞∞∞∞∞∞∞9e40/15
BrentSTEPqi-Posik ∞∞∞∞∞∞∞9e40/15
BrentSTEPrr-Posik ∞∞∞∞∞∞∞8e40/15
CMA-CSA-Atamna 20 (38)∞∞∞∞∞∞1e60/15
CMA-MSR-Atamna 42 (110)6.4 (6)∞∞∞∞∞1e60/15
CMA-TPA-Atamna 72 (106)6.8 (7)∞∞∞∞∞1e60/15
GP1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25140/15
GP1-CMAES-Bajer 0.37 (0.3)∞∞∞∞∞∞25040/15
GP5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25280/15
GP5-CMAES-Bajer ∞∞∞∞∞∞∞25360/15
IPOPCMAv3p61-Bajer-2013instances ∞∞∞∞∞∞∞25040/15
IPOPCMAv3p61-Bajer ∞∞∞∞∞∞∞25020/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞5000/15
RF1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25020/15
RF1-CMAES-Bajer ∞∞∞∞∞∞∞25020/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞25140/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞25140/15
STEPif-Posik ∞∞∞∞∞∞∞9e40/15
STEPifeg-Posik ∞∞∞∞∞∞∞9e40/15
STEPrr-Posik ∞∞∞∞∞∞∞9e40/15

Previous dimension | Dimension = 20 | Next dimension

Δ fopt
f1, 20-D		 1e1
43		 1e0
43		 1e-1
43		 1e-2
43		 1e-3
43		 1e-5
43		 1e-7
43		 #succ
15/15
BrentSTEPif-Posik 1.9 (0.1)2.3 (0.1)2.5 (0.3)2.5 (0.3)2.5 (0.2)2.5 (0.2)2.5 (0.3)15/15
BrentSTEPifeg-Posik 1.9 (0.1)2.3 (0.1)2.5 (0.2)2.5 (0.2)2.5 (0.2)2.5 (0.3)2.5 (0.2)15/15
BrentSTEPqi-Posik 1.9 (0.1)2.3 (0.1)2.5 (0.1)2.5 (0.2)2.5 (0.3)2.5 (0.3)2.5 (0.2)15/15
BrentSTEPrr-Posik 1.9 (0.2)2.3 (0.1)2.5 (0.2)2.5 (0.3)2.5 (0.2)2.5 (0.3)2.5 (0.2)15/15
CMA-CSA-Atamna 7.7 (0.7)14 (1)20 (1)26 (1)32 (2)45 (3)57 (3)15/15
CMA-MSR-Atamna 9.2 (1)16 (0.9)23 (2)30 (2)38 (3)53 (3)68 (4)15/15
CMA-TPA-Atamna 6.4 (1)11 (1)15 (2)19 (2)24 (2)32 (3)41 (3)15/15
GP1-CMAES-Bajer-2013instances 5.1 (1)9.2 (0.7)14 (3)17 (2)21 (3)32 (2)48 (6)15/15
GP1-CMAES-Bajer 4.9 (0.6)8.3 (0.8)13 (1)16 (2)20 (1)31 (4)47 (4)15/15
GP5-CMAES-Bajer-2013instances 2.8 (0.2)3.9 (0.3)5.2 (0.3)6.7 (0.7)7.9 (0.6)54 (23)567 (247)0/15
GP5-CMAES-Bajer 2.7 (0.2)3.9 (0.3)5.4 (0.5)6.9 (0.7)8.2 (0.8)68 (48)393 (241)0/15
IPOPCMAv3p61-Bajer-2013instances 8.6 (1)15 (2)21 (2)27 (2)34 (1)46 (2)58 (2)15/15
IPOPCMAv3p61-Bajer 8.5 (1)15 (2)21 (2)27 (3)33 (3)46 (6)59 (5)15/15
LHD-10xDefault-MATSuMoTo-Brockhoff 10 (0.3)11 (0.6)14 (1.0)15 (1)17 (2)∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 4.5 (1)38 (53)78 (83)343 (360)∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 4.2 (0.6)20 (9)26 (49)63 (35)346 (221)∞∞10000/15
RF1-CMAES-Bajer-2013instances 6.9 (1)12 (1)18 (2)24 (4)30 (3)43 (5)61 (12)15/15
RF1-CMAES-Bajer 7.0 (1)13 (2)19 (5)25 (6)31 (6)46 (8)61 (6)15/15
RF5-CMAES-Bajer-2013instances 6.8 (2)69 (51)1669 (1688)∞∞∞∞50060/15
RF5-CMAES-Bajer 7.5 (3)119 (528)496 (419)∞∞∞∞50060/15
STEPif-Posik 2.1 (0.1)2.8 (0.1)4.3 (1.0)6.0 (0.6)7.4 (0.9)8.8 (0.7)10 (0.4)15/15
STEPifeg-Posik 2.1 (0.1)2.8 (0.1)4.1 (0.3)5.6 (0.5)6.7 (0.7)8.7 (0.7)10 (0.4)15/15
STEPrr-Posik 2.1 (0.1)2.8 (0.1)3.6 (0.1)4.4 (0.2)5.1 (0.1)6.7 (0.1)8.3 (0.1)15/15

Δ fopt
f2, 20-D		 1e1
385		 1e0
386		 1e-1
387		 1e-2
388		 1e-3
390		 1e-5
391		 1e-7
393		 #succ
15/15
BrentSTEPif-Posik 0.70 (0.1)0.79 (0.1)0.80 (0.1)0.90 (0.1)0.94 (0.1)1.00 (0.1)1.1 (0.1)15/15
BrentSTEPifeg-Posik 0.66 (0.1)0.74 (0.1)0.80 (0.1)0.90 (0.0)0.94 (0.1)1.0 (0.1)1.1 (0.1)15/15
BrentSTEPqi-Posik 0.40 (0.0)★40.44 (0.0)★40.47 (0.1)★40.52 (0.0)★40.57 (0.0)★40.69 (0.1)★40.86 (0.1)★215/15
BrentSTEPrr-Posik 0.59 (0.1)0.65 (0.1)0.69 (0.1)0.79 (0.1)0.87 (0.1)1.0 (0.1)1.1 (0.1)15/15
CMA-CSA-Atamna 23 (2)27 (2)29 (1)30 (1)31 (0.9)32 (0.9)34 (2)15/15
CMA-MSR-Atamna 27 (4)32 (4)35 (1)36 (3)37 (1)38 (1)39 (2)15/15
CMA-TPA-Atamna 25 (3)30 (3)33 (2)35 (2)36 (1)37 (1)37 (1)15/15
GP1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
GP1-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
GP5-CMAES-Bajer-2013instances 46 (29)∞∞∞∞∞∞50060/15
GP5-CMAES-Bajer 193 (273)195 (266)∞∞∞∞∞50060/15
IPOPCMAv3p61-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
IPOPCMAv3p61-Bajer ∞∞∞∞∞∞∞50060/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
RF1-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
STEPif-Posik 0.96 (0.2)1.1 (0.2)1.2 (0.2)1.2 (0.2)1.3 (0.2)1.4 (0.1)1.6 (0.2)15/15
STEPifeg-Posik 0.83 (0.1)1.0 (0.2)1.2 (0.2)1.2 (0.2)1.4 (0.3)1.4 (0.2)1.6 (0.2)15/15
STEPrr-Posik 0.69 (0.1)0.78 (0.0)0.88 (0.0)0.95 (0.0)1.1 (0.1)1.2 (0.0)1.4 (0.1)15/15

Δ fopt
f3, 20-D		 1e1
5066		 1e0
7626		 1e-1
7635		 1e-2
7637		 1e-3
7643		 1e-5
7646		 1e-7
7651		 #succ
15/15
BrentSTEPif-Posik 0.14 (0.0)0.18 (0.0)0.22 (0.1)0.22 (0.0)0.22 (0.1)0.22 (0.0)0.22 (0.1)15/15
BrentSTEPifeg-Posik 0.14 (0.0)0.18 (0.0)0.22 (0.0)0.22 (0.1)0.22 (0.1)0.22 (0.1)0.22 (0.1)15/15
BrentSTEPqi-Posik 0.14 (0.0)0.16 (0.0)0.20 (0.1)0.20 (0.1)0.20 (0.1)0.20 (0.1)0.20 (0.0)15/15
BrentSTEPrr-Posik 0.14 (0.0)0.16 (0.0)0.19 (0.0)0.20 (0.0)0.20 (0.0)0.21 (0.0)0.21 (0.1)15/15
CMA-CSA-Atamna 10 (7)∞∞∞∞∞∞2e60/15
CMA-MSR-Atamna 6.4 (2)38 (22)70 (54)73 (66)76 (47)81 (36)86 (79)15/15
CMA-TPA-Atamna 8.8 (6)1756 (1510)∞∞∞∞∞2e60/15
GP1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
GP1-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
GP5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50340/15
GP5-CMAES-Bajer ∞∞∞∞∞∞∞50220/15
IPOPCMAv3p61-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
IPOPCMAv3p61-Bajer ∞∞∞∞∞∞∞50060/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
RF1-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
STEPif-Posik 0.16 (0.0)0.18 (0.0)0.23 (0.0)0.24 (0.0)0.24 (0.0)0.24 (0.0)0.24 (0.0)15/15
STEPifeg-Posik 0.15 (0.0)0.17 (0.0)0.23 (0.0)0.23 (0.0)0.23 (0.0)0.24 (0.0)0.24 (0.0)15/15
STEPrr-Posik 0.12 (0.0)0.15 (0.0)0.19 (0.0)0.20 (0.0)0.21 (0.0)0.22 (0.0)0.23 (0.0)15/15

Δ fopt
f4, 20-D		 1e1
4722		 1e0
7628		 1e-1
7666		 1e-2
7686		 1e-3
7700		 1e-5
7758		 1e-7
1.4e5		 #succ
9/15
BrentSTEPif-Posik 0.22 (0.1)0.36 (0.1)0.42 (0.1)0.42 (0.1)0.42 (0.1)0.42 (0.1)0.02 (3e-3)15/15
BrentSTEPifeg-Posik 0.21 (0.0)0.35 (0.1)0.40 (0.1)0.40 (0.1)0.40 (0.1)0.40 (0.0)0.02 (2e-3)15/15
BrentSTEPqi-Posik 0.21 (0.0)0.30 (0.0)0.34 (0.1)0.34 (0.1)0.34 (0.1)0.35 (0.1)0.02 (2e-3)15/15
BrentSTEPrr-Posik 0.18 (0.0)0.29 (0.0)0.31 (0.1)0.32 (0.0)0.34 (0.0)0.37 (0.0)0.03 (2e-3)15/15
CMA-CSA-Atamna ∞∞∞∞∞∞∞2e60/15
CMA-MSR-Atamna 5792 (6691)∞∞∞∞∞∞2e60/15
CMA-TPA-Atamna ∞∞∞∞∞∞∞2e60/15
GP1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50460/15
GP1-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
GP5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50220/15
GP5-CMAES-Bajer ∞∞∞∞∞∞∞50220/15
IPOPCMAv3p61-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
IPOPCMAv3p61-Bajer ∞∞∞∞∞∞∞50060/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
RF1-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
STEPif-Posik 0.22 (0.0)0.35 (0.1)0.52 (0.1)0.72 (0.1)0.81 (0.1)0.95 (0.1)0.05 (0.0)15/15
STEPifeg-Posik 0.21 (0.0)0.35 (0.0)0.52 (0.1)0.70 (0.1)0.79 (0.1)0.94 (0.1)0.05 (8e-3)15/15
STEPrr-Posik 0.19 (0.0)0.30 (0.0)0.46 (0.1)0.60 (0.0)0.72 (0.1)0.86 (0.1)0.05 (5e-3)15/15

Δ fopt
f5, 20-D		 1e1
41		 1e0
41		 1e-1
41		 1e-2
41		 1e-3
41		 1e-5
41		 1e-7
41		 #succ
15/15
BrentSTEPif-Posik 1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)15/15
BrentSTEPifeg-Posik 1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)15/15
BrentSTEPqi-Posik 1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)15/15
BrentSTEPrr-Posik 1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)15/15
CMA-CSA-Atamna 4.8 (0.8)5.7 (2)5.9 (1)5.9 (1.0)5.9 (1)5.9 (1)5.9 (1)15/15
CMA-MSR-Atamna 4.9 (1)5.4 (1)5.5 (0.9)5.5 (0.9)5.5 (1)5.5 (1)5.5 (0.9)15/15
CMA-TPA-Atamna 4.2 (1)4.9 (1)4.9 (1)4.9 (1)4.9 (1)4.9 (2)4.9 (1)15/15
GP1-CMAES-Bajer-2013instances 12 (8)69 (65)90 (131)91 (141)91 (69)91 (63)91 (184)11/15
GP1-CMAES-Bajer 10 (5)54 (69)77 (67)85 (37)85 (54)85 (40)85 (115)12/15
GP5-CMAES-Bajer-2013instances 3.3 (0.8)4.4 (0.7)4.6 (1)4.7 (1)4.8 (0.9)4.8 (2)4.8 (1)15/15
GP5-CMAES-Bajer 3.3 (0.7)4.7 (2)5.3 (2)5.5 (2)5.5 (2)5.5 (2)5.5 (2)15/15
IPOPCMAv3p61-Bajer-2013instances 16 (7)31 (15)34 (14)35 (15)36 (12)36 (18)36 (20)15/15
IPOPCMAv3p61-Bajer 15 (3)29 (9)33 (8)34 (9)34 (10)34 (10)34 (10)15/15
LHD-10xDefault-MATSuMoTo-Brockhoff 11 (0.1)11 (0.3)11 (0.3)11 (0.2)11 (0.3)11 (0.3)11 (0.2)15/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.7 (0.1)2.9 (0.2)2.9 (0.2)3.0 (0.2)3.0 (0.2)3.0 (0.2)3.0 (0.2)15/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.7 (0.1)2.9 (0.2)3.0 (0.2)3.0 (0.2)3.0 (0.1)3.4 (2)3.4 (2)15/15
RF1-CMAES-Bajer-2013instances 21 (14)44 (27)48 (27)49 (27)50 (30)50 (28)50 (23)15/15
RF1-CMAES-Bajer 18 (8)44 (11)49 (21)50 (25)51 (20)51 (21)51 (14)15/15
RF5-CMAES-Bajer-2013instances 42 (37)97 (26)167 (222)224 (174)262 (125)262 (169)262 (425)6/15
RF5-CMAES-Bajer 53 (36)192 (170)356 (643)903 (1072)907 (1067)907 (1158)907 (2350)2/15
STEPif-Posik 1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)15/15
STEPifeg-Posik 1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)15/15
STEPrr-Posik 1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)1.5 (0.0)15/15

Δ fopt
f6, 20-D		 1e1
1296		 1e0
2343		 1e-1
3413		 1e-2
4255		 1e-3
5220		 1e-5
6728		 1e-7
8409		 #succ
15/15
BrentSTEPif-Posik ∞∞∞∞∞∞∞2e50/15
BrentSTEPifeg-Posik 962 (959)∞∞∞∞∞∞2e50/15
BrentSTEPqi-Posik 749 (1085)∞∞∞∞∞∞2e50/7
BrentSTEPrr-Posik 811 (1582)∞∞∞∞∞∞2e50/15
CMA-CSA-Atamna 1.6 (0.2)1.3 (0.2)1.1 (0.1)1.1 (0.1)1.1 (0.1)1.1 (0.1)1.1 (0.1)15/15
CMA-MSR-Atamna 1.5 (0.9)1.9 (0.9)2.4 (1)3.9 (4)5.7 (6)11 (7)13 (0.5)15/15
CMA-TPA-Atamna 1.6 (0.3)1.3 (0.3)1.2 (0.2)1.3 (0.2)1.4 (0.2)1.5 (0.4)1.6 (0.5)15/15
GP1-CMAES-Bajer-2013instances 8.5 (7)∞∞∞∞∞∞50060/15
GP1-CMAES-Bajer 7.6 (8)∞∞∞∞∞∞50060/15
GP5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50240/15
GP5-CMAES-Bajer ∞∞∞∞∞∞∞50100/15
IPOPCMAv3p61-Bajer-2013instances 1.5 (0.1)1.2 (0.1)1.1 (0.1)1.9 (0.9)14 (12)∞∞50060/15
IPOPCMAv3p61-Bajer 1.4 (0.3)1.1 (0.2)1.1 (0.2)1.3 (0.7)4.8 (6)∞∞50060/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances 56 (52)∞∞∞∞∞∞50060/15
RF1-CMAES-Bajer 18 (21)∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
STEPif-Posik 644 (549)∞∞∞∞∞∞2e50/15
STEPifeg-Posik 193 (182)∞∞∞∞∞∞2e50/15
STEPrr-Posik 277 (113)∞∞∞∞∞∞2e50/15

Δ fopt
f7, 20-D		 1e1
1351		 1e0
4274		 1e-1
9503		 1e-2
16523		 1e-3
16524		 1e-5
16524		 1e-7
16969		 #succ
15/15
BrentSTEPif-Posik ∞∞∞∞∞∞∞2e50/15
BrentSTEPifeg-Posik ∞∞∞∞∞∞∞2e50/15
BrentSTEPqi-Posik ∞∞∞∞∞∞∞2e50/15
BrentSTEPrr-Posik ∞∞∞∞∞∞∞2e50/15
CMA-CSA-Atamna 1.7 (0.8)2.3 (0.9)1.7 (0.6)1.1 (0.3)1.1 (0.4)1.1 (0.3)1.0 (0.2)15/15
CMA-MSR-Atamna 2.1 (2)4.2 (0.9)2.4 (3)1.6 (2)1.6 (0.6)1.6 (0.6)1.5 (1)15/15
CMA-TPA-Atamna 2.1 (1)2.7 (2)1.6 (0.7)1.0 (0.5)1.0 (0.4)1.0 (0.5)1.0 (0.2)15/15
GP1-CMAES-Bajer-2013instances 3.0 (2)∞∞∞∞∞∞50100/15
GP1-CMAES-Bajer 2.8 (3)∞∞∞∞∞∞50220/15
GP5-CMAES-Bajer-2013instances 1.6 (1)∞∞∞∞∞∞50220/15
GP5-CMAES-Bajer 1.6 (1)∞∞∞∞∞∞50460/15
IPOPCMAv3p61-Bajer-2013instances 1.3 (1)∞∞∞∞∞∞50080/15
IPOPCMAv3p61-Bajer 1.3 (0.4)∞∞∞∞∞∞50200/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances 54 (53)∞∞∞∞∞∞50220/15
RF1-CMAES-Bajer 16 (19)∞∞∞∞∞∞50340/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50340/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞50220/15
STEPif-Posik ∞∞∞∞∞∞∞2e50/15
STEPifeg-Posik ∞∞∞∞∞∞∞2e50/15
STEPrr-Posik ∞∞∞∞∞∞∞2e50/15

Δ fopt
f8, 20-D		 1e1
2039		 1e0
3871		 1e-1
4040		 1e-2
4148		 1e-3
4219		 1e-5
4371		 1e-7
4484		 #succ
15/15
BrentSTEPif-Posik 401 (430)∞∞∞∞∞∞2e50/15
BrentSTEPifeg-Posik 76 (147)358 (523)689 (1199)∞∞∞∞2e50/15
BrentSTEPqi-Posik 30 (10)325 (349)∞∞∞∞∞2e50/8
BrentSTEPrr-Posik 79 (84)∞∞∞∞∞∞2e50/15
CMA-CSA-Atamna 3.4 (0.6)3.4 (0.4)3.6 (0.3)3.7 (0.3)3.8 (0.3)3.8 (0.4)3.8 (0.3)15/15
CMA-MSR-Atamna 3.6 (0.7)4.6 (3)4.8 (2)4.8 (3)4.8 (3)4.8 (1)4.9 (3)15/15
CMA-TPA-Atamna 3.1 (0.6)3.5 (0.2)3.8 (0.2)3.9 (0.4)3.9 (1)3.9 (2)3.9 (0.3)15/15
GP1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
GP1-CMAES-Bajer 35 (28)∞∞∞∞∞∞50060/15
GP5-CMAES-Bajer-2013instances 12 (11)∞∞∞∞∞∞50100/15
GP5-CMAES-Bajer ∞∞∞∞∞∞∞50220/15
IPOPCMAv3p61-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
IPOPCMAv3p61-Bajer ∞∞∞∞∞∞∞50060/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
RF1-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞50080/15
STEPif-Posik 87 (66)327 (570)∞∞∞∞∞2e50/15
STEPifeg-Posik 51 (45)94 (39)219 (184)∞∞∞∞2e50/15
STEPrr-Posik 61 (97)141 (114)304 (311)606 (552)∞∞∞2e50/15

Δ fopt
f9, 20-D		 1e1
1716		 1e0
3102		 1e-1
3277		 1e-2
3379		 1e-3
3455		 1e-5
3594		 1e-7
3727		 #succ
15/15
BrentSTEPif-Posik ∞∞∞∞∞∞∞2e50/15
BrentSTEPifeg-Posik ∞∞∞∞∞∞∞2e50/15
BrentSTEPqi-Posik ∞∞∞∞∞∞∞2e50/5
BrentSTEPrr-Posik ∞∞∞∞∞∞∞2e50/15
CMA-CSA-Atamna 3.8 (0.5)4.1 (0.4)4.3 (0.3)4.4 (0.3)4.4 (0.2)4.5 (0.3)4.5 (0.3)15/15
CMA-MSR-Atamna 3.8 (0.7)4.5 (2)4.8 (0.2)4.8 (2)4.8 (3)4.8 (2)4.8 (2)15/15
CMA-TPA-Atamna 3.8 (0.8)5.5 (3)5.8 (5)5.8 (8)5.8 (5)5.8 (5)5.8 (7)15/15
GP1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
GP1-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
GP5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50200/15
GP5-CMAES-Bajer ∞∞∞∞∞∞∞50100/15
IPOPCMAv3p61-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
IPOPCMAv3p61-Bajer ∞∞∞∞∞∞∞50060/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
RF1-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
STEPif-Posik ∞∞∞∞∞∞∞2e50/15
STEPifeg-Posik ∞∞∞∞∞∞∞2e50/15
STEPrr-Posik ∞∞∞∞∞∞∞2e50/15

Δ fopt
f10, 20-D		 1e1
7413		 1e0
8661		 1e-1
10735		 1e-2
13641		 1e-3
14920		 1e-5
17073		 1e-7
17476		 #succ
15/15
BrentSTEPif-Posik ∞∞∞∞∞∞∞2e50/15
BrentSTEPifeg-Posik ∞∞∞∞∞∞∞2e50/15
BrentSTEPqi-Posik ∞∞∞∞∞∞∞2e50/15
BrentSTEPrr-Posik ∞∞∞∞∞∞∞9e40/15
CMA-CSA-Atamna 1.2 (0.1)1.2 (0.1)1.0 (0.1)0.86 (0.0)0.81 (0.0)0.74 (0.0)0.76 (0.0)15/15
CMA-MSR-Atamna 1.3 (0.2)1.3 (0.2)1.2 (0.1)0.99 (0.1)0.93 (0.0)0.86 (0.0)0.88 (0.0)15/15
CMA-TPA-Atamna 1.4 (0.1)1.4 (0.1)1.2 (0.1)1.0 (0.1)0.95 (0.1)0.86 (0.0)0.86 (0.0)15/15
GP1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
GP1-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
GP5-CMAES-Bajer-2013instances 3.4 (3)∞∞∞∞∞∞50060/15
GP5-CMAES-Bajer 1.4 (1)∞∞∞∞∞∞50060/15
IPOPCMAv3p61-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
IPOPCMAv3p61-Bajer ∞∞∞∞∞∞∞50060/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
RF1-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
STEPif-Posik ∞∞∞∞∞∞∞1e50/15
STEPifeg-Posik ∞∞∞∞∞∞∞1e50/15
STEPrr-Posik ∞∞∞∞∞∞∞7e40/15

Δ fopt
f11, 20-D		 1e1
1002		 1e0
2228		 1e-1
6278		 1e-2
8586		 1e-3
9762		 1e-5
12285		 1e-7
14831		 #succ
15/15
BrentSTEPif-Posik ∞∞∞∞∞∞∞2e50/15
BrentSTEPifeg-Posik ∞∞∞∞∞∞∞1e50/15
BrentSTEPqi-Posik ∞∞∞∞∞∞∞2e50/15
BrentSTEPrr-Posik ∞∞∞∞∞∞∞8e40/15
CMA-CSA-Atamna 4.6 (0.3)2.3 (0.1)0.86 (0.0)0.67 (0.0)0.63 (0.0)0.55 (0.0)0.50 (5e-3)15/15
CMA-MSR-Atamna 4.7 (0.4)2.6 (0.1)1.0 (0.1)0.80 (0.1)0.74 (0.1)0.65 (0.0)0.58 (0.0)15/15
CMA-TPA-Atamna 4.5 (0.4)2.3 (0.1)0.89 (0.0)0.69 (0.0)0.65 (0.0)0.57 (0.0)0.51 (0.0)15/15
GP1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
GP1-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
GP5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50080/15
GP5-CMAES-Bajer ∞∞∞∞∞∞∞50200/15
IPOPCMAv3p61-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
IPOPCMAv3p61-Bajer ∞∞∞∞∞∞∞50060/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
RF1-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50080/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞50080/15
STEPif-Posik ∞∞∞∞∞∞∞1e50/15
STEPifeg-Posik ∞∞∞∞∞∞∞1e50/15
STEPrr-Posik ∞∞∞∞∞∞∞7e40/15

Δ fopt
f12, 20-D		 1e1
1042		 1e0
1938		 1e-1
2740		 1e-2
3156		 1e-3
4140		 1e-5
12407		 1e-7
13827		 #succ
15/15
BrentSTEPif-Posik ∞∞∞∞∞∞∞1e50/15
BrentSTEPifeg-Posik ∞∞∞∞∞∞∞1e50/15
BrentSTEPqi-Posik 173 (154)1151 (1445)∞∞∞∞∞1e50/15
BrentSTEPrr-Posik 676 (1040)∞∞∞∞∞∞1e50/15
CMA-CSA-Atamna 3.6 (3)3.5 (3)3.8 (2)3.9 (1)3.5 (1)1.4 (0.4)1.5 (0.4)15/15
CMA-MSR-Atamna 3.7 (2)3.3 (3)3.5 (2)3.6 (1)3.2 (0.9)1.3 (0.4)1.4 (0.2)15/15
CMA-TPA-Atamna 3.8 (3)4.1 (3)3.8 (3)3.8 (2)3.3 (2)1.4 (0.9)1.4 (0.3)15/15
GP1-CMAES-Bajer-2013instances 2.4 (0.3)2.7 (3)6.1 (6)23 (25)18 (12)∞∞50060/15
GP1-CMAES-Bajer 4.3 (3)5.2 (7)26 (21)23 (20)∞∞∞50060/15
GP5-CMAES-Bajer-2013instances 21 (41)18 (27)26 (22)23 (29)∞∞∞50200/15
GP5-CMAES-Bajer 21 (8)∞∞∞∞∞∞50200/15
IPOPCMAv3p61-Bajer-2013instances 3.8 (2)5.1 (4)27 (30)23 (22)∞∞∞50060/15
IPOPCMAv3p61-Bajer 2.3 (0.2)8.3 (12)13 (22)23 (26)18 (14)∞∞50060/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances 3.0 (1)11 (17)26 (58)∞∞∞∞50060/15
RF1-CMAES-Bajer 4.8 (4)8.2 (7)27 (25)∞∞∞∞50060/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
STEPif-Posik ∞∞∞∞∞∞∞5e40/15
STEPifeg-Posik ∞∞∞∞∞∞∞4e40/15
STEPrr-Posik ∞∞∞∞∞∞∞4e40/15

Δ fopt
f13, 20-D		 1e1
652		 1e0
2021		 1e-1
2751		 1e-2
3507		 1e-3
18749		 1e-5
24455		 1e-7
30201		 #succ
15/15
BrentSTEPif-Posik ∞∞∞∞∞∞∞2e50/15
BrentSTEPifeg-Posik 137 (51)193 (81)∞∞∞∞∞2e50/15
BrentSTEPqi-Posik 103 (45)182 (197)∞∞∞∞∞2e50/15
BrentSTEPrr-Posik 120 (93)221 (102)∞∞∞∞∞2e50/15
CMA-CSA-Atamna 3.2 (2)4.2 (3)4.0 (2)4.5 (3)0.93 (0.3)1.1 (0.6)1.3 (0.7)15/15
CMA-MSR-Atamna 4.3 (4)3.3 (2)4.9 (3)4.2 (2)0.87 (0.5)1.0 (0.6)1.5 (1.0)15/15
CMA-TPA-Atamna 4.7 (5)4.7 (3)5.0 (2)5.4 (2)1.1 (0.4)1.3 (0.6)1.5 (1.0)15/15
GP1-CMAES-Bajer-2013instances 22 (17)∞∞∞∞∞∞50460/15
GP1-CMAES-Bajer 5.7 (10)17 (14)∞∞∞∞∞50060/15
GP5-CMAES-Bajer-2013instances 5.5 (7)4.9 (5)13 (12)∞∞∞∞50220/15
GP5-CMAES-Bajer 2.5 (2)5.0 (5)∞∞∞∞∞50220/15
IPOPCMAv3p61-Bajer-2013instances 8.3 (24)7.9 (9)26 (28)21 (28)4.0 (4)∞∞50060/15
IPOPCMAv3p61-Bajer 6.4 (10)11 (10)26 (38)21 (25)∞∞∞50060/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 23 (18)∞∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances 8.1 (10)6.4 (4)27 (23)∞∞∞∞50060/15
RF1-CMAES-Bajer 4.6 (6)11 (7)∞∞∞∞∞50060/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
STEPif-Posik 64 (52)282 (290)∞∞∞∞∞2e50/15
STEPifeg-Posik 44 (27)102 (238)∞∞∞∞∞2e50/15
STEPrr-Posik 57 (60)109 (103)∞∞∞∞∞2e50/15

Δ fopt
f14, 20-D		 1e1
75		 1e0
239		 1e-1
304		 1e-2
451		 1e-3
932		 1e-5
1648		 1e-7
15661		 #succ
15/15
BrentSTEPif-Posik 1.5 (0.9)12 (11)50 (105)864 (1036)∞∞∞2e50/15
BrentSTEPifeg-Posik 1.5 (0.8)11 (10)17 (10)46 (12)∞∞∞2e50/15
BrentSTEPqi-Posik 1.5 (0.3)5.0 (2)8.5 (2)37 (15)∞∞∞2e50/4
BrentSTEPrr-Posik 1.4 (0.4)7.1 (3)12 (7)34 (13)∞∞∞2e50/15
CMA-CSA-Atamna 4.2 (2)2.9 (0.4)3.7 (0.5)4.1 (0.5)3.3 (0.3)3.9 (0.4)0.67 (0.1)15/15
CMA-MSR-Atamna 4.2 (1)2.8 (0.2)3.4 (0.5)3.6 (0.2)2.9 (0.2)3.9 (0.4)0.73 (0.1)15/15
CMA-TPA-Atamna 3.5 (1)2.3 (0.4)2.8 (0.5)3.1 (0.8)2.8 (0.4)3.8 (0.2)0.71 (0.1)15/15
GP1-CMAES-Bajer-2013instances 3.0 (0.7)2.3 (0.7)2.9 (0.9)3.5 (0.7)4.0 (0.7)∞∞50060/15
GP1-CMAES-Bajer 2.7 (0.7)2.4 (0.6)3.0 (0.5)3.4 (0.4)3.9 (0.4)∞∞50060/15
GP5-CMAES-Bajer-2013instances 2.1 (0.3)1.7 (0.5)1.9 (0.2)8.0 (9)79 (97)∞∞50200/15
GP5-CMAES-Bajer 2.4 (1)1.7 (0.5)1.9 (0.6)20 (28)∞∞∞50460/15
IPOPCMAv3p61-Bajer-2013instances 3.7 (0.7)2.8 (0.3)3.6 (0.2)4.3 (0.3)4.1 (0.3)∞∞50060/15
IPOPCMAv3p61-Bajer 4.3 (1)2.9 (0.4)3.7 (0.4)4.1 (0.4)3.9 (0.3)∞∞50060/15
LHD-10xDefault-MATSuMoTo-Brockhoff 6.9 (1)10 (13)∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 3.1 (2)5.4 (3)12 (4)∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 3.3 (1)9.4 (10)24 (28)∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances 3.5 (0.9)3.2 (1)4.0 (1)4.9 (1)15 (18)∞∞50060/15
RF1-CMAES-Bajer 3.2 (1)2.8 (0.4)3.5 (0.4)4.5 (1)11 (14)∞∞50060/15
RF5-CMAES-Bajer-2013instances 3.7 (1)300 (152)∞∞∞∞∞50060/15
RF5-CMAES-Bajer 5.0 (4)88 (168)∞∞∞∞∞50060/15
STEPif-Posik 1.3 (0.5)1.6 (0.9)3.5 (2)79 (157)∞∞∞2e50/15
STEPifeg-Posik 1.3 (0.4)1.4 (0.5)2.8 (0.8)23 (32)∞∞∞2e50/15
STEPrr-Posik 1.3 (0.5)1.2 (0.4)2.0 (0.6)14 (12)∞∞∞2e50/15

Δ fopt
f15, 20-D		 1e1
30378		 1e0
1.5e5		 1e-1
3.1e5		 1e-2
3.2e5		 1e-3
3.2e5		 1e-5
4.5e5		 1e-7
4.6e5		 #succ
15/15
BrentSTEPif-Posik ∞∞∞∞∞∞∞2e50/15
BrentSTEPifeg-Posik ∞∞∞∞∞∞∞2e50/15
BrentSTEPqi-Posik ∞∞∞∞∞∞∞2e50/11
BrentSTEPrr-Posik ∞∞∞∞∞∞∞2e50/15
CMA-CSA-Atamna 0.83 (0.4)0.99 (0.3)0.64 (0.1)0.65 (0.3)0.65 (0.3)0.49 (0.1)0.49 (0.2)15/15
CMA-MSR-Atamna 0.98 (0.3)0.95 (0.3)0.54 (0.3)0.55 (0.4)0.56 (0.2)0.43 (0.4)0.45 (0.3)15/15
CMA-TPA-Atamna 0.94 (0.5)1.1 (0.4)0.63 (0.2)0.64 (0.3)0.64 (0.3)0.48 (0.2)0.49 (0.3)15/15
GP1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
GP1-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
GP5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50480/15
GP5-CMAES-Bajer ∞∞∞∞∞∞∞50340/15
IPOPCMAv3p61-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
IPOPCMAv3p61-Bajer ∞∞∞∞∞∞∞50060/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
RF1-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
STEPif-Posik ∞∞∞∞∞∞∞2e50/15
STEPifeg-Posik ∞∞∞∞∞∞∞2e50/15
STEPrr-Posik ∞∞∞∞∞∞∞2e50/15

Δ fopt
f16, 20-D		 1e1
1384		 1e0
27265		 1e-1
77015		 1e-2
1.4e5		 1e-3
1.9e5		 1e-5
2.0e5		 1e-7
2.2e5		 #succ
15/15
BrentSTEPif-Posik 178 (326)∞∞∞∞∞∞2e50/15
BrentSTEPifeg-Posik 123 (107)∞∞∞∞∞∞2e50/15
BrentSTEPqi-Posik 98 (82)∞∞∞∞∞∞2e50/13
BrentSTEPrr-Posik 119 (117)∞∞∞∞∞∞2e50/15
CMA-CSA-Atamna 1.9 (0.6)0.64 (0.3)0.84 (0.4)1.2 (0.5)1.4 (1)1.5 (1)1.4 (1)15/15
CMA-MSR-Atamna 0.80 (0.2)0.84 (0.6)1.1 (0.7)1.3 (0.5)3.3 (6)4.7 (11)4.3 (1)12/15
CMA-TPA-Atamna 1.2 (0.9)0.78 (0.5)0.80 (0.6)0.67 (0.7)0.63 (0.2)0.66 (0.3)0.62 (0.2)15/15
GP1-CMAES-Bajer-2013instances 0.90 (0.2)∞∞∞∞∞∞50060/15
GP1-CMAES-Bajer 0.64 (0.1)∞∞∞∞∞∞50060/15
GP5-CMAES-Bajer-2013instances 0.57 (1)∞∞∞∞∞∞50220/15
GP5-CMAES-Bajer 0.68 (1.0)2.7 (4)∞∞∞∞∞50220/15
IPOPCMAv3p61-Bajer-2013instances 1.4 (0.4)0.63 (0.4)∞∞∞∞∞50060/15
IPOPCMAv3p61-Bajer 1.6 (0.5)0.52 (0.3)∞∞∞∞∞50060/15
LHD-10xDefault-MATSuMoTo-Brockhoff 3.4 (6)∞∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 5.1 (7)∞∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 11 (15)∞∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances 0.79 (0.2)∞∞∞∞∞∞50060/15
RF1-CMAES-Bajer 0.83 (0.2)∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer-2013instances 1.0 (2)∞∞∞∞∞∞50080/15
RF5-CMAES-Bajer 2.9 (6)∞∞∞∞∞∞50080/15
STEPif-Posik 12 (8)∞∞∞∞∞∞2e50/15
STEPifeg-Posik 15 (12)∞∞∞∞∞∞2e50/15
STEPrr-Posik 14 (15)∞∞∞∞∞∞2e50/15

Δ fopt
f17, 20-D		 1e1
63		 1e0
1030		 1e-1
4005		 1e-2
12242		 1e-3
30677		 1e-5
56288		 1e-7
80472		 #succ
15/15
BrentSTEPif-Posik 488 (1573)∞∞∞∞∞∞2e50/15
BrentSTEPifeg-Posik 493 (1588)∞∞∞∞∞∞2e50/15
BrentSTEPqi-Posik 1.7 (0.4)∞∞∞∞∞∞2e50/3
BrentSTEPrr-Posik 476 (754)∞∞∞∞∞∞2e50/15
CMA-CSA-Atamna 3.0 (2)1.0 (0.2)1.4 (0.1)1.2 (0.5)0.74 (0.4)0.88 (0.5)0.88 (0.2)15/15
CMA-MSR-Atamna 2.7 (0.6)6.5 (10)3.5 (6)1.9 (1)0.97 (0.7)0.88 (0.3)0.81 (0.2)15/15
CMA-TPA-Atamna 2.7 (0.3)1.4 (0.4)1.5 (0.2)0.94 (0.6)0.74 (0.6)0.71 (0.4)0.80 (0.3)15/15
GP1-CMAES-Bajer-2013instances 1.4 (0.7)3.4 (2)∞∞∞∞∞50060/15
GP1-CMAES-Bajer 1.9 (0.8)8.3 (7)∞∞∞∞∞50060/15
GP5-CMAES-Bajer-2013instances 1.6 (0.9)11 (11)∞∞∞∞∞50220/15
GP5-CMAES-Bajer 2.1 (0.8)15 (20)∞∞∞∞∞50340/15
IPOPCMAv3p61-Bajer-2013instances 2.0 (0.6)0.99 (0.3)0.93 (1)1.1 (1)∞∞∞50060/15
IPOPCMAv3p61-Bajer 2.3 (1)1.1 (0.7)0.81 (0.7)0.61 (0.5)1.2 (1)∞∞50060/15
LHD-10xDefault-MATSuMoTo-Brockhoff 7.3 (6)∞∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.6 (2)∞∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.7 (2)∞∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances 1.9 (0.7)4.2 (0.4)∞∞∞∞∞50060/15
RF1-CMAES-Bajer 1.8 (1)6.7 (8)∞∞∞∞∞50060/15
RF5-CMAES-Bajer-2013instances 2.7 (3)∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer 1.7 (1)69 (72)∞∞∞∞∞50060/15
STEPif-Posik 7.1 (2)∞∞∞∞∞∞2e50/15
STEPifeg-Posik 230 (793)∞∞∞∞∞∞2e50/15
STEPrr-Posik 3.8 (2)∞∞∞∞∞∞2e50/15

Δ fopt
f18, 20-D		 1e1
621		 1e0
3972		 1e-1
19561		 1e-2
28555		 1e-3
67569		 1e-5
1.3e5		 1e-7
1.5e5		 #succ
15/15
BrentSTEPif-Posik ∞∞∞∞∞∞∞2e50/15
BrentSTEPifeg-Posik ∞∞∞∞∞∞∞2e50/14
BrentSTEPqi-Posik ∞∞∞∞∞∞∞2e50/4
BrentSTEPrr-Posik ∞∞∞∞∞∞∞2e50/15
CMA-CSA-Atamna 0.96 (0.3)0.72 (1)0.81 (0.5)1.1 (0.6)0.83 (0.2)1.1 (1)1.0 (0.3)15/15
CMA-MSR-Atamna 2.8 (7)2.8 (2)1.4 (0.6)2.0 (0.8)1.2 (0.5)0.83 (0.2)0.87 (0.5)15/15
CMA-TPA-Atamna 1.5 (6)1.2 (0.9)0.77 (0.4)0.96 (0.6)0.57 (0.3)0.58 (0.5)0.74 (0.3)15/15
GP1-CMAES-Bajer-2013instances 0.93 (0.5)∞∞∞∞∞∞50060/15
GP1-CMAES-Bajer 0.88 (0.3)18 (19)3.7 (3)∞∞∞∞50060/15
GP5-CMAES-Bajer-2013instances 2.8 (5)∞∞∞∞∞∞50200/15
GP5-CMAES-Bajer 4.4 (8)∞∞∞∞∞∞50220/15
IPOPCMAv3p61-Bajer-2013instances 1.1 (0.2)0.90 (0.4)3.7 (3)∞∞∞∞50060/15
IPOPCMAv3p61-Bajer 1.1 (0.3)1.2 (2)∞∞∞∞∞50060/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances 1.0 (0.3)∞∞∞∞∞∞50060/15
RF1-CMAES-Bajer 1.7 (2)18 (21)∞∞∞∞∞50060/15
RF5-CMAES-Bajer-2013instances 53 (50)∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer 26 (15)∞∞∞∞∞∞50060/15
STEPif-Posik 4561 (3766)∞∞∞∞∞∞2e50/15
STEPifeg-Posik ∞∞∞∞∞∞∞2e50/15
STEPrr-Posik ∞∞∞∞∞∞∞2e50/15

Δ fopt
f19, 20-D		 1e1
1		 1e0
1		 1e-1
3.4e5		 1e-2
4.7e6		 1e-3
6.2e6		 1e-5
6.7e6		 1e-7
6.7e6		 #succ
15/15
BrentSTEPif-Posik 603 (1819)∞∞∞∞∞∞2e50/15
BrentSTEPifeg-Posik 161 (250)∞∞∞∞∞∞2e50/15
BrentSTEPqi-Posik 171 (123)∞∞∞∞∞∞2e50/8
BrentSTEPrr-Posik 151 (116)∞∞∞∞∞∞2e50/15
CMA-CSA-Atamna 221 (80)3.3e4 (3e4)0.82 (0.5)0.56 (0.8)2.4 (2)4.5 (3)4.5 (3)1/15
CMA-MSR-Atamna 212 (79)3.5e4 (2e4)1.2 (0.3)∞∞∞∞2e60/15
CMA-TPA-Atamna 177 (40)1.9e4 (2e4)1.6 (0.7)1.2 (0.9)4.7 (7)4.3 (3)4.3 (3)1/15
GP1-CMAES-Bajer-2013instances 153 (40)3.6e4 (4e4)∞∞∞∞∞50060/15
GP1-CMAES-Bajer 140 (45)1.1e4 (6860)∞∞∞∞∞50060/15
GP5-CMAES-Bajer-2013instances 97 (18)1.6e4 (1e4)∞∞∞∞∞50200/15
GP5-CMAES-Bajer 102 (14)7.3e4 (1e5)∞∞∞∞∞50480/15
IPOPCMAv3p61-Bajer-2013instances 229 (52)∞∞∞∞∞∞50080/15
IPOPCMAv3p61-Bajer 222 (34)∞∞∞∞∞∞50080/15
LHD-10xDefault-MATSuMoTo-Brockhoff 507 (256)∞∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 185 (176)∞∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 165 (38)∞∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances 177 (34)3.7e4 (2e4)∞∞∞∞∞50080/15
RF1-CMAES-Bajer 198 (32)7.4e4 (1e5)∞∞∞∞∞50080/15
RF5-CMAES-Bajer-2013instances 182 (98)∞∞∞∞∞∞50340/15
RF5-CMAES-Bajer 180 (54)∞∞∞∞∞∞50480/15
STEPif-Posik 176 (231)∞∞∞∞∞∞2e50/15
STEPifeg-Posik 164 (106)∞∞∞∞∞∞2e50/15
STEPrr-Posik 166 (134)∞∞∞∞∞∞2e50/15

Δ fopt
f20, 20-D		 1e1
82		 1e0
46150		 1e-1
3.1e6		 1e-2
5.5e6		 1e-3
5.5e6		 1e-5
5.6e6		 1e-7
5.6e6		 #succ
14/15
BrentSTEPif-Posik 1.7 (0.9)2.8 (3)∞∞∞∞∞2e50/15
BrentSTEPifeg-Posik 1.7 (0.8)0.83 (1)∞∞∞∞∞2e50/15
BrentSTEPqi-Posik 1.3 (0.1)5.7 (3)∞∞∞∞∞2e50/4
BrentSTEPrr-Posik 1.6 (1.0)2.1 (4)∞∞∞∞∞2e50/15
CMA-CSA-Atamna 4.9 (1)2.5 (0.4)0.35 (0.2)0.29 (0.0)0.29 (6e-3)0.29 (0.0)0.30 (0.0)15/15
CMA-MSR-Atamna 5.1 (1)∞∞∞∞∞∞2e60/15
CMA-TPA-Atamna 4.0 (0.7)∞∞∞∞∞∞2e60/15
GP1-CMAES-Bajer-2013instances 3.2 (0.5)∞∞∞∞∞∞50060/15
GP1-CMAES-Bajer 3.2 (0.4)∞∞∞∞∞∞50060/15
GP5-CMAES-Bajer-2013instances 2.3 (0.6)∞∞∞∞∞∞50220/15
GP5-CMAES-Bajer 2.2 (0.5)∞∞∞∞∞∞50360/15
IPOPCMAv3p61-Bajer-2013instances 5.4 (0.8)∞∞∞∞∞∞50060/15
IPOPCMAv3p61-Bajer 5.4 (1.0)∞∞∞∞∞∞50060/15
LHD-10xDefault-MATSuMoTo-Brockhoff 7.5 (0.5)∞∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 4.0 (1)∞∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 4.5 (2)∞∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances 4.9 (1)∞∞∞∞∞∞50060/15
RF1-CMAES-Bajer 4.5 (1)∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer-2013instances 15 (10)∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer 13 (5)∞∞∞∞∞∞50060/15
STEPif-Posik 1.8 (0.2)1.0 (2)∞∞∞∞∞2e50/15
STEPifeg-Posik 1.8 (0.6)0.73 (0.8)∞∞∞∞∞2e50/15
STEPrr-Posik 1.6 (0.4)0.74 (2)∞∞∞∞∞2e50/15

Δ fopt
f21, 20-D		 1e1
561		 1e0
6541		 1e-1
14103		 1e-2
14318		 1e-3
14643		 1e-5
15567		 1e-7
17589		 #succ
15/15
BrentSTEPif-Posik 91 (117)∞∞∞∞∞∞2e50/15
BrentSTEPifeg-Posik 91 (113)430 (375)∞∞∞∞∞2e50/15
BrentSTEPqi-Posik 153 (142)∞∞∞∞∞∞2e50/4
BrentSTEPrr-Posik 96 (132)137 (128)211 (284)208 (203)203 (103)192 (103)∞2e50/15
CMA-CSA-Atamna 113 (664)159 (225)95 (135)94 (103)92 (93)87 (114)77 (202)7/15
CMA-MSR-Atamna 24 (5)278 (427)449 (393)442 (251)433 (219)407 (381)360 (337)3/15
CMA-TPA-Atamna 63 (4)248 (475)115 (56)114 (129)111 (150)105 (123)93 (61)6/15
GP1-CMAES-Bajer-2013instances 2.5 (4)2.2 (3)5.0 (7)5.0 (4)4.9 (5)4.6 (6)4.1 (2)1/15
GP1-CMAES-Bajer 5.0 (8)5.4 (5)5.0 (7)5.0 (13)4.9 (5)4.7 (10)4.2 (2)1/15
GP5-CMAES-Bajer-2013instances 2.3 (4)11 (13)∞∞∞∞∞50460/15
GP5-CMAES-Bajer 3.1 (5)2.3 (1)2.4 (4)2.4 (7)4.9 (3)∞∞50220/15
IPOPCMAv3p61-Bajer-2013instances 4.8 (3)2.5 (2)5.1 (7)5.1 (4)5.0 (10)4.7 (3)4.2 (5)1/15
IPOPCMAv3p61-Bajer 6.1 (8)5.1 (7)5.1 (7)5.0 (6)4.9 (11)4.6 (11)4.1 (3)1/15
LHD-10xDefault-MATSuMoTo-Brockhoff 2.6 (2)2.2 (1)∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.2 (2)2.3 (2)∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 0.46 (0.2)0.67 (0.8)1.0 (0.9)∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances 7.4 (16)2.4 (4)2.5 (2)2.5 (1)2.5 (3)4.7 (7)4.2 (7)1/15
RF1-CMAES-Bajer 5.8 (9)11 (2)∞∞∞∞∞50060/15
RF5-CMAES-Bajer-2013instances 7.3 (5)∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer 5.7 (7)11 (16)∞∞∞∞∞50060/15
STEPif-Posik 103 (79)102 (38)68 (46)67 (108)66 (72)190 (93)170 (310)0/15
STEPifeg-Posik 65 (123)137 (99)210 (309)207 (206)203 (328)191 (225)∞2e50/15
STEPrr-Posik 82 (89)130 (121)100 (156)99 (174)97 (108)92 (120)∞2e50/15

Δ fopt
f22, 20-D		 1e1
467		 1e0
5580		 1e-1
23491		 1e-2
24163		 1e-3
24948		 1e-5
26847		 1e-7
1.3e5		 #succ
12/15
BrentSTEPif-Posik 129 (143)233 (475)∞∞∞∞∞2e50/15
BrentSTEPifeg-Posik 129 (46)77 (80)124 (72)124 (110)∞∞∞2e50/15
BrentSTEPqi-Posik 297 (651)133 (120)∞∞∞∞∞2e50/5
BrentSTEPrr-Posik 131 (359)61 (112)∞∞∞∞∞2e50/15
CMA-CSA-Atamna 22 (28)145 (132)∞∞∞∞∞1e60/15
CMA-MSR-Atamna 254 (1748)249 (283)∞∞∞∞∞2e60/15
CMA-TPA-Atamna 162 (558)216 (285)∞∞∞∞∞1e60/15
GP1-CMAES-Bajer-2013instances 6.9 (13)1.4 (4)∞∞∞∞∞50080/15
GP1-CMAES-Bajer 8.0 (11)2.7 (4)∞∞∞∞∞50080/15
GP5-CMAES-Bajer-2013instances 3.9 (16)3.9 (5)∞∞∞∞∞50220/15
GP5-CMAES-Bajer 4.7 (11)6.1 (9)∞∞∞∞∞50200/15
IPOPCMAv3p61-Bajer-2013instances 4.9 (9)13 (12)∞∞∞∞∞50060/15
IPOPCMAv3p61-Bajer 9.3 (8)3.8 (5)∞∞∞∞∞50060/15
LHD-10xDefault-MATSuMoTo-Brockhoff 3.2 (3)0.63 (0.4)∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 1.4 (2)2.7 (3)∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 1.2 (0.5)2.6 (2)∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances 3.5 (6)6.2 (5)∞∞∞∞∞50060/15
RF1-CMAES-Bajer 13 (15)2.7 (3)∞∞∞∞∞50060/15
RF5-CMAES-Bajer-2013instances 11 (16)∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer 6.8 (6)13 (20)∞∞∞∞∞50060/15
STEPif-Posik 120 (145)107 (67)126 (156)∞∞∞∞2e50/15
STEPifeg-Posik 212 (429)83 (81)∞∞∞∞∞2e50/15
STEPrr-Posik 132 (469)77 (101)∞∞∞∞∞2e50/15

Δ fopt
f23, 20-D		 1e1
3.0		 1e0
1614		 1e-1
67457		 1e-2
3.7e5		 1e-3
4.9e5		 1e-5
8.1e5		 1e-7
8.4e5		 #succ
15/15
BrentSTEPif-Posik 3.0 (1)37 (32)∞∞∞∞∞2e50/15
BrentSTEPifeg-Posik 3.0 (2)60 (44)∞∞∞∞∞2e50/15
BrentSTEPrr-Posik 3.0 (5)54 (58)∞∞∞∞∞2e50/15
CMA-CSA-Atamna 6.5 (2)93 (21)13 (13)16 (25)58 (92)35 (64)34 (81)1/15
CMA-MSR-Atamna 7.3 (7)2.0 (6)0.79 (0.6)0.74 (0.3)0.73 (0.1)0.49 (0.2)0.51 (0.1)15/15
CMA-TPA-Atamna 7.0 (8)23 (50)4.8 (1)3.0 (3)9.3 (6)5.6 (7)5.5 (5)5/15
GP1-CMAES-Bajer-2013instances 2.7 (1)1.6 (1)∞∞∞∞∞50060/15
GP1-CMAES-Bajer 1.9 (2)1.2 (0.3)1.1 (3)∞∞∞∞50060/15
GP5-CMAES-Bajer-2013instances 2.2 (4)0.84 (0.8)∞∞∞∞∞50100/15
GP5-CMAES-Bajer 2.5 (2)0.93 (0.9)∞∞∞∞∞50200/15
IPOPCMAv3p61-Bajer-2013instances 2.2 (0.9)∞∞∞∞∞∞50200/15
IPOPCMAv3p61-Bajer 2.0 (2)∞∞∞∞∞∞50080/15
LHD-10xDefault-MATSuMoTo-Brockhoff 2.0 (2)∞∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff 2.1 (3)∞∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff 2.2 (3)∞∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances 1.7 (1)∞∞∞∞∞∞50100/15
RF1-CMAES-Bajer 1.9 (0.6)45 (84)∞∞∞∞∞50100/15
RF5-CMAES-Bajer-2013instances 2.4 (4)∞∞∞∞∞∞50860/15
RF5-CMAES-Bajer 2.7 (2)∞∞∞∞∞∞50840/15
STEPif-Posik 3.0 (3)11 (9)∞∞∞∞∞2e50/15
STEPifeg-Posik 3.0 (1)6.5 (6)∞∞∞∞∞2e50/15
STEPrr-Posik 3.0 (2)5.2 (8)∞∞∞∞∞2e50/15

Δ fopt
f24, 20-D		 1e1
1.3e6		 1e0
7.5e6		 1e-1
5.2e7		 1e-2
5.2e7		 1e-3
5.2e7		 1e-5
5.2e7		 1e-7
5.2e7		 #succ
3/15
BrentSTEPif-Posik ∞∞∞∞∞∞∞2e50/15
BrentSTEPifeg-Posik ∞∞∞∞∞∞∞2e50/15
BrentSTEPrr-Posik ∞∞∞∞∞∞∞2e50/15
CMA-CSA-Atamna 6.0 (9)∞∞∞∞∞∞2e60/15
CMA-MSR-Atamna 4.1 (4)1.8 (3)0.55 (0.8)0.55 (0.5)0.55 (0.6)0.55 (0.4)0.55 (0.5)1/15
CMA-TPA-Atamna 6.2 (5)3.9 (4)∞∞∞∞∞2e60/15
GP1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
GP1-CMAES-Bajer ∞∞∞∞∞∞∞50100/15
GP5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50260/15
GP5-CMAES-Bajer ∞∞∞∞∞∞∞50480/15
IPOPCMAv3p61-Bajer-2013instances ∞∞∞∞∞∞∞50080/15
IPOPCMAv3p61-Bajer ∞∞∞∞∞∞∞50080/15
LHD-10xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
LHD-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RAND-2xDefault-MATSuMoTo-Brockhoff ∞∞∞∞∞∞∞10000/15
RF1-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50060/15
RF1-CMAES-Bajer ∞∞∞∞∞∞∞50060/15
RF5-CMAES-Bajer-2013instances ∞∞∞∞∞∞∞50340/15
RF5-CMAES-Bajer ∞∞∞∞∞∞∞50100/15
STEPif-Posik ∞∞∞∞∞∞∞2e50/15
STEPifeg-Posik ∞∞∞∞∞∞∞2e50/15
STEPrr-Posik ∞∞∞∞∞∞∞2e50/15

Previous dimension | Dimension = 40 | First dimension

Δ fopt
f1, 40-D		 1e1
83		 1e0
83		 1e-1
83		 1e-2
83		 1e-3
83		 1e-5
83		 1e-7
83		 #succ
15/15
CMA-CSA-Atamna 10 (0.4)16 (2)22 (1)28 (2)34 (1)46 (2)58 (2)15/15
CMA-MSR-Atamna 10 (2)16 (0.8)23 (0.8)29 (0.8)35 (2)48 (1)60 (2)15/15
CMA-TPA-Atamna 6.7 (0.3)★411 (0.7)★414 (1)★418 (0.9)★422 (2)★431 (1)★439 (2)★415/15

Δ fopt
f2, 40-D		 1e1
796		 1e0
797		 1e-1
799		 1e-2
799		 1e-3
800		 1e-5
802		 1e-7
804		 #succ
15/15
CMA-CSA-Atamna 37 (4)43 (4)★247 (3)★351 (5)★354 (3)★357 (2)★459 (1)★415/15
CMA-MSR-Atamna 45 (6)53 (6)58 (5)62 (4)64 (3)67 (4)68 (1)15/15
CMA-TPA-Atamna 41 (6)50 (3)56 (3)61 (5)65 (5)67 (3)68 (2)15/15

Δ fopt
f3, 40-D		 1e1
15526		 1e0
15602		 1e-1
15612		 1e-2
15641		 1e-3
15646		 1e-5
15651		 1e-7
15656		 #succ
15/15
CMA-CSA-Atamna ∞∞∞∞∞∞∞4e60/15
CMA-MSR-Atamna 11 (7)★466 (14)★4142 (79)★4144 (283)★4147 (217)★4154 (104)★4160 (43)★412/15
CMA-TPA-Atamna 1829 (906)∞∞∞∞∞∞4e60/15

Δ fopt
f4, 40-D		 1e1
15536		 1e0
15601		 1e-1
15659		 1e-2
15678		 1e-3
15703		 1e-5
15733		 1e-7
2.8e5		 #succ
6/15
CMA-CSA-Atamna ∞∞∞∞∞∞∞4e60/15
CMA-MSR-Atamna ∞∞∞∞∞∞∞4e60/15
CMA-TPA-Atamna ∞∞∞∞∞∞∞4e60/15

Δ fopt
f5, 40-D		 1e1
98		 1e0
116		 1e-1
120		 1e-2
121		 1e-3
121		 1e-5
121		 1e-7
121		 #succ
15/15
CMA-CSA-Atamna 4.6 (0.4)4.5 (0.4)4.4 (0.3)4.4 (0.5)4.4 (0.4)4.4 (0.3)4.4 (0.3)15/15
CMA-MSR-Atamna 3.9 (0.8)3.7 (0.5)3.6 (0.7)3.5 (0.3)3.5 (0.6)3.5 (0.5)3.5 (0.6)15/15
CMA-TPA-Atamna 3.8 (0.6)3.6 (0.5)3.5 (0.4)3.5 (0.6)3.5 (0.5)3.5 (0.6)3.5 (0.5)15/15

Δ fopt
f6, 40-D		 1e1
3507		 1e0
5523		 1e-1
7168		 1e-2
9470		 1e-3
11538		 1e-5
15007		 1e-7
19222		 #succ
15/15
CMA-CSA-Atamna 1.6 (0.1)1.5 (0.1)1.4 (0.1)1.3 (0.1)★31.3 (0.1)★41.3 (0.1)★41.3 (0.0)★415/15
CMA-MSR-Atamna 3.7 (3)7.4 (4)28 (24)43 (0.8)36 (0.5)31 (2)27 (0.9)15/15
CMA-TPA-Atamna 1.6 (0.4)1.6 (0.4)1.8 (0.4)1.9 (0.5)2.0 (0.4)2.5 (0.7)2.8 (0.8)15/15

Δ fopt
f7, 40-D		 1e1
10698		 1e0
17839		 1e-1
41037		 1e-2
66294		 1e-3
66294		 1e-5
66294		 1e-7
68145		 #succ
15/15
CMA-CSA-Atamna 1.2 (0.6)2.8 (0.6)1.5 (0.5)0.97 (0.3)0.97 (0.3)0.97 (0.3)0.95 (0.2)15/15
CMA-MSR-Atamna 3.0 (1)3.9 (1)2.1 (0.6)1.4 (0.3)1.4 (0.5)1.4 (0.5)1.4 (0.3)15/15
CMA-TPA-Atamna 3.9 (9)3.7 (0.2)1.8 (4)1.2 (0.2)1.2 (2)1.2 (0.3)1.2 (0.0)15/15

Δ fopt
f8, 40-D		 1e1
7080		 1e0
10655		 1e-1
11012		 1e-2
11265		 1e-3
11430		 1e-5
11701		 1e-7
11969		 #succ
15/15
CMA-CSA-Atamna 5.4 (1.0)5.5 (4)5.6 (2)5.6 (1)5.7 (4)5.6 (0.8)5.6 (1)15/15
CMA-MSR-Atamna 5.8 (0.7)5.5 (3)5.6 (0.5)5.6 (4)5.6 (1.0)5.6 (0.5)5.6 (2)15/15
CMA-TPA-Atamna 5.7 (0.4)5.8 (3)5.9 (0.4)5.9 (1)5.9 (2)5.9 (3)5.8 (0.3)15/15

Δ fopt
f9, 40-D		 1e1
6122		 1e0
12982		 1e-1
13300		 1e-2
13496		 1e-3
13651		 1e-5
13909		 1e-7
14142		 #succ
15/15
CMA-CSA-Atamna 6.3 (0.4)4.2 (0.2)4.4 (0.1)4.4 (2)4.5 (2)4.5 (3)4.5 (1)15/15
CMA-MSR-Atamna 6.9 (0.4)4.6 (0.1)4.8 (0.4)4.8 (2)4.8 (2)4.8 (0.1)4.8 (0.1)15/15
CMA-TPA-Atamna 6.4 (0.6)4.8 (0.5)4.9 (0.4)4.9 (2)4.9 (0.4)4.9 (0.3)4.9 (2)15/15

Δ fopt
f10, 40-D		 1e1
25536		 1e0
29762		 1e-1
35676		 1e-2
51579		 1e-3
56007		 1e-5
65128		 1e-7
70824		 #succ
15/15
CMA-CSA-Atamna 1.2 (0.2)1.2 (0.1)★21.1 (0.1)★30.79 (0.0)★40.77 (0.0)★40.70 (0.0)★40.67 (0.0)★415/15
CMA-MSR-Atamna 1.3 (0.1)1.4 (0.1)1.3 (0.1)0.95 (0.1)0.93 (0.0)0.83 (0.0)0.78 (9e-3)15/15
CMA-TPA-Atamna 1.3 (0.1)1.4 (0.2)1.3 (0.1)0.94 (0.1)0.91 (0.1)0.84 (0.0)0.78 (0.0)15/15

Δ fopt
f11, 40-D		 1e1
2368		 1e0
4855		 1e-1
11681		 1e-2
25315		 1e-3
29749		 1e-5
38949		 1e-7
48211		 #succ
15/15
CMA-CSA-Atamna 5.0 (0.1)2.6 (0.1)1.2 (0.0)0.57 (0.0)0.51 (0.0)0.42 (0.0)0.37 (6e-3)15/15
CMA-MSR-Atamna 4.9 (0.2)2.8 (0.1)1.3 (0.0)0.64 (0.0)0.57 (0.0)0.48 (0.0)0.42 (0.0)15/15
CMA-TPA-Atamna 4.6 (0.2)★22.5 (0.1)★21.1 (0.0)0.56 (0.0)0.50 (9e-3)0.41 (6e-3)0.36 (6e-3)15/15

Δ fopt
f12, 40-D		 1e1
4169		 1e0
7452		 1e-1
9174		 1e-2
10751		 1e-3
13146		 1e-5
22758		 1e-7
25192		 #succ
15/15
CMA-CSA-Atamna 1.1 (0.0)1.1 (0.4)1.8 (0.6)1.9 (0.6)1.9 (0.5)1.4 (0.3)1.4 (0.2)15/15
CMA-MSR-Atamna 2.0 (1.0)2.4 (2)2.7 (1)2.6 (1)2.5 (0.5)1.8 (0.5)1.8 (0.3)15/15
CMA-TPA-Atamna 1.7 (2)1.7 (2)1.9 (1)2.0 (1)1.9 (0.6)1.4 (0.4)1.4 (0.3)15/15

Δ fopt
f13, 40-D		 1e1
2029		 1e0
6916		 1e-1
8734		 1e-2
11861		 1e-3
71936		 1e-5
98467		 1e-7
1.2e5		 #succ
15/15
CMA-CSA-Atamna 2.5 (2)2.5 (1)4.6 (3)6.0 (2)1.2 (0.5)1.3 (0.4)1.7 (1.0)15/15
CMA-MSR-Atamna 2.8 (3)4.3 (3)5.4 (2)5.3 (4)1.4 (0.7)1.2 (0.5)1.4 (0.6)15/15
CMA-TPA-Atamna 2.3 (3)2.1 (2)5.7 (4)6.1 (4)1.2 (0.5)1.2 (0.6)1.5 (1.0)15/15

Δ fopt
f14, 40-D		 1e1
304		 1e0
616		 1e-1
777		 1e-2
1105		 1e-3
2207		 1e-5
4825		 1e-7
57711		 #succ
15/15
CMA-CSA-Atamna 2.8 (0.5)2.6 (0.3)3.1 (0.3)3.8 (0.2)3.6 (0.3)4.0 (0.4)0.59 (0.0)★15/15
CMA-MSR-Atamna 2.4 (0.3)2.1 (0.3)2.4 (0.3)2.8 (0.3)2.5 (0.4)3.6 (0.2)0.65 (0.0)15/15
CMA-TPA-Atamna 2.2 (0.3)2.0 (0.2)2.2 (0.2)★22.7 (0.2)2.6 (0.2)3.6 (0.2)0.63 (0.0)15/15

Δ fopt
f15, 40-D		 1e1
1.9e5		 1e0
7.9e5		 1e-1
1.0e6		 1e-2
1.1e6		 1e-3
1.1e6		 1e-5
1.1e6		 1e-7
1.1e6		 #succ
15/15
CMA-CSA-Atamna 0.91 (0.2)0.65 (0.2)0.66 (0.2)0.67 (0.2)0.67 (0.3)0.69 (0.3)0.70 (0.3)15/15
CMA-MSR-Atamna 0.81 (0.3)0.81 (0.2)0.72 (0.2)0.74 (0.1)0.76 (0.2)0.80 (0.1)0.83 (0.2)15/15
CMA-TPA-Atamna 0.62 (0.4)0.69 (0.3)0.66 (0.2)0.67 (0.2)0.67 (0.1)0.69 (0.2)0.70 (0.2)15/15

Δ fopt
f16, 40-D		 1e1
5244		 1e0
72122		 1e-1
3.2e5		 1e-2
7.1e5		 1e-3
1.4e6		 1e-5
2.0e6		 1e-7
2.0e6		 #succ
15/15
CMA-CSA-Atamna 1.0 (0.5)1.3 (1)0.69 (0.3)0.51 (0.5)0.34 (0.2)0.44 (0.3)0.47 (0.2)15/15
CMA-MSR-Atamna 0.43 (0.9)★21.3 (0.4)1.2 (0.6)1.3 (2)1.1 (0.9)1.0 (0.6)1.2 (0.6)14/15
CMA-TPA-Atamna 1.3 (2)0.93 (0.2)0.50 (0.3)0.52 (0.3)0.31 (0.1)0.32 (0.3)0.33 (0.3)15/15

Δ fopt
f17, 40-D		 1e1
399		 1e0
4220		 1e-1
14158		 1e-2
34948		 1e-3
51958		 1e-5
1.3e5		 1e-7
2.7e5		 #succ
14/15
CMA-CSA-Atamna 1.3 (0.6)0.56 (0.1)0.95 (1.0)1.1 (0.6)1.3 (0.3)0.82 (0.4)0.60 (0.0)15/15
CMA-MSR-Atamna 0.96 (0.4)7.3 (9)3.0 (2)1.4 (1)1.4 (1)1.00 (0.5)0.67 (0.4)15/15
CMA-TPA-Atamna 0.93 (0.3)5.0 (5)1.9 (2)1.1 (0.6)1.1 (0.2)0.82 (0.4)0.64 (0.1)15/15

Δ fopt
f18, 40-D		 1e1
1442		 1e0
16998		 1e-1
47068		 1e-2
1.3e5		 1e-3
1.9e5		 1e-5
6.7e5		 1e-7
9.5e5		 #succ
15/15
CMA-CSA-Atamna 1.0 (0.3)0.47 (0.9)★0.98 (0.3)0.65 (0.4)0.67 (0.3)0.53 (0.1)0.40 (0.4)15/15
CMA-MSR-Atamna 13 (26)1.8 (1)1.7 (0.9)1.0 (0.3)0.95 (0.5)1.0 (2)1.1 (1)13/15
CMA-TPA-Atamna 1.5 (3)0.91 (0.7)0.87 (0.6)0.57 (0.3)0.59 (0.0)0.34 (0.2)0.30 (0.1)15/15

Δ fopt
f19, 40-D		 1e1
1		 1e0
1		 1e-1
1.4e6		 1e-2
1.7e7		 1e-3
2.6e7		 1e-5
4.5e7		 1e-7
4.5e7		 #succ
8/15
CMA-CSA-Atamna 435 (66)1.4e5 (2e5)1.0 (0.5)3.5 (2)∞∞∞4e60/15
CMA-MSR-Atamna 428 (63)2.2e5 (2e5)1.4 (0.6)∞∞∞∞4e60/15
CMA-TPA-Atamna 317 (43)★1.4e5 (2e5)1.0 (0.4)3.6 (4)∞∞∞4e60/15

Δ fopt
f20, 40-D		 1e1
222		 1e0
1.3e5		 1e-1
1.6e8		 1e-2
∞		 1e-3
∞		 1e-5
∞		 1e-7
∞		 #succ
0/15
CMA-CSA-Atamna 4.2 (0.5)4.3 (0.4)★40.04 (0.0)★45.8e7 (1e8) 5.8e7 (4e7) 5.8e7 (6e7) 5.9e7 (7e7) 1/15
CMA-MSR-Atamna 3.3 (0.6)∞∞    0/15
CMA-TPA-Atamna 2.7 (0.1)★2∞∞    0/15

Δ fopt
f21, 40-D		 1e1
1044		 1e0
21144		 1e-1
1.0e5		 1e-2
1.0e5		 1e-3
1.0e5		 1e-5
1.0e5		 1e-7
1.0e5		 #succ
26/30
CMA-CSA-Atamna 4.3 (11)233 (256)158 (244)158 (91)158 (252)157 (180)156 (304)2/15
CMA-MSR-Atamna 229 (1589)312 (308)66 (82)66 (18)66 (138)66 (161)65 (80)5/15
CMA-TPA-Atamna 3.6 (9)224 (362)153 (112)152 (117)152 (88)151 (144)150 (86)2/15

Δ fopt
f22, 40-D		 1e1
3090		 1e0
35442		 1e-1
6.5e5		 1e-2
6.5e5		 1e-3
6.5e5		 1e-5
6.5e5		 1e-7
6.5e5		 #succ
8/30
CMA-CSA-Atamna 87 (92)139 (208)∞∞∞∞∞2e60/15
CMA-MSR-Atamna 77 (0.7)106 (370)∞∞∞∞∞3e60/15
CMA-TPA-Atamna 1.6 (3)80 (154)∞∞∞∞∞2e60/15

Δ fopt
f23, 40-D		 1e1
7.0		 1e0
11925		 1e-1
75453		 1e-2
6.6e5		 1e-3
1.3e6		 1e-5
3.2e6		 1e-7
3.4e6		 #succ
15/15
CMA-CSA-Atamna 13 (7)5.7 (8)5.7 (2)3.7 (3)46 (86)18 (10)17 (26)1/15
CMA-MSR-Atamna 12 (5)0.11 (0.0)★41.8 (1)1.5 (1)1.6 (0.4)★20.75 (0.2)0.79 (0.2)15/15
CMA-TPA-Atamna 13 (8)5.7 (11)4.6 (3)2.6 (3)14 (14)5.6 (6)5.4 (11)3/15

Δ fopt
f24, 40-D		 1e1
5.8e6		 1e0
9.8e7		 1e-1
3.0e8		 1e-2
3.0e8		 1e-3
3.0e8		 1e-5
3.0e8		 1e-7
3.0e8		 #succ
1/15
CMA-CSA-Atamna 4.5 (2)∞∞∞∞∞∞4e60/15
CMA-MSR-Atamna 1.9 (3)0.28 (0.6)∞∞∞∞∞4e60/15
CMA-TPA-Atamna 4.5 (4)∞∞∞∞∞∞4e60/15

Average runtime (aRT in number of function evaluations) divided by the respective best aRT measured during BBOB-2009 in different dimensions. The aRT and in braces, as dispersion measure, the half difference between 10 and 90%-tile of bootstrapped run lengths appear for each algorithm and target, the corresponding reference aRT  in the first row. The different target ∆f-values are shown in the top row. #succ is the number of trials that reached the (final) target fopt+ 10−8. The median number of conducted function evaluations is additionally given in italics, if the target in the last column was never reached. Entries, succeeded by a star, are statistically significantly better (according to the rank-sum test) when compared to all other algorithms of the table, with p = 0.05 or p = 10−k when the number k following the star is larger than 1, with Bonferroni correction by the number of functions (24). A ↓ indicates the same tested against the best algorithm from BBOB 2009. Best results are printed in bold.
Data produced with COCO v2.0.760