Overview page

Table showing the ERT in number of evaluations divided by the best ERT of the reference algorithm

Last dimension | Dimension = 2 | Next dimension

Δ fopt
f1, 2-D		 1e1
2.0		 1e0
6.0		 1e-1
6.0		 1e-2
6.0		 1e-3
6.0		 1e-5
6.0		 1e-7
6.0		 #succ
15/15
BFGS-scipy Baudis 3.2 (2)1.5 (0)1.5 (0)1.5 (0)1.5 (0)1.5 (0)1.7 (0.4)15/15
L-BFGS-B-scipy Baudis 2.6 (2)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.5 (0.1)1.8 (0.4)15/15
BFGS-M-17 Blelly 2.5 (2)1.1 (0.2)1.2 (0)1.2 (0)1.2 (0)1.2 (0)1.2 (0.2)15/15
BFGS-P-09 Blelly 2.9 (2)1.5 (0.8)1.7 (0)1.7 (0)1.7 (0)1.7 (0)1.8 (0.3)15/15
BFGS-P-Instances Blelly 3.8 (2)1.6 (0)1.7 (0)1.7 (0)1.7 (0)1.7 (0)1.8 (0.3)15/15
BFGS-P-range Blelly 3.8 (2)1.7 (0)1.7 (0)1.7 (0)1.7 (0)1.7 (0)2.0 (0.3)15/15
BFGS-scipy-2019 Varelas 5.0 (2)2.0 (0.3)2.1 (0.3)2.2 (0.3)2.2 (0.3)2.2 (0.3)2.2 (0.3)15/15
L-BFGS-B-scipy-2019 Varelas 2.6 (2)1.3 (0)1.3 (0)1.3 (0)1.3 (0)1.3 (0)1.3 (0)15/15
BFGS ros 3.0 (0.8)1.1 (0)1.2 (0)1.2 (0)1.2 (0)1.2 (0)1.2 (0)15/15

Δ fopt
f2, 2-D		 1e1
16		 1e0
19		 1e-1
25		 1e-2
25		 1e-3
26		 1e-5
28		 1e-7
29		 #succ
15/15
BFGS-scipy Baudis 2.1 (0.4)2.0 (0.5)1.8 (0.5)2.0 (0.6)2.1 (0.7)2.3 (0.8)2.5 (0.7)15/15
L-BFGS-B-scipy Baudis 2.5 (3)3.5 (3)4.5 (2)5.2 (0.8)6.1 (1)6.3 (1)15 (19)15/15
BFGS-M-17 Blelly 3.0 (2)4.4 (3)4.4 (2)5.3 (2)6.8 (4)11 (12)24 (29)14/15
BFGS-P-09 Blelly 4.8 (1)4.4 (1)3.6 (2)3.9 (2)4.0 (2)4.1 (2)4.5 (2)15/15
BFGS-P-Instances Blelly 4.2 (1)3.8 (0.9)3.0 (0.6)3.2 (0.7)3.3 (0.7)3.5 (0.9)3.8 (1)15/15
BFGS-P-range Blelly 4.1 (1)3.7 (1)3.2 (1.0)3.5 (1.0)3.5 (0.8)3.6 (1)4.0 (2)15/15
BFGS-scipy-2019 Varelas 1.8 (0.6)1.9 (0.9)1.6 (0.7)1.8 (0.7)1.9 (0.6)2.1 (0.8)2.4 (0.9)15/15
L-BFGS-B-scipy-2019 Varelas 2.7 (2)3.9 (0.8)3.3 (0.8)3.6 (0.7)3.6 (0.5)3.7 (0.5)4.0 (0.7)15/15
BFGS ros 2.6 (2)4.0 (2)3.7 (0.8)4.0 (1)4.0 (1)4.1 (1)4.3 (1)15/15

Δ fopt
f3, 2-D		 1e1
15		 1e0
271		 1e-1
445		 1e-2
446		 1e-3
450		 1e-5
454		 1e-7
464		 #succ
15/15
BFGS-scipy Baudis 55 (101)10 (10)10 (8)10 (8)10 (8)10 (7)10 (7)15/15
L-BFGS-B-scipy Baudis 37 (35)9.3 (13)10 (11)10 (11)10 (11)10 (11)10 (11)15/15
BFGS-M-17 Blelly 11 (11)7.0 (5)18 (23)18 (14)18 (21)18 (14)18 (19)7/15
BFGS-P-09 Blelly 16 (20)7.1 (8)15 (13)15 (14)15 (29)15 (15)15 (19)11/15
BFGS-P-Instances Blelly 26 (20)7.0 (8)22 (21)22 (25)22 (18)22 (21)21 (25)9/15
BFGS-P-range Blelly 18 (19)3.8 (4)16 (12)16 (21)16 (24)15 (17)15 (18)11/15
BFGS-scipy-2019 Varelas 18 (21)6.8 (6)17 (13)17 (13)17 (13)17 (13)16 (13)15/15
L-BFGS-B-scipy-2019 Varelas 10 (8)3.2 (4)12 (22)12 (22)12 (22)12 (22)12 (21)15/15
BFGS ros 14 (12)3.1 (3)10 (9)10 (12)10 (19)10 (10)10 (10)10/15

Δ fopt
f4, 2-D		 1e1
22		 1e0
344		 1e-1
459		 1e-2
496		 1e-3
523		 1e-5
544		 1e-7
566		 #succ
15/15
BFGS-scipy Baudis 62 (67)8.3 (11)14 (9)13 (8)12 (8)12 (8)11 (7)15/15
L-BFGS-B-scipy Baudis 6.0 (5)4.7 (6)19 (26)17 (24)16 (22)16 (22)16 (24)15/15
BFGS-M-17 Blelly 14 (18)3.9 (4)25 (33)24 (35)22 (19)22 (30)21 (20)4/15
BFGS-P-09 Blelly 20 (31)13 (11)42 (48)38 (34)37 (37)35 (26)34 (36)6/15
BFGS-P-Instances Blelly 23 (19)16 (15)41 (37)38 (28)36 (50)35 (29)33 (26)6/15
BFGS-P-range Blelly 13 (10)7.2 (8)20 (36)18 (23)17 (24)17 (20)16 (28)9/15
BFGS-scipy-2019 Varelas 18 (19)12 (13)27 (35)25 (32)23 (30)23 (29)22 (28)15/15
L-BFGS-B-scipy-2019 Varelas 11 (8)4.7 (6)14 (14)13 (13)12 (12)12 (12)12 (12)15/15
BFGS ros 11 (11)5.7 (5)12 (12)11 (15)11 (11)10 (15)10 (12)9/15

Δ fopt
f5, 2-D		 1e1
4.0		 1e0
4.0		 1e-1
4.0		 1e-2
4.0		 1e-3
4.0		 1e-5
4.0		 1e-7
4.0		 #succ
15/15
BFGS-scipy Baudis 1.2 (0)3.5 (2)3.8 (1)3.8 (1)3.8 (1)3.8 (1)3.8 (1)15/15
L-BFGS-B-scipy Baudis 1.1 (0.5)4.1 (2)4.4 (1)4.4 (1)4.4 (1)4.4 (1)4.4 (1)15/15
BFGS-M-17 Blelly 1.8 (0)3.0 (0.4)3.1 (0)3.1 (0)3.1 (0)3.1 (0)3.1 (0)15/15
BFGS-P-09 Blelly 1.4 (0)2.8 (2)3.2 (1)3.3 (1)3.3 (1)3.3 (1)3.3 (1)15/15
BFGS-P-Instances Blelly 1.5 (0)3.0 (2)3.2 (2)3.2 (2)3.2 (2)3.2 (2)3.2 (2)15/15
BFGS-P-range Blelly 1.5 (0)3.5 (1)3.8 (0.5)3.8 (0.5)3.8 (0.5)3.8 (0.5)3.8 (0.5)15/15
BFGS-scipy-2019 Varelas 2.6 (1)4.8 (2)5.2 (1)5.2 (1)5.2 (1)5.2 (1)5.2 (1)15/15
L-BFGS-B-scipy-2019 Varelas 2.2 (0.4)4.0 (0.8)4.0 (0.8)4.0 (0.8)4.0 (0.8)4.0 (0.8)4.0 (0.8)15/15
BFGS ros 1.4 (0.4)3.1 (0.4)3.1 (0.4)3.1 (0)3.1 (0)3.1 (0)3.1 (0)15/15

Δ fopt
f6, 2-D		 1e1
13		 1e0
23		 1e-1
41		 1e-2
54		 1e-3
67		 1e-5
95		 1e-7
124		 #succ
15/15
BFGS-scipy Baudis 16 (19)11 (9)6.8 (5)5.6 (4)4.9 (3)4.0 (2)4.0 (2)15/15
L-BFGS-B-scipy Baudis 7.7 (11)6.9 (6)5.3 (2)4.7 (2)4.2 (2)5.6 (5)8.6 (8)15/15
BFGS-M-17 Blelly 2.7 (4)3.2 (3)2.4 (1)2.0 (0.6)1.9 (1)3.4 (3)4.4 (7)15/15
BFGS-P-09 Blelly 7.5 (5)6.3 (3)4.7 (2)4.1 (2)3.6 (2)3.3 (1.0)2.9 (0.9)15/15
BFGS-P-Instances Blelly 5.8 (6)5.8 (3)4.7 (2)4.3 (2)4.0 (1)3.5 (1)3.3 (1)15/15
BFGS-P-range Blelly 6.9 (7)5.9 (5)4.2 (2)3.6 (2)3.4 (1)3.0 (0.9)2.9 (1)15/15
BFGS-scipy-2019 Varelas 4.0 (4)3.9 (3)3.1 (2)3.4 (2)3.1 (2)2.9 (1)2.8 (1)15/15
L-BFGS-B-scipy-2019 Varelas 4.5 (5)4.9 (4)3.7 (2)3.2 (2)3.1 (2)2.9 (2)2.7 (1)15/15
BFGS ros 4.1 (4)3.3 (2)2.7 (1)2.3 (0.9)2.0 (0.6)1.7 (0.6)1.6 (0.6)15/15

Δ fopt
f7, 2-D		 1e1
3.0		 1e0
21		 1e-1
60		 1e-2
193		 1e-3
217		 1e-5
217		 1e-7
241		 #succ
15/15
BFGS-scipy Baudis 114 (177)67 (32)38 (35)33 (54)75 (119)75 (119)195 (295)5/15
L-BFGS-B-scipy Baudis 84 (151)196 (418)105 (237)89 (167)129 (182)129 (182)394 (497)1/15
BFGS-M-17 Blelly 19 (16)19 (24)72 (86)∞∞∞∞3030/15
BFGS-P-09 Blelly 24 (22)45 (36)∞∞∞∞∞5000/15
BFGS-P-Instances Blelly 19 (27)26 (19)∞∞∞∞∞5000/15
BFGS-P-range Blelly 16 (19)18 (15)124 (165)∞∞∞∞5000/15
BFGS-scipy-2019 Varelas 26 (35)24 (33)75 (114)156 (125)450 (473)450 (476)2137 (2447)2/15
L-BFGS-B-scipy-2019 Varelas 13 (16)18 (18)66 (96)146 (129)467 (567)467 (453)1360 (1346)3/15
BFGS ros 11 (14)19 (17)34 (34)∞∞∞∞3000/15

Δ fopt
f8, 2-D		 1e1
5.0		 1e0
12		 1e-1
37		 1e-2
46		 1e-3
86		 1e-5
94		 1e-7
112		 #succ
15/15
BFGS-scipy Baudis 12 (12)11 (10)5.1 (3)4.7 (2)2.6 (1)2.5 (1)2.2 (1)15/15
L-BFGS-B-scipy Baudis 6.4 (7)9.0 (7)4.3 (3)4.1 (2)2.3 (1)2.3 (1)2.0 (0.9)15/15
BFGS-M-17 Blelly 3.8 (4)4.0 (4)2.0 (2)2.0 (1)1.2 (0.6)1.4 (0.7)1.7 (1)15/15
BFGS-P-09 Blelly 15 (17)12 (12)4.8 (4)4.4 (3)2.5 (2)2.4 (1)2.0 (1)15/15
BFGS-P-Instances Blelly 12 (12)12 (9)5.1 (2)4.5 (2)2.5 (1.0)2.4 (0.9)2.1 (0.8)15/15
BFGS-P-range Blelly 8.8 (7)10 (6)4.2 (3)3.9 (2)2.2 (1.0)2.2 (0.9)1.9 (0.8)15/15
BFGS-scipy-2019 Varelas 10 (14)9.1 (10)4.2 (3)3.8 (3)2.2 (1)2.1 (1)1.8 (1)15/15
L-BFGS-B-scipy-2019 Varelas 3.1 (1)3.8 (4)2.1 (1)2.1 (0.9)1.2 (0.5)1.2 (0.4)1.0 (0.4)15/15
BFGS ros 4.5 (4)5.1 (4)2.4 (2)2.2 (1)1.3 (0.6)1.3 (0.5)1.1 (0.5)15/15

Δ fopt
f9, 2-D		 1e1
1		 1e0
18		 1e-1
30		 1e-2
44		 1e-3
68		 1e-5
81		 1e-7
92		 #succ
15/15
BFGS-scipy Baudis 41 (30)4.0 (4)3.8 (4)3.2 (3)2.3 (2)2.1 (1)1.9 (1)15/15
L-BFGS-B-scipy Baudis 18 (10)3.2 (3)3.6 (3)3.1 (2)2.2 (1)2.0 (0.9)1.8 (0.8)15/15
BFGS-M-17 Blelly 21 (14)3.0 (2)2.7 (2)2.2 (1)1.5 (0.7)1.4 (0.6)1.7 (1)15/15
BFGS-P-09 Blelly 42 (60)6.5 (5)5.3 (3)4.1 (2)2.8 (1)2.5 (1)2.2 (1)15/15
BFGS-P-Instances Blelly 49 (58)5.9 (6)4.8 (4)3.7 (3)2.6 (2)2.3 (1)2.1 (1)15/15
BFGS-P-range Blelly 29 (28)4.9 (4)4.5 (2)3.6 (2)2.5 (1)2.2 (0.9)2.0 (0.8)15/15
BFGS-scipy-2019 Varelas 38 (52)5.4 (5)4.7 (3)3.7 (2)2.6 (1)2.3 (1)2.1 (0.9)15/15
L-BFGS-B-scipy-2019 Varelas 16 (4)2.6 (2)2.7 (1)2.3 (0.8)1.6 (0.5)1.4 (0.4)1.3 (0.3)15/15
BFGS ros 16 (15)2.4 (2)2.3 (1)1.9 (1.0)1.3 (0.7)1.2 (0.5)1.1 (0.4)15/15

Δ fopt
f10, 2-D		 1e1
30		 1e0
46		 1e-1
54		 1e-2
61		 1e-3
68		 1e-5
82		 1e-7
98		 #succ
15/15
BFGS-scipy Baudis 1.4 (0.7)1.3 (0.9)1.2 (1)1.2 (0.8)1.2 (0.8)1.9 (1)6.4 (6)15/15
L-BFGS-B-scipy Baudis 1.8 (1)1.8 (1)2.1 (1)2.1 (0.6)2.2 (0.4)2.7 (0.8)14 (20)15/15
BFGS-M-17 Blelly 1.5 (1)2.2 (2)2.4 (1)2.2 (1)2.2 (1)3.5 (3)10 (9)11/15
BFGS-P-09 Blelly 2.5 (2)1.7 (1)1.6 (1)1.5 (1)1.4 (1)1.4 (1.0)1.3 (0.8)15/15
BFGS-P-Instances Blelly 2.6 (1)1.9 (0.9)1.8 (0.9)1.7 (0.7)1.7 (0.6)1.5 (0.5)1.4 (0.4)15/15
BFGS-P-StPt Blelly 1.9 (1)1.4 (0.8)1.2 (0.7)1.1 (0.6)1.1 (0.6)0.96 (0.5)0.87 (0.4)15/15
BFGS-P-range Blelly 1.8 (0.8)1.3 (0.5)1.1 (0.5)1.1 (0.4)1.1 (0.4)0.98 (0.3)0.93 (0.2)15/15
BFGS-scipy-2019 Varelas 1.0 (0.6)0.86 (0.5)0.87 (0.5)0.87 (0.6)1.2 (0.6)3.9 (6)15 (21)15/15
L-BFGS-B-scipy-2019 Varelas 1 (0.8)1.3 (0.7)1.5 (0.5)1.5 (0.3)1.4 (0.3)1.6 (0.9)7.6 (4)15/15
BFGS ros 0.99 (0.8)1.3 (0.7)1.4 (0.3)1.4 (0.2)1.4 (0.3)6.3 (13)24 (28)10/15

Δ fopt
f11, 2-D		 1e1
35		 1e0
45		 1e-1
50		 1e-2
62		 1e-3
67		 1e-5
81		 1e-7
97		 #succ
15/15
BFGS-scipy Baudis 1.0 (0.3)0.93 (0.2)0.94 (0.2)0.88 (0.2)0.91 (0.2)1.7 (2)14 (8)15/15
L-BFGS-B-scipy Baudis 1.1 (1)2.0 (1)2.8 (0.6)2.4 (0.5)2.4 (0.4)2.9 (2)19 (22)15/15
BFGS-M-17 Blelly 1.5 (1)1.7 (1)2.0 (1)1.9 (0.9)2.0 (0.8)2.6 (2)13 (12)14/15
BFGS-P-09 Blelly 2.0 (1)1.7 (0.8)1.7 (0.8)1.5 (0.7)1.4 (0.7)1.3 (0.5)1.2 (0.5)15/15
BFGS-P-Instances Blelly 2.6 (0.6)2.1 (0.4)2.0 (0.5)1.7 (0.4)1.7 (0.4)1.5 (0.3)1.4 (0.3)15/15
BFGS-P-StPt Blelly 2.6 (1)2.1 (0.9)2.1 (0.8)1.7 (0.6)1.7 (0.6)1.5 (0.5)1.3 (0.4)15/15
BFGS-P-range Blelly 2.0 (1.0)1.7 (0.7)1.6 (0.6)1.4 (0.5)1.4 (0.5)1.3 (0.4)1.2 (0.3)15/15
BFGS-scipy-2019 Varelas 0.90 (0.4)0.85 (0.4)0.92 (0.3)0.82 (0.2)0.83 (0.2)3.3 (3)26 (40)15/15
L-BFGS-B-scipy-2019 Varelas 1.0 (0.9)1.6 (0.7)1.7 (0.2)1.5 (0.2)1.4 (0.2)2.3 (0.3)7.3 (7)15/15
BFGS ros 1.2 (0.9)1.6 (1.0)2.0 (0.4)1.7 (0.4)1.9 (0.5)5.7 (4)36 (31)10/15

Δ fopt
f12, 2-D		 1e1
35		 1e0
46		 1e-1
75		 1e-2
94		 1e-3
105		 1e-5
153		 1e-7
195		 #succ
15/15
BFGS-scipy Baudis 14 (12)12 (13)8.4 (10)7.2 (9)6.6 (8)4.9 (7)6.1 (6)15/15
L-BFGS-B-scipy Baudis 0.90 (0.8)1.3 (0.9)1.1 (0.6)1.0 (0.6)1.3 (2)1.3 (2)4.3 (6)15/15
BFGS-M-17 Blelly 1.1 (1)2.9 (3)3.1 (4)4.8 (7)4.7 (6)12 (20)19 (28)10/15
BFGS-P-09 Blelly 17 (16)17 (15)13 (10)11 (9)10 (8)7.7 (6)6.5 (5)15/15
BFGS-P-Instances Blelly 14 (22)13 (20)9.0 (14)7.7 (12)7.1 (11)5.4 (8)4.5 (7)15/15
BFGS-P-StPt Blelly 11 (14)11 (15)8.3 (11)7.2 (9)6.7 (9)5.1 (7)4.4 (6)15/15
BFGS-P-range Blelly 14 (17)15 (16)11 (10)9.5 (9)8.8 (8)6.7 (6)5.7 (5)15/15
BFGS-scipy-2019 Varelas 11 (21)20 (19)15 (12)13 (10)12 (9)11 (14)19 (34)13/15
L-BFGS-B-scipy-2019 Varelas 1.3 (1.0)1.7 (3)1.5 (2)1.4 (2)1.4 (2)1.4 (2)5.6 (12)15/15
BFGS ros 1.2 (1)3.2 (4)3.1 (3)2.9 (3)2.8 (3)2.4 (3)4.2 (3)15/15

Δ fopt
f13, 2-D		 1e1
23		 1e0
35		 1e-1
46		 1e-2
60		 1e-3
71		 1e-5
95		 1e-7
122		 #succ
15/15
BFGS-scipy Baudis 15 (12)34 (47)44 (74)46 (79)74 (81)340 (416)5300 (4919)2/15
L-BFGS-B-scipy Baudis 8.0 (19)13 (14)20 (52)27 (57)61 (114)88 (122)638 (1079)9/15
BFGS-M-17 Blelly 5.6 (7)20 (21)39 (41)83 (105)167 (306)372 (335)1305 (1118)0/15
BFGS-P-09 Blelly 15 (14)38 (40)1212 (32)931 (23)790 (33)614 (64)948 (143)12/15
BFGS-P-Instances Blelly 5.8 (9)17 (27)55 (93)65 (92)77 (86)73 (60)110 (103)14/15
BFGS-P-StPt Blelly 7.5 (12)20 (31)16 (23)25 (38)24 (35)23 (28)1994 (3229)8/15
BFGS-P-range Blelly 11 (17)14 (22)21 (28)1344 (33)1145 (56)1973 (6261)1562 (4871)12/15
BFGS-scipy-2019 Varelas 17 (22)38 (39)107 (83)107 (68)367 (725)1133 (1180)7572 (7011)1/15
L-BFGS-B-scipy-2019 Varelas 4.9 (7)4.1 (5)4.8 (5)5.1 (6)6.7 (7)10 (11)30 (27)13/15
BFGS ros 6.7 (6)15 (19)45 (53)74 (59)164 (151)580 (511)∞1e40/15

Δ fopt
f14, 2-D		 1e1
1		 1e0
7.0		 1e-1
16		 1e-2
24		 1e-3
38		 1e-5
67		 1e-7
90		 #succ
15/15
BFGS-scipy Baudis 4.7 (4)2.3 (0.9)1.7 (0.5)1.9 (0.7)1.8 (0.4)1.6 (0.2)8.6 (5)15/15
L-BFGS-B-scipy Baudis 5.3 (4)2.4 (2)2.0 (1)2.0 (0.9)1.7 (0.7)1.5 (0.4)11 (8)15/15
BFGS-M-17 Blelly 6.0 (4)4.2 (4)2.5 (2)2.2 (1)1.7 (0.6)1.3 (0.3)1.9 (2)15/15
BFGS-P-09 Blelly 4.6 (4)2.0 (1)1.7 (0.8)1.8 (0.8)1.6 (0.5)1.4 (0.2)1.9 (1)15/15
BFGS-P-Instances Blelly 6.4 (4)2.2 (0.9)1.6 (0.8)1.8 (0.8)1.5 (0.5)1.4 (0.1)4.1 (4)15/15
BFGS-P-StPt Blelly 2.8 (4)1.5 (2)1.2 (0.9)1.4 (0.3)1.4 (0.7)1.2 (0.3)1.5 (0.4)15/15
BFGS-P-range Blelly 7.0 (4)2.5 (0.9)1.6 (0.6)1.9 (0.6)1.7 (0.5)1.5 (0.3)3.1 (1)15/15
BFGS-scipy-2019 Varelas 4.7 (4)2.3 (1)1.9 (0.8)1.9 (0.7)1.6 (0.5)1.4 (0.3)22 (25)15/15
L-BFGS-B-scipy-2019 Varelas 3.2 (4)1.8 (0.9)1.4 (0.7)1.5 (0.5)1.3 (0.4)1.1 (0.2)4.9 (4)15/15
BFGS ros 3.0 (3)2.9 (3)1.8 (1)1.7 (1)1.4 (0.7)1.0 (0.4)6.0 (9)15/15

Δ fopt
f15, 2-D		 1e1
37		 1e0
291		 1e-1
1033		 1e-2
1066		 1e-3
1113		 1e-5
1231		 1e-7
1412		 #succ
15/15
BFGS-scipy Baudis 20 (26)5.7 (6)3.9 (3)3.7 (3)3.6 (3)3.3 (3)2.9 (2)15/15
L-BFGS-B-scipy Baudis 9.2 (9)4.2 (4)2.3 (2)2.2 (2)2.2 (2)2.0 (2)1.8 (1)15/15
BFGS-M-17 Blelly 4.5 (4)2.8 (5)5.2 (4)5.0 (6)4.8 (4)4.4 (5)3.8 (4)9/15
BFGS-P-09 Blelly 9.4 (14)6.8 (8)6.0 (5)5.9 (6)5.6 (5)5.1 (5)4.5 (5)12/15
BFGS-P-Instances Blelly 13 (14)6.4 (4)7.5 (11)7.3 (7)7.0 (10)6.3 (10)5.5 (9)10/15
BFGS-P-StPt Blelly 8.4 (8)4.9 (5)10 (9)10 (13)9.2 (11)8.3 (10)7.3 (12)9/15
BFGS-P-range Blelly 6.6 (10)5.9 (7)7.7 (11)7.5 (11)7.2 (9)6.5 (8)5.7 (6)10/15
BFGS-scipy-2019 Varelas 14 (18)4.1 (4)5.7 (6)5.5 (6)5.3 (6)4.8 (5)4.2 (5)15/15
L-BFGS-B-scipy-2019 Varelas 3.7 (4)3.8 (5)4.5 (5)4.4 (5)4.2 (4)3.8 (4)3.4 (4)15/15
BFGS ros 4.2 (3)4.6 (6)7.9 (8)7.7 (9)7.3 (8)6.6 (8)5.8 (8)7/15

Δ fopt
f16, 2-D		 1e1
9.0		 1e0
50		 1e-1
174		 1e-2
326		 1e-3
358		 1e-5
409		 1e-7
538		 #succ
15/15
BFGS-scipy Baudis 64 (76)125 (148)184 (229)242 (279)1834 (1440)∞∞2e50/15
L-BFGS-B-scipy Baudis 87 (62)101 (114)86 (98)201 (261)913 (871)∞∞2e50/15
BFGS-M-17 Blelly 46 (41)59 (65)64 (57)317 (435)∞∞∞72630/15
BFGS-P-09 Blelly 589 (798)516 (660)918 (591)637 (638)∞∞∞6e40/15
BFGS-P-Instances Blelly 189 (224)762 (1043)1659 (2046)2866 (3053)∞∞∞7e40/15
BFGS-P-StPt Blelly 195 (249)925 (883)1562 (1962)∞∞∞∞6e40/15
BFGS-P-range Blelly 408 (585)779 (603)823 (734)2792 (3883)∞∞∞6e40/15
BFGS-scipy-2019 Varelas 184 (190)325 (413)713 (820)1374 (1530)∞∞∞2e50/15
L-BFGS-B-scipy-2019 Varelas 98 (180)175 (235)163 (200)772 (752)4001 (2374)∞∞2e50/15
BFGS ros 41 (47)147 (152)173 (213)269 (265)∞∞∞1e40/15

Δ fopt
f17, 2-D		 1e1
3.0		 1e0
61		 1e-1
133		 1e-2
275		 1e-3
396		 1e-5
1086		 1e-7
1657		 #succ
15/15
BFGS-scipy Baudis 38 (40)11 (11)33 (31)224 (280)1607 (1313)∞∞2e50/15
L-BFGS-B-scipy Baudis 20 (25)8.7 (8)10 (12)★80 (55)381 (452)∞∞2e50/15
BFGS-M-17 Blelly 12 (13)10 (9)90 (115)144 (122)∞∞∞26880/15
BFGS-P-09 Blelly 103 (204)76 (134)215 (172)∞∞∞∞94060/15
BFGS-P-Instances Blelly 16 (22)64 (92)605 (650)∞∞∞∞98380/15
BFGS-P-StPt Blelly 21 (19)87 (146)265 (277)∞∞∞∞1e40/15
BFGS-P-range Blelly 37 (67)96 (97)292 (308)∞∞∞∞89450/15
BFGS-scipy-2019 Varelas 27 (62)27 (33)174 (212)1242 (1527)∞∞∞2e50/15
L-BFGS-B-scipy-2019 Varelas 11 (10)14 (20)100 (80)374 (386)3486 (2357)∞∞2e50/15
BFGS ros 13 (16)16 (23)90 (98)∞∞∞∞37860/15

Δ fopt
f18, 2-D		 1e1
19		 1e0
134		 1e-1
666		 1e-2
1249		 1e-3
1708		 1e-5
2438		 1e-7
2858		 #succ
15/15
BFGS-scipy Baudis 50 (62)28 (22)41 (50)2262 (2643)∞∞∞2e50/15
L-BFGS-B-scipy Baudis 23 (13)55 (44)27 (55)401 (481)∞∞∞2e50/15
BFGS-M-17 Blelly 5.4 (7)19 (19)61 (67)∞∞∞∞28590/15
BFGS-P-09 Blelly 63 (82)103 (159)183 (243)∞∞∞∞2e40/15
BFGS-P-Instances Blelly 44 (63)132 (111)∞∞∞∞∞2e40/15
BFGS-P-StPt Blelly 59 (65)97 (113)∞∞∞∞∞2e40/15
BFGS-P-range Blelly 26 (29)124 (131)115 (123)∞∞∞∞2e40/15
BFGS-scipy-2019 Varelas 204 (445)139 (164)269 (321)1163 (2071)1712 (1406)∞∞2e50/15
L-BFGS-B-scipy-2019 Varelas 23 (9)60 (74)129 (147)1122 (1145)∞∞∞2e50/15
BFGS ros 14 (23)29 (51)108 (123)∞∞∞∞48990/15

Δ fopt
f19, 2-D		 1e1
1		 1e0
1		 1e-1
26		 1e-2
216		 1e-3
227		 1e-5
252		 1e-7
276		 #succ
15/15
BFGS-scipy Baudis 418 (461)2258 (3447)169 (284)69 (71)65 (67)59 (60)54 (55)15/15
L-BFGS-B-scipy Baudis 35 (54)465 (391)45 (25)14 (13)13 (12)12 (11)73 (56)11/15
BFGS-M-17 Blelly 36 (46)176 (194)28 (20)17 (14)16 (15)15 (12)65 (62)1/15
BFGS-P-09 Blelly 410 (534)1034 (1258)116 (118)168 (216)160 (177)144 (158)203 (255)2/15
BFGS-P-Instances Blelly 450 (470)1236 (1028)142 (136)116 (149)111 (112)100 (90)202 (333)4/15
BFGS-P-StPt Blelly 1 (0)1 (0)★30.57 (0.1)★3↑0203 (251)193 (260)174 (154)1466 (1411)0/15
BFGS-P-range Blelly 97 (161)528 (592)53 (46)58 (56)55 (52)55 (48)120 (113)4/15
BFGS-scipy-2019 Varelas 253 (301)864 (694)66 (74)55 (61)52 (58)47 (52)43 (48)15/15
L-BFGS-B-scipy-2019 Varelas 56 (108)285 (351)24 (27)22 (18)21 (17)22 (15)20 (14)15/15
BFGS ros 37 (76)311 (356)62 (82)30 (25)29 (41)26 (30)24 (28)11/15

Δ fopt
f20, 2-D		 1e1
4.0		 1e0
61		 1e-1
365		 1e-2
366		 1e-3
366		 1e-5
370		 1e-7
375		 #succ
15/15
BFGS-scipy Baudis 3.6 (2)15 (14)11 (17)11 (17)11 (17)11 (17)11 (16)15/15
L-BFGS-B-scipy Baudis 3.4 (2)13 (25)23 (24)23 (24)23 (24)23 (23)23 (23)15/15
BFGS-M-17 Blelly 2.1 (2)6.1 (4)1.9 (1)1.9 (1)1.9 (1)1.9 (1)3.1 (4)14/15
BFGS-P-09 Blelly 5.6 (4)15 (17)4.9 (4)4.9 (4)4.9 (4)4.9 (3)4.8 (3)15/15
BFGS-P-Instances Blelly 5.1 (2)8.4 (8)2.2 (2)2.2 (2)2.2 (2)2.2 (2)2.2 (2)15/15
BFGS-P-range Blelly 5.3 (4)8.0 (10)3.0 (3)3.0 (3)3.0 (3)3.0 (3)3.0 (3)15/15
BFGS-scipy-2019 Varelas 3.5 (4)9.4 (8)4.7 (3)4.7 (3)4.7 (3)4.7 (3)4.6 (3)15/15
L-BFGS-B-scipy-2019 Varelas 2.5 (2)7.3 (9)2.1 (2)2.1 (2)2.1 (2)2.1 (2)2.1 (1)15/15
BFGS ros 1.9 (2)6.0 (8)2.7 (2)2.7 (2)2.7 (2)2.7 (2)2.6 (2)15/15

Δ fopt
f21, 2-D		 1e1
2.0		 1e0
51		 1e-1
174		 1e-2
276		 1e-3
290		 1e-5
324		 1e-7
330		 #succ
15/15
BFGS-scipy Baudis 4.6 (4)12 (19)13 (16)8.5 (10)8.1 (10)7.3 (9)7.3 (8)15/15
L-BFGS-B-scipy Baudis 3.1 (3)22 (37)44 (34)28 (22)26 (21)24 (18)23 (18)15/15
BFGS-M-17 Blelly 5.2 (6)4.6 (5)2.8 (4)1.8 (2)1.7 (2)1.6 (2)5.6 (8)8/15
BFGS-P-09 Blelly 4.9 (5)7.0 (10)4.6 (5)2.9 (3)2.8 (3)2.6 (3)7.9 (14)11/15
BFGS-P-Instances Blelly 8.6 (7)6.6 (6)4.4 (3)2.8 (2)2.7 (2)2.5 (2)13 (21)7/15
BFGS-P-range Blelly 4.4 (4)8.6 (8)4.8 (5)3.0 (3)2.9 (3)2.6 (3)16 (17)9/15
BFGS-scipy-2019 Varelas 3.2 (3)4.6 (6)4.8 (6)3.1 (4)2.9 (4)2.7 (3)2.7 (3)15/15
L-BFGS-B-scipy-2019 Varelas 2.0 (2)2.2 (2)1.6 (2)1.0 (2)1.0 (1)0.93 (1)0.96 (1)15/15
BFGS ros 2.2 (2)4.8 (6)3.1 (3)2.0 (2)1.9 (2)1.7 (2)1.8 (2)15/15

Δ fopt
f22, 2-D		 1e1
5.0		 1e0
27		 1e-1
168		 1e-2
218		 1e-3
249		 1e-5
289		 1e-7
306		 #succ
15/15
BFGS-scipy Baudis 28 (44)71 (103)16 (20)12 (15)11 (13)9.2 (12)8.9 (11)15/15
L-BFGS-B-scipy Baudis 5.5 (6)48 (57)18 (32)14 (25)13 (22)11 (19)12 (18)15/15
BFGS-M-17 Blelly 3.7 (5)3.6 (4)1.1 (1)0.87 (0.9)0.79 (0.8)0.83 (0.9)2.2 (2)13/15
BFGS-P-09 Blelly 7.0 (6)7.9 (11)3.4 (3)2.7 (3)2.3 (2)3.3 (3)554 (33)9/15
BFGS-P-Instances Blelly 10 (17)6.4 (6)2.9 (4)2.3 (3)2.0 (2)2.0 (2)11 (12)12/15
BFGS-P-range Blelly 6.7 (5)8.2 (11)2.8 (4)2.3 (3)2.0 (3)2.3 (2)15 (27)13/15
BFGS-scipy-2019 Varelas 8.5 (9)5.2 (7)2.8 (4)2.2 (3)2.0 (3)1.8 (2)2.1 (2)15/15
L-BFGS-B-scipy-2019 Varelas 5.4 (7)7.0 (8)3.9 (4)3.0 (3)2.7 (3)2.4 (2)2.3 (2)15/15
BFGS ros 5.4 (6)5.0 (5)1.5 (1)1.2 (1)1.1 (1.0)1 (0.8)1.00 (0.8)15/15

Δ fopt
f23, 2-D		 1e1
8.0		 1e0
193		 1e-1
234		 1e-2
263		 1e-3
299		 1e-5
348		 1e-7
379		 #succ
15/15
BFGS-scipy Baudis 53 (142)37 (22)86 (79)437 (525)1133 (1227)∞∞2e50/15
L-BFGS-B-scipy Baudis 13 (21)13 (13)48 (61)76 (81)98 (69)515 (317)∞2e50/15
BFGS-M-17 Blelly 8.0 (8)6.8 (7)74 (95)250 (283)∞∞∞94470/15
BFGS-P-09 Blelly 44 (49)48 (40)451 (568)2136 (2966)7166 (7629)1.3e4 (1e4)∞3e50/15
BFGS-P-Instances Blelly 15 (29)171 (349)449 (672)749 (1948)812 (1136)1464 (1684)∞7e40/15
BFGS-P-range Blelly 51 (87)46 (29)315 (661)551 (589)914 (1098)5092 (4836)∞7e40/15
BFGS-scipy-2019 Varelas 37 (69)31 (42)171 (136)494 (639)1938 (2545)∞∞2e50/15
L-BFGS-B-scipy-2019 Varelas 14 (25)11 (11)48 (56)96 (156)157 (178)1342 (1333)∞2e50/15
BFGS ros 4.7 (6)4.9 (5)28 (25)121 (135)477 (689)410 (416)∞97440/15

Δ fopt
f24, 2-D		 1e1
18		 1e0
857		 1e-1
8515		 1e-2
23399		 1e-3
24113		 1e-5
24721		 1e-7
24721		 #succ
5/15
BFGS-scipy Baudis 89 (135)34 (40)4.1 (4)1.7 (2)1.6 (2)1.6 (2)1.6 (2)15/15
L-BFGS-B-scipy Baudis 8.2 (7)2.4 (3)0.47 (0.4)↑10.54 (0.7)0.53 (0.7)0.51 (0.7)0.51 (0.7)15/15
BFGS-M-17 Blelly 3.5 (4)3.4 (4)∞∞∞∞∞46320/15
BFGS-P-09 Blelly 9.3 (11)8.0 (8)8.1 (11)∞∞∞∞93320/15
BFGS-P-Instances Blelly 12 (15)10 (17)21 (28)7.5 (12)7.3 (10)7.1 (5)7.1 (9)1/15
BFGS-P-range Blelly 2.0 (2)4.7 (5)8.6 (9)6.6 (9)6.4 (7)6.2 (6)6.2 (7)1/15
BFGS-scipy-2019 Varelas 12 (14)15 (13)15 (24)20 (24)20 (33)19 (13)19 (18)5/15
L-BFGS-B-scipy-2019 Varelas 4.0 (7)4.6 (7)2.9 (3)5.1 (6)5.0 (8)4.9 (9)4.9 (5)11/15
BFGS ros 3.4 (5)5.1 (6)2.9 (3)∞∞∞∞53130/15

Previous dimension | Dimension = 3 | Next dimension

Δ fopt
f1, 3-D		 1e1
4.0		 1e0
8.0		 1e-1
8.0		 1e-2
8.0		 1e-3
8.0		 1e-5
8.0		 1e-7
8.0		 #succ
15/15
BFGS-M-17 Blelly 1.8 (1)1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.3 (0.2)15/15
BFGS-P-09 Blelly 2.6 (1)1.5 (0)1.5 (0)1.5 (0)1.5 (0)1.5 (0)1.8 (0.3)15/15
BFGS-P-Instances Blelly 2.6 (1)1.5 (0)1.5 (0)1.5 (0)1.5 (0)1.5 (0)1.8 (0.3)15/15
BFGS-P-range Blelly 2.5 (1)1.5 (0)1.5 (0)1.5 (0)1.5 (0)1.5 (0)1.9 (0.6)15/15
BFGS-scipy-2019 Varelas 3.5 (0.6)2.1 (0)2.1 (0)2.1 (0)2.2 (0)2.2 (0)2.2 (0)15/15
L-BFGS-B-scipy-2019 Varelas 1.7 (1)1.2 (0)1.2 (0)1.2 (0)1.2 (0)1.2 (0)1.2 (0)15/15
BFGS ros 2.1 (0.5)1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)15/15

Δ fopt
f2, 3-D		 1e1
38		 1e0
42		 1e-1
43		 1e-2
44		 1e-3
45		 1e-5
47		 1e-7
48		 #succ
15/15
BFGS-M-17 Blelly 4.0 (2)5.9 (4)6.7 (3)6.9 (3)8.4 (7)14 (10)75 (89)12/15
BFGS-P-09 Blelly 2.9 (1.0)2.9 (1.0)3.0 (0.9)3.1 (0.9)3.2 (0.9)3.3 (0.7)3.6 (0.8)15/15
BFGS-P-Instances Blelly 3.1 (1)3.0 (1)3.2 (1)3.3 (1)3.5 (1)3.7 (1)4.2 (2)15/15
BFGS-P-range Blelly 3.1 (2)3.0 (1)3.0 (2)3.1 (1)3.2 (1)3.5 (1)3.9 (1)15/15
BFGS-scipy-2019 Varelas 1.8 (0.9)1.8 (0.7)1.9 (0.8)2.2 (1.0)2.5 (1)2.7 (1)3.0 (1)15/15
L-BFGS-B-scipy-2019 Varelas 2.4 (1)3.0 (2)3.7 (2)4.1 (2)4.5 (1)4.8 (1)5.3 (1)15/15
BFGS ros 3.1 (2)3.9 (2)4.7 (1)4.9 (1)4.9 (1)5.1 (1)5.2 (1)15/15

Δ fopt
f3, 3-D		 1e1
38		 1e0
822		 1e-1
830		 1e-2
835		 1e-3
842		 1e-5
847		 1e-7
853		 #succ
15/15
BFGS-M-17 Blelly 40 (39)∞∞∞∞∞∞80040/15
BFGS-P-09 Blelly 68 (81)78 (125)120 (197)119 (158)118 (94)117 (81)117 (166)2/15
BFGS-P-Instances Blelly 64 (104)42 (57)∞∞∞∞∞1e40/15
BFGS-P-range Blelly 49 (39)24 (20)∞∞∞∞∞1e40/15
BFGS-scipy-2019 Varelas 59 (66)21 (15)180 (208)179 (218)177 (179)176 (178)175 (213)13/15
L-BFGS-B-scipy-2019 Varelas 55 (43)23 (25)236 (324)234 (222)232 (255)231 (353)229 (236)12/15
BFGS ros 41 (35)25 (49)155 (146)154 (185)153 (118)152 (166)151 (171)1/15

Δ fopt
f4, 3-D		 1e1
40		 1e0
808		 1e-1
866		 1e-2
921		 1e-3
952		 1e-5
1015		 1e-7
1044		 #succ
15/15
BFGS-M-17 Blelly 49 (61)74 (80)144 (143)135 (134)131 (171)∞∞84080/15
BFGS-P-09 Blelly 82 (68)275 (209)257 (408)241 (295)233 (198)219 (252)213 (303)1/15
BFGS-P-Instances Blelly 200 (266)282 (370)∞∞∞∞∞2e40/15
BFGS-P-range Blelly 161 (180)126 (103)250 (264)235 (312)227 (178)213 (241)207 (139)1/15
BFGS-scipy-2019 Varelas 73 (83)66 (50)302 (355)284 (377)275 (351)258 (223)251 (262)10/15
L-BFGS-B-scipy-2019 Varelas 64 (82)60 (69)416 (396)391 (264)378 (460)355 (388)345 (444)9/15
BFGS ros 48 (63)54 (59)∞∞∞∞∞98360/15

Δ fopt
f5, 3-D		 1e1
7.0		 1e0
7.0		 1e-1
7.0		 1e-2
7.0		 1e-3
7.0		 1e-5
7.0		 1e-7
7.0		 #succ
15/15
BFGS-M-17 Blelly 1.6 (0.6)2.2 (0.6)2.4 (0.3)2.4 (0.3)2.4 (0.3)2.4 (0.3)2.4 (0.3)15/15
BFGS-P-09 Blelly 1.5 (0.7)2.3 (1)2.5 (1)2.6 (1)2.6 (1)2.6 (1)2.6 (1)15/15
BFGS-P-Instances Blelly 1.4 (0.4)2.6 (0.7)2.9 (0.4)2.9 (0.4)2.9 (0.4)2.9 (0.4)2.9 (0.4)15/15
BFGS-P-range Blelly 1.3 (0.4)2.5 (0.7)2.8 (1)2.8 (0.7)2.8 (0.7)2.8 (0.7)2.8 (0.7)15/15
BFGS-scipy-2019 Varelas 2.6 (0.4)3.6 (1)4.0 (0.7)4.0 (0.7)4.0 (0.7)4.0 (0.7)4.0 (0.7)15/15
L-BFGS-B-scipy-2019 Varelas 2.0 (0.6)2.8 (0.6)3.1 (0.6)3.1 (0.6)3.1 (0.6)3.1 (0.6)3.1 (0.6)15/15
BFGS ros 1.5 (0.3)2.3 (0.9)2.4 (0.6)2.4 (0.6)2.4 (0.6)2.4 (0.6)2.4 (0.6)15/15

Δ fopt
f6, 3-D		 1e1
34		 1e0
56		 1e-1
90		 1e-2
117		 1e-3
149		 1e-5
215		 1e-7
265		 #succ
15/15
BFGS-M-17 Blelly 3.5 (3)3.8 (2)2.8 (2)2.6 (1)2.6 (2)4.2 (8)18 (23)13/15
BFGS-P-09 Blelly 5.8 (4)5.8 (2)4.3 (2)4.1 (3)3.9 (2)3.3 (1)4.1 (3)15/15
BFGS-P-Instances Blelly 4.8 (5)4.6 (3)3.4 (2)3.2 (1)3.5 (2)3.6 (2)4.9 (4)15/15
BFGS-P-range Blelly 5.6 (3)4.7 (2)4.0 (2)3.8 (2)3.6 (1)3.2 (1)4.5 (4)15/15
BFGS-scipy-2019 Varelas 3.9 (3)4.3 (2)3.5 (2)3.3 (2)3.0 (2)2.8 (1)4.3 (4)15/15
L-BFGS-B-scipy-2019 Varelas 2.3 (2)3.2 (3)3.0 (3)2.7 (2)2.4 (1)2.4 (1)2.5 (1)15/15
BFGS ros 3.5 (3)3.4 (2)2.9 (1)2.4 (0.8)2.0 (0.6)1.9 (0.5)3.1 (3)15/15

Δ fopt
f7, 3-D		 1e1
11		 1e0
65		 1e-1
342		 1e-2
464		 1e-3
482		 1e-5
482		 1e-7
535		 #succ
15/15
BFGS-M-17 Blelly 37 (39)∞∞∞∞∞∞4040/15
BFGS-P-09 Blelly 17 (16)136 (122)∞∞∞∞∞6000/15
BFGS-P-Instances Blelly 21 (18)∞∞∞∞∞∞6000/15
BFGS-P-range Blelly 23 (36)61 (69)∞∞∞∞∞6000/15
BFGS-scipy-2019 Varelas 14 (13)97 (97)452 (644)∞∞∞∞3e50/15
L-BFGS-B-scipy-2019 Varelas 16 (15)124 (106)276 (281)∞∞∞∞3e50/15
BFGS ros 17 (33)86 (106)∞∞∞∞∞4000/15

Δ fopt
f8, 3-D		 1e1
27		 1e0
45		 1e-1
152		 1e-2
179		 1e-3
188		 1e-5
198		 1e-7
208		 #succ
15/15
BFGS-M-17 Blelly 2.0 (1)2.3 (1)0.96 (0.4)0.90 (0.3)0.92 (0.3)1.1 (0.3)3.1 (3)15/15
BFGS-P-09 Blelly 4.1 (3)5.2 (3)1.9 (0.8)1.8 (0.7)1.8 (0.6)1.7 (0.6)2.1 (1.0)15/15
BFGS-P-Instances Blelly 3.8 (3)5.2 (3)1.9 (0.9)1.8 (0.7)1.7 (0.7)1.7 (0.6)1.7 (0.6)15/15
BFGS-P-range Blelly 3.4 (2)5.5 (3)1.9 (0.8)1.8 (0.7)1.8 (0.6)1.7 (0.6)1.7 (0.4)15/15
BFGS-scipy-2019 Varelas 3.0 (3)3.7 (3)1.4 (0.9)1.4 (0.8)1.4 (0.7)1.4 (0.7)1.3 (0.7)15/15
L-BFGS-B-scipy-2019 Varelas 1.2 (0.6)2.0 (2)0.86 (0.5)0.86 (0.4)0.87 (0.4)0.88 (0.4)0.87 (0.4)15/15
BFGS ros 1.4 (0.8)2.7 (2)1.1 (0.5)1.0 (0.4)1.0 (0.4)1.0 (0.4)1.0 (0.3)15/15

Δ fopt
f9, 3-D		 1e1
21		 1e0
65		 1e-1
127		 1e-2
149		 1e-3
159		 1e-5
169		 1e-7
178		 #succ
15/15
BFGS-M-17 Blelly 2.4 (1)1.6 (0.3)1.1 (0.1)1.1 (0.1)1.1 (0.2)1.1 (0.2)2.3 (2)15/15
BFGS-P-09 Blelly 4.4 (3)3.5 (2)2.2 (1.0)2.0 (0.8)2.0 (0.8)1.9 (0.7)1.9 (0.7)15/15
BFGS-P-Instances Blelly 4.3 (2)2.9 (1)1.9 (0.6)1.8 (0.6)1.7 (0.5)1.7 (0.5)1.6 (0.5)15/15
BFGS-P-range Blelly 3.5 (3)2.5 (3)1.6 (1)1.6 (1)1.6 (1)1.5 (1)1.5 (1.0)15/15
BFGS-scipy-2019 Varelas 2.9 (1)2.4 (2)1.6 (0.8)1.6 (0.7)1.6 (0.7)1.5 (0.6)1.5 (0.6)15/15
L-BFGS-B-scipy-2019 Varelas 1.4 (0.3)1.1 (0.8)0.81 (0.5)0.85 (0.4)0.86 (0.4)0.87 (0.3)0.87 (0.3)15/15
BFGS ros 1.5 (0.8)1.5 (1)1.1 (0.5)1.1 (0.5)1.1 (0.4)1.1 (0.4)1.0 (0.4)15/15

Δ fopt
f10, 3-D		 1e1
114		 1e0
152		 1e-1
168		 1e-2
180		 1e-3
194		 1e-5
218		 1e-7
242		 #succ
15/15
BFGS-M-17 Blelly 1.0 (0.5)1.5 (0.8)2.1 (2)2.0 (1)2.0 (1)3.0 (2)12 (8)10/15
BFGS-P-09 Blelly 1.0 (0.4)0.82 (0.3)0.77 (0.3)↑10.78 (0.4)0.77 (0.4)0.75 (0.3)0.76 (0.3)15/15
BFGS-P-Instances Blelly 1.2 (0.6)0.96 (0.4)0.92 (0.4)0.90 (0.3)0.87 (0.2)0.87 (0.2)0.86 (0.2)15/15
BFGS-P-StPt Blelly 0.95 (0.3)0.76 (0.3)↑00.76 (0.3)↑00.73 (0.3)↑00.72 (0.3)↑00.73 (0.3)↑00.78 (0.2)↑015/15
BFGS-P-range Blelly 1.3 (0.8)1.0 (0.6)1.0 (0.6)1.00 (0.5)0.97 (0.5)0.92 (0.5)0.91 (0.5)15/15
BFGS-scipy-2019 Varelas 0.55 (0.2)↑00.47 (0.2)★↑00.48 (0.2)★↑00.49 (0.2)↑00.52 (0.2)↑10.95 (0.8)13 (17)15/15
L-BFGS-B-scipy-2019 Varelas 0.77 (0.4)0.92 (0.4)1.0 (0.3)1.0 (0.3)1.1 (0.3)2.0 (2)9.2 (14)15/15
BFGS ros 1.0 (0.5)1.2 (0.3)1.2 (0.2)1.2 (0.2)1.4 (0.8)5.9 (6)76 (81)3/15

Δ fopt
f11, 3-D		 1e1
67		 1e0
105		 1e-1
227		 1e-2
263		 1e-3
277		 1e-5
302		 1e-7
327		 #succ
15/15
BFGS-M-17 Blelly 1.4 (0.9)1.3 (0.6)1.8 (2)1.6 (1)2.6 (3)5.3 (6)13 (14)10/15
BFGS-P-09 Blelly 1.2 (0.6)0.83 (0.4)0.41 (0.1)↑00.38 (0.1)↑00.40 (0.1)↑00.41 (0.1)↑00.50 (0.2)↑115/15
BFGS-P-Instances Blelly 1.5 (1)1.0 (0.9)0.54 (0.5)0.49 (0.5)0.49 (0.5)0.49 (0.4)0.50 (0.4)15/15
BFGS-P-StPt Blelly 1.3 (0.7)0.89 (0.5)0.44 (0.2)↑00.41 (0.2)↑00.41 (0.2)↑00.41 (0.2)↑00.66 (0.6)15/15
BFGS-P-range Blelly 1.2 (0.7)0.84 (0.4)0.42 (0.2)↑00.39 (0.2)↑00.41 (0.2)↑00.42 (0.1)↑00.44 (0.1)↑015/15
BFGS-scipy-2019 Varelas 0.60 (0.3)↑10.46 (0.1)★↑00.25 (0.1)★↑00.24 (0.1)↑00.26 (0.1)↑02.4 (5)45 (59)13/15
L-BFGS-B-scipy-2019 Varelas 1.2 (0.6)1.1 (0.3)0.70 (0.3)0.88 (0.4)1.1 (0.8)1.9 (2)27 (16)15/15
BFGS ros 1.0 (0.7)1.0 (0.2)1.0 (0.7)1.4 (1)3.7 (4)41 (42)∞2e40/15

Δ fopt
f12, 3-D		 1e1
65		 1e0
168		 1e-1
338		 1e-2
401		 1e-3
445		 1e-5
696		 1e-7
790		 #succ
15/15
BFGS-M-17 Blelly 1.7 (2)1.6 (2)1.9 (2)2.9 (2)3.9 (6)18 (30)112 (120)2/15
BFGS-P-09 Blelly 6.5 (7)3.7 (3)2.3 (2)2.2 (2)2.1 (1)1.6 (1.0)1.5 (0.9)15/15
BFGS-P-Instances Blelly 8.8 (6)4.9 (4)3.0 (2)2.8 (2)2.6 (2)1.9 (1)1.8 (1)15/15
BFGS-P-StPt Blelly 6.4 (4)4.1 (1)2.7 (0.5)2.5 (0.5)2.4 (0.5)1.8 (0.4)2.1 (0.7)15/15
BFGS-P-range Blelly 10 (8)5.5 (3)3.3 (2)3.1 (1)2.9 (1)2.1 (0.8)2.1 (1)15/15
BFGS-scipy-2019 Varelas 7.7 (8)4.2 (4)2.6 (2)2.4 (2)2.3 (2)11 (25)76 (192)10/15
L-BFGS-B-scipy-2019 Varelas 1.7 (2)1.3 (2)1.0 (1)1.0 (1)1.0 (1)0.88 (0.8)24 (4)14/15
BFGS ros 1.7 (2)1.4 (1)1.00 (0.9)1.00 (0.7)1.00 (0.6)2.3 (2)43 (92)9/15

Δ fopt
f13, 3-D		 1e1
49		 1e0
85		 1e-1
108		 1e-2
136		 1e-3
215		 1e-5
281		 1e-7
365		 #succ
15/15
BFGS-M-17 Blelly 1.2 (0.4)1.0 (0.2)1.0 (0.2)1.00 (0.1)0.74 (0.1)↑021 (33)∞3e40/15
BFGS-P-09 Blelly 1.4 (0.3)1.1 (0.2)1.1 (0.2)1.1 (0.1)0.83 (0.1)↑12.1 (0.5)656 (1746)7/15
BFGS-P-Instances Blelly 1.3 (0.3)1.0 (0.2)1.1 (0.2)1.1 (0.1)0.81 (0.1)↑02.4 (3)388 (658)12/15
BFGS-P-StPt Blelly 1.3 (0.4)1.0 (0.1)1.1 (0.1)1.1 (0.1)0.80 (0.1)↑01.1 (0.3)539 (1046)11/15
BFGS-P-range Blelly 1.3 (0.3)1.1 (0.2)1.1 (0.2)1.1 (0.2)0.82 (0.1)↑01.4 (0.4)417 (678)12/15
BFGS-scipy-2019 Varelas 1.2 (0.4)0.98 (0.2)1.1 (0.2)1.0 (0.1)1.0 (0.1)315 (538)1.2e4 (1e4)0/15
L-BFGS-B-scipy-2019 Varelas 4.1 (6)263 (13)224 (66)187 (85)133 (82)265 (535)2537 (4357)0/15
BFGS ros 1.1 (0.2)1 (0.2)1.0 (0.2)1.00 (0.2)2.1 (3)409 (548)∞3e40/15

Δ fopt
f14, 3-D		 1e1
2.0		 1e0
17		 1e-1
28		 1e-2
43		 1e-3
71		 1e-5
110		 1e-7
194		 #succ
15/15
BFGS-M-17 Blelly 3.0 (4)1.5 (0.8)1.6 (0.6)1.4 (0.5)1.1 (0.3)0.96 (0.3)2.2 (4)15/15
BFGS-P-09 Blelly 5.8 (4)1.6 (0.6)1.6 (0.6)1.6 (0.6)1.3 (0.3)1.2 (0.2)3.1 (5)15/15
BFGS-P-Instances Blelly 6.1 (5)1.6 (0.9)1.7 (0.6)1.7 (0.5)1.3 (0.4)1.3 (0.2)10 (15)14/15
BFGS-P-StPt Blelly 2.7 (3)0.94 (0.3)1.2 (0.4)1.3 (0.3)1.1 (0.2)1.2 (0.1)4.6 (7)15/15
BFGS-P-range Blelly 5.5 (1)1.4 (0.4)1.4 (0.8)1.5 (0.5)1.2 (0.3)1.2 (0.2)1.8 (1)15/15
BFGS-scipy-2019 Varelas 3.5 (3)1.4 (0.9)1.5 (0.8)1.6 (0.5)1.2 (0.3)1.2 (0.2)63 (86)13/15
L-BFGS-B-scipy-2019 Varelas 4.0 (4)1.3 (0.6)1.4 (0.6)1.3 (0.3)1.1 (0.3)1.1 (0.3)11 (11)15/15
BFGS ros 4.1 (4)1.5 (1)1.5 (1)1.3 (0.6)1.1 (0.3)1.0 (0.2)29 (45)4/15

Δ fopt
f15, 3-D		 1e1
121		 1e0
1372		 1e-1
6285		 1e-2
8282		 1e-3
8429		 1e-5
8787		 1e-7
9041		 #succ
15/15
BFGS-M-17 Blelly 10 (13)15 (14)20 (24)15 (18)15 (18)14 (14)14 (15)1/15
BFGS-P-09 Blelly 20 (14)27 (31)37 (49)28 (43)28 (34)27 (31)26 (16)1/15
BFGS-P-Instances Blelly 19 (13)18 (13)37 (43)28 (39)28 (37)27 (33)26 (42)1/15
BFGS-P-StPt Blelly 21 (13)81 (93)∞∞∞∞∞2e40/15
BFGS-P-range Blelly 23 (25)16 (12)∞∞∞∞∞2e40/15
BFGS-scipy-2019 Varelas 25 (24)27 (28)22 (22)17 (17)17 (16)16 (16)15 (15)15/15
L-BFGS-B-scipy-2019 Varelas 9.2 (10)12 (14)18 (18)14 (14)13 (13)13 (13)13 (12)14/15
BFGS ros 7.3 (7)17 (15)22 (29)17 (14)16 (21)16 (16)15 (17)1/15

Δ fopt
f16, 3-D		 1e1
41		 1e0
319		 1e-1
582		 1e-2
789		 1e-3
1864		 1e-5
3204		 1e-7
3361		 #succ
15/15
BFGS-M-17 Blelly 22 (22)501 (485)∞∞∞∞∞1e40/15
BFGS-P-09 Blelly 357 (396)4452 (6646)∞∞∞∞∞9e40/15
BFGS-P-Instances Blelly 349 (345)1536 (1152)2550 (3560)∞∞∞∞1e50/15
BFGS-P-StPt Blelly 283 (357)668 (1241)2347 (2856)∞∞∞∞9e40/15
BFGS-P-range Blelly 362 (305)4288 (3928)∞∞∞∞∞1e50/15
BFGS-scipy-2019 Varelas 147 (137)686 (625)3780 (4372)∞∞∞∞3e50/15
L-BFGS-B-scipy-2019 Varelas 37 (55)81 (119)1163 (1670)5485 (5134)∞∞∞3e50/15
BFGS ros 71 (61)154 (231)∞∞∞∞∞2e40/15

Δ fopt
f17, 3-D		 1e1
4.0		 1e0
78		 1e-1
282		 1e-2
491		 1e-3
1134		 1e-5
2347		 1e-7
3469		 #succ
15/15
BFGS-M-17 Blelly 12 (17)34 (40)308 (214)∞∞∞∞58760/15
BFGS-P-09 Blelly 35 (58)140 (143)∞∞∞∞∞2e40/15
BFGS-P-Instances Blelly 64 (78)121 (159)∞∞∞∞∞2e40/15
BFGS-P-StPt Blelly 31 (37)156 (160)∞∞∞∞∞2e40/15
BFGS-P-range Blelly 25 (29)116 (165)841 (738)∞∞∞∞2e40/15
BFGS-scipy-2019 Varelas 96 (120)198 (184)2214 (2053)∞∞∞∞3e50/15
L-BFGS-B-scipy-2019 Varelas 36 (84)57 (72)418 (562)∞∞∞∞3e50/15
BFGS ros 43 (72)45 (47)∞∞∞∞∞73360/15

Δ fopt
f18, 3-D		 1e1
40		 1e0
145		 1e-1
1289		 1e-2
3084		 1e-3
3523		 1e-5
4738		 1e-7
5527		 #succ
15/15
BFGS-M-17 Blelly 20 (26)99 (87)∞∞∞∞∞56640/15
BFGS-P-09 Blelly 116 (145)2311 (3462)∞∞∞∞∞2e40/15
BFGS-P-Instances Blelly 113 (102)2262 (1886)∞∞∞∞∞2e40/15
BFGS-P-StPt Blelly 104 (151)∞∞∞∞∞∞2e40/15
BFGS-P-range Blelly 78 (86)2167 (2548)∞∞∞∞∞2e40/15
BFGS-scipy-2019 Varelas 50 (58)2751 (2684)∞∞∞∞∞3e50/15
L-BFGS-B-scipy-2019 Varelas 46 (44)572 (745)∞∞∞∞∞3e50/15
BFGS ros 33 (46)∞∞∞∞∞∞84880/15

Δ fopt
f19, 3-D		 1e1
1		 1e0
1		 1e-1
109		 1e-2
6764		 1e-3
7367		 1e-5
7399		 1e-7
7441		 #succ
15/15
BFGS-M-17 Blelly 111 (138)1384 (1704)115 (155)17 (11)∞∞∞71200/15
BFGS-P-09 Blelly 542 (789)5185 (8105)648 (776)128 (170)∞∞∞6e40/15
BFGS-P-Instances Blelly 1086 (1369)3732 (4671)535 (1339)131 (170)∞∞∞6e40/15
BFGS-P-StPt Blelly 1 (0)★21 (0)★30.20 (0.1)★3↑060 (70)∞∞∞6e40/15
BFGS-P-range Blelly 807 (986)1940 (2064)284 (316)35 (36)100 (147)100 (134)∞5e40/15
BFGS-scipy-2019 Varelas 245 (395)2039 (2280)144 (196)34 (30)76 (105)75 (85)75 (131)6/15
L-BFGS-B-scipy-2019 Varelas 228 (394)1376 (1321)51 (56)17 (21)54 (56)54 (41)54 (55)8/15
BFGS ros 113 (158)872 (1400)162 (168)33 (36)∞∞∞1e40/15

Δ fopt
f20, 3-D		 1e1
8.0		 1e0
385		 1e-1
2291		 1e-2
2398		 1e-3
2481		 1e-5
2573		 1e-7
2776		 #succ
15/15
BFGS-M-17 Blelly 2.3 (1)1.9 (2)6.8 (7)6.5 (7)6.3 (7)6.1 (9)24 (27)1/15
BFGS-P-09 Blelly 5.5 (3)4.6 (5)2.2 (2)2.1 (2)2.1 (2)2.0 (2)1.9 (2)14/15
BFGS-P-Instances Blelly 5.5 (3)2.6 (4)1.9 (1)1.8 (1)1.8 (1)1.7 (1)1.6 (1)15/15
BFGS-P-range Blelly 5.9 (4)4.4 (4)7.0 (5)6.7 (8)6.5 (8)6.3 (6)5.8 (6)10/15
BFGS-scipy-2019 Varelas 6.0 (5)4.0 (4)4.5 (4)4.3 (4)4.1 (4)4.0 (4)3.7 (3)15/15
L-BFGS-B-scipy-2019 Varelas 1.5 (1)1.5 (2)4.5 (3)4.3 (3)4.2 (3)4.0 (3)3.7 (3)15/15
BFGS ros 1.9 (1)1.7 (1)5.5 (9)5.3 (5)5.1 (5)4.9 (6)4.6 (7)8/15

Δ fopt
f21, 3-D		 1e1
6.0		 1e0
184		 1e-1
425		 1e-2
439		 1e-3
458		 1e-5
469		 1e-7
482		 #succ
14/15
BFGS-M-17 Blelly 5.4 (10)3.7 (4)3.8 (5)3.7 (5)3.6 (4)3.7 (4)15 (14)5/15
BFGS-P-09 Blelly 5.3 (3)4.4 (5)4.7 (8)4.6 (8)4.4 (8)4.4 (7)14 (16)6/15
BFGS-P-Instances Blelly 7.9 (8)5.0 (8)6.1 (5)5.9 (5)5.7 (5)5.6 (4)30 (20)5/15
BFGS-P-range Blelly 4.7 (3)1.6 (2)1.9 (3)1.9 (2)1.9 (2)2.2 (3)12 (14)10/15
BFGS-scipy-2019 Varelas 2.3 (3)3.1 (3)2.6 (4)2.5 (4)2.5 (3)2.5 (3)2.5 (3)15/15
L-BFGS-B-scipy-2019 Varelas 3.1 (5)1.5 (2)2.9 (4)2.8 (4)2.7 (3)2.7 (3)2.6 (3)15/15
BFGS ros 2.1 (3)3.3 (4)3.5 (3)3.4 (3)3.3 (3)3.3 (3)3.2 (3)14/15

Δ fopt
f22, 3-D		 1e1
18		 1e0
170		 1e-1
354		 1e-2
362		 1e-3
384		 1e-5
401		 1e-7
414		 #succ
15/15
BFGS-M-17 Blelly 2.9 (3)2.2 (2)1.7 (1)1.7 (1)1.7 (1)2.6 (2)12 (19)3/15
BFGS-P-09 Blelly 8.2 (12)3.4 (3)2.5 (2)2.5 (2)2.4 (2)3.3 (3)30 (38)3/15
BFGS-P-Instances Blelly 9.2 (8)2.9 (3)3.8 (4)3.7 (3)3.5 (3)3.8 (3)16 (28)4/15
BFGS-P-range Blelly 4.4 (3)2.2 (2)2.3 (3)2.3 (3)2.2 (3)3.6 (3)25 (37)0/15
BFGS-scipy-2019 Varelas 3.5 (4)2.6 (3)2.9 (2)2.9 (2)2.8 (2)2.8 (2)2.9 (2)15/15
L-BFGS-B-scipy-2019 Varelas 2.7 (3)2.6 (0.6)2.6 (3)2.5 (3)2.4 (2)2.4 (2)2.4 (2)15/15
BFGS ros 3.3 (4)2.6 (4)2.1 (2)2.1 (2)2.0 (2)2.0 (2)2.0 (2)15/15

Δ fopt
f23, 3-D		 1e1
3.0		 1e0
407		 1e-1
906		 1e-2
1215		 1e-3
2214		 1e-5
2293		 1e-7
2393		 #succ
15/15
BFGS-M-17 Blelly 36 (43)12 (9)∞∞∞∞∞1e40/15
BFGS-P-09 Blelly 65 (122)69 (59)747 (1101)∞∞∞∞9e40/15
BFGS-P-Instances Blelly 136 (260)42 (65)1596 (2055)∞∞∞∞1e50/15
BFGS-P-range Blelly 138 (13)45 (44)1619 (2144)1208 (2245)∞∞∞9e40/15
BFGS-scipy-2019 Varelas 104 (235)53 (62)287 (317)3510 (4633)∞∞∞3e50/15
L-BFGS-B-scipy-2019 Varelas 16 (9)17 (26)114 (95)404 (300)435 (556)1925 (2126)∞3e50/15
BFGS ros 15 (22)8.7 (10)112 (99)∞∞∞∞1e40/15

Δ fopt
f24, 3-D		 1e1
97		 1e0
10391		 1e-1
1.0e5		 1e-2
3.6e5		 1e-3
3.6e5		 1e-5
3.6e5		 1e-7
3.6e5		 #succ
2/15
BFGS-M-17 Blelly 5.8 (6)3.3 (3)∞∞∞∞∞75480/15
BFGS-P-09 Blelly 15 (15)∞∞∞∞∞∞2e40/15
BFGS-P-Instances Blelly 21 (29)14 (14)∞∞∞∞∞2e40/15
BFGS-P-range Blelly 9.5 (11)22 (28)∞∞∞∞∞1e40/15
BFGS-scipy-2019 Varelas 18 (19)13 (18)42 (46)∞∞∞∞3e50/15
L-BFGS-B-scipy-2019 Varelas 7.4 (7)8.7 (9)21 (17)12 (11)12 (10)12 (10)12 (10)1/15
BFGS ros 9.3 (8)∞∞∞∞∞∞86000/15

Previous dimension | Dimension = 5 | Next dimension

Δ fopt
f1, 5-D		 1e1
11		 1e0
12		 1e-1
12		 1e-2
12		 1e-3
12		 1e-5
12		 1e-7
12		 #succ
15/15
BFGS-scipy Baudis 1.4 (0)1.2 (0)1.2 (0)1.2 (0)1.2 (0)1.2 (0)1.7 (0.3)15/15
L-BFGS-B-scipy Baudis 1.4 (0.0)1.3 (0.0)1.3 (0.0)1.4 (0.3)1.4 (0.3)1.4 (0.3)1.4 (0.3)15/15
BFGS-M-17 Blelly 1.2 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.4 (0.2)15/15
BFGS-P-09 Blelly 1.5 (0)1.3 (0)1.3 (0)1.3 (0)1.3 (0)1.3 (0)1.7 (0.6)15/15
BFGS-P-Instances Blelly 1.5 (0)1.3 (0)1.3 (0)1.3 (0)1.3 (0)1.3 (0)1.6 (0.3)15/15
BFGS-P-range Blelly 1.5 (0)1.3 (0)1.3 (0)1.3 (0)1.3 (0)1.3 (0)1.8 (0.6)15/15
BFGS-scipy-2019 Varelas 1.9 (0.3)2.0 (0.3)2.1 (0.3)2.1 (0.3)2.1 (0.3)2.1 (0.3)2.1 (0.3)15/15
L-BFGS-B-scipy-2019 Varelas 1.3 (0.5)1.2 (0.2)1.3 (0.2)1.3 (0.2)1.3 (0.2)1.3 (0.2)1.3 (0.2)15/15
BFGS ros 1.2 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)★15/15

Δ fopt
f2, 5-D		 1e1
83		 1e0
87		 1e-1
88		 1e-2
89		 1e-3
90		 1e-5
92		 1e-7
94		 #succ
15/15
BFGS-scipy Baudis 2.7 (1)2.9 (1)3.4 (2)3.6 (2)3.9 (3)4.2 (3)4.7 (3)15/15
L-BFGS-B-scipy Baudis 3.2 (2)4.1 (2)5.1 (2)6.9 (2)7.7 (3)8.2 (3)44 (40)15/15
BFGS-M-17 Blelly 4.7 (2)7.3 (4)8.1 (3)10 (7)12 (8)30 (33)349 (340)2/15
BFGS-P-09 Blelly 2.9 (1.0)2.9 (0.9)3.2 (0.8)3.4 (1)3.5 (1)3.8 (1)4.3 (2)15/15
BFGS-P-Instances Blelly 3.0 (2)3.1 (2)3.2 (2)3.4 (2)3.5 (2)3.8 (2)4.3 (2)15/15
BFGS-P-range Blelly 2.2 (0.7)2.4 (0.8)2.6 (0.8)2.7 (0.8)3.0 (1)3.3 (1)3.4 (1)15/15
BFGS-scipy-2019 Varelas 2.1 (0.7)2.2 (0.7)2.3 (0.8)2.5 (0.9)2.7 (1)3.2 (1)3.6 (1)15/15
L-BFGS-B-scipy-2019 Varelas 3.7 (1)5.0 (1)5.7 (1)5.9 (1)6.1 (1)6.7 (2)7.1 (2)15/15
BFGS ros 3.9 (2)5.7 (2)6.3 (2)6.5 (2)6.6 (2)6.9 (2)7.1 (2)15/15

Δ fopt
f3, 5-D		 1e1
716		 1e0
1622		 1e-1
1637		 1e-2
1642		 1e-3
1646		 1e-5
1650		 1e-7
1654		 #succ
15/15
BFGS-scipy Baudis 27 (25)86 (122)311 (269)310 (235)309 (311)308 (260)308 (335)10/15
L-BFGS-B-scipy Baudis 13 (16)55 (84)176 (158)175 (154)175 (173)174 (227)217 (226)8/15
BFGS-M-17 Blelly 56 (84)∞∞∞∞∞∞2e40/15
BFGS-P-09 Blelly 285 (313)∞∞∞∞∞∞3e40/15
BFGS-P-Instances Blelly 131 (213)∞∞∞∞∞∞3e40/15
BFGS-P-range Blelly 98 (105)∞∞∞∞∞∞3e40/15
BFGS-scipy-2019 Varelas 97 (125)∞∞∞∞∞∞5e50/15
L-BFGS-B-scipy-2019 Varelas 60 (51)4415 (4547)∞∞∞∞∞5e50/15
BFGS ros 107 (151)∞∞∞∞∞∞2e40/15

Δ fopt
f4, 5-D		 1e1
809		 1e0
1633		 1e-1
1688		 1e-2
1758		 1e-3
1817		 1e-5
1886		 1e-7
1903		 #succ
15/15
BFGS-scipy Baudis 55 (37)4460 (5894)∞∞∞∞∞5e50/15
L-BFGS-B-scipy Baudis 28 (32)536 (487)4369 (5184)4195 (3840)4059 (1582)3911 (3844)∞5e50/15
BFGS-M-17 Blelly 103 (94)∞∞∞∞∞∞2e40/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞3e40/15
BFGS-P-Instances Blelly 567 (605)∞∞∞∞∞∞3e40/15
BFGS-P-range Blelly 165 (128)∞∞∞∞∞∞3e40/15
BFGS-scipy-2019 Varelas 132 (166)∞∞∞∞∞∞5e50/15
L-BFGS-B-scipy-2019 Varelas 169 (116)∞∞∞∞∞∞5e50/15
BFGS ros 169 (161)∞∞∞∞∞∞2e40/15

Δ fopt
f5, 5-D		 1e1
10		 1e0
10		 1e-1
10		 1e-2
10		 1e-3
10		 1e-5
10		 1e-7
10		 #succ
15/15
BFGS-scipy Baudis 1.7 (0.8)2.6 (0.8)2.7 (0.8)2.8 (0.8)2.8 (0.8)2.8 (0.8)2.8 (0.8)15/15
L-BFGS-B-scipy Baudis 1.7 (0.3)3.5 (2)3.6 (2)3.7 (2)3.7 (2)3.7 (2)3.7 (2)15/15
BFGS-M-17 Blelly 2.1 (0.6)2.9 (0.9)3.0 (0.6)3.0 (0.6)3.0 (0.6)3.0 (0.6)3.0 (0.6)15/15
BFGS-P-09 Blelly 1.5 (0.7)2.9 (0.7)3.1 (0.7)3.1 (0.7)3.1 (0.7)3.1 (0.7)3.1 (0.7)15/15
BFGS-P-Instances Blelly 1.6 (0.7)2.5 (1)2.6 (1)2.6 (1)2.6 (1)2.6 (1)2.6 (1)15/15
BFGS-P-range Blelly 1.7 (0.3)2.6 (1)2.7 (0.7)2.8 (0.7)2.8 (0.7)2.8 (0.7)2.8 (0.7)15/15
BFGS-scipy-2019 Varelas 2.6 (0.3)3.9 (0.3)4.2 (0.3)4.2 (0.3)4.2 (0.3)4.2 (0.3)4.2 (0.3)15/15
L-BFGS-B-scipy-2019 Varelas 2.2 (0.3)2.7 (0.3)2.8 (0.3)2.8 (0.3)2.8 (0.3)2.8 (0.3)2.8 (0.3)15/15
BFGS ros 1.9 (0.6)3.0 (0.9)3.1 (0.9)3.1 (0.9)3.1 (0.9)3.1 (0.9)3.1 (0.9)15/15

Δ fopt
f6, 5-D		 1e1
114		 1e0
214		 1e-1
281		 1e-2
404		 1e-3
580		 1e-5
1038		 1e-7
1332		 #succ
15/15
BFGS-scipy Baudis 5.5 (4)4.1 (2)4.0 (2)3.8 (2)3.1 (2)2.6 (2)4.1 (4)15/15
L-BFGS-B-scipy Baudis 4.3 (3)3.9 (2)4.2 (2)3.4 (2)2.8 (1)4.6 (4)191 (187)6/15
BFGS-M-17 Blelly 2.8 (2)2.9 (0.6)3.6 (2)3.0 (1)4.4 (5)39 (38)608 (620)1/15
BFGS-P-09 Blelly 4.2 (2)3.3 (2)3.5 (1)3.1 (1)2.6 (1)2.1 (0.8)5.6 (4)15/15
BFGS-P-Instances Blelly 3.9 (2)3.4 (2)3.4 (2)3.1 (1)2.8 (1)2.6 (1)6.2 (6)15/15
BFGS-P-range Blelly 4.6 (3)3.0 (2)3.2 (3)3.0 (2)2.7 (1)2.1 (0.9)5.1 (6)14/15
BFGS-scipy-2019 Varelas 4.3 (2)3.4 (2)3.3 (2)3.2 (2)2.6 (1)2.4 (2)2.8 (2)15/15
L-BFGS-B-scipy-2019 Varelas 1.9 (2)2.1 (2)2.3 (1)2.2 (1)1.8 (1.0)1.4 (0.7)1.3 (0.5)★15/15
BFGS ros 3.0 (2)3.3 (1)3.4 (1)3.0 (1)2.5 (0.8)2.0 (0.8)7.8 (8)15/15

Δ fopt
f7, 5-D		 1e1
24		 1e0
324		 1e-1
1171		 1e-2
1451		 1e-3
1572		 1e-5
1572		 1e-7
1597		 #succ
15/15
BFGS-scipy Baudis 175 (325)210 (175)6233 (7581)∞∞∞∞5e50/15
L-BFGS-B-scipy Baudis 194 (297)222 (369)∞∞∞∞∞5e50/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞6060/15
BFGS-P-09 Blelly 227 (221)∞∞∞∞∞∞8000/15
BFGS-P-Instances Blelly 221 (349)∞∞∞∞∞∞8000/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞8000/15
BFGS-scipy-2019 Varelas 298 (428)2.2e4 (2e4)∞∞∞∞∞5e50/15
L-BFGS-B-scipy-2019 Varelas 329 (428)3982 (4961)∞∞∞∞∞5e50/15
BFGS ros ∞∞∞∞∞∞∞6000/15

Δ fopt
f8, 5-D		 1e1
73		 1e0
273		 1e-1
336		 1e-2
372		 1e-3
391		 1e-5
410		 1e-7
422		 #succ
15/15
BFGS-scipy Baudis 3.2 (1)2.2 (2)2.0 (1)1.9 (1)1.9 (1)1.9 (1)1.8 (1)15/15
L-BFGS-B-scipy Baudis 1.9 (1.0)42 (120)34 (97)31 (88)29 (84)28 (80)27 (77)15/15
BFGS-M-17 Blelly 1.9 (1.0)1.3 (0.7)1.3 (0.6)1.2 (0.5)1.2 (0.5)1.4 (0.9)4.8 (3)15/15
BFGS-P-09 Blelly 3.7 (2)2.4 (3)2.1 (2)2.0 (2)2.0 (2)1.9 (2)2.0 (2)15/15
BFGS-P-Instances Blelly 3.4 (1)1.9 (1)1.8 (0.9)1.7 (0.8)1.6 (0.8)1.6 (0.8)1.7 (1)15/15
BFGS-P-range Blelly 3.6 (2)2.2 (1)2.0 (1)1.9 (0.9)1.9 (0.9)1.8 (0.8)2.0 (1)15/15
BFGS-scipy-2019 Varelas 2.7 (1)1.9 (2)1.7 (1)1.7 (1)1.6 (1)1.6 (1)1.6 (1.0)15/15
L-BFGS-B-scipy-2019 Varelas 1.2 (0.8)0.77 (0.4)0.81 (0.3)0.81 (0.3)0.81 (0.3)0.82 (0.3)0.82 (0.3)15/15
BFGS ros 2.1 (2)1.8 (0.9)1.6 (0.7)1.5 (0.6)1.5 (0.6)1.5 (0.6)1.5 (0.5)15/15

Δ fopt
f9, 5-D		 1e1
35		 1e0
127		 1e-1
214		 1e-2
263		 1e-3
300		 1e-5
335		 1e-7
369		 #succ
15/15
BFGS-scipy Baudis 4.5 (2)3.2 (1)2.2 (0.8)2.0 (0.7)1.8 (0.6)1.7 (0.5)1.5 (0.5)15/15
L-BFGS-B-scipy Baudis 2.5 (2)5.9 (16)3.9 (9)3.3 (8)3.0 (7)2.7 (6)2.5 (5)15/15
BFGS-M-17 Blelly 4.7 (2)3.1 (2)2.1 (0.9)1.8 (0.8)1.6 (0.7)1.5 (0.6)4.0 (4)15/15
BFGS-P-09 Blelly 6.1 (4)3.7 (2)2.5 (1)2.1 (1)1.9 (1)1.8 (0.9)1.7 (0.8)15/15
BFGS-P-Instances Blelly 6.0 (3)5.1 (3)3.4 (2)2.8 (2)2.6 (1)2.3 (1)2.2 (1)15/15
BFGS-P-range Blelly 5.2 (3)5.2 (4)3.4 (2)2.9 (2)2.6 (1)2.4 (1)2.2 (1)15/15
BFGS-scipy-2019 Varelas 4.1 (2)3.3 (3)2.3 (2)2.0 (1)1.8 (1)1.7 (1)1.6 (1)15/15
L-BFGS-B-scipy-2019 Varelas 1.6 (0.9)1.4 (1)1.1 (0.6)1.1 (0.5)0.97 (0.4)0.92 (0.4)0.86 (0.4)15/15
BFGS ros 3.6 (3)3.0 (2)2.0 (1)1.8 (1.0)1.6 (0.9)1.5 (0.8)1.4 (0.7)15/15

Δ fopt
f10, 5-D		 1e1
349		 1e0
500		 1e-1
574		 1e-2
607		 1e-3
626		 1e-5
829		 1e-7
880		 #succ
15/15
BFGS-scipy Baudis 0.62 (0.3)↑10.49 (0.2)↑00.47 (0.3)↑00.48 (0.3)↑00.50 (0.3)↑00.51 (0.3)↑114 (12)15/15
L-BFGS-B-scipy Baudis 1.3 (0.4)1.1 (0.3)1.0 (0.3)1.0 (0.3)1.0 (0.3)1.2 (0.6)95 (174)6/15
BFGS-M-17 Blelly 1.2 (0.5)1.3 (0.8)2.4 (2)2.3 (2)2.4 (2)3.9 (2)35 (40)4/15
BFGS-P-09 Blelly 0.66 (0.3)0.49 (0.2)↑00.47 (0.2)↑00.49 (0.2)↑10.51 (0.2)↑10.42 (0.2)↑00.45 (0.2)↑015/15
BFGS-P-Instances Blelly 0.72 (0.2)0.53 (0.2)↑00.49 (0.1)↑00.49 (0.1)↑00.50 (0.2)↑00.42 (0.2)↑00.44 (0.2)↑015/15
BFGS-P-StPt Blelly 0.67 (0.4)0.48 (0.2)↑00.44 (0.2)↑00.46 (0.2)↑00.51 (0.3)↑00.46 (0.2)↑00.46 (0.2)↑015/15
BFGS-P-range Blelly 0.68 (0.3)↑00.51 (0.2)↑00.49 (0.2)↑00.48 (0.2)↑00.49 (0.2)↑00.41 (0.1)↑00.42 (0.1)↑015/15
BFGS-scipy-2019 Varelas 0.40 (0.2)↑00.30 (0.1)↑00.28 (0.1)↑00.30 (0.1)↑00.33 (0.2)↑00.70 (0.8)18 (30)15/15
L-BFGS-B-scipy-2019 Varelas 0.93 (0.6)0.88 (0.3)0.85 (0.2)0.86 (0.2)0.87 (0.1)1.0 (1)11 (11)15/15
BFGS ros 1.0 (0.5)1.00 (0.2)1.0 (0.3)1 (0.3)1.00 (0.3)1.1 (0.4)23 (30)5/15

Δ fopt
f11, 5-D		 1e1
143		 1e0
202		 1e-1
763		 1e-2
977		 1e-3
1177		 1e-5
1467		 1e-7
1673		 #succ
15/15
BFGS-scipy Baudis 0.59 (0.2)↑10.51 (0.3)↑10.17 (0.1)↑00.15 (0.1)↑00.14 (0.1)↑00.43 (0.5)26 (41)12/15
L-BFGS-B-scipy Baudis 1.2 (0.3)1.3 (0.4)0.51 (0.2)↑00.58 (0.3)↑00.71 (0.3)16 (18)∞5e50/15
BFGS-M-17 Blelly 1.1 (0.2)1.7 (1.0)1.2 (1)1.5 (2)3.6 (6)17 (15)∞3e40/15
BFGS-P-09 Blelly 2.1 (0.9)1.6 (0.9)0.45 (0.3)↑10.36 (0.2)↑10.32 (0.2)↑10.29 (0.2)↑10.39 (0.8)15/15
BFGS-P-Instances Blelly 1.3 (0.7)0.98 (0.5)0.28 (0.2)↑00.23 (0.1)↑00.21 (0.1)↑00.19 (0.1)↑00.19 (0.1)↑015/15
BFGS-P-StPt Blelly 0.90 (0.9)0.73 (0.6)0.21 (0.2)↑00.18 (0.1)↑00.18 (0.2)↑00.17 (0.2)↑00.17 (0.1)↑015/15
BFGS-P-range Blelly 1.4 (1)1.1 (1)0.31 (0.3)↑10.25 (0.3)↑00.22 (0.2)↑00.20 (0.2)↑00.26 (0.2)↑015/15
BFGS-scipy-2019 Varelas 0.41 (0.2)↑00.37 (0.2)↑00.13 (0.1)↑00.12 (0.1)↑00.12 (0.1)↑01.6 (2)34 (35)5/15
L-BFGS-B-scipy-2019 Varelas 0.90 (0.4)0.96 (0.3)0.40 (0.1)↑00.43 (0.2)↑00.72 (0.5)2.0 (3)164 (251)4/15
BFGS ros 1.00 (0.2)1.00 (0.5)1.1 (1)1.9 (2)8.2 (11)199 (250)∞4e40/15

Δ fopt
f12, 5-D		 1e1
108		 1e0
268		 1e-1
371		 1e-2
413		 1e-3
461		 1e-5
1303		 1e-7
1494		 #succ
15/15
BFGS-scipy Baudis 1603 (2423)648 (965)468 (690)421 (606)378 (543)141 (197)422 (531)4/15
L-BFGS-B-scipy Baudis 1.1 (1)1.1 (0.9)1.2 (0.9)1.3 (0.8)1.4 (0.9)2.0 (2)148 (193)9/15
BFGS-M-17 Blelly 2.3 (2)2.4 (2)5.8 (4)11 (11)27 (25)218 (168)∞2e40/15
BFGS-P-09 Blelly 9.4 (7)5.3 (4)4.5 (3)4.3 (3)4.1 (3)1.6 (1)1.6 (0.9)15/15
BFGS-P-Instances Blelly 13 (10)6.7 (5)5.7 (4)5.4 (4)5.1 (3)2.0 (1)1.8 (1)15/15
BFGS-P-StPt Blelly 7.9 (6)4.8 (3)4.2 (2)4.1 (2)3.9 (1)1.6 (0.5)1.5 (0.5)15/15
BFGS-P-range Blelly 10 (7)5.6 (4)4.8 (3)4.6 (2)4.4 (2)1.7 (0.7)1.6 (0.6)15/15
BFGS-scipy-2019 Varelas 7.9 (7)4.5 (4)4.0 (3)3.8 (3)3.7 (2)5.5 (1)20 (30)10/15
L-BFGS-B-scipy-2019 Varelas 1.1 (1)0.98 (1)1.1 (1)1.2 (1)1.2 (1.0)1.1 (2)10 (3)15/15
BFGS ros 1.1 (0.9)1.00 (0.6)1.00 (0.6)1 (0.6)1.0 (0.6)2.0 (3)49 (81)5/15

Δ fopt
f13, 5-D		 1e1
132		 1e0
195		 1e-1
250		 1e-2
319		 1e-3
1310		 1e-5
1752		 1e-7
2255		 #succ
15/15
BFGS-scipy Baudis 1.0 (0.1)1.0 (0.1)1.00 (0.1)0.97 (0.1)1.0 (0.8)464 (715)∞5e50/15
L-BFGS-B-scipy Baudis 6.4 (9)22 (28)23 (25)33 (60)16 (20)91 (118)∞5e50/15
BFGS-M-17 Blelly 1.0 (0.2)1.0 (0.2)1.0 (0.1)1.0 (0.1)0.29 (0.0)↑039 (82)∞6e40/15
BFGS-P-09 Blelly 0.97 (0.1)0.92 (0.1)0.93 (0.1)↑10.88 (0.1)↑00.26 (0.0)↑01.2 (2)2076 (2523)2/15
BFGS-P-Instances Blelly 1.0 (0.2)0.95 (0.1)0.94 (0.1)0.91 (0.1)↑00.26 (0.0)↑019 (2)1477 (1652)2/15
BFGS-P-StPt Blelly 0.95 (0.1)0.86 (0.1)0.85 (0.1)↑00.85 (0.0)↑00.24 (0.0)↑00.86 (0.7)863 (973)2/15
BFGS-P-range Blelly 0.98 (0.2)0.92 (0.1)↑10.92 (0.1)↑10.89 (0.1)↑00.26 (0.0)↑084 (3)1957 (2863)2/15
BFGS-scipy-2019 Varelas 0.95 (0.1)0.90 (0.1)0.91 (0.1)↑00.87 (0.0)↑00.68 (0.7)1189 (1166)∞5e50/15
L-BFGS-B-scipy-2019 Varelas 2.7 (3)4.1 (4)10 (23)14 (26)7.8 (17)25 (40)∞5e50/15
BFGS ros 1.0 (0.2)1.00 (0.1)1.00 (0.1)1.0 (0.1)4.8 (9)136 (148)∞5e40/15

Δ fopt
f14, 5-D		 1e1
10		 1e0
41		 1e-1
58		 1e-2
90		 1e-3
139		 1e-5
251		 1e-7
476		 #succ
15/15
BFGS-scipy Baudis 1.8 (0.8)0.93 (0.4)1.2 (0.3)1.2 (0.2)1.1 (0.1)0.93 (0.1)85 (90)6/15
L-BFGS-B-scipy Baudis 2.1 (0.8)1.4 (0.5)1.5 (0.3)1.4 (0.3)1.2 (0.2)1.6 (1)684 (786)1/15
BFGS-M-17 Blelly 2.1 (2)1.8 (1)1.7 (1)1.5 (0.8)1.2 (0.6)0.99 (0.3)2.9 (4)3/15
BFGS-P-09 Blelly 2.1 (2)1.1 (0.4)1.3 (0.5)1.2 (0.3)1.1 (0.2)0.88 (0.1)3.7 (6)10/15
BFGS-P-Instances Blelly 2.0 (1)1.1 (0.3)1.2 (0.2)1.2 (0.2)1.0 (0.2)0.89 (0.2)13 (13)9/15
BFGS-P-StPt Blelly 1 (0.8)0.60 (0.3)↑00.86 (0.3)0.97 (0.2)0.88 (0.2)0.81 (0.1)↑02.2 (4)14/15
BFGS-P-range Blelly 2.0 (1)1.1 (0.3)1.3 (0.4)1.2 (0.2)1.1 (0.2)0.86 (0.1)↑13.2 (2)13/15
BFGS-scipy-2019 Varelas 1.7 (0.7)0.88 (0.3)1.2 (0.4)1.1 (0.2)0.95 (0.1)0.81 (0.1)↑0276 (272)1/15
L-BFGS-B-scipy-2019 Varelas 1.1 (0.9)0.82 (0.4)0.93 (0.4)1.00 (0.3)0.96 (0.2)1.0 (0.2)93 (98)3/15
BFGS ros 2.2 (2)1.7 (1)1.8 (1)1.5 (0.8)1.3 (0.6)1.0 (0.4)350 (445)0/15

Δ fopt
f15, 5-D		 1e1
511		 1e0
9310		 1e-1
19369		 1e-2
19743		 1e-3
20073		 1e-5
20769		 1e-7
21359		 #succ
14/15
BFGS-scipy Baudis 15 (11)3.0 (2)6.6 (9)6.5 (9)6.4 (9)6.2 (8)6.0 (8)15/15
L-BFGS-B-scipy Baudis 6.4 (5)★2.0 (2)2.8 (2)2.8 (2)2.7 (2)2.6 (2)4.9 (4)9/15
BFGS-M-17 Blelly 68 (50)∞∞∞∞∞∞2e40/15
BFGS-P-09 Blelly 146 (157)∞∞∞∞∞∞3e40/15
BFGS-P-Instances Blelly 108 (188)∞∞∞∞∞∞3e40/15
BFGS-P-StPt Blelly 153 (154)∞∞∞∞∞∞3e40/15
BFGS-P-range Blelly 157 (136)∞∞∞∞∞∞3e40/15
BFGS-scipy-2019 Varelas 103 (93)781 (927)∞∞∞∞∞5e50/15
L-BFGS-B-scipy-2019 Varelas 74 (79)773 (1168)372 (452)365 (405)359 (473)347 (217)337 (462)1/15
BFGS ros 87 (123)∞∞∞∞∞∞2e40/15

Δ fopt
f16, 5-D		 1e1
120		 1e0
612		 1e-1
2662		 1e-2
10163		 1e-3
10449		 1e-5
11644		 1e-7
12095		 #succ
15/15
BFGS-scipy Baudis 250 (241)1761 (1761)∞∞∞∞∞5e50/15
L-BFGS-B-scipy Baudis 35 (38)310 (354)2802 (3099)∞∞∞∞5e50/15
BFGS-M-17 Blelly 75 (66)∞∞∞∞∞∞2e40/15
BFGS-P-09 Blelly 540 (913)∞∞∞∞∞∞2e50/15
BFGS-P-Instances Blelly 1005 (1569)∞∞∞∞∞∞2e50/15
BFGS-P-StPt Blelly 716 (769)∞∞∞∞∞∞2e50/15
BFGS-P-range Blelly 779 (859)∞∞∞∞∞∞2e50/15
BFGS-scipy-2019 Varelas 352 (447)1.2e4 (1e4)∞∞∞∞∞5e50/15
L-BFGS-B-scipy-2019 Varelas 67 (82)3837 (4509)∞∞∞∞∞5e50/15
BFGS ros 153 (140)960 (1100)∞∞∞∞∞4e40/15

Δ fopt
f17, 5-D		 1e1
5.0		 1e0
215		 1e-1
899		 1e-2
2861		 1e-3
3669		 1e-5
6351		 1e-7
7934		 #succ
15/15
BFGS-scipy Baudis 105 (246)67 (54)1348 (1351)∞∞∞∞5e50/15
L-BFGS-B-scipy Baudis 37 (36)45 (52)244 (325)∞∞∞∞5e50/15
BFGS-M-17 Blelly 59 (85)161 (185)∞∞∞∞∞2e40/15
BFGS-P-09 Blelly 79 (110)769 (801)∞∞∞∞∞4e40/15
BFGS-P-Instances Blelly 124 (148)1201 (1583)∞∞∞∞∞3e40/15
BFGS-P-StPt Blelly 55 (129)2610 (2851)∞∞∞∞∞3e40/15
BFGS-P-range Blelly 37 (54)526 (478)∞∞∞∞∞3e40/15
BFGS-scipy-2019 Varelas 152 (240)923 (1372)∞∞∞∞∞5e50/15
L-BFGS-B-scipy-2019 Varelas 49 (83)410 (292)∞∞∞∞∞5e50/15
BFGS ros 125 (209)645 (905)∞∞∞∞∞2e40/15

Δ fopt
f18, 5-D		 1e1
103		 1e0
378		 1e-1
3968		 1e-2
8451		 1e-3
9280		 1e-5
10905		 1e-7
12469		 #succ
15/15
BFGS-scipy Baudis 55 (57)396 (507)∞∞∞∞∞5e50/15
L-BFGS-B-scipy Baudis 72 (163)212 (288)1775 (1701)∞∞∞∞5e50/15
BFGS-M-17 Blelly 76 (84)∞∞∞∞∞∞2e40/15
BFGS-P-09 Blelly 204 (189)∞∞∞∞∞∞4e40/15
BFGS-P-Instances Blelly 190 (248)∞∞∞∞∞∞4e40/15
BFGS-P-StPt Blelly 75 (94)∞∞∞∞∞∞4e40/15
BFGS-P-range Blelly 177 (196)∞∞∞∞∞∞4e40/15
BFGS-scipy-2019 Varelas 378 (342)1.9e4 (2e4)∞∞∞∞∞5e50/15
L-BFGS-B-scipy-2019 Varelas 114 (111)∞∞∞∞∞∞5e50/15
BFGS ros 57 (59)∞∞∞∞∞∞2e40/15

Δ fopt
f19, 5-D		 1e1
1		 1e0
1		 1e-1
242		 1e-2
1.0e5		 1e-3
1.2e5		 1e-5
1.2e5		 1e-7
1.2e5		 #succ
15/15
BFGS-scipy Baudis 3546 (4608)1.4e4 (9298)744 (694)23 (26)∞∞∞5e50/15
L-BFGS-B-scipy Baudis 2848 (4106)1.1e4 (5890)165 (166)7.0 (6)59 (90)59 (48)58 (56)0/15
BFGS-M-17 Blelly 397 (381)9458 (1e4)∞∞∞∞∞2e40/15
BFGS-P-09 Blelly 4724 (7268)2.9e4 (2e4)2622 (1791)∞∞∞∞1e50/15
BFGS-P-Instances Blelly 1571 (1176)7.3e4 (7e4)∞∞∞∞∞1e50/15
BFGS-P-StPt Blelly 1 (0)★31 (0)★40.14 (0.0)★4↑0∞∞∞∞1e50/15
BFGS-P-range Blelly 963 (1048)2.0e4 (2e4)∞∞∞∞∞1e50/15
BFGS-scipy-2019 Varelas 471 (640)1.8e4 (2e4)1888 (1826)67 (107)∞∞∞5e50/15
L-BFGS-B-scipy-2019 Varelas 692 (829)1.3e4 (1e4)1418 (1823)67 (98)∞∞∞5e50/15
BFGS ros 1655 (1611)2.2e4 (2e4)1781 (2101)∞∞∞∞3e40/15

Δ fopt
f20, 5-D		 1e1
16		 1e0
851		 1e-1
38111		 1e-2
51362		 1e-3
54470		 1e-5
54861		 1e-7
55313		 #succ
14/15
BFGS-scipy Baudis 6.9 (4)4.0 (4)3.1 (4)2.3 (3)2.2 (3)2.1 (3)2.1 (3)15/15
L-BFGS-B-scipy Baudis 1.8 (0.8)6.1 (5)16 (16)12 (11)11 (10)11 (9)11 (9)9/15
BFGS-M-17 Blelly 2.0 (0.4)1.4 (0.9)9.3 (7)6.9 (7)6.5 (9)6.4 (9)6.4 (7)0/15
BFGS-P-09 Blelly 7.9 (4)4.4 (5)1.5 (1)1.1 (2)1.0 (0.9)1.0 (1)1.0 (1)7/15
BFGS-P-Instances Blelly 6.9 (2)2.9 (3)1.0 (0.7)0.75 (0.9)0.71 (0.8)0.70 (0.7)0.70 (0.5)10/15
BFGS-P-range Blelly 7.5 (3)8.6 (8)7.3 (9)5.4 (5)5.1 (6)5.1 (9)5.0 (7)2/15
BFGS-scipy-2019 Varelas 7.7 (4)6.3 (9)4.2 (4)3.1 (3)2.9 (3)2.9 (3)2.9 (3)15/15
L-BFGS-B-scipy-2019 Varelas 1.5 (0.6)2.4 (3)9.3 (8)6.9 (7)6.5 (6)6.4 (6)6.4 (5)12/15
BFGS ros 1.8 (0.8)2.5 (2)10 (13)7.6 (9)7.2 (6)7.1 (8)7.1 (13)1/15

Δ fopt
f21, 5-D		 1e1
41		 1e0
1157		 1e-1
1674		 1e-2
1692		 1e-3
1705		 1e-5
1729		 1e-7
1757		 #succ
14/15
BFGS-scipy Baudis 52 (104)59 (44)132 (121)131 (120)130 (119)128 (117)126 (115)14/15
L-BFGS-B-scipy Baudis 51 (69)52 (53)86 (60)85 (59)84 (59)83 (58)82 (57)14/15
BFGS-M-17 Blelly 2.6 (3)1.4 (2)2.5 (3)2.5 (3)2.5 (3)3.0 (2)32 (40)1/15
BFGS-P-09 Blelly 3.1 (3)2.6 (3)3.7 (4)3.7 (4)3.7 (4)3.7 (4)16 (12)1/15
BFGS-P-Instances Blelly 3.4 (3)1.2 (1)2.6 (2)2.6 (2)2.6 (2)2.6 (2)17 (18)3/15
BFGS-P-range Blelly 2.6 (2)1.6 (2)2.4 (2)2.4 (2)2.4 (2)2.5 (2)15 (11)3/15
BFGS-scipy-2019 Varelas 1.8 (3)1.0 (1)1.8 (2)1.8 (2)1.8 (2)1.8 (2)1.8 (2)15/15
L-BFGS-B-scipy-2019 Varelas 4.5 (7)1.1 (0.8)1.7 (1)1.6 (1)1.6 (1)1.6 (1)1.6 (1)15/15
BFGS ros 3.8 (5)1.4 (2)1.9 (3)1.9 (3)1.9 (3)1.9 (3)2.0 (3)15/15

Δ fopt
f22, 5-D		 1e1
71		 1e0
386		 1e-1
938		 1e-2
980		 1e-3
1008		 1e-5
1040		 1e-7
1068		 #succ
14/15
BFGS-scipy Baudis 71 (117)99 (146)188 (258)180 (247)175 (240)170 (232)165 (226)13/15
L-BFGS-B-scipy Baudis 65 (141)111 (111)84 (85)80 (81)78 (79)76 (77)76 (73)15/15
BFGS-M-17 Blelly 2.8 (4)3.2 (3)3.1 (2)3.0 (2)3.1 (2)4.4 (3)30 (28)2/15
BFGS-P-09 Blelly 5.0 (8)4.3 (6)4.9 (4)4.8 (4)4.7 (4)8.4 (9)67 (79)0/15
BFGS-P-Instances Blelly 3.4 (3)2.2 (2)3.7 (5)3.5 (5)3.5 (5)6.7 (8)97 (102)0/15
BFGS-P-range Blelly 3.8 (5)2.2 (2)3.6 (3)3.5 (3)3.4 (3)7.2 (10)2898 (6382)1/15
BFGS-scipy-2019 Varelas 2.9 (4)2.9 (3)2.6 (4)2.5 (4)2.5 (4)2.5 (3)2.9 (4)15/15
L-BFGS-B-scipy-2019 Varelas 3.0 (5)2.9 (5)2.5 (2)2.4 (2)2.4 (2)2.4 (2)2.7 (3)15/15
BFGS ros 3.1 (4)2.9 (3)2.1 (2)2.1 (2)2.0 (1)2.0 (1)2.6 (2)14/15

Δ fopt
f23, 5-D		 1e1
3.0		 1e0
518		 1e-1
14249		 1e-2
27890		 1e-3
31654		 1e-5
33030		 1e-7
34256		 #succ
15/15
BFGS-scipy Baudis 63 (116)60 (81)∞∞∞∞∞5e50/15
L-BFGS-B-scipy Baudis 32 (76)32 (29)105 (136)∞∞∞∞5e50/15
BFGS-M-17 Blelly 13 (5)24 (21)∞∞∞∞∞2e40/15
BFGS-P-09 Blelly 228 (528)88 (122)∞∞∞∞∞2e50/15
BFGS-P-Instances Blelly 136 (266)173 (158)∞∞∞∞∞2e50/15
BFGS-P-range Blelly 166 (160)182 (143)∞∞∞∞∞2e50/15
BFGS-scipy-2019 Varelas 101 (236)113 (138)∞∞∞∞∞5e50/15
L-BFGS-B-scipy-2019 Varelas 85 (129)31 (37)254 (246)∞∞∞∞5e50/15
BFGS ros 11 (18)31 (41)∞∞∞∞∞2e40/15

Δ fopt
f24, 5-D		 1e1
1622		 1e0
2.2e5		 1e-1
6.4e6		 1e-2
9.6e6		 1e-3
9.6e6		 1e-5
1.3e7		 1e-7
1.3e7		 #succ
3/15
BFGS-scipy Baudis 13 (5)0.54 (0.5)∞∞∞∞∞5e50/15
L-BFGS-B-scipy Baudis 2.5 (2)★0.18 (0.2)↑00.55 (0.6)0.76 (0.7)0.75 (0.7)0.57 (0.6)0.57 (0.4)1/15
BFGS-M-17 Blelly 38 (40)∞∞∞∞∞∞1e40/15
BFGS-P-09 Blelly 298 (370)∞∞∞∞∞∞3e40/15
BFGS-P-Instances Blelly 51 (63)∞∞∞∞∞∞4e40/15
BFGS-P-range Blelly 58 (63)∞∞∞∞∞∞3e40/15
BFGS-scipy-2019 Varelas 60 (54)∞∞∞∞∞∞5e50/15
L-BFGS-B-scipy-2019 Varelas 27 (31)∞∞∞∞∞∞5e50/15
BFGS ros 69 (73)∞∞∞∞∞∞2e40/15

Previous dimension | Dimension = 10 | Next dimension

Δ fopt
f1, 10-D		 1e1
22		 1e0
23		 1e-1
23		 1e-2
23		 1e-3
23		 1e-5
23		 1e-7
23		 #succ
15/15
BFGS-M-17 Blelly 1.0 (0)1 (0)1 (0)1 (0)1 (0)1 (0)1.5 (0)15/15
BFGS-P-09 Blelly 1.2 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)2.6 (1)14/15
BFGS-P-Instances Blelly 1.2 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.8 (1)15/15
BFGS-P-range Blelly 1.2 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.7 (0.8)15/15
BFGS-scipy-2019 Varelas 1.7 (0)1.7 (0.3)1.9 (0.3)1.9 (0.3)1.9 (0.3)1.9 (0.3)1.9 (0.3)15/15
L-BFGS-B-scipy-2019 Varelas 1.4 (0.2)1.3 (0.2)1.3 (0.2)1.3 (0.2)1.3 (0.2)1.3 (0.2)1.3 (0.2)15/15
BFGS ros 1.0 (0)1 (0)1 (0)1 (0)1 (0)1 (0)1 (0)★415/15

Δ fopt
f2, 10-D		 1e1
187		 1e0
190		 1e-1
191		 1e-2
191		 1e-3
193		 1e-5
194		 1e-7
195		 #succ
15/15
BFGS-M-17 Blelly 10 (2)16 (7)17 (7)29 (26)38 (34)102 (85)1.6e4 (2e4)0/15
BFGS-P-09 Blelly 3.4 (0.9)3.6 (1)3.8 (1)4.1 (1)4.3 (1)4.7 (2)5.2 (2)15/15
BFGS-P-Instances Blelly 3.4 (1)3.6 (1)3.8 (2)4.0 (2)4.2 (2)4.6 (2)5.2 (2)15/15
BFGS-P-range Blelly 3.0 (0.9)3.3 (0.9)3.5 (1)3.7 (1)3.9 (1)4.6 (2)5.1 (2)15/15
BFGS-scipy-2019 Varelas 2.5 (0.8)2.7 (0.8)3.0 (1.0)3.2 (1)3.3 (1)3.6 (1)3.9 (1)15/15
L-BFGS-B-scipy-2019 Varelas 6.6 (2)8.5 (2)10 (1)10 (2)11 (2)12 (2)12 (2)15/15
BFGS ros 10 (3)12 (3)14 (3)14 (3)14 (2)15 (2)15 (3)15/15

Δ fopt
f3, 10-D		 1e1
1739		 1e0
3600		 1e-1
3609		 1e-2
3636		 1e-3
3642		 1e-5
3646		 1e-7
3651		 #succ
15/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞4e40/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞8e40/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞8e40/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞8e40/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞1e60/15
L-BFGS-B-scipy-2019 Varelas ∞∞∞∞∞∞∞1e60/15
BFGS ros ∞∞∞∞∞∞∞5e40/15

Δ fopt
f4, 10-D		 1e1
2234		 1e0
3626		 1e-1
3660		 1e-2
3695		 1e-3
3707		 1e-5
3744		 1e-7
28767		 #succ
12/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞5e40/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞9e40/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞9e40/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞8e40/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞1e60/15
L-BFGS-B-scipy-2019 Varelas ∞∞∞∞∞∞∞1e60/15
BFGS ros ∞∞∞∞∞∞∞5e40/15

Δ fopt
f5, 10-D		 1e1
20		 1e0
20		 1e-1
20		 1e-2
20		 1e-3
20		 1e-5
20		 1e-7
20		 #succ
15/15
BFGS-M-17 Blelly 2.1 (0.3)2.8 (0.6)2.9 (0.6)3.0 (0.6)3.0 (0.6)3.0 (0.6)3.0 (0.6)15/15
BFGS-P-09 Blelly 1.7 (0.3)2.3 (0.6)2.5 (0.6)2.5 (0.6)2.5 (0.6)2.5 (0.6)2.5 (0.6)15/15
BFGS-P-Instances Blelly 1.7 (0.3)2.5 (0.6)2.6 (0.3)2.6 (0.3)2.6 (0.3)2.6 (0.3)2.6 (0.3)15/15
BFGS-P-range Blelly 1.7 (0.3)2.4 (0.3)2.5 (0.6)2.5 (0.6)2.5 (0.6)2.5 (0.6)2.5 (0.6)15/15
BFGS-scipy-2019 Varelas 2.6 (0.6)3.5 (0.6)3.6 (0.6)3.7 (0.6)3.7 (0.6)3.7 (0.6)3.7 (0.6)15/15
L-BFGS-B-scipy-2019 Varelas 2.3 (0)3.0 (0.3)3.0 (0.3)3.0 (0.3)3.0 (0.3)3.0 (0.3)3.0 (0.3)15/15
BFGS ros 2.2 (0.8)2.8 (0.6)2.9 (0.6)2.9 (0.6)2.9 (0.6)2.9 (0.6)2.9 (0.6)15/15

Δ fopt
f6, 10-D		 1e1
412		 1e0
623		 1e-1
826		 1e-2
1039		 1e-3
1292		 1e-5
1841		 1e-7
2370		 #succ
15/15
BFGS-M-17 Blelly 2.7 (2)3.4 (1)4.0 (1)7.1 (5)43 (35)∞∞4e50/15
BFGS-P-09 Blelly 5.4 (3)5.2 (2)5.5 (2)6.4 (4)6.8 (4)8.5 (5)97 (205)9/15
BFGS-P-Instances Blelly 4.7 (2)4.3 (2)4.8 (3)5.2 (3)5.5 (3)7.0 (4)53 (120)10/15
BFGS-P-range Blelly 4.6 (3)4.3 (2)4.5 (2)5.5 (2)6.2 (3)8.7 (4)111 (176)9/15
BFGS-scipy-2019 Varelas 4.0 (2)4.3 (2)4.2 (1)4.6 (1)4.8 (1)4.9 (1)14 (9)14/15
L-BFGS-B-scipy-2019 Varelas 2.0 (1)2.7 (1.0)2.8 (0.7)★2.8 (0.7)★2.9 (0.5)★3.0 (0.5)★3.6 (2)★215/15
BFGS ros 3.7 (1)4.2 (2)4.5 (2)4.6 (2)4.5 (2)4.5 (1)66 (65)0/15

Δ fopt
f7, 10-D		 1e1
172		 1e0
1611		 1e-1
4195		 1e-2
5099		 1e-3
5141		 1e-5
5141		 1e-7
5389		 #succ
15/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞11110/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞13000/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞13000/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞13000/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞1e60/15
L-BFGS-B-scipy-2019 Varelas ∞∞∞∞∞∞∞1e60/15
BFGS ros ∞∞∞∞∞∞∞11000/15

Δ fopt
f8, 10-D		 1e1
326		 1e0
921		 1e-1
1114		 1e-2
1217		 1e-3
1267		 1e-5
1315		 1e-7
1343		 #succ
15/15
BFGS-M-17 Blelly 1.7 (1)1.6 (0.7)1.4 (0.6)1.3 (0.5)1.3 (0.5)1.9 (1)26 (29)4/15
BFGS-P-09 Blelly 2.5 (1)2.0 (1)1.8 (1)1.7 (1)1.6 (1.0)1.6 (0.9)1.6 (0.9)15/15
BFGS-P-Instances Blelly 2.0 (1)2.0 (1)1.7 (1)1.6 (1.0)1.6 (0.9)1.6 (0.9)1.6 (0.9)15/15
BFGS-P-range Blelly 2.6 (1)2.0 (2)1.8 (1)1.7 (1)1.6 (1)1.6 (1)1.6 (1)15/15
BFGS-scipy-2019 Varelas 2.6 (1)1.9 (1)1.7 (0.9)1.6 (0.8)1.5 (0.8)1.5 (0.7)1.5 (0.7)15/15
L-BFGS-B-scipy-2019 Varelas 0.89 (0.5)0.84 (0.3)★20.79 (0.2)★2↑10.77 (0.2)★2↑10.76 (0.2)★2↑10.76 (0.2)★2↑10.76 (0.2)★2↑115/15
BFGS ros 1.7 (1)1.5 (0.8)1.3 (0.7)1.3 (0.6)1.3 (0.6)1.2 (0.6)1.2 (0.6)15/15

Δ fopt
f9, 10-D		 1e1
200		 1e0
648		 1e-1
857		 1e-2
993		 1e-3
1065		 1e-5
1138		 1e-7
1185		 #succ
15/15
BFGS-M-17 Blelly 2.1 (1.0)2.3 (1)1.8 (0.8)1.7 (0.7)1.6 (0.6)1.6 (0.7)10 (10)10/15
BFGS-P-09 Blelly 3.4 (1)2.6 (1)2.1 (1)1.9 (0.9)1.8 (0.9)1.7 (0.8)1.7 (0.8)15/15
BFGS-P-Instances Blelly 3.4 (2)2.4 (1)1.9 (0.9)1.7 (0.8)1.6 (0.8)1.6 (0.7)1.5 (0.7)15/15
BFGS-P-range Blelly 2.7 (1.0)2.3 (1)1.9 (1)1.7 (1.0)1.6 (0.9)1.5 (0.8)1.5 (0.8)15/15
BFGS-scipy-2019 Varelas 2.8 (1.0)2.5 (2)2.0 (1)1.8 (1)1.7 (1)1.6 (1.0)1.6 (1.0)15/15
L-BFGS-B-scipy-2019 Varelas 0.95 (0.8)★21.3 (0.8)1.1 (0.6)1.0 (0.5)1.0 (0.5)0.97 (0.5)0.95 (0.4)15/15
BFGS ros 2.1 (0.8)1.9 (0.3)1.6 (0.2)1.4 (0.2)1.4 (0.2)1.3 (0.2)1.3 (0.1)15/15

Δ fopt
f10, 10-D		 1e1
1835		 1e0
2172		 1e-1
2455		 1e-2
2728		 1e-3
2802		 1e-5
4543		 1e-7
4739		 #succ
15/15
BFGS-M-17 Blelly 1.1 (0.5)2.4 (2)3.0 (2)2.7 (2)3.1 (2)9.0 (13)∞2e50/15
BFGS-P-09 Blelly 0.32 (0.1)↑00.28 (0.1)↑00.28 (0.1)↑00.26 (0.1)↑00.27 (0.1)↑00.19 (0.1)↑00.21 (0.1)↑015/15
BFGS-P-Instances Blelly 0.32 (0.1)↑00.30 (0.1)↑00.28 (0.1)↑00.28 (0.1)↑00.29 (0.1)↑00.19 (0.1)↑00.20 (0.1)↑015/15
BFGS-P-StPt Blelly 0.35 (0.1)↑00.32 (0.1)↑00.30 (0.1)↑00.29 (0.0)↑00.31 (0.0)↑00.21 (0.0)↑00.22 (0.0)↑015/15
BFGS-P-range Blelly 0.38 (0.1)↑10.35 (0.1)↑10.33 (0.1)↑00.32 (0.1)↑00.34 (0.1)↑00.23 (0.1)↑00.24 (0.1)↑015/15
BFGS-scipy-2019 Varelas 0.23 (0.1)↑00.22 (0.1)↑00.21 (0.1)↑00.21 (0.1)↑00.26 (0.1)↑00.28 (0.2)↑17.0 (9)11/15
L-BFGS-B-scipy-2019 Varelas 0.71 (0.2)↑00.84 (0.1)↑00.84 (0.2)0.78 (0.1)↑10.79 (0.2)↑10.56 (0.1)↑111 (9)12/15
BFGS ros 1.0 (0.4)1.00 (0.3)1.00 (0.2)1.0 (0.2)1.0 (0.2)1.3 (1)924 (665)0/15

Δ fopt
f11, 10-D		 1e1
266		 1e0
1041		 1e-1
2602		 1e-2
2954		 1e-3
3338		 1e-5
4092		 1e-7
4843		 #succ
15/15
BFGS-M-17 Blelly 1.3 (0.7)0.99 (0.6)0.86 (0.7)1.4 (2)3.4 (5)59 (69)∞6e40/15
BFGS-P-09 Blelly 3.2 (2)0.87 (0.7)0.37 (0.3)↑10.34 (0.2)↑10.32 (0.2)↑10.29 (0.2)↑10.32 (0.2)↑113/15
BFGS-P-Instances Blelly 1.9 (2)0.52 (0.4)↑10.22 (0.2)↑00.21 (0.2)↑00.20 (0.1)↑00.18 (0.1)↑00.23 (0.2)↑014/15
BFGS-P-StPt Blelly 1.5 (2)0.45 (0.5)0.20 (0.2)↑00.19 (0.2)↑00.18 (0.2)↑00.17 (0.2)↑00.35 (0.5)12/15
BFGS-P-range Blelly 1.5 (1.0)0.41 (0.3)↑00.18 (0.1)↑00.17 (0.1)↑00.17 (0.1)↑00.16 (0.1)↑00.89 (0.5)12/15
BFGS-scipy-2019 Varelas 0.46 (0.2)★2↑10.14 (0.1)★2↑00.07 (0.0)★2↑00.07 (0.0)★↑00.08 (0.0)↑00.56 (0.6)29 (35)4/15
L-BFGS-B-scipy-2019 Varelas 1.0 (0.2)0.44 (0.2)↑00.24 (0.1)↑00.26 (0.1)↑00.33 (0.1)↑01.1 (1)623 (980)1/15
BFGS ros 1.0 (0.2)1.00 (0.6)1.7 (1)6.0 (6)56 (59)∞∞8e40/15

Δ fopt
f12, 10-D		 1e1
515		 1e0
896		 1e-1
1240		 1e-2
1390		 1e-3
1569		 1e-5
3660		 1e-7
5154		 #succ
15/15
BFGS-M-17 Blelly 1.0 (0.5)2.0 (3)6.3 (5)20 (31)180 (201)∞∞4e40/15
BFGS-P-09 Blelly 4.5 (4)3.4 (2)2.9 (2)2.7 (2)2.5 (1)1.2 (0.6)1.2 (0.6)15/15
BFGS-P-Instances Blelly 4.6 (3)3.5 (2)2.9 (1)2.8 (1)2.6 (1)1.2 (0.5)0.93 (0.3)15/15
BFGS-P-StPt Blelly 3.5 (2)2.8 (1)2.4 (1)2.3 (1.0)2.1 (0.8)1.1 (0.4)1.0 (0.4)15/15
BFGS-P-range Blelly 4.3 (3)3.4 (2)2.9 (1)2.7 (1)2.5 (1)1.2 (0.5)1.0 (0.3)15/15
BFGS-scipy-2019 Varelas 3.8 (3)2.9 (2)2.5 (2)2.4 (1)2.3 (1)1.9 (2)45 (122)8/15
L-BFGS-B-scipy-2019 Varelas 0.34 (0.3)★↑10.58 (0.6)0.69 (0.5)★0.73 (0.5)★0.77 (0.4)★1.7 (2)2.1 (5)15/15
BFGS ros 1.3 (0.9)1.4 (0.7)1.4 (0.6)1.3 (0.6)1.3 (0.5)2.6 (4)23 (34)9/15

Δ fopt
f13, 10-D		 1e1
387		 1e0
596		 1e-1
797		 1e-2
1014		 1e-3
4587		 1e-5
6208		 1e-7
7779		 #succ
15/15
BFGS-M-17 Blelly 1.00 (0.2)1.1 (0.1)1.0 (0.0)1.0 (0.1)0.27 (6e-3)↑0∞∞2e50/15
BFGS-P-09 Blelly 0.83 (0.0)↑00.79 (0.0)↑00.73 (0.0)↑00.70 (0.0)↑00.19 (9e-3)↑0132 (457)∞2e60/15
BFGS-P-Instances Blelly 0.85 (0.1)↑00.79 (0.1)↑00.74 (0.1)↑00.72 (0.0)↑00.19 (0.0)↑01.7 (1)2247 (3708)0/15
BFGS-P-StPt Blelly 0.82 (0.1)↑00.79 (0.1)↑00.73 (0.0)↑00.71 (0.0)↑00.18 (7e-3)↑0102 (256)4039 (5239)0/15
BFGS-P-range Blelly 0.85 (0.1)↑00.78 (0.0)↑00.74 (0.0)↑00.71 (0.0)↑00.19 (9e-3)↑071 (75)2605 (3938)0/15
BFGS-scipy-2019 Varelas 0.79 (0.1)↑00.79 (0.0)↑00.73 (0.0)↑00.70 (0.0)↑058 (109)648 (806)∞1e60/15
L-BFGS-B-scipy-2019 Varelas 3.5 (5)7.0 (8)18 (27)17 (25)5.0 (6)26 (38)∞1e60/15
BFGS ros 1.00 (0.2)1.0 (0.1)1.00 (0.1)1.00 (0.0)86 (136)∞∞1e50/15

Δ fopt
f14, 10-D		 1e1
37		 1e0
98		 1e-1
133		 1e-2
205		 1e-3
392		 1e-5
687		 1e-7
4305		 #succ
15/15
BFGS-M-17 Blelly 2.0 (1)2.0 (1.0)2.0 (0.8)1.7 (0.7)1.2 (0.4)1.1 (0.3)12 (14)1/15
BFGS-P-09 Blelly 1.4 (0.3)1.0 (0.2)1.2 (0.3)1.1 (0.2)0.82 (0.2)↑00.72 (0.1)↑02.0 (3)1/15
BFGS-P-Instances Blelly 1.4 (0.5)1.0 (0.3)1.2 (0.3)1.2 (0.2)0.81 (0.1)↑10.71 (0.1)↑016 (23)2/15
BFGS-P-StPt Blelly 1.1 (0.3)0.76 (0.3)0.94 (0.2)1.0 (0.3)0.74 (0.2)↑00.68 (0.1)↑03.7 (9)2/15
BFGS-P-range Blelly 1.3 (0.3)0.96 (0.3)1.1 (0.3)1.1 (0.3)0.77 (0.1)↑00.71 (0.1)↑03.8 (6)3/15
BFGS-scipy-2019 Varelas 1.1 (0.3)0.71 (0.2)↑00.95 (0.3)1.00 (0.1)0.73 (0.1)↑00.68 (0.1)↑0∞1e60/15
L-BFGS-B-scipy-2019 Varelas 1.1 (0.4)0.99 (0.4)1.1 (0.3)1.1 (0.2)0.90 (0.1)↑11.1 (0.2)1690 (1510)0/15
BFGS ros 1.6 (0.6)1.6 (0.7)1.6 (0.6)1.4 (0.4)1.0 (0.3)1.00 (0.3)∞9e40/15

Δ fopt
f15, 10-D		 1e1
4774		 1e0
39246		 1e-1
73643		 1e-2
74669		 1e-3
75790		 1e-5
77814		 1e-7
79834		 #succ
12/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞4e40/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞8e40/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞9e40/15
BFGS-P-StPt Blelly ∞∞∞∞∞∞∞8e40/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞8e40/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞1e60/15
L-BFGS-B-scipy-2019 Varelas ∞∞∞∞∞∞∞1e60/15
BFGS ros ∞∞∞∞∞∞∞4e40/15

Δ fopt
f16, 10-D		 1e1
425		 1e0
7029		 1e-1
15779		 1e-2
45669		 1e-3
51151		 1e-5
65798		 1e-7
71570		 #succ
15/15
BFGS-M-17 Blelly 682 (1053)∞∞∞∞∞∞4e40/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞4e50/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞5e50/15
BFGS-P-StPt Blelly ∞∞∞∞∞∞∞4e50/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞4e50/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞1e60/15
L-BFGS-B-scipy-2019 Varelas 2569 (2485)∞∞∞∞∞∞1e60/15
BFGS ros ∞∞∞∞∞∞∞1e50/15

Δ fopt
f17, 10-D		 1e1
26		 1e0
429		 1e-1
2203		 1e-2
6329		 1e-3
9851		 1e-5
20190		 1e-7
26503		 #succ
15/15
BFGS-M-17 Blelly 127 (166)∞∞∞∞∞∞1e50/15
BFGS-P-09 Blelly 44 (67)∞∞∞∞∞∞1e50/15
BFGS-P-Instances Blelly 141 (183)∞∞∞∞∞∞1e50/15
BFGS-P-StPt Blelly 58 (163)∞∞∞∞∞∞1e50/15
BFGS-P-range Blelly 34 (35)∞∞∞∞∞∞1e50/15
BFGS-scipy-2019 Varelas 65 (86)∞∞∞∞∞∞1e60/15
L-BFGS-B-scipy-2019 Varelas 97 (131)∞∞∞∞∞∞1e60/15
BFGS ros 53 (85)∞∞∞∞∞∞8e40/15

Δ fopt
f18, 10-D		 1e1
238		 1e0
836		 1e-1
7012		 1e-2
15928		 1e-3
27536		 1e-5
37234		 1e-7
42708		 #succ
15/15
BFGS-M-17 Blelly 647 (806)∞∞∞∞∞∞9e40/15
BFGS-P-09 Blelly 7748 (5984)∞∞∞∞∞∞1e50/15
BFGS-P-Instances Blelly 3840 (5363)∞∞∞∞∞∞1e50/15
BFGS-P-StPt Blelly 3543 (3442)∞∞∞∞∞∞1e50/15
BFGS-P-range Blelly 1995 (2210)∞∞∞∞∞∞1e50/15
BFGS-scipy-2019 Varelas 4290 (5055)∞∞∞∞∞∞1e60/15
L-BFGS-B-scipy-2019 Varelas 2557 (3642)∞∞∞∞∞∞1e60/15
BFGS ros 4958 (5576)∞∞∞∞∞∞8e40/15

Δ fopt
f19, 10-D		 1e1
1		 1e0
1		 1e-1
10609		 1e-2
9.8e5		 1e-3
1.4e6		 1e-5
1.4e6		 1e-7
1.4e6		 #succ
15/15
BFGS-M-17 Blelly 6224 (7348)3.3e5 (4e5)∞∞∞∞∞5e40/15
BFGS-P-09 Blelly 4.0e4 (6e4)4.4e6 (4e6)∞∞∞∞∞3e50/15
BFGS-P-Instances Blelly 5.5e4 (8e4)4.3e6 (7e6)∞∞∞∞∞3e50/15
BFGS-P-StPt Blelly 1 (0)★41 (0)★47.2e-3 (2e-3)★4↑0∞∞∞∞3e50/15
BFGS-P-range Blelly 6290 (1e4)1.0e6 (1e6)∞∞∞∞∞3e50/15
BFGS-scipy-2019 Varelas 4050 (4624)2.5e5 (2e5)∞∞∞∞∞1e60/15
L-BFGS-B-scipy-2019 Varelas 6810 (1e4)3.8e5 (3e5)∞∞∞∞∞1e60/15
BFGS ros 1.9e4 (2e4)∞∞∞∞∞∞8e40/15

Δ fopt
f20, 10-D		 1e1
32		 1e0
15426		 1e-1
5.5e5		 1e-2
5.7e5		 1e-3
5.7e5		 1e-5
5.8e5		 1e-7
5.9e5		 #succ
15/15
BFGS-M-17 Blelly 2.1 (0.3)1.3 (1)∞∞∞∞∞9e40/15
BFGS-P-09 Blelly 8.7 (1)1.8 (2)∞∞∞∞∞1e50/15
BFGS-P-Instances Blelly 10 (2)1.3 (1)∞∞∞∞∞1e50/15
BFGS-P-range Blelly 10 (3)3.5 (3)∞∞∞∞∞1e50/15
BFGS-scipy-2019 Varelas 10 (3)2.1 (3)∞∞∞∞∞1e60/15
L-BFGS-B-scipy-2019 Varelas 1.7 (0.3)1.1 (2)∞∞∞∞∞1e60/15
BFGS ros 2.3 (0.5)1.1 (1)∞∞∞∞∞1e50/15

Δ fopt
f21, 10-D		 1e1
130		 1e0
2236		 1e-1
4392		 1e-2
4487		 1e-3
4618		 1e-5
5074		 1e-7
11329		 #succ
15/15
BFGS-M-17 Blelly 3.4 (3)2.3 (3)2.1 (2)2.1 (2)2.1 (2)6.5 (11)29 (44)0/15
BFGS-P-09 Blelly 3.7 (3)2.9 (4)3.0 (4)3.0 (4)2.9 (3)3.0 (3)17 (15)0/15
BFGS-P-Instances Blelly 4.1 (6)2.3 (4)2.8 (5)2.7 (5)2.7 (5)2.6 (4)25 (28)0/15
BFGS-P-range Blelly 2.3 (4)3.0 (5)2.7 (3)2.7 (3)2.6 (3)3.2 (3)11 (12)0/15
BFGS-scipy-2019 Varelas 2.8 (3)1.3 (2)1.8 (1)1.8 (1)1.7 (1)1.6 (1)0.91 (1)15/15
L-BFGS-B-scipy-2019 Varelas 3.3 (4)1.9 (2)1.2 (1)1.1 (1)1.1 (1)1.0 (1.0)0.51 (0.5)15/15
BFGS ros 4.6 (5)2.9 (3)2.8 (3)2.7 (3)2.7 (3)2.5 (3)2.0 (2)6/15

Δ fopt
f22, 10-D		 1e1
98		 1e0
2839		 1e-1
6353		 1e-2
6620		 1e-3
6798		 1e-5
8296		 1e-7
10351		 #succ
15/15
BFGS-M-17 Blelly 5.9 (6)1.8 (3)2.3 (3)2.2 (2)2.2 (2)8.7 (11)∞5e40/15
BFGS-P-09 Blelly 7.1 (11)1.1 (0.9)2.8 (4)2.7 (4)2.7 (4)12 (11)∞5e40/15
BFGS-P-Instances Blelly 8.1 (12)1.5 (2)2.6 (3)2.5 (3)2.5 (3)4.8 (5)∞5e40/15
BFGS-P-range Blelly 7.7 (12)1.7 (3)1.6 (1)1.5 (1)1.5 (1)4.1 (5)∞4e40/15
BFGS-scipy-2019 Varelas 6.6 (11)2.2 (2)5.2 (7)5.0 (7)4.9 (7)4.0 (5)6.9 (5)5/15
L-BFGS-B-scipy-2019 Varelas 4.8 (6)1.7 (2)4.1 (3)4.0 (3)3.9 (3)3.2 (2)4.1 (5)11/15
BFGS ros 6.6 (5)3.1 (4)4.4 (4)4.2 (4)4.2 (6)3.5 (3)5.7 (6)7/15

Δ fopt
f23, 10-D		 1e1
3.0		 1e0
915		 1e-1
16425		 1e-2
1.8e5		 1e-3
2.0e5		 1e-5
2.1e5		 1e-7
2.1e5		 #succ
15/15
BFGS-M-17 Blelly 21 (24)119 (109)∞∞∞∞∞4e40/15
BFGS-P-09 Blelly 46 (87)548 (406)∞∞∞∞∞3e50/15
BFGS-P-Instances Blelly 16 (16)421 (420)∞∞∞∞∞3e50/15
BFGS-P-range Blelly 306 (540)231 (232)∞∞∞∞∞3e50/15
BFGS-scipy-2019 Varelas 94 (250)500 (425)∞∞∞∞∞1e60/15
L-BFGS-B-scipy-2019 Varelas 15 (9)77 (65)∞∞∞∞∞1e60/15
BFGS ros 15 (16)128 (104)∞∞∞∞∞5e40/15

Δ fopt
f24, 10-D		 1e1
98761		 1e0
1.0e6		 1e-1
7.5e7		 1e-2
7.5e7		 1e-3
7.5e7		 1e-5
7.5e7		 1e-7
7.5e7		 #succ
1/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞4e40/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞8e40/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞8e40/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞7e40/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞1e60/15
L-BFGS-B-scipy-2019 Varelas ∞∞∞∞∞∞∞1e60/15
BFGS ros ∞∞∞∞∞∞∞4e40/15

Previous dimension | Dimension = 20 | Next dimension

Δ fopt
f1, 20-D		 1e1
43		 1e0
43		 1e-1
43		 1e-2
43		 1e-3
43		 1e-5
43		 1e-7
43		 #succ
15/15
BFGS-scipy Baudis 1.0 (0)1.0 (0)1.0 (0)1.0 (0)1.0 (0)1.0 (0)1.4 (0.3)15/15
L-BFGS-B-scipy Baudis 1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)15/15
BFGS-M-17 Blelly 1 (0)1 (0)1 (0)1 (0)1 (0)1.2 (0.2)1.9 (0.5)15/15
BFGS-P-09 Blelly 1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)2.2 (1)12/15
BFGS-P-Instances Blelly 1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)3.7 (0.5)13/15
BFGS-P-range Blelly 1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)1.1 (0)2.9 (4)11/15
BFGS-scipy-2019 Varelas 1.6 (0)1.6 (0)1.6 (0)1.6 (0)1.6 (0)1.6 (0)1.6 (0)15/15
L-BFGS-B-scipy-2019 Varelas 1.5 (0)1.5 (0)1.5 (0)1.5 (0)1.5 (0)1.5 (0)1.5 (0)15/15
BFGS ros 1 (0)1 (0)1 (0)1 (0)1 (0)1 (0)1 (0)★415/15

Δ fopt
f2, 20-D		 1e1
385		 1e0
386		 1e-1
387		 1e-2
388		 1e-3
390		 1e-5
391		 1e-7
393		 #succ
15/15
BFGS-scipy Baudis 4.5 (1)4.9 (2)5.2 (1)5.6 (1)5.8 (1)6.3 (1)6.8 (1)15/15
L-BFGS-B-scipy Baudis 26 (10)70 (45)159 (137)1099 (1548)∞∞∞2e60/15
BFGS-M-17 Blelly 19 (4)58 (56)297 (192)574 (554)844 (689)3369 (3983)∞8e50/15
BFGS-P-09 Blelly 4.5 (1.0)4.7 (1)5.0 (1)5.3 (1)5.6 (0.9)6.1 (1)6.7 (1)15/15
BFGS-P-Instances Blelly 4.4 (1)4.7 (1)5.0 (1)5.2 (1)5.4 (1)5.9 (1)6.3 (2)15/15
BFGS-P-range Blelly 4.2 (1)4.5 (1)4.9 (1)5.2 (1)5.4 (1)5.8 (2)6.3 (2)15/15
BFGS-scipy-2019 Varelas 3.9 (1)4.2 (1)4.5 (1.0)4.7 (1.0)4.9 (1.0)5.5 (1.0)6.1 (2)15/15
L-BFGS-B-scipy-2019 Varelas 14 (1)17 (2)20 (2)21 (2)21 (2)22 (3)23 (3)15/15
BFGS ros 20 (4)24 (5)26 (4)27 (3)27 (3)28 (3)28 (3)15/15

Δ fopt
f3, 20-D		 1e1
5066		 1e0
7626		 1e-1
7635		 1e-2
7637		 1e-3
7643		 1e-5
7646		 1e-7
7651		 #succ
15/15
BFGS-scipy Baudis ∞∞∞∞∞∞∞2e60/15
L-BFGS-B-scipy Baudis ∞∞∞∞∞∞∞2e60/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞1e50/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞2e50/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞2e50/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞2e50/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞2e60/15
L-BFGS-B-scipy-2019 Varelas ∞∞∞∞∞∞∞2e60/15
BFGS ros ∞∞∞∞∞∞∞1e50/15

Δ fopt
f4, 20-D		 1e1
4722		 1e0
7628		 1e-1
7666		 1e-2
7686		 1e-3
7700		 1e-5
7758		 1e-7
1.4e5		 #succ
9/15
BFGS-scipy Baudis ∞∞∞∞∞∞∞2e60/15
L-BFGS-B-scipy Baudis ∞∞∞∞∞∞∞2e60/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞1e50/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞3e50/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞3e50/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞2e50/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞2e60/15
L-BFGS-B-scipy-2019 Varelas ∞∞∞∞∞∞∞2e60/15
BFGS ros ∞∞∞∞∞∞∞2e50/15

Δ fopt
f5, 20-D		 1e1
41		 1e0
41		 1e-1
41		 1e-2
41		 1e-3
41		 1e-5
41		 1e-7
41		 #succ
15/15
BFGS-scipy Baudis 1.5 (0.3)2.4 (0.6)2.5 (0.3)2.5 (0.3)2.5 (0.3)2.5 (0.3)2.5 (0.3)15/15
L-BFGS-B-scipy Baudis 2.2 (0)3.0 (0.6)3.2 (0.3)3.2 (0.3)3.2 (0.3)3.2 (0.3)3.2 (0.3)15/15
BFGS-M-17 Blelly 2.2 (0.3)2.9 (1)3.0 (0.8)3.0 (0.8)3.0 (0.8)3.0 (0.8)3.0 (0.8)15/15
BFGS-P-09 Blelly 1.6 (0.3)2.3 (0.5)2.4 (0.5)2.4 (0.5)2.4 (0.5)2.4 (0.5)2.4 (0.5)15/15
BFGS-P-Instances Blelly 1.7 (0.5)2.3 (0.5)2.4 (0.3)2.5 (0.3)2.5 (0.3)2.5 (0.3)2.5 (0.3)15/15
BFGS-P-range Blelly 1.6 (0)2.5 (0.3)2.6 (0.3)2.6 (0.3)2.6 (0.3)2.6 (0.3)2.6 (0.3)15/15
BFGS-scipy-2019 Varelas 2.7 (0.3)3.4 (0.5)3.5 (0.5)3.6 (0.3)3.6 (0.3)3.6 (0.3)3.6 (0.3)15/15
L-BFGS-B-scipy-2019 Varelas 2.3 (0.5)2.7 (0.5)2.8 (0.5)2.8 (0.5)2.8 (0.5)2.8 (0.5)2.8 (0.5)15/15
BFGS ros 2.3 (0.3)2.7 (0.5)2.8 (0.3)2.8 (0.3)2.8 (0.3)2.8 (0.3)2.8 (0.3)15/15

Δ fopt
f6, 20-D		 1e1
1296		 1e0
2343		 1e-1
3413		 1e-2
4255		 1e-3
5220		 1e-5
6728		 1e-7
8409		 #succ
15/15
BFGS-scipy Baudis 6.3 (2)5.0 (2)5.2 (1)5.2 (2)5.9 (3)11 (7)22 (19)4/15
L-BFGS-B-scipy Baudis 3.1 (1)3.1 (0.6)3.0 (0.4)3.1 (0.4)4.7 (2)840 (748)∞2e60/15
BFGS-M-17 Blelly 3.8 (3)3.4 (2)3.3 (1)12 (15)261 (379)∞∞1e60/15
BFGS-P-09 Blelly 7.1 (3)5.6 (1)5.4 (2)5.9 (2)5.9 (2)8.1 (4)235 (372)8/15
BFGS-P-Instances Blelly 7.3 (6)5.5 (4)5.2 (3)6.1 (3)6.2 (2)6.8 (4)115 (241)10/15
BFGS-P-range Blelly 6.2 (2)5.0 (2)4.8 (2)5.1 (2)5.1 (2)7.2 (4)273 (480)8/15
BFGS-scipy-2019 Varelas 4.7 (2)3.8 (1)3.7 (1)4.0 (0.9)4.2 (0.9)4.8 (0.7)8.0 (8)12/15
L-BFGS-B-scipy-2019 Varelas 2.8 (0.9)2.6 (0.5)2.6 (0.5)2.7 (0.7)2.7 (0.5)★2.9 (0.3)★3.0 (0.4)★315/15
BFGS ros 3.6 (2)3.5 (1)3.4 (1)3.5 (1)3.5 (0.9)3.6 (0.7)45 (21)0/15

Δ fopt
f7, 20-D		 1e1
1351		 1e0
4274		 1e-1
9503		 1e-2
16523		 1e-3
16524		 1e-5
16524		 1e-7
16969		 #succ
15/15
BFGS-scipy Baudis ∞∞∞∞∞∞∞2e60/15
L-BFGS-B-scipy Baudis ∞∞∞∞∞∞∞2e60/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞21210/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞23000/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞23000/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞23000/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞2e60/15
L-BFGS-B-scipy-2019 Varelas ∞∞∞∞∞∞∞2e60/15
BFGS ros ∞∞∞∞∞∞∞21000/15

Δ fopt
f8, 20-D		 1e1
2039		 1e0
3871		 1e-1
4040		 1e-2
4148		 1e-3
4219		 1e-5
4371		 1e-7
4484		 #succ
15/15
BFGS-scipy Baudis 1.2 (0.2)1.8 (1)1.8 (1)1.7 (1)1.7 (1)1.7 (1)1.6 (1)15/15
L-BFGS-B-scipy Baudis 0.58 (0.2)↑04.9 (11)4.8 (11)4.7 (10)4.6 (10)4.5 (10)5.6 (9)13/15
BFGS-M-17 Blelly 1.9 (0.3)1.5 (0.7)1.5 (0.6)1.5 (0.6)1.5 (0.6)3.1 (3)279 (389)0/15
BFGS-P-09 Blelly 1.8 (0.5)1.5 (1.0)1.5 (0.9)1.5 (0.9)1.5 (0.9)1.5 (0.8)1.5 (0.8)15/15
BFGS-P-Instances Blelly 1.8 (0.6)1.2 (0.4)1.2 (0.4)1.2 (0.3)1.2 (0.3)1.2 (0.3)1.2 (0.3)15/15
BFGS-P-range Blelly 1.8 (0.5)1.4 (1.0)1.4 (0.9)1.4 (0.9)1.4 (0.9)1.3 (0.8)1.8 (0.9)15/15
BFGS-scipy-2019 Varelas 1.7 (0.5)1.4 (1)1.4 (1)1.4 (1)1.4 (1)1.4 (1)1.4 (1)15/15
L-BFGS-B-scipy-2019 Varelas 0.67 (0.1)↑00.66 (0.3)0.70 (0.3)0.70 (0.3)0.71 (0.3)0.70 (0.3)0.69 (0.3)15/15
BFGS ros 1.8 (0.3)1.2 (0.1)1.2 (0.1)1.2 (0.1)1.2 (0.1)1.2 (0.1)1.2 (0.1)15/15

Δ fopt
f9, 20-D		 1e1
1716		 1e0
3102		 1e-1
3277		 1e-2
3379		 1e-3
3455		 1e-5
3594		 1e-7
3727		 #succ
15/15
BFGS-scipy Baudis 1.6 (0.6)2.0 (2)1.9 (2)1.9 (2)1.9 (2)1.8 (2)1.8 (2)15/15
L-BFGS-B-scipy Baudis 0.85 (0.2)4.7 (14)4.5 (13)4.4 (13)4.3 (13)4.2 (12)4.1 (12)15/15
BFGS-M-17 Blelly 2.0 (0.4)1.6 (0.2)1.6 (0.2)1.5 (0.2)1.5 (0.2)1.9 (1)106 (90)0/15
BFGS-P-09 Blelly 2.1 (0.7)1.6 (0.3)1.6 (0.3)1.5 (0.3)1.5 (0.3)1.5 (0.3)1.4 (0.3)15/15
BFGS-P-Instances Blelly 2.2 (0.5)1.6 (0.3)1.6 (0.3)1.6 (0.3)1.6 (0.2)1.5 (0.2)1.5 (0.2)15/15
BFGS-P-range Blelly 1.8 (0.5)1.6 (0.9)1.6 (0.9)1.6 (0.8)1.6 (0.8)1.5 (0.8)1.5 (0.8)15/15
BFGS-scipy-2019 Varelas 1.9 (0.7)1.5 (0.9)1.5 (0.8)1.5 (0.8)1.5 (0.8)1.4 (0.8)1.4 (0.7)15/15
L-BFGS-B-scipy-2019 Varelas 0.83 (0.2)0.79 (0.1)↑10.81 (0.1)↑10.82 (0.1)↑10.82 (0.1)↑10.81 (0.1)★↑10.79 (0.1)★↑115/15
BFGS ros 2.2 (0.4)2.2 (1.0)2.1 (0.9)2.1 (0.9)2.0 (0.9)2.0 (0.8)1.9 (0.8)15/15

Δ fopt
f10, 20-D		 1e1
7413		 1e0
8661		 1e-1
10735		 1e-2
13641		 1e-3
14920		 1e-5
17073		 1e-7
17476		 #succ
15/15
BFGS-scipy Baudis 0.21 (0.0)↑00.19 (0.0)↑00.17 (0.0)↑00.14 (0.0)↑00.13 (0.0)↑00.18 (0.1)↑025 (21)0/15
L-BFGS-B-scipy Baudis 2.7 (0.7)4.9 (2)9.1 (4)186 (242)∞∞∞2e60/15
BFGS-M-17 Blelly 0.97 (0.2)2.6 (2)6.9 (4)10 (10)15 (17)78 (85)∞8e50/15
BFGS-P-09 Blelly 0.22 (0.1)↑00.21 (0.1)↑00.18 (0.1)↑00.15 (0.0)↑00.14 (0.0)↑00.14 (0.0)↑00.15 (0.0)↑015/15
BFGS-P-Instances Blelly 0.45 (0.2)↑10.40 (0.2)↑10.34 (0.2)↑10.28 (0.1)↑10.26 (0.1)↑10.24 (0.1)↑10.26 (0.1)↑115/15
BFGS-P-StPt Blelly 0.22 (0.1)↑00.21 (0.1)↑00.18 (0.1)↑00.15 (0.0)↑00.15 (0.0)↑00.14 (0.0)↑00.14 (0.0)↑015/15
BFGS-P-range Blelly 0.27 (0.1)↑00.25 (0.1)↑00.21 (0.1)↑00.17 (0.0)↑00.17 (0.0)↑00.15 (0.0)↑00.16 (0.0)↑015/15
BFGS-scipy-2019 Varelas 0.20 (0.0)↑00.18 (0.0)↑00.16 (0.0)↑00.13 (0.0)↑00.13 (0.0)↑00.14 (0.0)↑017 (18)1/15
L-BFGS-B-scipy-2019 Varelas 0.72 (0.2)↑10.79 (0.1)↑10.71 (0.1)↑00.63 (0.1)↑10.60 (0.1)↑10.55 (0.1)↑026 (32)0/15
BFGS ros 1.0 (0.2)1.0 (0.1)1.00 (0.5)1.1 (0.5)1.1 (0.4)3.1 (4)∞1e60/15

Δ fopt
f11, 20-D		 1e1
1002		 1e0
2228		 1e-1
6278		 1e-2
8586		 1e-3
9762		 1e-5
12285		 1e-7
14831		 #succ
15/15
BFGS-scipy Baudis 0.28 (0.2)↑00.17 (0.1)↑00.07 (0.1)↑00.06 (0.0)↑00.07 (0.0)↑00.25 (0.3)↑013 (12)7/15
L-BFGS-B-scipy Baudis 0.80 (0.3)0.56 (0.1)↑00.30 (0.1)↑00.33 (0.2)↑00.94 (0.7)248 (211)∞2e60/15
BFGS-M-17 Blelly 0.89 (0.4)1.0 (0.8)1.2 (1)1.6 (1)10 (12)∞∞1e50/15
BFGS-P-09 Blelly 0.70 (0.5)0.36 (0.2)↑00.14 (0.1)↑00.12 (0.1)↑00.12 (0.1)↑00.11 (0.1)↑00.82 (2)12/15
BFGS-P-Instances Blelly 1.8 (2)0.85 (1)0.31 (0.4)↑10.24 (0.3)↑10.22 (0.3)↑10.19 (0.2)↑00.88 (0.4)↑112/15
BFGS-P-StPt Blelly 0.76 (0.8)0.38 (0.4)↑00.15 (0.1)↑00.12 (0.1)↑00.12 (0.1)↑00.11 (0.1)↑00.31 (0.4)↑112/15
BFGS-P-range Blelly 0.68 (0.6)0.36 (0.3)↑00.15 (0.1)↑00.12 (0.1)↑00.12 (0.1)↑00.11 (0.1)↑00.74 (0.6)12/15
BFGS-scipy-2019 Varelas 0.29 (0.2)↑00.17 (0.1)↑00.07 (0.0)↑00.06 (0.0)↑00.08 (0.1)↑00.33 (0.3)↑113 (17)2/15
L-BFGS-B-scipy-2019 Varelas 0.63 (0.2)↑00.45 (0.1)↑00.20 (0.0)↑00.18 (0.0)↑00.21 (0.1)↑00.88 (1.0)619 (685)0/15
BFGS ros 1 (0.5)1.0 (0.8)1.3 (0.7)2.6 (3)147 (172)∞∞2e50/15

Δ fopt
f12, 20-D		 1e1
1042		 1e0
1938		 1e-1
2740		 1e-2
3156		 1e-3
4140		 1e-5
12407		 1e-7
13827		 #succ
15/15
BFGS-scipy Baudis ∞∞∞∞∞∞∞2e60/15
L-BFGS-B-scipy Baudis 1.1 (0.9)1.3 (0.5)1.3 (0.4)1.2 (0.4)1.0 (0.3)0.60 (0.3)↑164 (50)5/15
BFGS-M-17 Blelly 3.0 (1)6.0 (4)12 (14)58 (94)358 (414)∞∞1e50/15
BFGS-P-09 Blelly 5.2 (4)3.4 (2)2.7 (2)2.5 (1)2.0 (1)0.73 (0.4)0.69 (0.3)13/15
BFGS-P-Instances Blelly 6.7 (5)4.3 (3)3.3 (2)3.0 (2)2.4 (1)0.85 (0.5)0.91 (0.9)12/15
BFGS-P-StPt Blelly 3.2 (1)2.4 (0.8)2.0 (0.5)1.9 (0.5)1.5 (0.4)0.58 (0.1)↑00.56 (0.1)↑012/15
BFGS-P-range Blelly 4.9 (2)3.3 (2)2.7 (1)2.4 (1)2.0 (0.9)0.72 (0.3)↑10.79 (0.5)13/15
BFGS-scipy-2019 Varelas 4.5 (3)3.0 (2)2.4 (1)2.2 (1)1.8 (0.8)1.3 (1)62 (73)3/15
L-BFGS-B-scipy-2019 Varelas 0.58 (0.6)0.58 (0.7)★0.67 (0.5)★0.70 (0.4)★0.62 (0.3)★0.45 (0.3)↑01.7 (2)15/15
BFGS ros 1.6 (0.9)1.6 (2)1.6 (1)1.7 (2)1.6 (1)1.8 (2)45 (55)1/15

Δ fopt
f13, 20-D		 1e1
652		 1e0
2021		 1e-1
2751		 1e-2
3507		 1e-3
18749		 1e-5
24455		 1e-7
30201		 #succ
15/15
BFGS-scipy Baudis 1.5 (0.1)0.67 (0.0)↑00.62 (0.0)↑00.59 (0.0)↑0103 (125)1145 (1574)∞2e60/15
L-BFGS-B-scipy Baudis 6.9 (10)7.7 (8)13 (15)25 (11)6.9 (5)122 (143)∞2e60/15
BFGS-M-17 Blelly 1.7 (0.2)1.0 (0.1)1.0 (0.0)1.0 (0.0)0.23 (9e-3)↑0323 (420)∞6e50/15
BFGS-P-09 Blelly 1.4 (0.1)0.64 (0.0)↑00.59 (0.0)↑00.56 (0.0)↑00.12 (5e-3)↑013 (29)212 (199)0/15
BFGS-P-Instances Blelly 1.4 (0.1)0.63 (0.0)↑00.59 (0.0)↑00.56 (0.0)↑00.12 (3e-3)↑010 (19)206 (285)0/15
BFGS-P-StPt Blelly 1.4 (0.0)0.65 (0.0)↑00.59 (0.0)↑00.56 (0.0)↑00.12 (4e-3)↑022 (38)315 (429)0/15
BFGS-P-range Blelly 1.4 (0.1)0.63 (0.0)↑00.59 (0.0)↑00.56 (0.0)↑00.12 (5e-3)↑063 (136)570 (561)0/15
BFGS-scipy-2019 Varelas 1.4 (0.1)0.62 (0.0)↑00.58 (0.0)↑00.55 (0.0)↑094 (107)244 (279)∞2e60/15
L-BFGS-B-scipy-2019 Varelas 1.5 (2)3.4 (3)8.0 (6)11 (10)3.4 (5)53 (77)∞2e60/15
BFGS ros 1.7 (0.2)1.0 (0.0)1.00 (0.0)1.00 (0.0)23 (34)∞∞5e50/15

Δ fopt
f14, 20-D		 1e1
75		 1e0
239		 1e-1
304		 1e-2
451		 1e-3
932		 1e-5
1648		 1e-7
15661		 #succ
15/15
BFGS-scipy Baudis 1.6 (0.3)0.91 (0.2)1.1 (0.3)1.2 (0.2)0.79 (0.1)↑00.73 (0.1)↑0∞2e60/15
L-BFGS-B-scipy Baudis 1.8 (0.3)0.96 (0.2)1.1 (0.2)1.2 (0.2)0.97 (0.1)1463 (1775)∞2e60/15
BFGS-M-17 Blelly 2.9 (1)2.0 (0.7)2.1 (0.6)1.9 (0.5)1.2 (0.3)1.2 (0.3)22 (33)0/15
BFGS-P-09 Blelly 1.6 (0.4)0.86 (0.2)1.1 (0.2)1.2 (0.2)0.77 (0.1)↑00.73 (0.1)↑07.1 (13)0/15
BFGS-P-Instances Blelly 1.4 (0.3)0.85 (0.1)↑11.1 (0.1)1.1 (0.1)0.74 (0.1)↑00.70 (0.0)↑016 (25)0/15
BFGS-P-StPt Blelly 0.97 (0.1)★20.69 (0.2)↑00.83 (0.2)0.92 (0.2)0.66 (0.1)↑00.67 (0.1)↑06.3 (11)0/15
BFGS-P-range Blelly 1.5 (0.4)0.82 (0.2)1.0 (0.3)1.1 (0.2)0.74 (0.1)↑00.71 (0.1)↑06.9 (16)0/15
BFGS-scipy-2019 Varelas 1.4 (0.4)0.76 (0.2)1.1 (0.3)1.1 (0.2)0.75 (0.1)↑00.72 (0.1)↑0∞2e60/15
L-BFGS-B-scipy-2019 Varelas 1.6 (0.4)0.85 (0.2)1.0 (0.1)1.1 (0.1)0.83 (0.1)↑01.2 (0.2)∞2e60/15
BFGS ros 2.7 (1.0)1.8 (0.7)2.0 (0.7)1.8 (0.5)1.2 (0.2)1.1 (0.2)∞2e50/15

Δ fopt
f15, 20-D		 1e1
30378		 1e0
1.5e5		 1e-1
3.1e5		 1e-2
3.2e5		 1e-3
3.2e5		 1e-5
4.5e5		 1e-7
4.6e5		 #succ
15/15
BFGS-scipy Baudis 206 (184)∞∞∞∞∞∞2e60/15
L-BFGS-B-scipy Baudis 928 (1037)∞∞∞∞∞∞2e60/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞1e50/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞2e50/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞2e50/15
BFGS-P-StPt Blelly ∞∞∞∞∞∞∞2e50/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞2e50/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞2e60/15
L-BFGS-B-scipy-2019 Varelas ∞∞∞∞∞∞∞2e60/15
BFGS ros ∞∞∞∞∞∞∞1e50/15

Δ fopt
f16, 20-D		 1e1
1384		 1e0
27265		 1e-1
77015		 1e-2
1.4e5		 1e-3
1.9e5		 1e-5
2.0e5		 1e-7
2.2e5		 #succ
15/15
BFGS-scipy Baudis ∞∞∞∞∞∞∞2e60/15
L-BFGS-B-scipy Baudis ∞∞∞∞∞∞∞2e60/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞1e50/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞8e50/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞1e60/15
BFGS-P-StPt Blelly ∞∞∞∞∞∞∞8e50/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞8e50/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞2e60/15
L-BFGS-B-scipy-2019 Varelas ∞∞∞∞∞∞∞2e60/15
BFGS ros ∞∞∞∞∞∞∞3e50/15

Δ fopt
f17, 20-D		 1e1
63		 1e0
1030		 1e-1
4005		 1e-2
12242		 1e-3
30677		 1e-5
56288		 1e-7
80472		 #succ
15/15
BFGS-scipy Baudis 184 (195)∞∞∞∞∞∞2e60/15
L-BFGS-B-scipy Baudis 301 (385)1.4e4 (1e4)∞∞∞∞∞2e60/15
BFGS-M-17 Blelly 306 (492)∞∞∞∞∞∞4e50/15
BFGS-P-09 Blelly 294 (514)∞∞∞∞∞∞4e50/15
BFGS-P-Instances Blelly 229 (331)∞∞∞∞∞∞4e50/15
BFGS-P-StPt Blelly 490 (1282)∞∞∞∞∞∞4e50/15
BFGS-P-range Blelly 198 (332)∞∞∞∞∞∞4e50/15
BFGS-scipy-2019 Varelas 191 (243)∞∞∞∞∞∞2e60/15
L-BFGS-B-scipy-2019 Varelas 195 (294)∞∞∞∞∞∞2e60/15
BFGS ros 359 (613)∞∞∞∞∞∞4e50/15

Δ fopt
f18, 20-D		 1e1
621		 1e0
3972		 1e-1
19561		 1e-2
28555		 1e-3
67569		 1e-5
1.3e5		 1e-7
1.5e5		 #succ
15/15
BFGS-scipy Baudis 1313 (1680)∞∞∞∞∞∞2e60/15
L-BFGS-B-scipy Baudis 759 (832)∞∞∞∞∞∞2e60/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞4e50/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞5e50/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞5e50/15
BFGS-P-StPt Blelly ∞∞∞∞∞∞∞5e50/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞5e50/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞2e60/15
L-BFGS-B-scipy-2019 Varelas ∞∞∞∞∞∞∞2e60/15
BFGS ros ∞∞∞∞∞∞∞4e50/15

Δ fopt
f19, 20-D		 1e1
1		 1e0
1		 1e-1
3.4e5		 1e-2
4.7e6		 1e-3
6.2e6		 1e-5
6.7e6		 1e-7
6.7e6		 #succ
15/15
BFGS-scipy Baudis 7.1e4 (3e4)2.8e7 (5e7)∞∞∞∞∞2e60/15
L-BFGS-B-scipy Baudis 4.5e5 (5e5)∞∞∞∞∞∞2e60/15
BFGS-M-17 Blelly 5.5e5 (5e5)∞∞∞∞∞∞2e50/15
BFGS-P-09 Blelly 6.4e5 (7e5)∞∞∞∞∞∞5e50/15
BFGS-P-Instances Blelly 1.0e6 (1e6)∞∞∞∞∞∞5e50/15
BFGS-P-StPt Blelly 1 (0)★41 (0)★46.7e-4 (2e-4)★4↑0∞∞∞∞5e50/15
BFGS-P-range Blelly 3.7e4 (6e4)∞∞∞∞∞∞8e50/15
BFGS-scipy-2019 Varelas 2.2e4 (2e4)∞∞∞∞∞∞2e60/15
L-BFGS-B-scipy-2019 Varelas 6.1e4 (6e4)∞∞∞∞∞∞2e60/15
BFGS ros 1.2e6 (1e6)∞∞∞∞∞∞2e50/15

Δ fopt
f20, 20-D		 1e1
82		 1e0
46150		 1e-1
3.1e6		 1e-2
5.5e6		 1e-3
5.5e6		 1e-5
5.6e6		 1e-7
5.6e6		 #succ
14/15
BFGS-scipy Baudis 13 (4)14 (12)∞∞∞∞∞2e60/15
L-BFGS-B-scipy Baudis 1.6 (0.4)30 (38)∞∞∞∞∞2e60/15
BFGS-M-17 Blelly 1.8 (0.5)3.6 (4)∞∞∞∞∞3e50/15
BFGS-P-09 Blelly 11 (2)17 (24)∞∞∞∞∞4e50/15
BFGS-P-Instances Blelly 11 (2)10 (10)∞∞∞∞∞4e50/15
BFGS-P-range Blelly 12 (1)45 (44)∞∞∞∞∞4e50/15
BFGS-scipy-2019 Varelas 12 (4)21 (19)∞∞∞∞∞2e60/15
L-BFGS-B-scipy-2019 Varelas 1.4 (0.1)14 (11)∞∞∞∞∞2e60/15
BFGS ros 2.1 (0.4)5.8 (5)∞∞∞∞∞4e50/15

Δ fopt
f21, 20-D		 1e1
561		 1e0
6541		 1e-1
14103		 1e-2
14318		 1e-3
14643		 1e-5
15567		 1e-7
17589		 #succ
15/15
BFGS-scipy Baudis 120 (158)116 (111)113 (112)111 (131)109 (133)102 (119)157 (150)0/15
L-BFGS-B-scipy Baudis 43 (76)129 (117)91 (111)89 (104)87 (80)82 (83)78 (67)2/15
BFGS-M-17 Blelly 2.0 (2)2.8 (5)2.8 (3)2.8 (3)2.8 (3)12 (20)102 (74)0/15
BFGS-P-09 Blelly 2.1 (2)1.7 (2)2.4 (4)2.4 (3)2.4 (4)3.9 (5)∞9e40/15
BFGS-P-Instances Blelly 3.3 (6)1.7 (3)2.4 (3)2.4 (3)2.3 (3)4.4 (6)76 (58)0/15
BFGS-P-range Blelly 2.9 (6)2.7 (2)1.7 (2)1.7 (1)1.6 (1)3.0 (3)73 (88)0/15
BFGS-scipy-2019 Varelas 1.5 (2)1.5 (2)1.1 (1)1.1 (1)1.1 (1)1.0 (1)15 (16)2/15
L-BFGS-B-scipy-2019 Varelas 1.1 (0.7)0.82 (0.8)1.1 (2)1.1 (2)1.0 (2)0.99 (2)1.3 (2)★6/15
BFGS ros 1.9 (4)5.5 (6)4.6 (6)4.6 (5)4.5 (6)4.3 (6)7.3 (6)2/15

Δ fopt
f22, 20-D		 1e1
467		 1e0
5580		 1e-1
23491		 1e-2
24163		 1e-3
24948		 1e-5
26847		 1e-7
1.3e5		 #succ
12/15
BFGS-scipy Baudis 34 (72)109 (184)1261 (1405)1226 (1449)1188 (1182)1104 (1155)∞2e60/15
L-BFGS-B-scipy Baudis 19 (34)32 (48)192 (278)186 (136)181 (142)168 (168)∞2e60/15
BFGS-M-17 Blelly 5.6 (7)8.8 (14)18 (12)18 (24)24 (25)∞∞1e50/15
BFGS-P-09 Blelly 1.7 (2)1.9 (3)10 (11)10 (8)10 (10)52 (47)∞1e50/15
BFGS-P-Instances Blelly 4.2 (4)6.3 (9)8.1 (10)7.8 (16)7.6 (9)18 (19)∞1e50/15
BFGS-P-range Blelly 1.8 (2)2.1 (4)6.0 (8)5.8 (7)5.6 (5)22 (16)∞9e40/15
BFGS-scipy-2019 Varelas 5.7 (11)3.9 (6)12 (25)12 (25)12 (24)11 (22)22 (29)0/15
L-BFGS-B-scipy-2019 Varelas 3.6 (4)3.6 (6)11 (15)11 (15)11 (14)10 (13)15 (26)0/15
BFGS ros 2.5 (2)1.8 (2)8.1 (14)7.9 (9)7.7 (8)10 (7)14 (15)0/15

Δ fopt
f23, 20-D		 1e1
3.0		 1e0
1614		 1e-1
67457		 1e-2
3.7e5		 1e-3
4.9e5		 1e-5
8.1e5		 1e-7
8.4e5		 #succ
15/15
BFGS-scipy Baudis 428 (37)8773 (9914)∞∞∞∞∞2e60/15
L-BFGS-B-scipy Baudis 44 (59)369 (427)∞∞∞∞∞2e60/15
BFGS-M-17 Blelly 120 (133)141 (137)∞∞∞∞∞9e40/15
BFGS-P-09 Blelly 238 (477)1103 (974)∞∞∞∞∞7e50/15
BFGS-P-Instances Blelly 214 (295)651 (778)∞∞∞∞∞7e50/15
BFGS-P-range Blelly 124 (161)566 (659)∞∞∞∞∞7e50/15
BFGS-scipy-2019 Varelas 189 (416)4117 (4016)∞∞∞∞∞2e60/15
L-BFGS-B-scipy-2019 Varelas 27 (32)90 (94)∞∞∞∞∞2e60/15
BFGS ros 50 (28)304 (298)∞∞∞∞∞1e50/15

Δ fopt
f24, 20-D		 1e1
1.3e6		 1e0
7.5e6		 1e-1
5.2e7		 1e-2
5.2e7		 1e-3
5.2e7		 1e-5
5.2e7		 1e-7
5.2e7		 #succ
3/15
BFGS-scipy Baudis ∞∞∞∞∞∞∞2e60/15
L-BFGS-B-scipy Baudis 21 (22)∞∞∞∞∞∞2e60/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞1e50/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞2e50/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞2e50/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞2e50/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞2e60/15
L-BFGS-B-scipy-2019 Varelas ∞∞∞∞∞∞∞2e60/15
BFGS ros ∞∞∞∞∞∞∞1e50/15

Previous dimension | Dimension = 40 | First dimension

Δ fopt
f1, 40-D		 1e1
83		 1e0
83		 1e-1
83		 1e-2
83		 1e-3
83		 1e-5
83		 1e-7
83		 #succ
15/15
BFGS-M-17 Blelly 1 (0)1 (0)1 (0)1 (0)1 (0)1.5 (0)1.7 (0.5)14/15
BFGS-P-09 Blelly 1.0 (0)1.0 (0)1.0 (0)1.0 (0)1.0 (0)1.0 (0)25 (52)6/15
BFGS-P-Instances Blelly 1.0 (0)1.0 (0)1.0 (0)1.0 (0)1.0 (0)1.0 (0)19 (26)8/15
BFGS-P-range Blelly 1.0 (0)1.0 (0)1.0 (0)1.0 (0)1.0 (0)1.2 (0.5)28 (74)6/15
BFGS-scipy-2019 Varelas 1.7 (0.3)2.0 (0)2.0 (0)2.0 (0)2.0 (0)2.0 (0)2.0 (0)15/15
L-BFGS-B-scipy-2019 Varelas 1.5 (0)1.5 (0)1.5 (0)1.5 (0)1.5 (0)1.5 (0)1.5 (0)15/15
BFGS ros 1 (0)1 (0)1 (0)1 (0)1 (0)1 (0)★41 (0)★415/15

Δ fopt
f2, 40-D		 1e1
796		 1e0
797		 1e-1
799		 1e-2
799		 1e-3
800		 1e-5
802		 1e-7
804		 #succ
15/15
BFGS-M-17 Blelly 1.7e4 (2e4)∞∞∞∞∞∞2e60/15
BFGS-P-09 Blelly 5.8 (1)6.1 (1)6.4 (1)6.7 (1)7.0 (1)7.6 (2)8.1 (1)15/15
BFGS-P-Instances Blelly 6.2 (1)6.6 (1)6.9 (1)7.3 (1)7.6 (2)8.2 (2)8.9 (2)14/15
BFGS-P-range Blelly 6.3 (1)6.6 (1)6.8 (1)7.1 (1)7.4 (2)8.0 (2)8.7 (2)15/15
BFGS-scipy-2019 Varelas 5.5 (1)5.9 (1)6.2 (1)6.6 (1)6.8 (2)7.4 (2)7.9 (2)15/15
L-BFGS-B-scipy-2019 Varelas 21 (2)27 (3)31 (4)34 (4)37 (2)40 (3)41 (3)15/15
BFGS ros 36 (4)42 (4)45 (5)48 (5)51 (6)53 (6)54 (5)15/15

Δ fopt
f3, 40-D		 1e1
15526		 1e0
15602		 1e-1
15612		 1e-2
15641		 1e-3
15646		 1e-5
15651		 1e-7
15656		 #succ
15/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞3e50/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞7e50/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞7e50/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞7e50/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞4e60/15
L-BFGS-B-scipy-2019 Varelas ∞∞∞∞∞∞∞4e60/15
BFGS ros ∞∞∞∞∞∞∞3e50/15

Δ fopt
f4, 40-D		 1e1
15536		 1e0
15601		 1e-1
15659		 1e-2
15678		 1e-3
15703		 1e-5
15733		 1e-7
2.8e5		 #succ
6/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞4e50/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞9e50/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞9e50/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞8e50/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞4e60/15
L-BFGS-B-scipy-2019 Varelas ∞∞∞∞∞∞∞4e60/15
BFGS ros ∞∞∞∞∞∞∞5e50/15

Δ fopt
f5, 40-D		 1e1
98		 1e0
116		 1e-1
120		 1e-2
121		 1e-3
121		 1e-5
121		 1e-7
121		 #succ
15/15
BFGS-M-17 Blelly 2.0 (0.4)2.2 (0.4)2.1 (0.3)2.2 (0.3)2.2 (0.3)2.2 (0.3)2.2 (0.3)15/15
BFGS-P-09 Blelly 1.6 (0.2)1.8 (0.2)1.8 (0.3)1.8 (0.2)1.8 (0.2)1.8 (0.2)1.8 (0.2)15/15
BFGS-P-Instances Blelly 1.5 (0.2)1.7 (0.2)1.7 (0.3)1.8 (0.3)1.8 (0.3)1.8 (0.3)1.8 (0.3)15/15
BFGS-P-range Blelly 1.5 (0.2)1.7 (0.2)1.7 (0.2)1.7 (0.2)1.7 (0.2)1.7 (0.2)1.7 (0.2)15/15
BFGS-scipy-2019 Varelas 2.4 (0.2)2.4 (0.2)2.4 (0.2)2.4 (0.2)2.4 (0.2)2.4 (0.2)2.4 (0.2)15/15
L-BFGS-B-scipy-2019 Varelas 2.0 (0.2)2.0 (0.2)2.0 (0.3)2.0 (0.3)2.0 (0.3)2.0 (0.3)2.0 (0.3)15/15
BFGS ros 2.1 (0.4)2.3 (0.5)2.3 (0.7)2.3 (0.7)2.3 (0.7)2.3 (0.7)2.3 (0.7)15/15

Δ fopt
f6, 40-D		 1e1
3507		 1e0
5523		 1e-1
7168		 1e-2
9470		 1e-3
11538		 1e-5
15007		 1e-7
19222		 #succ
15/15
BFGS-M-17 Blelly 4.2 (1)4.4 (1)6.0 (3)18 (12)4655 (3034)∞∞4e60/15
BFGS-P-09 Blelly 8.3 (3)8.0 (2)9.3 (4)11 (5)11 (4)11 (7)307 (421)7/15
BFGS-P-Instances Blelly 8.2 (3)7.7 (2)8.5 (2)7.9 (2)7.9 (2)10 (5)173 (234)8/15
BFGS-P-range Blelly 8.7 (2)8.0 (1)8.1 (1)8.1 (1)8.0 (1)10 (5)288 (419)7/15
BFGS-scipy-2019 Varelas 7.4 (2)7.0 (2)7.0 (2)6.7 (1)6.7 (1)7.0 (1)7.4 (0.9)15/15
L-BFGS-B-scipy-2019 Varelas 3.5 (0.9)3.8 (0.7)4.1 (0.7)4.1 (0.5)4.1 (0.5)4.3 (0.6)4.2 (0.5)★315/15
BFGS ros 4.5 (2)4.6 (1)4.7 (1)4.6 (1)4.6 (1)5.1 (0.9)25 (31)0/15

Δ fopt
f7, 40-D		 1e1
10698		 1e0
17839		 1e-1
41037		 1e-2
66294		 1e-3
66294		 1e-5
66294		 1e-7
68145		 #succ
15/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞41410/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞43000/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞43000/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞43000/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞4e60/15
L-BFGS-B-scipy-2019 Varelas ∞∞∞∞∞∞∞4e60/15
BFGS ros ∞∞∞∞∞∞∞41000/15

Δ fopt
f8, 40-D		 1e1
7080		 1e0
10655		 1e-1
11012		 1e-2
11265		 1e-3
11430		 1e-5
11701		 1e-7
11969		 #succ
15/15
BFGS-M-17 Blelly 4.7 (4)31 (30)38 (27)38 (26)41 (31)95 (93)∞2e60/15
BFGS-P-09 Blelly 2.3 (0.2)1.8 (0.2)1.8 (0.2)1.8 (0.2)1.8 (0.2)1.7 (0.2)1.9 (1)15/15
BFGS-P-Instances Blelly 2.4 (0.3)1.8 (0.2)1.7 (0.2)1.7 (0.2)1.7 (0.2)1.7 (0.1)1.8 (0.2)15/15
BFGS-P-range Blelly 2.1 (0.4)2.2 (1)2.2 (1)2.1 (1)2.1 (1)2.1 (1)2.0 (1)15/15
BFGS-scipy-2019 Varelas 2.1 (0.4)1.9 (1)1.9 (1)1.9 (1)1.8 (1)1.8 (1)1.8 (1)15/15
L-BFGS-B-scipy-2019 Varelas 0.93 (0.2)★31.1 (0.6)1.1 (0.6)1.1 (0.6)1.1 (0.6)1.1 (0.6)1.1 (0.6)15/15
BFGS ros 2.4 (0.2)2.2 (1)2.2 (1.0)2.1 (1.0)2.1 (0.9)2.1 (0.9)2.0 (0.9)15/15

Δ fopt
f9, 40-D		 1e1
6122		 1e0
12982		 1e-1
13300		 1e-2
13496		 1e-3
13651		 1e-5
13909		 1e-7
14142		 #succ
15/15
BFGS-M-17 Blelly 2.6 (0.2)5.5 (7)8.7 (10)11 (11)12 (10)15 (13)1826 (1509)0/15
BFGS-P-09 Blelly 2.4 (0.4)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)1.6 (0.2)15/15
BFGS-P-Instances Blelly 2.4 (0.5)1.8 (0.9)1.8 (0.9)1.8 (0.9)1.8 (0.9)1.8 (0.9)1.7 (0.8)15/15
BFGS-P-range Blelly 2.3 (0.3)1.4 (0.8)1.4 (0.8)1.4 (0.8)1.3 (0.8)1.3 (0.8)1.3 (0.7)15/15
BFGS-scipy-2019 Varelas 2.1 (0.4)1.4 (0.8)1.4 (0.8)1.3 (0.8)1.3 (0.8)1.3 (0.8)1.3 (0.8)15/15
L-BFGS-B-scipy-2019 Varelas 1.1 (0.2)★40.77 (0.4)★0.78 (0.4)★0.79 (0.4)★0.79 (0.4)★0.78 (0.4)★0.78 (0.4)★15/15
BFGS ros 2.6 (0.2)1.8 (0.8)1.8 (0.8)1.8 (0.7)1.7 (0.7)1.7 (0.7)1.7 (0.7)15/15

Δ fopt
f10, 40-D		 1e1
25536		 1e0
29762		 1e-1
35676		 1e-2
51579		 1e-3
56007		 1e-5
65128		 1e-7
70824		 #succ
15/15
BFGS-M-17 Blelly 531 (604)∞∞∞∞∞∞2e60/15
BFGS-P-09 Blelly 0.19 (0.0)↑00.18 (0.0)↑00.16 (0.0)↑00.11 (0.0)↑00.11 (0.0)↑00.10 (0.0)↑00.10 (0.0)↑015/15
BFGS-P-Instances Blelly 0.19 (0.0)↑00.17 (0.0)↑00.15 (0.0)↑00.11 (0.0)↑00.10 (1e-2)↑00.10 (0.0)↑00.09 (0.0)↑015/15
BFGS-P-StPt Blelly 0.19 (0.0)↑00.17 (0.0)↑00.15 (0.0)↑00.11 (0.0)↑00.10 (0.0)↑00.10 (0.0)↑00.10 (0.0)↑015/15
BFGS-P-range Blelly 0.18 (0.0)↑00.16 (0.0)↑00.15 (0.0)↑00.11 (0.0)↑00.10 (0.0)↑00.10 (0.0)↑00.10 (0.0)↑015/15
BFGS-scipy-2019 Varelas 0.17 (0.0)↑00.16 (0.0)↑00.14 (0.0)↑00.10 (0.0)↑00.09 (0.0)↑00.09 (0.0)↑091 (87)0/15
L-BFGS-B-scipy-2019 Varelas 0.68 (0.1)↑00.74 (0.1)↑00.73 (0.1)↑00.56 (0.0)↑00.57 (0.1)↑00.89 (0.6)135 (100)0/15
BFGS ros 1.00 (0.2)1.00 (0.1)1.0 (0.2)1.6 (2)8.0 (10)134 (149)∞4e60/15

Δ fopt
f11, 40-D		 1e1
2368		 1e0
4855		 1e-1
11681		 1e-2
25315		 1e-3
29749		 1e-5
38949		 1e-7
48211		 #succ
15/15
BFGS-M-17 Blelly 0.91 (0.3)1.5 (1)1.7 (1)1.4 (2)5.8 (7)110 (117)∞3e50/15
BFGS-P-09 Blelly 1.5 (0.7)0.80 (0.4)↑10.36 (0.2)↑10.18 (0.1)↑00.16 (0.1)↑00.14 (0.1)↑07.8 (13)12/15
BFGS-P-Instances Blelly 6.2 (3)3.1 (2)1.3 (0.6)0.62 (0.3)↑10.53 (0.3)↑10.42 (0.2)↑12.6 (2)12/15
BFGS-P-StPt Blelly 3.8 (5)2.0 (3)0.85 (1)0.40 (0.5)0.35 (0.4)↑00.28 (0.3)↑08.1 (16)12/15
BFGS-P-range Blelly 3.1 (4)1.6 (2)0.66 (0.9)0.32 (0.4)↑10.28 (0.4)↑10.22 (0.3)↑16.7 (14)12/15
BFGS-scipy-2019 Varelas 0.23 (0.1)↑00.15 (0.1)↑00.08 (0.0)↑00.04 (0.0)↑00.05 (0.0)↑00.19 (0.2)↑012 (13)2/15
L-BFGS-B-scipy-2019 Varelas 0.69 (0.2)↑00.46 (0.1)↑00.24 (0.1)↑00.15 (0.0)↑00.16 (0.0)↑00.37 (0.2)↑185 (91)0/15
BFGS ros 1.0 (0.5)1.0 (0.6)1.00 (0.7)2.3 (2)65 (119)∞∞4e50/15

Δ fopt
f12, 40-D		 1e1
4169		 1e0
7452		 1e-1
9174		 1e-2
10751		 1e-3
13146		 1e-5
22758		 1e-7
25192		 #succ
15/15
BFGS-M-17 Blelly 1.2 (2)3.6 (7)19 (16)328 (281)∞∞∞2e50/15
BFGS-P-09 Blelly 2.6 (1)1.8 (0.7)1.6 (0.6)1.4 (0.5)1.2 (0.4)0.77 (0.2)0.74 (0.2)↑113/15
BFGS-P-Instances Blelly 3.7 (1.0)2.3 (0.8)2.0 (0.7)1.8 (0.5)1.5 (0.4)0.95 (0.3)0.89 (0.2)↑114/15
BFGS-P-StPt Blelly 2.3 (1)1.6 (0.8)1.4 (0.7)1.3 (0.6)1.1 (0.5)0.70 (0.3)↑00.67 (0.3)↑015/15
BFGS-P-range Blelly 2.9 (1)1.9 (0.8)1.7 (0.6)1.5 (0.5)1.3 (0.4)0.83 (0.3)0.79 (0.2)↑114/15
BFGS-scipy-2019 Varelas 3.1 (2)2.1 (0.9)1.8 (0.8)1.6 (0.7)1.4 (0.6)1.1 (0.9)58 (90)8/15
L-BFGS-B-scipy-2019 Varelas 0.26 (0.2)★2↑00.35 (0.3)★↑00.40 (0.2)★2↑00.40 (0.2)★4↑00.38 (0.2)★4↑00.49 (0.6)★1.2 (1)15/15
BFGS ros 1.0 (0.6)1.0 (0.6)1.0 (0.6)1.0 (0.4)1.00 (0.5)15 (24)656 (700)0/15

Δ fopt
f13, 40-D		 1e1
2029		 1e0
6916		 1e-1
8734		 1e-2
11861		 1e-3
71936		 1e-5
98467		 1e-7
1.2e5		 #succ
15/15
BFGS-M-17 Blelly 1.4 (0.1)1.0 (0.0)1.0 (0.0)1.00 (0.0)0.20 (2e-3)↑078 (81)∞2e60/15
BFGS-P-09 Blelly 1.4 (0.1)0.52 (0.0)↑00.55 (0.0)↑00.49 (0.0)↑00.09 (2e-3)↑03.0 (3)113 (123)0/15
BFGS-P-Instances Blelly 1.4 (0.1)0.53 (0.0)↑00.55 (0.0)↑00.49 (0.0)↑00.09 (2e-3)↑05.2 (12)136 (169)0/15
BFGS-P-StPt Blelly 1.4 (0.1)0.52 (0.0)↑00.55 (0.0)↑00.48 (0.0)↑00.09 (2e-3)↑00.45 (0.7)142 (219)0/15
BFGS-P-range Blelly 1.4 (0.1)0.53 (0.0)↑00.55 (0.0)↑00.49 (0.0)↑00.09 (2e-3)↑03.8 (10)55 (86)0/15
BFGS-scipy-2019 Varelas 1.4 (0.0)0.52 (0.0)↑00.55 (0.0)↑00.48 (0.0)↑068 (97)∞∞4e60/15
L-BFGS-B-scipy-2019 Varelas 1.5 (2)1.5 (1)3.0 (2)5.6 (5)1.6 (2)52 (53)∞4e60/15
BFGS ros 1.4 (0.2)1.0 (0.0)1 (0.0)1.00 (0.0)46 (52)∞∞2e60/15

Δ fopt
f14, 40-D		 1e1
304		 1e0
616		 1e-1
777		 1e-2
1105		 1e-3
2207		 1e-5
4825		 1e-7
57711		 #succ
15/15
BFGS-M-17 Blelly 2.1 (1)1.9 (0.6)2.0 (0.6)1.9 (0.6)1.3 (0.3)1.1 (0.2)108 (163)0/15
BFGS-P-09 Blelly 0.89 (0.1)↑10.73 (0.1)↑00.92 (0.1)1.1 (0.1)0.76 (0.1)↑00.62 (0.1)↑010 (9)0/15
BFGS-P-Instances Blelly 0.90 (0.2)0.74 (0.1)↑00.93 (0.2)1.1 (0.2)0.78 (0.1)↑00.65 (0.1)↑027 (47)0/15
BFGS-P-StPt Blelly 0.59 (0.1)★2↑00.56 (0.0)↑00.73 (0.1)★↑00.92 (0.1)↑00.71 (0.1)↑00.57 (0.1)↑012 (9)0/15
BFGS-P-range Blelly 0.82 (0.1)↑10.71 (0.2)↑00.87 (0.2)↑11.0 (0.1)0.77 (0.1)↑00.61 (0.1)↑013 (27)0/15
BFGS-scipy-2019 Varelas 0.80 (0.1)↑10.68 (0.1)↑00.91 (0.1)1.1 (0.1)0.80 (0.1)↑00.64 (0.1)↑0∞4e60/15
L-BFGS-B-scipy-2019 Varelas 0.87 (0.2)0.73 (0.1)↑00.85 (0.1)1.00 (0.1)0.90 (0.1)↑11.2 (0.1)∞4e60/15
BFGS ros 1.7 (0.9)1.6 (0.6)1.8 (0.6)1.7 (0.5)1.2 (0.3)1.0 (0.2)∞7e50/15

Δ fopt
f15, 40-D		 1e1
1.9e5		 1e0
7.9e5		 1e-1
1.0e6		 1e-2
1.1e6		 1e-3
1.1e6		 1e-5
1.1e6		 1e-7
1.1e6		 #succ
15/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞3e50/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞8e50/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞8e50/15
BFGS-P-StPt Blelly ∞∞∞∞∞∞∞8e50/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞8e50/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞4e60/15
L-BFGS-B-scipy-2019 Varelas ∞∞∞∞∞∞∞4e60/15
BFGS ros ∞∞∞∞∞∞∞3e50/15

Δ fopt
f16, 40-D		 1e1
5244		 1e0
72122		 1e-1
3.2e5		 1e-2
7.1e5		 1e-3
1.4e6		 1e-5
2.0e6		 1e-7
2.0e6		 #succ
15/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞5e50/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞1e60/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞2e60/15
BFGS-P-StPt Blelly ∞∞∞∞∞∞∞1e60/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞1e60/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞4e60/15
L-BFGS-B-scipy-2019 Varelas ∞∞∞∞∞∞∞4e60/15
BFGS ros ∞∞∞∞∞∞∞1e60/15

Δ fopt
f17, 40-D		 1e1
399		 1e0
4220		 1e-1
14158		 1e-2
34948		 1e-3
51958		 1e-5
1.3e5		 1e-7
2.7e5		 #succ
14/15
BFGS-M-17 Blelly 755 (829)∞∞∞∞∞∞1e60/15
BFGS-P-09 Blelly 715 (1187)∞∞∞∞∞∞1e60/15
BFGS-P-Instances Blelly 361 (561)∞∞∞∞∞∞1e60/15
BFGS-P-StPt Blelly 49 (135)∞∞∞∞∞∞2e60/15
BFGS-P-range Blelly 173 (194)∞∞∞∞∞∞2e60/15
BFGS-scipy-2019 Varelas 401 (443)∞∞∞∞∞∞4e60/15
L-BFGS-B-scipy-2019 Varelas 524 (533)∞∞∞∞∞∞4e60/15
BFGS ros 382 (281)∞∞∞∞∞∞1e60/15

Δ fopt
f18, 40-D		 1e1
1442		 1e0
16998		 1e-1
47068		 1e-2
1.3e5		 1e-3
1.9e5		 1e-5
6.7e5		 1e-7
9.5e5		 #succ
15/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞1e60/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞2e60/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞2e60/15
BFGS-P-StPt Blelly ∞∞∞∞∞∞∞2e60/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞2e60/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞4e60/15
L-BFGS-B-scipy-2019 Varelas ∞∞∞∞∞∞∞4e60/15
BFGS ros ∞∞∞∞∞∞∞1e60/15

Δ fopt
f19, 40-D		 1e1
1		 1e0
1		 1e-1
1.4e6		 1e-2
1.7e7		 1e-3
2.6e7		 1e-5
4.5e7		 1e-7
4.5e7		 #succ
8/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞7e50/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞1e60/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞1e60/15
BFGS-P-StPt Blelly 1 (0)★41 (0)★44.5e-4 (3e-5)★4↑0∞∞∞∞1e60/15
BFGS-P-range Blelly 4.3e5 (7e5)∞∞∞∞∞∞1e60/15
BFGS-scipy-2019 Varelas 1.9e5 (3e5)∞∞∞∞∞∞4e60/15
L-BFGS-B-scipy-2019 Varelas 1.1e6 (2e6)∞∞∞∞∞∞4e60/15
BFGS ros ∞∞∞∞∞∞∞8e50/15

Δ fopt
f20, 40-D		 1e1
222		 1e0
1.3e5		 1e-1
1.6e8		 1e-2
∞		 1e-3
∞		 1e-5
∞		 1e-7
∞		 #succ
0/15
BFGS-M-17 Blelly 1.7 (0.2)∞∞∞∞∞∞8e50/15
BFGS-P-09 Blelly 13 (1)80 (65)∞∞∞∞∞1e60/15
BFGS-P-Instances Blelly 13 (1)156 (166)∞∞∞∞∞1e60/15
BFGS-P-range Blelly 13 (1)∞∞∞∞∞∞1e60/15
BFGS-scipy-2019 Varelas 12 (1)449 (709)∞∞∞∞∞4e60/15
L-BFGS-B-scipy-2019 Varelas 1.1 (0.2)★3451 (381)∞∞∞∞∞4e60/15
BFGS ros 1.5 (0.2)33 (38)∞∞∞∞∞1e60/15

Δ fopt
f21, 40-D		 1e1
1044		 1e0
21144		 1e-1
1.0e5		 1e-2
1.0e5		 1e-3
1.0e5		 1e-5
1.0e5		 1e-7
1.0e5		 #succ
26/30
BFGS-M-17 Blelly 1.2 (1)2.6 (2)1.7 (2)1.7 (2)1.7 (2)7.4 (7)∞3e50/15
BFGS-P-09 Blelly 2.9 (4)2.1 (3)1.0 (1.0)1.0 (1)1.0 (1)2.4 (3)∞2e50/15
BFGS-P-Instances Blelly 1.9 (2)1.7 (3)1.00 (2)1.00 (2)1.00 (1.0)2.8 (3)∞2e50/15
BFGS-P-range Blelly 2.0 (3)0.94 (1)0.61 (0.8)0.61 (0.8)0.61 (0.7)2.0 (2)∞2e50/15
BFGS-scipy-2019 Varelas 0.86 (1.0)0.82 (0.8)0.34 (0.5)↑00.34 (0.5)↑00.34 (0.5)↑00.35 (0.5)↑0∞4e60/15
L-BFGS-B-scipy-2019 Varelas 1.4 (1)1.5 (2)0.92 (1)0.91 (1)0.91 (1)0.91 (1)15 (17)0/15
BFGS ros 2.9 (3)2.3 (3)2.1 (2)2.1 (2)2.1 (2)2.1 (2)9.3 (7)2/15

Δ fopt
f22, 40-D		 1e1
3090		 1e0
35442		 1e-1
6.5e5		 1e-2
6.5e5		 1e-3
6.5e5		 1e-5
6.5e5		 1e-7
6.5e5		 #succ
8/30
BFGS-M-17 Blelly 1.0 (1)6.6 (7)6.7 (8)6.7 (6)6.7 (6)∞∞3e50/15
BFGS-P-09 Blelly 1.4 (2)0.73 (0.9)∞∞∞∞∞2e50/15
BFGS-P-Instances Blelly 2.4 (4)4.6 (7)∞∞∞∞∞2e50/15
BFGS-P-range Blelly 2.7 (3)1.8 (3)∞∞∞∞∞2e50/15
BFGS-scipy-2019 Varelas 1.3 (2)7.7 (11)4.0 (4)4.0 (4)4.0 (4)4.0 (6)∞4e60/15
L-BFGS-B-scipy-2019 Varelas 1.1 (0.7)12 (17)4.9 (6)4.9 (4)4.9 (6)4.9 (4)42 (46)0/15
BFGS ros 1.5 (1)1.5 (2)∞∞∞∞∞3e50/15

Δ fopt
f23, 40-D		 1e1
7.0		 1e0
11925		 1e-1
75453		 1e-2
6.6e5		 1e-3
1.3e6		 1e-5
3.2e6		 1e-7
3.4e6		 #succ
15/15
BFGS-M-17 Blelly 126 (129)∞∞∞∞∞∞2e50/15
BFGS-P-09 Blelly 393 (244)176 (213)∞∞∞∞∞2e60/15
BFGS-P-Instances Blelly 331 (270)300 (287)∞∞∞∞∞2e60/15
BFGS-P-range Blelly 430 (159)80 (142)∞∞∞∞∞2e60/15
BFGS-scipy-2019 Varelas 176 (361)2282 (3391)∞∞∞∞∞4e60/15
L-BFGS-B-scipy-2019 Varelas 96 (214)177 (141)∞∞∞∞∞4e60/15
BFGS ros 78 (129)263 (395)∞∞∞∞∞2e50/15

Δ fopt
f24, 40-D		 1e1
5.8e6		 1e0
9.8e7		 1e-1
3.0e8		 1e-2
3.0e8		 1e-3
3.0e8		 1e-5
3.0e8		 1e-7
3.0e8		 #succ
1/15
BFGS-M-17 Blelly ∞∞∞∞∞∞∞3e50/15
BFGS-P-09 Blelly ∞∞∞∞∞∞∞6e50/15
BFGS-P-Instances Blelly ∞∞∞∞∞∞∞6e50/15
BFGS-P-range Blelly ∞∞∞∞∞∞∞6e50/15
BFGS-scipy-2019 Varelas ∞∞∞∞∞∞∞4e60/15
L-BFGS-B-scipy-2019 Varelas ∞∞∞∞∞∞∞4e60/15
BFGS ros ∞∞∞∞∞∞∞3e50/15