2019 XCSP3 competition: fast COP track (sequential and parallel solvers): results by benchmark

Results by benchmark for category optimization problem (COP)

This page displays the results of the different solvers for each benchmark for category optimization problem (COP)

REMINDER

Keep in mind that the 'Best result' columns only provide the best result given by one of the solvers. This 'Best result' may be wrong in case of an UNSATISFIABLE or OPTIMUM FOUND answer (because there's no efficient way to check these answers).

Description of a cell contents:

Cell exampleMeaning
AnswerSolver result
f=...value of the objective function for the model reported by the solver
TT=...Total Time (TT): this is the CPU time (in seconds) used by the solver until termination. This time is only meaningful for complete solvers because incomplete solvers will always run until they time out
Remember that CPU time and wall clock time are two very different notions. The CPU time represents the time during which the instructions of the solver were executed by the processor. The wall clock time represents how much time ellapsed on the clock. For a same event, the CPU time may be either smaller or greater than the wall clock time depending on the number of threads of execution and the number of processors.

Meaning of some abbreviations:

AbbreviationMeaning
f=...Value of the objective function
TOTime Out
MOMem. Out (out of memory)

Meaning of the different colors:

ColorMeaning
textthe solver cannot handle this instance
textthe solver gave no answer
textthe solver could give an answer (SAT)
textthe solver gave a definitive answer (OPTIMUM FOUND or UNSAT)
textthe solver performed better than the other ones on that instance (complete solvers point of view)
textthe solver performed better than the other ones on that instance (incomplete solvers point of view)
textthe solver was ended by a signal or other problem
textthe solver gave an incomplete answer
textthe solver gave a wrong answer

For better readability, you may choose to hide some solvers:
AbsCon 2019-07-23 (complete)
choco-solver 2019-06-14 (complete)
choco-solver 2019-06-14 parallel (complete)
choco-solver 2019-09-16 (complete)
choco-solver 2019-09-16 parallel (complete)
choco-solver 2019-09-20 (complete)
choco-solver 2019-09-20 parallel (complete)
choco-solver 2019-09-24 (complete)
choco-solver 2019-09-24 parallel (complete)
Concrete 3.10 (complete)
Concrete 3.12.2 (complete)
Concrete 3.12.2 (complete)
Concrete 3.12.3 (complete)
cosoco 2 (complete)
cosoco 2.0 (complete)
cosoco 2.0 (complete)
cosoco 2.0 parallel (complete)
cosoco 2.O parallel (complete)
PicatSAT 2019-09-12 (complete)

Bench nameBest results
on this
instance		AbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
Auction/Auction-sum/
Auction-sum-decay300_c18.xml 		SAT TO
f=2106819
TT=2400.05
T1=2361.08
 SAT (TO)
f=996914
TT=2400.02
T1=1194.25
 SAT (TO)
f=1117715
TT=2400.08
T1=2014.41
 Wrong Opt.
f=1196507
TT=40.479
T1=40.29
 SAT (TO)
f=2004940
TT=2400.4
T1=2332.08
 SAT (TO)
f=1962874
TT=1861.36
T1=1495.9
 SAT (MO)
f=313596
TT=6.069
T1=5.99
 SAT (TO)
f=1841782
TT=1305.21
T1=1300.79
 SAT (TO)
f=2106819
TT=2400.05
T1=2361.08
 SAT (TO)
f=1898058
TT=1900.59
T1=1261.26
 SAT (TO)
f=1366556
TT=2400.12
T1=81.93
 SAT (TO)
f=1360038
TT=2400.13
T1=1492.5
 SAT (TO)
f=1422557
TT=2400.11
T1=147.17
 SAT (TO)
f=1389389
TT=2400.08
T1=625.05
 SAT (TO)
f=1695417
TT=2400.08
T1=145.55
 SAT (TO)
f=1695417
TT=2400.02
T1=146.3
 SAT (TO)
f=1695417
TT=2400.04
T1=142.78
 SAT (TO)
f=1674624
TT=2010.29
T1=985.47
 SAT (TO)
f=1674624
TT=2009.86
T1=1058.71
 ? (TO)

TT=2400.09
Auction/Auction-sum/
Auction-sum-matching040_c18.xml 		SAT TO
f=12968875
TT=2400.13
T1=41.01
 SAT (TO)
f=8495504
TT=2400.06
T1=1984.38
 SAT (TO)
f=12968875
TT=2400.45
T1=1471.71
 SAT (TO)
f=12922392
TT=17114.9
T1=1969.32
 SAT (TO)
f=12968875
TT=2400.6
T1=84.61
 SAT (TO)
f=12965081
TT=1800.88
T1=245.99
 SAT (TO)
f=12968875
TT=2400.44
T1=1751.39
 SAT (TO)
f=12882352
TT=1968.12
T1=759.03
 SAT (TO)
f=12968875
TT=2400.13
T1=41.01
 SAT (TO)
f=12882352
TT=1968.83
T1=784.62
 SAT (TO)
f=10632725
TT=2400.11
T1=1005.77
 SAT (TO)
f=11135169
TT=2400.14
T1=1277.34
 SAT (TO)
f=11873564
TT=2400.11
T1=2170.25
 SAT (TO)
f=12074485
TT=2400.13
T1=892.61
 SAT (TO)
f=11182902
TT=2400.04
T1=25
 SAT (TO)
f=11182902
TT=2400.08
T1=24.99
 SAT (TO)
f=11182902
TT=2400.06
T1=25.09
 SAT (TO)
f=10507282
TT=2011.22
T1=287.75
 SAT (TO)
f=10507282
TT=2010.99
T1=249.28
 ? (TO)

TT=2400.05
Bacp/Bacp-m2/
Bacp-m2-12b_c18.xml 		SAT TO
f=17
TT=1998.41
T1=0
 SAT (TO)
f=17
TT=2400.02
T1=5.15
 SAT (TO)
f=17
TT=2400.45
T1=7.64
 SAT (TO)
f=17
TT=20072.2
T1=5.62
 SAT (TO)
f=17
TT=2400.65
T1=3.86
 SAT (TO)
f=17
TT=2000.67
T1=6.51
 SAT (TO)
f=17
TT=2400.45
T1=3.9
 SAT (TO)
f=17
TT=1997.18
T1=6.85
 SAT (TO)
f=18
TT=2400.1
T1=2.04
 SAT (TO)
f=17
TT=1998.41
T1=6.45
 SAT (TO)
f=17
TT=2400.09
T1=12.21
 SAT (TO)
f=17
TT=2400.15
T1=16.77
 SAT (TO)
f=17
TT=2400.06
T1=12.65
 SAT (TO)
f=17
TT=2400.15
T1=11.73
 SAT (TO)
f=17
TT=2400.1
T1=0
 SAT (TO)
f=17
TT=2400.04
T1=0
 SAT (TO)
f=17
TT=2400.02
T1=0
 SAT (TO)
f=17
TT=2011.7
T1=0.34
 SAT (TO)
f=17
TT=2012.19
T1=0.34
 ? (TO)

TT=2400.04
BinPacking/BinPacking-mdd-fu/
BinPacking-mdd-fu0120-05.xml 		SAT TO
f=18
TT=2400.21
T1=131.95
 SAT (TO)
f=18
TT=2400.21
T1=131.95
 ? (TO)

TT=2400.55

 ? (TO)

TT=20033.6

 ? (TO)

TT=2400.38

 ? (TO)

TT=1969.43

 ? (TO)

TT=2400.48

 ? (TO)

TT=1972.52

 ? (TO)

TT=2400.09

 ? (TO)

TT=1971.01

 ? (TO)

TT=2400.06

 ? (TO)

TT=2400.08

 ? (TO)

TT=2400.1

 ? (TO)

TT=2400.14

 SAT (TO)
f=6
TT=2400.05
T1=380.47
 SAT (TO)
f=6
TT=2400.03
T1=379.89
 SAT (TO)
f=6
TT=2400.1
T1=379.15
 ? (TO)

TT=2011

 ? (TO)

TT=2010.75

 ? (TO)

TT=2400.08
BinPacking/BinPacking-mdd-fu/
BinPacking-mdd-fu1000-02.xml



? (TO)

TT=2400.12

 ? (TO)

TT=2401.15

 ? (TO)

TT=18790.2

 ? (TO)

TT=2401.07

 ? (TO)

TT=1212.82

 ? (TO)

TT=2401.16

 ? (TO)

TT=1247.44

 ? (TO)

TT=2400.05

 ? (TO)

TT=1271.75

 ? (TO)

TT=2400.17

 ? (TO)

TT=2400.28

 ? (TO)

TT=2400.15

 ? (TO)

TT=2400.34

 ? (TO)

TT=2400.1

 ? (TO)

TT=2400.09

 ? (TO)

TT=2400.01

 ? (TO)

TT=2002.38

 ? (TO)

TT=2001.92

 ? (TO)

TT=2400.11
BinPacking/
BinPacking-sum-s28/
BinPacking-sum-s28-195.xml



? (TO)

TT=2400.1

 ? (TO)

TT=2400.65

 ? (TO)

TT=19905.6

 ? (TO)

TT=2400.43

 ? (TO)

TT=1984.25

 ? (TO)

TT=2400.74

 ? (TO)

TT=1983.87

 ? (TO)

TT=2400.1

 ? (TO)

TT=1979.58

 ? (TO)

TT=2400.16

 ? (TO)

TT=2400.43

 ? (TO)

TT=2400.13

 ? (TO)

TT=2400.27

 ? (TO)

TT=2400.08

 ? (TO)

TT=2400.01

 ? (TO)

TT=2400.06

 ? (TO)

TT=2003.74

 ? (TO)

TT=2003.87

 ? (MO)

TT=64.992
BinPacking/
BinPacking-sum-skj1/
BinPacking-sum-n1c1w4k.xml 		OPT
f=3
TT=6.152
T1=5.53
 OPT
f=3
TT=6.152
T1=5.96
 OPT
f=3
TT=19.611
T1=7.14
 OPT
f=3
TT=57.198
T1=14.93
 OPT
f=3
TT=12.495
T1=5.53
 OPT
f=3
TT=36.174
T1=16.91
 OPT
f=3
TT=12.122
T1=8.31
 OPT
f=3
TT=49.682
T1=15.01
 OPT
f=3
TT=415.07
T1=278.53
 OPT
f=3
TT=39.164
T1=8.82
 OPT
f=3
TT=1753.84
T1=449.98
 ? (TO)

TT=2400.07

 OPT
f=3
TT=1130.06
T1=290.7
 OPT
f=3
TT=269.118
T1=39.61
 ? (TO)

TT=2400.1

 ? (TO)

TT=2400.02

 ? (TO)

TT=2400.1

 OPT
f=3
TT=77.625
T1=58.12
 OPT
f=3
TT=1463.21
T1=26.98
 OPT
f=3
TT=44.464
T1=44.38
BinPacking/
BinPacking-sum-skj1/
BinPacking-sum-n1c1w4m.xml 		OPT
f=2
TT=6.102
T1=5.8
 OPT
f=2
TT=6.102
T1=5.8
 OPT
f=2
TT=77.301
T1=9.55
 OPT
f=2
TT=138.847
T1=8.51
 OPT
f=2
TT=73.605
T1=8.76
 OPT
f=2
TT=138.088
T1=8.93
 OPT
f=2
TT=80.217
T1=11.27
 OPT
f=2
TT=141.425
T1=10.51
 SAT (TO)
f=2
TT=2400.05
T1=1058.76
 OPT
f=2
TT=142.492
T1=15.29
 ? (TO)

TT=2400.11

 ? (TO)

TT=2400.05

 SAT (TO)
f=2
TT=2400.06
T1=333.05
 SAT (TO)
f=2
TT=2400.06
T1=197.28
 ? (TO)

TT=2400.04

 ? (TO)

TT=2400.03

 ? (TO)

TT=2400.02

 OPT
f=2
TT=363.63
T1=124.37
 OPT
f=2
TT=252.057
T1=231.5
 OPT
f=2
TT=82.664
T1=82.59
BinPacking/
BinPacking-sum-skj1/
BinPacking-sum-n1c1w4n.xml 		OPT
f=3
TT=8.297
T1=8.19
 OPT
f=3
TT=8.297
T1=8.19
 OPT
f=3
TT=58.788
T1=9.53
 OPT
f=3
TT=200.537
T1=69.77
 OPT
f=3
TT=94.128
T1=10.78
 OPT
f=3
TT=183.188
T1=17.57
 OPT
f=3
TT=92.707
T1=8.32
 OPT
f=3
TT=174.3
T1=23.6
 SAT (TO)
f=3
TT=2400.05
T1=87.82
 OPT
f=3
TT=164.047
T1=18.98
 ? (TO)

TT=2400.14

 ? (TO)

TT=2400.11

 SAT (TO)
f=3
TT=2400.12
T1=1054.36
 ? (TO)

TT=2400.04

 ? (TO)

TT=2400.02

 ? (TO)

TT=2400.06

 ? (TO)

TT=2400.04

 SAT (TO)
f=0
TT=2012.66
T1=45.31
 OPT
f=3
TT=1399.56
T1=1256.26
 OPT
f=3
TT=107.062
T1=106.99
BinPacking/
BinPacking-sum-skj1/
BinPacking-sum-n2c3w1r.xml



? (TO)

TT=2400.06

 ? (TO)

TT=2400.58

 SAT (TO)
f=9
TT=20064.6
T1=5789.84
 ? (TO)

TT=2400.42

 ? (TO)

TT=2006.61

 ? (TO)

TT=2400.62

 ? (TO)

TT=2006.83

 ? (TO)

TT=2400.08

 ? (TO)

TT=2006.32

 ? (TO)

TT=2400.1

 ? (TO)

TT=2400.13

 ? (TO)

TT=2400.07

 ? (TO)

TT=2400.11

 ? (TO)

TT=2400.08

 ? (TO)

TT=2400.11

 ? (TO)

TT=2400.09

 ? (TO)

TT=2010.82

 ? (TO)

TT=2010.82

 ? (TO)

TT=2400.12
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
BinPacking/
BinPacking-sum-skj1/
BinPacking-sum-n3c3w2d.xml



? (TO)

TT=2400.04

 ? (TO)

TT=2400.5

 ? (TO)

TT=20069

 ? (TO)

TT=2400.64

 ? (TO)

TT=1997.32

 ? (TO)

TT=2400.46

 ? (TO)

TT=2000.66

 ? (TO)

TT=2400.05

 ? (TO)

TT=2000.76

 ? (TO)

TT=2400.08

 ? (TO)

TT=2400.08

 ? (TO)

TT=2400.09

 ? (TO)

TT=2400.06

 ? (TO)

TT=2400.04

 ? (TO)

TT=2400.04

 ? (TO)

TT=2400.03

 ? (TO)

TT=2010.67

 ? (TO)

TT=2010.62

 ? (TO)

TT=2400.1
BinPacking/
BinPacking-sum-skj1/
BinPacking-sum-n4c1w2b.xml



? (TO)

TT=2400.03

 ? (TO)

TT=2400.44

 ? (TO)

TT=20044.1

 ? (TO)

TT=2400.54

 ? (TO)

TT=1972.92

 ? (TO)

TT=2400.54

 ? (TO)

TT=1977.45

 ? (TO)

TT=2400.06

 ? (TO)

TT=1970.21

 ? (TO)

TT=2400.07

 ? (TO)

TT=2400.22

 ? (TO)

TT=2400.17

 ? (TO)

TT=2400.08

 ? (TO)

TT=2400.03

 ? (TO)

TT=2400.03

 ? (TO)

TT=2400.04

 ? (TO)

TT=2007.48

 ? (TO)

TT=2007.01

 ? (TO)

TT=2400.04
BinPacking/
BinPacking-sum-skj2/
BinPacking-sum-n1w1b1r5.xml 		OPT
f=3
TT=1.726
T1=1.63
 OPT
f=3
TT=21.037
T1=20.94
 OPT
f=3
TT=15.632
T1=15.53
 OPT
f=3
TT=42.745
T1=42.02
 OPT
f=3
TT=20.827
T1=20.74
 OPT
f=3
TT=31.723
T1=31.18
 OPT
f=3
TT=15.591
T1=15.5
 OPT
f=3
TT=15.847
T1=15.32
 ? (TO)

TT=2400.11

 OPT
f=3
TT=15.147
T1=14.56
 OPT
f=3
TT=14.55
T1=14.41
 OPT
f=3
TT=22.426
T1=21.54
 OPT
f=3
TT=66.306
T1=66.04
 ? (TO)

TT=2400.07

 ? (TO)

TT=2400.04

 ? (TO)

TT=2400.05

 ? (TO)

TT=2400.04

 OPT
f=3
TT=1.726
T1=1.63
 OPT
f=3
TT=2.192
T1=1.62
 OPT
f=3
TT=83.356
T1=83.28
BinPacking/
BinPacking-sum-skj2/
BinPacking-sum-n1w4b1r5.xml 		UNSAT

TT=5.255

 UNSAT

TT=5.255

 UNSAT

TT=700.783

 UNSAT

TT=793.386

 UNSAT

TT=700.022

 UNSAT

TT=785.315

 UNSAT

TT=663.154

 UNSAT

TT=786.446

 ? (TO)

TT=2400.11

 UNSAT

TT=792.598

 ? (TO)

TT=2400.09

 ? (TO)

TT=2400.12

 ? (TO)

TT=2400.1

 ? (TO)

TT=2400.13

 ? (TO)

TT=2400.02

 ? (TO)

TT=2400.05

 ? (TO)

TT=2400.04

 UNSAT

TT=22.989

 UNSAT

TT=1791.26

 UNSAT

TT=6.547
BinPacking/
BinPacking-sum-skj2/
BinPacking-sum-n2w4b2r1.xml 		SAT TO
f=0
TT=2005.75
T1=63.7
 ? (TO)

TT=2400.07

 ? (TO)

TT=2400.73

 SAT (TO)
f=0
TT=20008.5
T1=7262.61
 SAT (TO)
f=0
TT=2400.71
T1=149.27
 SAT (TO)
f=0
TT=2005.75
T1=284.87
 SAT (TO)
f=0
TT=2400.48
T1=143.77
 SAT (TO)
f=0
TT=2005.87
T1=293.66
 ? (TO)

TT=2400.11

 SAT (TO)
f=0
TT=2006.26
T1=1986.55
 ? (TO)

TT=2400.08

 ? (TO)

TT=2400.06

 ? (TO)

TT=2400.13

 ? (TO)

TT=2400.09

 ? (TO)

TT=2400.07

 ? (TO)

TT=2400.09

 ? (TO)

TT=2400.07

 SAT (TO)
f=0
TT=2012.48
T1=63.7
 ? (TO)

TT=2012.68

 ? (TO)

TT=2400.03
BinPacking/
BinPacking-sum-sw100/
BinPacking-sum-sw100-01.xml 		SAT TO
f=0
TT=2003.68
T1=107.64
 ? (TO)

TT=2400.12

 ? (TO)

TT=2400.56

 SAT (TO)
f=0
TT=19974.2
T1=7486.41
 ? (TO)

TT=2400.4

 ? (TO)

TT=2005.43

 ? (TO)

TT=2400.55

 ? (TO)

TT=2002.17

 ? (TO)

TT=2400.1

 SAT (TO)
f=0
TT=2003.68
T1=1786.87
 ? (TO)

TT=2400.09

 ? (TO)

TT=2400.06

 ? (TO)

TT=2400.08

 ? (TO)

TT=2400.08

 ? (TO)

TT=2400.09

 ? (TO)

TT=2400.09

 ? (TO)

TT=2400.04

 SAT (TO)
f=0
TT=2012.57
T1=107.64
 ? (TO)

TT=2012.43

 ? (TO)

TT=2400.02
BinPacking/BinPacking-tab-fu/
BinPacking-tab-fu0120-04.xml 		SAT TO
f=18
TT=2400.07
T1=307.27
 SAT (TO)
f=18
TT=2400.07
T1=307.27
 ? (TO)

TT=2400.59

 ? (TO)

TT=20037.2

 ? (TO)

TT=2400.67

 ? (TO)

TT=1977.18

 ? (TO)

TT=2400.32

 ? (TO)

TT=1982.55

 ? (TO)

TT=2400.09

 ? (TO)

TT=1980.34

 ? (TO)

TT=2400.12

 ? (TO)

TT=2400.14

 ? (TO)

TT=2400.11

 ? (TO)

TT=2400.05

 ? (TO)

TT=2400.07

 ? (TO)

TT=2400.04

 ? (TO)

TT=2400.07

 ? (TO)

TT=2008.65

 ? (TO)

TT=2008.61

 ? (TO)

TT=2400.08
BinPacking/
BinPacking-tab-sw120/
BinPacking-tab-sw120-75.xml 		SAT TO
f=0
TT=2400.05
T1=53.74
 SAT (TO)
f=0
TT=2400.05
T1=53.74
 ?

TT=112.948

 ?

TT=573.597

 ?

TT=854.317

 ?

TT=906.465

 ?

TT=127.703

 ?

TT=554.799

 ?

TT=122.009

 ?

TT=564.607

 ? (TO)

TT=2400.15

 ? (TO)

TT=2400.15

 ? (TO)

TT=2400.08

 ? (TO)

TT=2400.2

 SAT (TO)
f=0
TT=2400.08
T1=254.35
 SAT (TO)
f=0
TT=2400.08
T1=254.3
 SAT (TO)
f=0
TT=2400.07
T1=255.76
 ? (TO)

TT=1754.4

 ? (TO)

TT=1754.66

 ? (TO)

TT=2400.06
BusScheduling/
BusScheduling-cnt-s1/
BusScheduling-cnt-r2.xml 		SAT TO
f=14
TT=2003.34
T1=33.57
 SAT (TO)
f=14
TT=2400.11
T1=46.33
 SAT (TO)
f=14
TT=2400.65
T1=553.97
 SAT (TO)
f=14
TT=20039.3
T1=160.89
 SAT (TO)
f=15
TT=2400.38
T1=56.44
 SAT (TO)
f=14
TT=2003.34
T1=112.88
 SAT (TO)
f=15
TT=2400.61
T1=55.96
 SAT (TO)
f=14
TT=2003.85
T1=182.27
 SAT (TO)
f=16
TT=2400.09
T1=112.72
 SAT (TO)
f=15
TT=2004
T1=99.64
 SAT (TO)
f=14
TT=2400.11
T1=27.59
 SAT (TO)
f=14
TT=2400.1
T1=777.84
 SAT (TO)
f=14
TT=2400.09
T1=33.57
 SAT (TO)
f=14
TT=2400.16
T1=47.71
 SAT (TO)
f=17
TT=2400.05
T1=1.58
 SAT (TO)
f=17
TT=2400.04
T1=1.69
 SAT (TO)
f=17
TT=2400.04
T1=1.69
 SAT (TO)
f=14
TT=2010.34
T1=106.68
 SAT (TO)
f=14
TT=2010.39
T1=203.24
 ? (TO)

TT=2400.07
ChessboardColoration/
ChessboardColoration-int-s1/
ChessboardColoration-int-09-09.xml 		OPT
f=2
TT=9.495
T1=3.1
 OPT
f=2
TT=30.481
T1=29.33
 SAT (TO)
f=3
TT=2400.38
T1=334.11
 Wrong Cert.

TT=347.891

 SAT (TO)
f=3
TT=2400.65
T1=301.14
 SAT (TO)
f=3
TT=1930.19
T1=379.23
 SAT (TO)
f=3
TT=2400.36
T1=273.91
 SAT (TO)
f=3
TT=1930.55
T1=379.67
 SAT (TO)
f=3
TT=2400.08
T1=452.97
 SAT (TO)
f=3
TT=1934.94
T1=306.47
 OPT
f=2
TT=105.774
T1=104.91
 SAT (TO)
f=3
TT=2400.15
T1=85.64
 OPT
f=2
TT=84.181
T1=77.55
 OPT
f=2
TT=135.281
T1=134.45
 OPT
f=2
TT=9.783
T1=3.1
 OPT
f=2
TT=9.495
T1=8.59
 OPT
f=2
TT=9.524
T1=8.59
 OPT
f=2
TT=320.3
T1=305.28
 OPT
f=2
TT=180.526
T1=166.38
 OPT
f=2
TT=15.942
T1=15.88
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
ChessboardColoration/
ChessboardColoration-int-s2/
ChessboardColoration-int-05-07.xml 		OPT
f=2
TT=0.311
T1=0.21
 OPT
f=2
TT=4.191
T1=3.84
 ?

TT=367.875

 ?

TT=11138.9

 ? (TO)

TT=2407.61

 ? (TO)

TT=1134.54

 ?

TT=324.997

 ? (TO)

TT=1244.71

 ?

TT=323.207

 ? (TO)

TT=1161.64

 OPT
f=2
TT=10.549
T1=9.71
 OPT
f=2
TT=16.258
T1=15.05
 OPT
f=2
TT=11.746
T1=11.71
 OPT
f=2
TT=10.164
T1=9.62
 OPT
f=2
TT=0.317
T1=0.21
 OPT
f=2
TT=0.311
T1=0.21
 OPT
f=2
TT=0.314
T1=0.21
 OPT
f=2
TT=0.839
T1=0.63
 OPT
f=2
TT=0.918
T1=0.57
 OPT
f=2
TT=4.485
T1=4.39
ChessboardColoration/
ChessboardColoration-int-s2/
ChessboardColoration-int-08-10.xml 		OPT
f=2
TT=18.529
T1=17.86
 OPT
f=2
TT=18.529
T1=17.86
 SAT (TO)
f=3
TT=2400.69
T1=564.16
 OPT
f=2
TT=1947.39
T1=1945.92
 SAT (TO)
f=3
TT=2400.68
T1=165.41
 SAT (TO)
f=3
TT=1945.08
T1=325.34
 SAT (TO)
f=3
TT=2400.5
T1=216.78
 SAT (TO)
f=3
TT=1882.47
T1=355.96
 SAT (TO)
f=3
TT=2400.08
T1=326.07
 SAT (TO)
f=3
TT=1901.22
T1=357.61
 OPT
f=2
TT=727.774
T1=727.25
 SAT (TO)
f=3
TT=2400.11
T1=103.89
 OPT
f=2
TT=517.321
T1=498.51
 OPT
f=2
TT=143.484
T1=141.71
 SAT (TO)
f=3
TT=2400.02
T1=2.19
 SAT (TO)
f=3
TT=2400.02
T1=2.1
 SAT (TO)
f=3
TT=2400.06
T1=2.1
 OPT
f=2
TT=263.103
T1=242.17
 OPT
f=2
TT=736.117
T1=702.82
 OPT
f=2
TT=19.511
T1=19.49
ChessboardColoration/
ChessboardColoration-int-s2/
ChessboardColoration-int-11-13.xml 		OPT
f=3
TT=83.919
T1=83.88
 SAT (TO)
f=3
TT=2400.04
T1=17.28
 SAT (TO)
f=6
TT=2400.41
T1=368.84
 SAT (TO)
f=3
TT=17535
T1=7579.47
 SAT (TO)
f=6
TT=2400.56
T1=16.67
 SAT (TO)
f=6
TT=1982.29
T1=34.23
 SAT (TO)
f=6
TT=2400.53
T1=176.41
 SAT (TO)
f=6
TT=1983.81
T1=31.31
 ? (TO)

TT=2400.1

 SAT (TO)
f=6
TT=711.004
T1=214.93
 SAT (TO)
f=3
TT=2400.11
T1=1482.38
 SAT (TO)
f=3
TT=2400.14
T1=1496.6
 SAT (TO)
f=3
TT=2400.07
T1=603.31
 SAT (TO)
f=3
TT=2400.11
T1=167.01
 SAT (TO)
f=3
TT=2400.03
T1=16.39
 SAT (TO)
f=3
TT=2400.05
T1=16
 SAT (TO)
f=3
TT=2400.09
T1=18.4
 SAT (TO)
f=3
TT=1954.18
T1=69.87
 SAT (TO)
f=3
TT=1956.41
T1=94.41
 OPT
f=3
TT=83.919
T1=83.88
ChessboardColoration/
ChessboardColoration-m1-s1/
ChessboardColoration-09-09.xml 		OPT
f=2
TT=0.276
T1=0.06
 OPT
f=2
TT=4.926
T1=4.49
 OPT
f=2
TT=313.07
T1=307.99
 OPT
f=2
TT=23.26
T1=12.01
 OPT
f=2
TT=78.613
T1=75.11
 OPT
f=2
TT=284.052
T1=276.63
 OPT
f=2
TT=88.646
T1=83.47
 OPT
f=2
TT=42.325
T1=34.62
 SAT (TO)
f=3
TT=2400.15
T1=2.76
 OPT
f=2
TT=167.102
T1=160.3
 OPT
f=2
TT=53.902
T1=50.81
 OPT
f=2
TT=465.806
T1=390.28
 OPT
f=2
TT=225.707
T1=17.92
 OPT
f=2
TT=119.088
T1=101.88
 OPT
f=2
TT=0.276
T1=0.06
 OPT
f=2
TT=0.28
T1=0.1
 OPT
f=2
TT=0.318
T1=0.1
 OPT
f=2
TT=0.921
T1=0.1
 OPT
f=2
TT=1.034
T1=0.1
 OPT
f=2
TT=492.198
T1=492.18
ChessboardColoration/
ChessboardColoration-m1-s2/
ChessboardColoration-08-10.xml 		OPT
f=2
TT=0.251
T1=0.06
 OPT
f=2
TT=4.84
T1=4.55
 OPT
f=2
TT=183.342
T1=177.3
 OPT
f=2
TT=27.151
T1=16.6
 OPT
f=2
TT=25.169
T1=19.46
 OPT
f=2
TT=760.154
T1=751.07
 OPT
f=2
TT=278.282
T1=272.65
 OPT
f=2
TT=544.216
T1=533.92
 SAT (TO)
f=3
TT=2400.09
T1=2.8
 OPT
f=2
TT=312.695
T1=304.58
 OPT
f=2
TT=66.112
T1=37.91
 OPT
f=2
TT=396.673
T1=126.94
 OPT
f=2
TT=45.838
T1=27.88
 OPT
f=2
TT=63.904
T1=29.9
 OPT
f=2
TT=0.258
T1=0.06
 OPT
f=2
TT=0.251
T1=0.1
 OPT
f=2
TT=0.289
T1=0.1
 OPT
f=2
TT=0.88
T1=0.1
 OPT
f=2
TT=1.009
T1=0.1
 OPT
f=2
TT=450.352
T1=450.29
Cutstock/
Cutstock-zinc-s1/
Cutstock-t03-4.xml 		SAT TO
f=19
TT=2000.06
T1=0.66
 SAT (TO)
f=19
TT=2400.11
T1=8.16
 SAT (TO)
f=19
TT=2400.46
T1=17.89
 SAT (TO)
f=19
TT=20022.5
T1=37.08
 SAT (TO)
f=19
TT=2400.59
T1=12.38
 SAT (TO)
f=19
TT=2000.06
T1=21.17
 SAT (TO)
f=19
TT=2400.39
T1=12.7
 SAT (TO)
f=19
TT=1999.77
T1=24.14
 SAT (TO)
f=19
TT=2400.07
T1=5.1
 SAT (TO)
f=19
TT=2005.78
T1=25.25
 SAT (TO)
f=19
TT=2400.12
T1=9.65
 SAT (TO)
f=19
TT=2400.07
T1=20.06
 SAT (TO)
f=19
TT=2400.13
T1=10.32
 SAT (TO)
f=19
TT=2400.1
T1=9.37
 SAT (TO)
f=19
TT=2400.01
T1=0.89
 SAT (TO)
f=19
TT=2400.03
T1=0.89
 SAT (TO)
f=19
TT=2400.09
T1=0.79
 SAT (TO)
f=19
TT=2012.26
T1=0.66
 SAT (TO)
f=19
TT=2012.56
T1=0.67
 ? (TO)

TT=2400.05
Cutstock/
Cutstock-zinc-s1/
Cutstock-t08-0.xml 		OPT
f=579
TT=19.389
T1=19
 OPT
f=579
TT=19.389
T1=19
 OPT
f=579
TT=836.033
T1=835.74
 OPT
f=579
TT=1948.65
T1=1947.45
 OPT
f=579
TT=853.784
T1=853.64
 ? (TO)

TT=2003.22

 OPT
f=579
TT=848.885
T1=848.54
 SAT (TO)
f=581
TT=2001.36
T1=1993.5
 OPT
f=579
TT=853.878
T1=546.52
 OPT
f=579
TT=1957.43
T1=1956.95
 OPT
f=579
TT=296.437
T1=54.94
 SAT (TO)
f=627
TT=2400.17
T1=527.05
 SAT (TO)
f=595
TT=2400.14
T1=1659.75
 OPT
f=579
TT=920.399
T1=157.48
 ? (TO)

TT=2400.04

 ? (TO)

TT=2400.02

 ? (TO)

TT=2400.03

 OPT
f=579
TT=409.882
T1=408.67
 OPT
f=579
TT=225.452
T1=224.26
 OPT
f=579
TT=1341.92
T1=1234.59
Cutstock/
Cutstock-zinc-s1/
Cutstock-t08-9.xml 		OPT
f=476
TT=48.368
T1=48.03
 OPT
f=476
TT=48.368
T1=48.03
 OPT
f=476
TT=2058.08
T1=2056.25
 OPT
f=476
TT=4838.25
T1=4829.62
 OPT
f=476
TT=1898.06
T1=1895.32
 ? (TO)

TT=2002.65

 OPT
f=476
TT=1850.84
T1=1848.22
 ? (TO)

TT=2003.25

 OPT
f=476
TT=557.359
T1=550.92
 ? (TO)

TT=2003.38

 SAT (TO)
f=476
TT=2400.07
T1=112.15
 SAT (TO)
f=480
TT=2400.1
T1=1795.78
 SAT (TO)
f=477
TT=2400.14
T1=546.59
 SAT (TO)
f=477
TT=2400.08
T1=177.16
 SAT (TO)
f=498
TT=2400.1
T1=2393.58
 SAT (TO)
f=498
TT=2400.1
T1=2396.08
 SAT (TO)
f=499
TT=2400.02
T1=2396.11
 OPT
f=476
TT=846.565
T1=845.23
 OPT
f=476
TT=1242.19
T1=1241.32
 OPT
f=476
TT=734.64
T1=734.55
Cutstock/
Cutstock-zinc-s1/
Cutstock-t09-2.xml 		OPT
f=102
TT=8.212
T1=7.96
 OPT
f=102
TT=8.212
T1=7.96
 OPT
f=102
TT=211.162
T1=204.63
 OPT
f=102
TT=419.512
T1=407.76
 OPT
f=102
TT=212.314
T1=200.38
 OPT
f=102
TT=497.171
T1=469.28
 OPT
f=102
TT=215.499
T1=203.43
 OPT
f=102
TT=511.7
T1=483.78
 OPT
f=102
TT=1613.58
T1=334.51
 OPT
f=102
TT=404.329
T1=382.52
 OPT
f=102
TT=104.006
T1=39.62
 OPT
f=102
TT=165.697
T1=59.25
 OPT
f=102
TT=43.758
T1=23.4
 OPT
f=102
TT=280.466
T1=31.09
 OPT
f=102
TT=1945.69
T1=136.19
 OPT
f=102
TT=1909.34
T1=136.3
 OPT
f=102
TT=2205.24
T1=150.98
 OPT
f=102
TT=76.127
T1=23.75
 OPT
f=102
TT=80.068
T1=50.11
 OPT
f=102
TT=570.365
T1=570.35
Cutstock/
Cutstock-zinc-s1/
Cutstock-t09-6.xml 		OPT
f=89
TT=7.901
T1=7.73
 OPT
f=89
TT=7.901
T1=7.73
 OPT
f=89
TT=511.592
T1=511.5
 OPT
f=89
TT=584.854
T1=584.69
 OPT
f=89
TT=291.972
T1=291.62
 OPT
f=89
TT=544.621
T1=544.21
 OPT
f=89
TT=283.432
T1=283
 OPT
f=89
TT=550.951
T1=550.7
 SAT (TO)
f=89
TT=2400.03
T1=703.62
 OPT
f=89
TT=642.242
T1=641.51
 OPT
f=89
TT=346.833
T1=25.07
 OPT
f=89
TT=113.393
T1=58.89
 OPT
f=89
TT=50.893
T1=22.28
 OPT
f=89
TT=76.984
T1=26.29
 OPT
f=89
TT=320.676
T1=119.16
 OPT
f=89
TT=337.473
T1=124.19
 OPT
f=89
TT=334.51
T1=123.88
 OPT
f=89
TT=43.474
T1=23.38
 OPT
f=89
TT=192.361
T1=150.48
 OPT
f=89
TT=517.807
T1=517.74
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
Cutstock/
Cutstock-zinc-s1/
Cutstock-t09-7.xml 		OPT
f=161
TT=9.917
T1=9.61
 OPT
f=161
TT=9.917
T1=9.61
 OPT
f=161
TT=51.425
T1=49.99
 OPT
f=161
TT=94.491
T1=94.17
 OPT
f=161
TT=62.985
T1=62.77
 OPT
f=161
TT=105.734
T1=101.72
 OPT
f=161
TT=63.688
T1=63.53
 OPT
f=161
TT=99.593
T1=97.85
 SAT (TO)
f=161
TT=2400.08
T1=1328.71
 OPT
f=161
TT=102.745
T1=102.52
 SAT (TO)
f=161
TT=2400.1
T1=43.17
 ? (TO)

TT=2400.13

 SAT (TO)
f=161
TT=2400.06
T1=22.15
 OPT
f=161
TT=835.371
T1=309.54
 SAT (TO)
f=161
TT=2400.05
T1=101.79
 SAT (TO)
f=161
TT=2400.06
T1=94.67
 SAT (TO)
f=161
TT=2400.04
T1=94.27
 OPT
f=161
TT=1050.09
T1=454.77
 OPT
f=161
TT=714.906
T1=321.99
 OPT
f=161
TT=533.878
T1=533.85
Cutstock/
Cutstock-zinc-s1/
Cutstock-t10-4.xml 		SAT TO
f=867
TT=2400.11
T1=2000.06
 ? (TO)

TT=2400.06

 ? (TO)

TT=2400.41

 ? (TO)

TT=20082.8

 ? (TO)

TT=2400.33

 ? (TO)

TT=2000.75

 ? (TO)

TT=2400.74

 ? (TO)

TT=2000.49

 ? (TO)

TT=2400.03

 ? (TO)

TT=2000.84

 ? (TO)

TT=2400.13

 ? (TO)

TT=2400.18

 SAT (TO)
f=867
TT=2400.11
T1=2000.06
 ? (TO)

TT=2401.61

 ? (TO)

TT=2400.09

 ? (TO)

TT=2400.01

 ? (TO)

TT=2400.05

 ? (TO)

TT=1997.55

 ? (TO)

TT=1995.56

 ? (TO)

TT=2400.01
Cutstock/
Cutstock-zinc-s1/
Cutstock-t13-0.xml 		OPT
f=65
TT=3.17
T1=0.69
 OPT
f=65
TT=5.348
T1=5.1
 OPT
f=65
TT=9.423
T1=9.12
 OPT
f=65
TT=21.706
T1=21.05
 OPT
f=65
TT=8.658
T1=8.28
 OPT
f=65
TT=14.485
T1=13.94
 OPT
f=65
TT=8.877
T1=8.65
 OPT
f=65
TT=11.106
T1=11.01
 OPT
f=65
TT=17.659
T1=8.8
 OPT
f=65
TT=9.304
T1=8.56
 OPT
f=65
TT=20.595
T1=19.04
 OPT
f=65
TT=34.087
T1=27.98
 OPT
f=65
TT=20.206
T1=16.96
 OPT
f=65
TT=14.457
T1=14.12
 OPT
f=65
TT=4.628
T1=0.69
 OPT
f=65
TT=4.602
T1=0.69
 OPT
f=65
TT=4.659
T1=0.69
 OPT
f=65
TT=3.17
T1=2.74
 OPT
f=65
TT=4.588
T1=2.2
 OPT
f=65
TT=114.282
T1=114.2
Cutstock/
Cutstock-zinc-s1/
Cutstock-t13-3.xml 		OPT
f=88
TT=3.155
T1=2.9
 OPT
f=88
TT=4.745
T1=4.44
 OPT
f=88
TT=3.155
T1=2.9
 OPT
f=88
TT=7.415
T1=6.86
 OPT
f=88
TT=3.597
T1=3.25
 OPT
f=88
TT=6.545
T1=5.4
 OPT
f=88
TT=3.511
T1=3.21
 OPT
f=88
TT=5.818
T1=5.48
 OPT
f=88
TT=7.474
T1=6.18
 OPT
f=88
TT=6.051
T1=5.53
 OPT
f=88
TT=17.866
T1=12.47
 OPT
f=88
TT=47.098
T1=13.79
 OPT
f=88
TT=15.077
T1=13.45
 OPT
f=88
TT=50.896
T1=9.29
 OPT
f=88
TT=19.295
T1=13.78
 OPT
f=88
TT=19.617
T1=13.89
 OPT
f=88
TT=19.69
T1=13.88
 OPT
f=88
TT=7.205
T1=3.68
 OPT
f=88
TT=5.399
T1=2.79
 OPT
f=88
TT=216.736
T1=216.66
Cutstock/
Cutstock-zinc-s1/
Cutstock-t13-4.xml 		OPT
f=48
TT=17.024
T1=1.45
 OPT
f=48
TT=17.024
T1=5.09
 OPT
f=48
TT=44.33
T1=17.41
 OPT
f=48
TT=107.703
T1=28.68
 OPT
f=48
TT=43.274
T1=11.91
 OPT
f=48
TT=98.923
T1=19.74
 OPT
f=48
TT=44.72
T1=12.25
 OPT
f=48
TT=97.573
T1=10.95
 OPT
f=48
TT=420.518
T1=10.06
 OPT
f=48
TT=89.18
T1=10.88
 OPT
f=48
TT=105.789
T1=10.59
 SAT (TO)
f=48
TT=2400.06
T1=24.7
 OPT
f=48
TT=685.203
T1=10.17
 OPT
f=48
TT=1392.89
T1=12.05
 SAT (TO)
f=48
TT=2400.05
T1=21.88
 SAT (TO)
f=48
TT=2400.03
T1=21.59
 SAT (TO)
f=48
TT=2400.02
T1=21.49
 OPT
f=48
TT=488.242
T1=1.45
 OPT
f=48
TT=442.677
T1=1.33
 OPT
f=48
TT=68.302
T1=68.19
Cutstock/
Cutstock-zinc-s1/
Cutstock-t13-5.xml 		OPT
f=67
TT=2.196
T1=1.31
 OPT
f=67
TT=4.891
T1=4.73
 OPT
f=67
TT=3.372
T1=3.11
 OPT
f=67
TT=7.306
T1=6.97
 OPT
f=67
TT=3.761
T1=3.6
 OPT
f=67
TT=8.064
T1=7.82
 OPT
f=67
TT=3.458
T1=3.24
 OPT
f=67
TT=6.154
T1=5.42
 OPT
f=67
TT=32.351
T1=26.94
 OPT
f=67
TT=5.809
T1=5.46
 OPT
f=67
TT=17.238
T1=14.91
 OPT
f=67
TT=39.464
T1=34.06
 OPT
f=67
TT=16.815
T1=15.13
 OPT
f=67
TT=14.544
T1=12.91
 OPT
f=67
TT=11.004
T1=7.19
 OPT
f=67
TT=11.246
T1=7.39
 OPT
f=67
TT=12.457
T1=8.19
 OPT
f=67
TT=2.196
T1=1.31
 OPT
f=67
TT=2.616
T1=2.18
 OPT
f=67
TT=124.74
T1=124.71
Cutstock/
Cutstock-zinc-s1/
Cutstock-t13-8.xml 		OPT
f=60
TT=1.143
T1=0.51
 OPT
f=60
TT=4.951
T1=4.83
 OPT
f=60
TT=8.193
T1=7.94
 OPT
f=60
TT=17.305
T1=16.96
 OPT
f=60
TT=6.689
T1=6.42
 OPT
f=60
TT=12.621
T1=11.73
 OPT
f=60
TT=6.759
T1=6.34
 OPT
f=60
TT=12.528
T1=11.87
 OPT
f=60
TT=26.765
T1=9.21
 OPT
f=60
TT=12.471
T1=11.84
 OPT
f=60
TT=14.867
T1=12.96
 OPT
f=60
TT=46.859
T1=16.52
 OPT
f=60
TT=17.426
T1=15.23
 OPT
f=60
TT=35.487
T1=29.37
 OPT
f=60
TT=1.148
T1=0.51
 OPT
f=60
TT=1.146
T1=0.51
 OPT
f=60
TT=1.143
T1=0.51
 OPT
f=60
TT=4.275
T1=2.17
 OPT
f=60
TT=4.298
T1=3.79
 OPT
f=60
TT=136.945
T1=136.9
Cutstock/
Cutstock-zinc-s1/
Cutstock-t14-9.xml 		OPT
f=669
TT=32.474
T1=32.02
 OPT
f=669
TT=32.474
T1=32.02
 OPT
f=669
TT=312.886
T1=312.53
 OPT
f=669
TT=689.404
T1=685.7
 OPT
f=669
TT=314.527
T1=314.09
 OPT
f=669
TT=772.299
T1=772.15
 OPT
f=669
TT=312.253
T1=311.76
 OPT
f=669
TT=689.923
T1=689.55
 SAT (TO)
f=787
TT=2400.05
T1=1418.53
 OPT
f=669
TT=731.148
T1=730.58
 OPT
f=669
TT=1528.96
T1=1336.95
 ? (TO)

TT=2400.09

 OPT
f=669
TT=1417.2
T1=725.99
 SAT (TO)
f=669
TT=2400.12
T1=89.54
 ? (TO)

TT=2400.03

 ? (TO)

TT=2400.04

 ? (TO)

TT=2400.03

 OPT
f=669
TT=525.984
T1=373.32
 OPT
f=669
TT=970.064
T1=948.42
 OPT
f=669
TT=1216.55
T1=1216.51
Cutstock/
Cutstock-zinc-s1/
Cutstock-t15-0.xml 		OPT
f=130
TT=9.152
T1=8.82
 OPT
f=130
TT=9.152
T1=8.82
 OPT
f=130
TT=152.502
T1=152.1
 OPT
f=130
TT=332.384
T1=331.29
 OPT
f=130
TT=271.053
T1=270.81
 OPT
f=130
TT=608.838
T1=608.19
 OPT
f=130
TT=269.576
T1=269.18
 OPT
f=130
TT=583.146
T1=582.7
 SAT (TO)
f=130
TT=2400.11
T1=455.64
 OPT
f=130
TT=571.718
T1=571.54
 OPT
f=130
TT=686.76
T1=59.03
 OPT
f=130
TT=1808.04
T1=462.44
 OPT
f=130
TT=91.465
T1=30.18
 OPT
f=130
TT=37.037
T1=30.94
 SAT (TO)
f=139
TT=2400.08
T1=184.86
 SAT (TO)
f=139
TT=2400.05
T1=174.69
 SAT (TO)
f=139
TT=2400.06
T1=207.77
 OPT
f=130
TT=286.324
T1=240.38
 OPT
f=130
TT=389.227
T1=230.71
 OPT
f=130
TT=654.181
T1=654.17
Cutstock/
Cutstock-zinc-s1/
Cutstock-t15-1.xml 		OPT
f=123
TT=10.946
T1=10.62
 OPT
f=123
TT=10.946
T1=10.62
 OPT
f=123
TT=194.934
T1=183.31
 OPT
f=123
TT=407.195
T1=384.1
 OPT
f=123
TT=198.28
T1=184.83
 OPT
f=123
TT=418.915
T1=393.52
 OPT
f=123
TT=189.306
T1=177.08
 OPT
f=123
TT=391.351
T1=364.96
 SAT (TO)
f=148
TT=2400.07
T1=2120.35
 OPT
f=123
TT=415.905
T1=389.44
 OPT
f=123
TT=263.02
T1=44.25
 OPT
f=123
TT=1426.81
T1=433.39
 OPT
f=123
TT=441.054
T1=30.64
 OPT
f=123
TT=148.394
T1=40.74
 SAT (TO)
f=125
TT=2400.09
T1=1595.82
 SAT (TO)
f=125
TT=2400.02
T1=1574.63
 SAT (TO)
f=125
TT=2400.07
T1=1601.08
 OPT
f=123
TT=277.074
T1=239.55
 OPT
f=123
TT=218.944
T1=142.52
 OPT
f=123
TT=502.44
T1=502.04
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
Fapp/Fapp-ext/
Fapp-ext-05-0350_c18.xml 		SAT TO
f=521763735
TT=2400.14
T1=2323.94
 ? (TO)

TT=2408.05

 ?

TT=1731.75

 ?

TT=6400.74

 ?

TT=1647.6

 ? (TO)

TT=676.556

 ?

TT=1806.58

 ? (TO)

TT=731.706

 SAT (TO)
f=521763735
TT=2400.14
T1=2323.94
 ? (TO)

TT=760.997

 SAT (TO)
f=529170024
TT=2400.12
T1=787.69
 ? (TO)

TT=2400.58

 SAT (TO)
f=525314977
TT=2400.18
T1=687.21
 SAT (TO)
f=526643608
TT=2400.3
T1=1036.06
 SAT (TO)
f=529692396
TT=2400.05
T1=1731.51
 SAT (TO)
f=529692396
TT=2400.08
T1=1737.81
 SAT (TO)
f=529692396
TT=2400.1
T1=1758.39
 ? (TO)

TT=253.026

 ? (TO)

TT=253.113

 ? (TO)

TT=2400.1
Fapp/Fapp-m2s/
Fapp-m2s-17-0300_c18.xml 		OPT
f=130971634
TT=102.117
T1=101.54
 ? (TO)

TT=2400.1

 SAT (TO)
f=381023284
TT=2400.12
T1=2063.02
 SAT (TO)
f=381023284
TT=2849.85
T1=2239.5
 SAT (TO)
f=381005184
TT=2400.11
T1=1951.61
 SAT (TO)
f=381403384
TT=522.716
T1=426.62
 SAT (TO)
f=380987079
TT=2400.06
T1=2225.51
 SAT (TO)
f=381548184
TT=473.851
T1=359.11
 SAT (TO)
f=360841782
TT=2400.08
T1=822.67
 SAT (TO)
f=381548184
TT=509.705
T1=403.74
 OPT
f=130971634
TT=92.575
T1=92.14
 OPT
f=130971634
TT=141.276
T1=141.01
 OPT
f=130971634
TT=108.16
T1=107.83
 OPT
f=130971634
TT=102.117
T1=101.54
 SAT (TO)
f=374253920
TT=2400.07
T1=305.55
 SAT (TO)
f=374253920
TT=2400.09
T1=287.59
 SAT (TO)
f=374253920
TT=2400.07
T1=286.05
 ? (TO)

TT=1604.61

 ? (TO)

TT=1607.79

 ? (TO)

TT=2400.11
Fapp/Fapp-m2s/
Fapp-m2s-18-0350_c18.xml 		OPT
f=162507055
TT=67.289
T1=67.11
 ? (TO)

TT=2400.12

 SAT (TO)
f=234106643
TT=2400.15
T1=2299.74
 OPT
f=162507055
TT=1362.11
T1=1356.9
 SAT (TO)
f=225807374
TT=2400.09
T1=2174.73
 SAT (TO)
f=234919458
TT=441.045
T1=303.3
 SAT (TO)
f=234149418
TT=2400.12
T1=2252.22
 SAT (TO)
f=234848176
TT=441.243
T1=303.27
 SAT (TO)
f=223939309
TT=2400.11
T1=1169.95
 SAT (TO)
f=234833906
TT=428.106
T1=291.27
 OPT
f=162507055
TT=63.138
T1=62.75
 OPT
f=162507055
TT=89.104
T1=88.94
 OPT
f=162507055
TT=67.289
T1=67.11
 OPT
f=162507055
TT=67.484
T1=67.3
 SAT (TO)
f=229229905
TT=2400.06
T1=463.53
 SAT (TO)
f=229229905
TT=2400.08
T1=449.18
 SAT (TO)
f=229229905
TT=2400.09
T1=449.62
 ? (TO)

TT=1659.52

 ? (TO)

TT=1660.9

 ? (TO)

TT=2400.04
Fapp/Fapp-m2s/
Fapp-m2s-20-0420_c18.xml 		OPT
f=506362597
TT=131.185
T1=130.83
 ? (TO)

TT=2400.06

 SAT (TO)
f=589019378
TT=2400.16
T1=1819.22
 SAT (TO)
f=589041898
TT=2989.34
T1=2182.3
 SAT (TO)
f=589041906
TT=2400.09
T1=1743.75
 SAT (TO)
f=589424576
TT=613.597
T1=493.76
 SAT (TO)
f=589221978
TT=2400.31
T1=1760.32
 SAT (TO)
f=589424576
TT=564.365
T1=488.67
 SAT (TO)
f=558946160
TT=2400.14
T1=2027.86
 SAT (TO)
f=589447078
TT=634.337
T1=573.75
 OPT
f=506362597
TT=140.978
T1=140.75
 SAT
f=564258657
TT=656.713
T1=580.22
 OPT
f=506362597
TT=131.185
T1=130.83
 OPT
f=506362597
TT=135.707
T1=135.4
 SAT (TO)
f=578394884
TT=2400.06
T1=1827.75
 SAT (TO)
f=578394884
TT=2400.02
T1=1821.32
 SAT (TO)
f=578394884
TT=2400.04
T1=2051.12
 ? (TO)

TT=1467.32

 ? (TO)

TT=1464.98

 ? (TO)

TT=2400.15
Fapp/Fapp-m2s/
Fapp-m2s-21-0500_c18.xml 		OPT
f=63832030
TT=57.312
T1=57
 ? (TO)

TT=2400.11

 SAT (TO)
f=188867069
TT=2400.09
T1=2033.51
 SAT (TO)
f=188778603
TT=2754.85
T1=2486.03
 SAT (TO)
f=188728062
TT=2400.12
T1=2201.82
 SAT (TO)
f=189044033
TT=392.473
T1=236.16
 SAT (TO)
f=188879719
TT=2400.32
T1=2246.3
 SAT (TO)
f=189069313
TT=405.744
T1=247.58
 SAT (TO)
f=176050071
TT=2400.12
T1=2052.93
 SAT (TO)
f=189081953
TT=394.105
T1=240.8
 OPT
f=63832030
TT=55.929
T1=55.32
 OPT
f=63832030
TT=130.256
T1=129.9
 OPT
f=63832030
TT=59.952
T1=59.62
 OPT
f=63832030
TT=57.312
T1=57
 SAT (TO)
f=181624473
TT=2400.1
T1=1598.74
 SAT (TO)
f=181624473
TT=2400.06
T1=1545.7
 SAT (TO)
f=181624473
TT=2400.06
T1=1558.58
 ? (TO)

TT=1745.74

 ? (TO)

TT=1745.23

 ? (TO)

TT=2400.1
Fastfood/
Fastfood-m1-s1/
Fastfood-ff18.xml 		OPT
f=1143
TT=9.199
T1=8.85
 OPT
f=1143
TT=9.199
T1=8.85
 OPT
f=1143
TT=15.577
T1=13.98
 Wrong Opt.
f=1471
TT=18.879
T1=18.44
 OPT
f=1143
TT=17.812
T1=15.91
 OPT
f=1143
TT=35.245
T1=31.46
 SAT (MO)
f=2397
TT=4.566
T1=4.29
 OPT
f=1143
TT=32.07
T1=31.06
 OPT
f=1143
TT=789.058
T1=11.29
 OPT
f=1143
TT=33.444
T1=29.83
 OPT
f=1143
TT=287.192
T1=28.66
 OPT
f=1143
TT=656.107
T1=142.82
 OPT
f=1143
TT=274.392
T1=13.11
 OPT
f=1143
TT=305.334
T1=14.78
 OPT
f=1143
TT=39.181
T1=21.68
 OPT
f=1143
TT=39.239
T1=21.69
 OPT
f=1143
TT=34.31
T1=15.88
 OPT
f=1143
TT=31.677
T1=14.04
 OPT
f=1143
TT=12.834
T1=5.3
 OPT
f=1143
TT=572.509
T1=345.61
Fastfood/
Fastfood-m1-s1/
Fastfood-ff21.xml 		OPT
f=583
TT=12.595
T1=12.3
 OPT
f=583
TT=12.595
T1=12.3
 OPT
f=583
TT=22.171
T1=18.43
 Wrong Opt.
f=1301
TT=10.537
T1=10.07
 OPT
f=583
TT=20.189
T1=18.19
 OPT
f=583
TT=45.504
T1=41.89
 OPT
f=583
TT=23.933
T1=21.6
 OPT
f=583
TT=45.205
T1=41.75
 OPT
f=583
TT=1018.76
T1=187.73
 OPT
f=583
TT=40.323
T1=36.45
 OPT
f=583
TT=378.721
T1=15.18
 OPT
f=583
TT=520.087
T1=41.73
 OPT
f=583
TT=251.306
T1=16.41
 OPT
f=583
TT=414.966
T1=27.65
 OPT
f=583
TT=68.917
T1=15.79
 OPT
f=583
TT=68.841
T1=15.79
 OPT
f=583
TT=32.533
T1=18.29
 OPT
f=583
TT=30.434
T1=27.59
 Wrong Opt.
f=587
TT=20.989
T1=20.42
 OPT
f=583
TT=460.453
T1=460.4
Fastfood/
Fastfood-m1-s1/
Fastfood-ff34.xml 		OPT
f=2
TT=0.059
T1=0
 OPT
f=2
TT=4.722
T1=4.4
 OPT
f=2
TT=6.53
T1=6.13
 OPT
f=2
TT=18.287
T1=16.5
 OPT
f=2
TT=6.574
T1=6.16
 OPT
f=2
TT=16.416
T1=16.21
 OPT
f=2
TT=6.584
T1=6.2
 OPT
f=2
TT=17.904
T1=15.75
 OPT
f=2
TT=2.291
T1=2.15
 OPT
f=2
TT=16.31
T1=16.02
 OPT
f=2
TT=9.668
T1=9.23
 OPT
f=2
TT=10.755
T1=10.46
 OPT
f=2
TT=10.009
T1=9.89
 OPT
f=2
TT=9.778
T1=9.47
 OPT
f=2
TT=0.059
T1=0
 OPT
f=2
TT=0.059
T1=0
 OPT
f=2
TT=0.06
T1=0
 OPT
f=2
TT=0.517
T1=0.38
 OPT
f=2
TT=0.518
T1=0.37
 OPT
f=2
TT=55.798
T1=55.69
Fastfood/
Fastfood-m1-s1/
Fastfood-ff50.xml 		OPT
f=624
TT=11.941
T1=1.49
 OPT
f=624
TT=11.941
T1=11.74
 OPT
f=624
TT=30.05
T1=27.58
 OPT
f=624
TT=41.462
T1=39.17
 OPT
f=624
TT=19.547
T1=17.85
 OPT
f=624
TT=42.679
T1=39.37
 OPT
f=624
TT=21.296
T1=19.62
 OPT
f=624
TT=38.849
T1=34.4
 OPT
f=624
TT=329.09
T1=4.08
 OPT
f=624
TT=39.912
T1=36.39
 OPT
f=624
TT=382.23
T1=12.82
 OPT
f=624
TT=391.576
T1=15
 OPT
f=624
TT=432.166
T1=15.33
 OPT
f=624
TT=549.741
T1=18.12
 OPT
f=624
TT=29.39
T1=5.59
 OPT
f=624
TT=29.277
T1=5.59
 OPT
f=624
TT=30.801
T1=1.49
 OPT
f=624
TT=26.744
T1=10.06
 Wrong Opt.
f=770
TT=20.388
T1=9.28
 OPT
f=624
TT=302.794
T1=206.3
Fastfood/
Fastfood-m1-s1/
Fastfood-ff56.xml 		OPT
f=1664
TT=11.533
T1=11.01
 OPT
f=1664
TT=11.533
T1=11.01
 OPT
f=1664
TT=28.141
T1=25.12
 OPT
f=1664
TT=55.374
T1=53.69
 OPT
f=1664
TT=27.772
T1=24.83
 OPT
f=1664
TT=53.427
T1=47.18
 OPT
f=1664
TT=27.937
T1=24.89
 OPT
f=1664
TT=54.082
T1=48.13
 OPT
f=1664
TT=2211.25
T1=169.02
 OPT
f=1664
TT=47.327
T1=42.18
 OPT
f=1664
TT=574.569
T1=24.8
 OPT
f=1664
TT=1139.47
T1=54.84
 OPT
f=1664
TT=341.209
T1=24.86
 OPT
f=1664
TT=630.629
T1=11.81
 OPT
f=1664
TT=80.405
T1=41.1
 OPT
f=1664
TT=79.977
T1=40.89
 OPT
f=1664
TT=89.786
T1=29.19
 OPT
f=1664
TT=31.118
T1=22.82
 Wrong Opt.
f=1687
TT=21.405
T1=8.51
 OPT
f=1664
TT=769.694
T1=264.19
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
Fastfood/
Fastfood-m1-s1/
Fastfood-ff59.xml 		OPT
f=242
TT=14.603
T1=0.69
 OPT
f=242
TT=14.603
T1=14.04
 OPT
f=242
TT=103.047
T1=77.23
 Wrong Opt.
f=328
TT=33.693
T1=31.66
 OPT
f=242
TT=83.549
T1=67.07
 OPT
f=242
TT=91.253
T1=54.23
 OPT
f=242
TT=82.513
T1=65.91
 OPT
f=242
TT=85.713
T1=40.38
 OPT
f=242
TT=48.227
T1=3.93
 OPT
f=242
TT=104.011
T1=33.29
 OPT
f=242
TT=101.081
T1=14.16
 OPT
f=242
TT=472.566
T1=34.87
 OPT
f=242
TT=148.833
T1=20.25
 OPT
f=242
TT=161.242
T1=14.6
 OPT
f=242
TT=29.206
T1=0.69
 OPT
f=242
TT=29.238
T1=0.69
 OPT
f=242
TT=33.9
T1=8.69
 OPT
f=242
TT=41.683
T1=18.85
 OPT
f=242
TT=22.039
T1=18.04
 OPT
f=242
TT=324.029
T1=134.89
Fastfood/
Fastfood-m1-s1/
Fastfood-ff60.xml 		OPT
f=192
TT=18.602
T1=4.21
 OPT
f=192
TT=18.602
T1=18.28
 OPT
f=192
TT=86.469
T1=76.36
 Wrong Opt.
f=269
TT=32.243
T1=28.78
 OPT
f=192
TT=56.657
T1=16.56
 OPT
f=192
TT=60.38
T1=32.13
 OPT
f=192
TT=57.297
T1=24.4
 OPT
f=192
TT=67.878
T1=31.24
 OPT
f=192
TT=33.862
T1=4.21
 OPT
f=192
TT=94.632
T1=38.06
 OPT
f=192
TT=134.752
T1=17.83
 OPT
f=192
TT=252.392
T1=23.7
 OPT
f=192
TT=92.8
T1=17.94
 OPT
f=192
TT=96.369
T1=23.87
 OPT
f=192
TT=23.069
T1=5.89
 OPT
f=192
TT=23.287
T1=5.99
 OPT
f=192
TT=45.118
T1=19.59
 OPT
f=192
TT=50.453
T1=30.81
 OPT
f=192
TT=38.957
T1=25.97
 OPT
f=192
TT=382.127
T1=60.47
Fastfood/
Fastfood-m1-s1/
Fastfood-ff61.xml 		OPT
f=152
TT=16.415
T1=6.19
 OPT
f=152
TT=16.415
T1=16.16
 OPT
f=152
TT=105.867
T1=90.69
 Wrong Opt.
f=209
TT=33.094
T1=27.14
 OPT
f=152
TT=71.327
T1=20.01
 OPT
f=152
TT=60.521
T1=36.05
 OPT
f=152
TT=63.278
T1=23.61
 OPT
f=152
TT=68.739
T1=38.37
 OPT
f=152
TT=17.629
T1=10.54
 OPT
f=152
TT=73.473
T1=30.86
 OPT
f=152
TT=79.879
T1=14.64
 OPT
f=152
TT=316.773
T1=17.13
 OPT
f=152
TT=98.913
T1=14.4
 OPT
f=152
TT=109.01
T1=16.84
 OPT
f=152
TT=20.789
T1=8.29
 OPT
f=152
TT=21.016
T1=8.39
 OPT
f=152
TT=22.312
T1=6.19
 OPT
f=152
TT=36.866
T1=7.69
 OPT
f=152
TT=25.767
T1=16.46
 OPT
f=152
TT=141.554
T1=141.5
Fastfood/
Fastfood-m1-s1/
Fastfood-ff62.xml 		OPT
f=125
TT=15.177
T1=1.1
 OPT
f=125
TT=17.72
T1=17.51
 OPT
f=125
TT=90.138
T1=31.39
 Wrong Opt.
f=198
TT=22.621
T1=22.17
 OPT
f=125
TT=48.321
T1=14.11
 OPT
f=125
TT=39.515
T1=25.4
 OPT
f=125
TT=58.163
T1=21.19
 OPT
f=125
TT=37.138
T1=25.37
 OPT
f=125
TT=22.211
T1=10.15
 OPT
f=125
TT=83.685
T1=33.92
 OPT
f=125
TT=65.493
T1=19.62
 OPT
f=125
TT=202.745
T1=32.95
 OPT
f=125
TT=102.71
T1=12.38
 OPT
f=125
TT=74.467
T1=19.65
 OPT
f=125
TT=15.177
T1=5.1
 OPT
f=125
TT=15.214
T1=5.1
 OPT
f=125
TT=26.544
T1=1.1
 OPT
f=125
TT=54.864
T1=16.37
 OPT
f=125
TT=32.251
T1=9.17
 OPT
f=125
TT=272.021
T1=216.81
Fastfood/
Fastfood-m1-s1/
Fastfood-ff65.xml 		OPT
f=63
TT=10.051
T1=2.19
 OPT
f=63
TT=10.94
T1=10.66
 OPT
f=63
TT=36.474
T1=34.19
 Wrong Opt.
f=80
TT=25.168
T1=21.2
 OPT
f=63
TT=22.705
T1=10.09
 OPT
f=63
TT=33.852
T1=24.71
 OPT
f=63
TT=24.132
T1=11.66
 OPT
f=63
TT=32.524
T1=18.94
 OPT
f=63
TT=15.015
T1=6.65
 OPT
f=63
TT=34.049
T1=21.87
 OPT
f=63
TT=74.539
T1=11
 OPT
f=63
TT=181.103
T1=24.08
 OPT
f=63
TT=49.246
T1=13.52
 OPT
f=63
TT=47.632
T1=12.8
 OPT
f=63
TT=10.234
T1=2.19
 OPT
f=63
TT=10.327
T1=2.29
 OPT
f=63
TT=10.051
T1=4.19
 OPT
f=63
TT=56.244
T1=28.18
 Wrong Opt.
f=70
TT=37.868
T1=33.87
 OPT
f=63
TT=145.163
T1=132.6
Fastfood/
Fastfood-m1-s1/
Fastfood-ff73.xml 		OPT
f=582
TT=8.046
T1=0.09
 OPT
f=582
TT=8.046
T1=7.87
 OPT
f=582
TT=14.804
T1=13.75
 Wrong Opt.
f=589
TT=12.375
T1=12.17
 OPT
f=582
TT=13.242
T1=12.6
 OPT
f=582
TT=33.418
T1=14.22
 OPT
f=582
TT=13.737
T1=13.04
 OPT
f=582
TT=33.949
T1=31.18
 OPT
f=582
TT=94.17
T1=77.8
 OPT
f=582
TT=25.87
T1=23.62
 OPT
f=582
TT=65.806
T1=13.28
 OPT
f=582
TT=424.102
T1=18.15
 OPT
f=582
TT=85.845
T1=11.93
 OPT
f=582
TT=71.354
T1=14.83
 OPT
f=582
TT=9.23
T1=0.1
 OPT
f=582
TT=9.209
T1=0.09
 OPT
f=582
TT=29.231
T1=1.19
 OPT
f=582
TT=15.785
T1=2.3
 OPT
f=582
TT=13.624
T1=10.92
 OPT
f=582
TT=341.431
T1=274.62
Fastfood/
Fastfood-m1-s1/
Fastfood-ff76.xml 		OPT
f=310
TT=14.443
T1=6.19
 OPT
f=310
TT=14.443
T1=13.53
 OPT
f=310
TT=75.095
T1=53.48
 Wrong Opt.
f=338
TT=28.74
T1=19.46
 OPT
f=310
TT=73.757
T1=53
 OPT
f=310
TT=149.735
T1=108.51
 OPT
f=310
TT=70.049
T1=44.31
 OPT
f=310
TT=147.409
T1=103.37
 OPT
f=310
TT=73.736
T1=42.59
 OPT
f=310
TT=125.754
T1=90.24
 OPT
f=310
TT=132.708
T1=34.82
 OPT
f=310
TT=515.648
T1=19.01
 OPT
f=310
TT=229.557
T1=21.73
 OPT
f=310
TT=242.839
T1=13.26
 OPT
f=310
TT=40.839
T1=6.19
 OPT
f=310
TT=40.842
T1=6.19
 OPT
f=310
TT=47.3
T1=9.89
 OPT
f=310
TT=53.183
T1=30.83
 OPT
f=310
TT=15.579
T1=8.55
 OPT
f=310
TT=310.769
T1=285.8
Fastfood/
Fastfood-m1-s1/
Fastfood-ff82.xml 		OPT
f=7
TT=0.103
T1=0
 OPT
f=7
TT=4.809
T1=4.63
 OPT
f=7
TT=3.78
T1=3.55
 OPT
f=7
TT=10.406
T1=10.38
 OPT
f=7
TT=3.777
T1=3.56
 OPT
f=7
TT=10.414
T1=10.33
 OPT
f=7
TT=3.852
T1=3.54
 OPT
f=7
TT=10.038
T1=9.73
 OPT
f=7
TT=1.954
T1=1.64
 OPT
f=7
TT=10.258
T1=9.83
 OPT
f=7
TT=10.229
T1=9.83
 OPT
f=7
TT=12.65
T1=11.99
 OPT
f=7
TT=11.095
T1=10.98
 OPT
f=7
TT=11.044
T1=10.65
 OPT
f=7
TT=0.103
T1=0
 OPT
f=7
TT=0.104
T1=0
 OPT
f=7
TT=0.105
T1=0
 OPT
f=7
TT=0.528
T1=0
 OPT
f=7
TT=0.651
T1=0.33
 OPT
f=7
TT=22.321
T1=22.29
Fastfood/
Fastfood-m1-s1/
Fastfood-ff85.xml 		OPT
f=566
TT=1.406
T1=0
 OPT
f=566
TT=5.168
T1=5.15
 OPT
f=566
TT=4.127
T1=3.82
 OPT
f=566
TT=11.791
T1=11.01
 OPT
f=566
TT=3.71
T1=3.51
 OPT
f=566
TT=8.01
T1=7.05
 OPT
f=566
TT=4.322
T1=3.94
 OPT
f=566
TT=7.723
T1=6.95
 OPT
f=566
TT=23.565
T1=2.96
 OPT
f=566
TT=7.386
T1=4.9
 OPT
f=566
TT=22.771
T1=9.49
 OPT
f=566
TT=50.517
T1=13.04
 OPT
f=566
TT=32.535
T1=11.96
 OPT
f=566
TT=32.951
T1=11
 OPT
f=566
TT=1.406
T1=0
 OPT
f=566
TT=1.41
T1=0
 OPT
f=566
TT=1.427
T1=0
 OPT
f=566
TT=1.681
T1=0.7
 Wrong Opt.
f=610
TT=0.827
T1=0
 OPT
f=566
TT=158.447
T1=121.39
Fastfood/
Fastfood-m1-s1/
Fastfood-ff87.xml 		OPT
f=307
TT=1.78
T1=0
 OPT
f=307
TT=5.84
T1=5.36
 OPT
f=307
TT=6.406
T1=5.8
 OPT
f=307
TT=22.698
T1=21.89
 OPT
f=307
TT=7.313
T1=6.69
 OPT
f=307
TT=14.098
T1=14.08
 OPT
f=307
TT=6.912
T1=6.28
 OPT
f=307
TT=13.007
T1=12.5
 OPT
f=307
TT=8.702
T1=3.89
 OPT
f=307
TT=15.312
T1=14.15
 OPT
f=307
TT=31.042
T1=20.84
 OPT
f=307
TT=81.485
T1=21.34
 OPT
f=307
TT=41.295
T1=14.01
 OPT
f=307
TT=46.551
T1=11.51
 OPT
f=307
TT=2.504
T1=0
 OPT
f=307
TT=2.53
T1=0
 OPT
f=307
TT=1.78
T1=1.29
 OPT
f=307
TT=7.504
T1=2.33
 OPT
f=307
TT=3.213
T1=1.54
 OPT
f=307
TT=136.148
T1=136.1
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
GolombRuler/
GolombRuler-a3-s1/
GolombRuler-10-a3.xml 		OPT
f=55
TT=16.021
T1=6.78
 SAT (TO)
f=61
TT=2400.05
T1=509.37
 OPT
f=55
TT=16.021
T1=6.78
 OPT
f=55
TT=33.392
T1=12.36
 OPT
f=55
TT=17.672
T1=8.63
 OPT
f=55
TT=34.087
T1=16.27
 OPT
f=55
TT=19.804
T1=9.81
 OPT
f=55
TT=33.049
T1=15.53
 OPT
f=55
TT=390.818
T1=354
 OPT
f=55
TT=34.897
T1=17.62
 OPT
f=55
TT=56.098
T1=28.22
 OPT
f=55
TT=171.797
T1=120.86
 OPT
f=55
TT=74.451
T1=33.7
 OPT
f=55
TT=86.691
T1=11.91
 OPT
f=55
TT=65.1
T1=39.59
 OPT
f=55
TT=64.402
T1=39.1
 OPT
f=55
TT=64.166
T1=39
 OPT
f=55
TT=87.625
T1=64.52
 OPT
f=55
TT=57.469
T1=32.56
 OPT
f=55
TT=189.459
T1=178.68
GolombRuler/
GolombRuler-a3-s1/
GolombRuler-14-a3.xml 		SAT TO
f=134
TT=2400.42
T1=1253.11
 SAT (TO)
f=162
TT=2400.09
T1=1276.72
 SAT (TO)
f=134
TT=2400.46
T1=1253.11
 SAT (TO)
f=133
TT=19921.3
T1=11587.4
 SAT (TO)
f=134
TT=2400.42
T1=1418.51
 SAT (TO)
f=135
TT=1997.35
T1=551.59
 SAT (TO)
f=134
TT=2400.35
T1=1384.32
 SAT (TO)
f=135
TT=1997.64
T1=560.62
 SAT (TO)
f=138
TT=2400.03
T1=632.93
 SAT (TO)
f=135
TT=2000.48
T1=539.83
 SAT (TO)
f=141
TT=2400.13
T1=342.8
 SAT (TO)
f=142
TT=2400.11
T1=996.51
 SAT (TO)
f=139
TT=2400.1
T1=344.3
 SAT (TO)
f=135
TT=2400.05
T1=450.55
 SAT (TO)
f=137
TT=2400.05
T1=1065.46
 SAT (TO)
f=137
TT=2400.06
T1=1055.71
 SAT (TO)
f=137
TT=2400.08
T1=1056
 SAT (TO)
f=146
TT=2012.08
T1=1271.6
 SAT (TO)
f=142
TT=2012.48
T1=1426.11
 ? (TO)

TT=2400.03
GolombRuler/
GolombRuler-a3-s1/
GolombRuler-28-a3.xml 		SAT TO
f=935
TT=2400.46
T1=2120.5
 ? (TO)

TT=2400.04

 SAT (TO)
f=935
TT=2400.46
T1=2120.5
 SAT (TO)
f=952
TT=6960.33
T1=2884.18
 SAT (TO)
f=940
TT=2400.36
T1=2296.15
 SAT (TO)
f=967
TT=2003.51
T1=260.74
 SAT (TO)
f=935
TT=2400.36
T1=2172.28
 SAT (TO)
f=966
TT=2000.82
T1=889.46
 ? (TO)

TT=2400.05

 SAT (TO)
f=960
TT=2001.5
T1=766.38
 ? (TO)

TT=2400.09

 ? (TO)

TT=2400.08

 SAT (TO)
f=985
TT=2400.13
T1=941.96
 SAT (TO)
f=968
TT=2400.1
T1=848.5
 ? (TO)

TT=2400.05

 ? (TO)

TT=2400.11

 ? (TO)

TT=2400.1

 SAT (TO)
f=999
TT=2011.03
T1=817.06
 SAT (TO)
f=983
TT=2010.88
T1=712.39
 ? (TO)

TT=2400.01
GolombRuler/
GolombRuler-a3v18-09_c18.xml 		OPT
f=44
TT=3.789
T1=1.6
 OPT
f=44
TT=15.404
T1=10.31
 OPT
f=44
TT=8.679
T1=2.36
 OPT
f=44
TT=27.152
T1=6.81
 OPT
f=44
TT=10.083
T1=1.6
 OPT
f=44
TT=18.21
T1=4.69
 OPT
f=44
TT=11.119
T1=2.37
 OPT
f=44
TT=19.395
T1=4.94
 OPT
f=44
TT=67.907
T1=10.47
 OPT
f=44
TT=18.793
T1=3.81
 OPT
f=44
TT=17.237
T1=10.2
 OPT
f=44
TT=22.193
T1=13.35
 OPT
f=44
TT=21.59
T1=18.22
 OPT
f=44
TT=15.973
T1=12.81
 OPT
f=44
TT=5.324
T1=1.79
 OPT
f=44
TT=5.289
T1=1.79
 OPT
f=44
TT=5.307
T1=1.79
 OPT
f=44
TT=3.789
T1=2.4
 OPT
f=44
TT=2.644
T1=0.73
 OPT
f=44
TT=92.401
T1=92.38
GolombRuler/
GolombRuler-a3v18-10_c18.xml 		OPT
f=55
TT=28.582
T1=6.25
 OPT
f=55
TT=113.545
T1=77.18
 OPT
f=55
TT=28.582
T1=6.25
 OPT
f=55
TT=50.325
T1=10.96
 OPT
f=55
TT=37.686
T1=9.82
 OPT
f=55
TT=65.69
T1=15.45
 OPT
f=55
TT=31.423
T1=7.91
 OPT
f=55
TT=68.935
T1=13.56
 OPT
f=55
TT=2121.46
T1=1876.1
 OPT
f=55
TT=68.958
T1=17.85
 OPT
f=55
TT=85.776
T1=75.84
 OPT
f=55
TT=121.295
T1=70.23
 OPT
f=55
TT=53.899
T1=13.75
 OPT
f=55
TT=86.898
T1=35.75
 OPT
f=55
TT=63.334
T1=47.01
 OPT
f=55
TT=62.969
T1=46.79
 OPT
f=55
TT=62.961
T1=46.69
 OPT
f=55
TT=70.259
T1=56.55
 OPT
f=55
TT=51.607
T1=11.78
 OPT
f=55
TT=299.202
T1=299.18
GolombRuler/
GolombRuler-a3v18-11_c18.xml 		OPT
f=72
TT=886.709
T1=14.64
 SAT (TO)
f=76
TT=2400.04
T1=1551.36
 OPT
f=72
TT=901.066
T1=14.64
 OPT
f=72
TT=1802.45
T1=30.32
 OPT
f=72
TT=886.709
T1=19.01
 OPT
f=72
TT=1815.92
T1=28.81
 OPT
f=72
TT=865.977
T1=16.95
 OPT
f=72
TT=1823.11
T1=31.58
 SAT (TO)
f=74
TT=2400.07
T1=301.96
 OPT
f=72
TT=1956.05
T1=33.64
 OPT
f=72
TT=1943.82
T1=110.33
 SAT (TO)
f=72
TT=2400.07
T1=546.74
 SAT (TO)
f=72
TT=2400.07
T1=373.78
 OPT
f=72
TT=2176
T1=688.57
 OPT
f=72
TT=1793
T1=91.89
 OPT
f=72
TT=1779.59
T1=91.18
 OPT
f=72
TT=1790.83
T1=91.87
 SAT (TO)
f=72
TT=2012.86
T1=1011.02
 SAT (TO)
f=72
TT=2012.63
T1=152.39
 ? (TO)

TT=2400.05
GolombRuler/
GolombRuler-a3v18-13_c18.xml 		SAT TO
f=110
TT=1994.42
T1=462.57
 SAT (TO)
f=130
TT=2400.1
T1=1888.04
 SAT (TO)
f=110
TT=2400.33
T1=462.57
 Wrong Opt.
f=136
TT=6.352
T1=5.74
 SAT (TO)
f=110
TT=2400.6
T1=508
 SAT (TO)
f=110
TT=2000.16
T1=1158.93
 SAT (TO)
f=110
TT=2400.44
T1=502.79
 SAT (TO)
f=110
TT=1999.96
T1=1083.44
 SAT (TO)
f=115
TT=2400.05
T1=712.18
 SAT (TO)
f=110
TT=1994.42
T1=1152.42
 SAT (TO)
f=115
TT=2400.05
T1=378.8
 SAT (TO)
f=113
TT=2400.1
T1=1837.07
 SAT (TO)
f=114
TT=2400.06
T1=1624
 SAT (TO)
f=112
TT=2400.06
T1=38.95
 SAT (TO)
f=113
TT=2400.02
T1=316.71
 SAT (TO)
f=113
TT=2400.01
T1=361.72
 SAT (TO)
f=113
TT=2400.03
T1=317.18
 SAT (TO)
f=115
TT=2012.44
T1=48.52
 SAT (TO)
f=114
TT=2012.48
T1=577.12
 ? (TO)

TT=2400.05
GolombRuler/
GolombRuler-a3v18-nodv-09_c18.xml 		OPT
f=44
TT=8.576
T1=2.23
 OPT
f=44
TT=15.47
T1=10.34
 OPT
f=44
TT=8.576
T1=2.23
 OPT
f=44
TT=22.724
T1=6.86
 OPT
f=44
TT=10.26
T1=2.34
 OPT
f=44
TT=18.49
T1=4.74
 OPT
f=44
TT=9.744
T1=2.28
 OPT
f=44
TT=20.296
T1=4.6
 OPT
f=44
TT=66.205
T1=9.73
 OPT
f=44
TT=16.781
T1=5.42
 OPT
f=44
TT=132.421
T1=74.31
 OPT
f=44
TT=229.325
T1=11.21
 OPT
f=44
TT=154.164
T1=49.8
 OPT
f=44
TT=135.626
T1=58.72
 OPT
f=44
TT=26.062
T1=11.19
 OPT
f=44
TT=25.904
T1=11.1
 OPT
f=44
TT=26.109
T1=11.18
 OPT
f=44
TT=11.64
T1=3.97
 OPT
f=44
TT=11.652
T1=1.58
 OPT
f=44
TT=93.146
T1=93.09
GolombRuler/
GolombRuler-a3v18-nodv-10_c18.xml 		OPT
f=55
TT=30.685
T1=6.37
 OPT
f=55
TT=99.346
T1=67.54
 OPT
f=55
TT=30.685
T1=6.37
 OPT
f=55
TT=65.619
T1=12.39
 OPT
f=55
TT=35.43
T1=9.4
 OPT
f=55
TT=64.468
T1=14.02
 OPT
f=55
TT=30.51
T1=6.77
 OPT
f=55
TT=66.29
T1=18.61
 OPT
f=55
TT=2153.24
T1=1904.33
 OPT
f=55
TT=68.901
T1=15.9
 OPT
f=55
TT=1355.84
T1=374.46
 SAT (TO)
f=55
TT=2400.08
T1=1634.04
 OPT
f=55
TT=2265.67
T1=987.07
 OPT
f=55
TT=1292.12
T1=181.61
 OPT
f=55
TT=871.506
T1=807.05
 OPT
f=55
TT=989.861
T1=916.77
 OPT
f=55
TT=864.729
T1=801.01
 OPT
f=55
TT=117.19
T1=42.77
 OPT
f=55
TT=103.29
T1=42.92
 OPT
f=55
TT=298.186
T1=298.1
GolombRuler/
GolombRuler-a4-s1/
GolombRuler-09-a4.xml 		OPT
f=44
TT=42.171
T1=17.12
 OPT
f=44
TT=42.171
T1=27.13
 OPT
f=44
TT=589.29
T1=58.01
 OPT
f=44
TT=398.817
T1=72.32
 OPT
f=44
TT=430.016
T1=59.12
 OPT
f=44
TT=579.461
T1=137.54
 OPT
f=44
TT=453.867
T1=61.46
 OPT
f=44
TT=621.215
T1=119.76
 OPT
f=44
TT=396.544
T1=385.26
 OPT
f=44
TT=595.92
T1=115.42
 OPT
f=44
TT=59.145
T1=12.99
 OPT
f=44
TT=101.52
T1=17.12
 OPT
f=44
TT=71.032
T1=38.47
 OPT
f=44
TT=62.453
T1=26.4
 ? (MO)

TT=287.674

 ? (MO)

TT=284.749

 ? (MO)

TT=287.138

 ? (TO)

TT=252.771

 ? (TO)

TT=252.724

 OPT
f=44
TT=145.922
T1=145.88
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
GolombRuler/
GolombRuler-a4-s1/
GolombRuler-11-a4.xml 		SAT TO
f=72
TT=2400.08
T1=1041.53
 SAT (TO)
f=72
TT=2400.11
T1=2264.33
 SAT (TO)
f=77
TT=2400.36
T1=2327.22
 Wrong Opt.
f=83
TT=527.497
T1=526.81
 SAT (TO)
f=78
TT=2400.61
T1=455.79
 SAT (TO)
f=78
TT=1924.84
T1=1256.07
 SAT (TO)
f=78
TT=2400.52
T1=537.15
 SAT (TO)
f=77
TT=1743.51
T1=1084.65
 SAT (TO)
f=74
TT=2400.07
T1=1184.26
 SAT (TO)
f=77
TT=1995.36
T1=1652.82
 SAT (TO)
f=72
TT=2400.12
T1=971.66
 SAT (TO)
f=72
TT=2400.15
T1=1170.72
 SAT (TO)
f=72
TT=2400.08
T1=1041.53
 SAT (TO)
f=72
TT=2400.1
T1=1194.89
 ? (MO)

TT=287.198

 ? (MO)

TT=288.828

 ? (MO)

TT=287.531

 ? (TO)

TT=252.804

 ? (TO)

TT=252.742

 ? (TO)

TT=2400.03
GraphColoring/GraphColoring-m1-fixed/
GraphColoring-qwhopt-o33-h381-bal-1.xml 		SAT TO
f=33
TT=1964.89
T1=6.79
 SAT (TO)
f=33
TT=2400.12
T1=13.24
 SAT (TO)
f=33
TT=2400.61
T1=78.43
 SAT (TO)
f=33
TT=20016
T1=60.2
 SAT (TO)
f=33
TT=2400.5
T1=22.38
 SAT (TO)
f=33
TT=1969.29
T1=93.53
 SAT (TO)
f=33
TT=2400.41
T1=43.48
 SAT (TO)
f=33
TT=1968.88
T1=87.02
 SAT (TO)
f=33
TT=2400.03
T1=13.29
 SAT (TO)
f=33
TT=1965.63
T1=115.36
 SAT (TO)
f=33
TT=2400.14
T1=124.01
 SAT (TO)
f=33
TT=2400.12
T1=249.66
 SAT (TO)
f=33
TT=2400.13
T1=84.26
 SAT (TO)
f=33
TT=2400.1
T1=112.34
 SAT (TO)
f=33
TT=2400.03
T1=6.79
 SAT (TO)
f=33
TT=2400.02
T1=6.89
 SAT (TO)
f=33
TT=2400.04
T1=6.89
 SAT (TO)
f=33
TT=1964.89
T1=60.09
 SAT (TO)
f=33
TT=1964.31
T1=61.64
 ? (TO)

TT=2400.05
GraphColoring/
GraphColoring-m1-mono/
GraphColoring-2-fullins-5.xml 		OPT
f=6
TT=58.196
T1=1.88
 OPT
f=6
TT=84.744
T1=8.58
 OPT
f=6
TT=171.561
T1=11.36
 OPT
f=6
TT=393.804
T1=19.15
 OPT
f=6
TT=174.488
T1=10.61
 OPT
f=6
TT=372.329
T1=18.33
 OPT
f=6
TT=175.694
T1=13.1
 OPT
f=6
TT=326.891
T1=20.38
 OPT
f=6
TT=482.417
T1=6.17
 OPT
f=6
TT=355.494
T1=19.94
 OPT
f=6
TT=1649.66
T1=52.32
 SAT (TO)
f=693
TT=2400.08
T1=2389.46
 SAT (TO)
f=6
TT=2400.1
T1=61.7
 SAT (TO)
f=6
TT=2400.1
T1=71.65
 OPT
f=6
TT=340.302
T1=1.89
 OPT
f=6
TT=331.616
T1=1.89
 OPT
f=6
TT=338.591
T1=1.88
 SAT (TO)
f=6
TT=1991.64
T1=21.46
 SAT (TO)
f=6
TT=1994.78
T1=10.82
 OPT
f=6
TT=58.196
T1=58.18
GraphColoring/
GraphColoring-m1-mono/
GraphColoring-4-insertions-3.xml 		OPT
f=3
TT=4.897
T1=1.5
 OPT
f=3
TT=490.381
T1=3.32
 OPT
f=3
TT=259.242
T1=1.55
 OPT
f=3
TT=574.827
T1=1.96
 OPT
f=3
TT=191.826
T1=1.52
 OPT
f=3
TT=612.17
T1=1.99
 OPT
f=3
TT=204.174
T1=1.49
 OPT
f=3
TT=586.53
T1=1.94
 OPT
f=3
TT=784.133
T1=1.5
 OPT
f=3
TT=496.976
T1=1.92
 OPT
f=3
TT=1824.73
T1=9.1
 SAT (TO)
f=3
TT=2400.09
T1=15.21
 SAT (TO)
f=3
TT=2400.11
T1=8.44
 OPT
f=3
TT=1972.28
T1=6.63
 SAT (TO)
f=3
TT=2400.03
T1=0
 SAT (TO)
f=3
TT=2400.04
T1=0
 SAT (TO)
f=3
TT=2400.07
T1=0
 SAT (TO)
f=3
TT=2012.75
T1=0
 SAT (TO)
f=3
TT=2012.43
T1=0
 OPT
f=3
TT=4.897
T1=4.79
GraphColoring/
GraphColoring-m1-mono/
GraphColoring-5-fullins-4.xml 		OPT
f=8
TT=75.137
T1=1.79
 OPT
f=8
TT=87.787
T1=8.5
 OPT
f=8
TT=293.348
T1=17.5
 OPT
f=8
TT=863.564
T1=24.03
 OPT
f=8
TT=271.812
T1=14.46
 OPT
f=8
TT=924.097
T1=20.75
 OPT
f=8
TT=310.465
T1=14.94
 OPT
f=8
TT=587.592
T1=21.68
 OPT
f=8
TT=1665.45
T1=6.65
 OPT
f=8
TT=499.002
T1=19.84
 OPT
f=8
TT=1948.92
T1=58.55
 SAT (TO)
f=980
TT=2400.08
T1=2381.63
 SAT (TO)
f=8
TT=2400.08
T1=114.33
 SAT (TO)
f=8
TT=2400.1
T1=90.68
 OPT
f=8
TT=147.813
T1=1.79
 OPT
f=8
TT=133.489
T1=1.79
 OPT
f=8
TT=139.089
T1=1.79
 SAT (TO)
f=8
TT=1995.18
T1=20.03
 SAT (TO)
f=8
TT=1995.2
T1=20.04
 OPT
f=8
TT=75.137
T1=75.09
GraphColoring/
GraphColoring-m1-mono/
GraphColoring-ash608GPIA.xml 		OPT
f=3
TT=1.32
T1=1.28
 OPT
f=3
TT=7.715
T1=7.48
 OPT
f=3
TT=12.425
T1=12.26
 OPT
f=3
TT=13.947
T1=13.13
 OPT
f=3
TT=11.708
T1=9.55
 OPT
f=3
TT=16.423
T1=15.76
 OPT
f=3
TT=9.741
T1=9.26
 OPT
f=3
TT=14.75
T1=14.41
 OPT
f=3
TT=5.048
T1=4.79
 OPT
f=3
TT=17.089
T1=15.96
 OPT
f=3
TT=91.432
T1=91.19
 SAT (TO)
f=1105
TT=2400.13
T1=2385.07
 OPT
f=3
TT=124.199
T1=123.76
 OPT
f=3
TT=110.509
T1=110.14
 OPT
f=3
TT=1.32
T1=1.29
 OPT
f=3
TT=1.337
T1=1.29
 OPT
f=3
TT=1.34
T1=1.28
 OPT
f=3
TT=59.289
T1=58.59
 OPT
f=3
TT=487.461
T1=486.69
 OPT
f=3
TT=25.525
T1=25.48
GraphColoring/
GraphColoring-m1-mono/
GraphColoring-david.xml 		OPT
f=10
TT=8.315
T1=0
 OPT
f=10
TT=80.813
T1=3.44
 OPT
f=10
TT=472.593
T1=2.22
 OPT
f=10
TT=1052.44
T1=2.65
 OPT
f=10
TT=497.391
T1=2.27
 OPT
f=10
TT=959.216
T1=2.74
 OPT
f=10
TT=468.522
T1=2.16
 OPT
f=10
TT=1123.97
T1=2.8
 OPT
f=10
TT=288.961
T1=1.68
 OPT
f=10
TT=1113.25
T1=2.81
 OPT
f=10
TT=9.082
T1=6.86
 OPT
f=10
TT=15.794
T1=15.62
 OPT
f=10
TT=10.503
T1=10.3
 OPT
f=10
TT=8.315
T1=8.09
 OPT
f=10
TT=84.459
T1=0
 OPT
f=10
TT=84.615
T1=0
 OPT
f=10
TT=84.432
T1=0
 OPT
f=10
TT=841.425
T1=0
 OPT
f=10
TT=787.853
T1=0
 OPT
f=10
TT=8.654
T1=8.59
GraphColoring/
GraphColoring-m1-mono/
GraphColoring-homer.xml 		OPT
f=12
TT=26.811
T1=26.25
 SAT (TO)
f=12
TT=2400.03
T1=5.22
 SAT (TO)
f=12
TT=2400.69
T1=5.22
 SAT (TO)
f=12
TT=20048.2
T1=8.52
 SAT (TO)
f=12
TT=2400.63
T1=5.14
 SAT (TO)
f=12
TT=1996.14
T1=8.98
 SAT (TO)
f=12
TT=2400.55
T1=4.76
 SAT (TO)
f=12
TT=1993.18
T1=10.68
 SAT (TO)
f=12
TT=2400.08
T1=2.38
 SAT (TO)
f=12
TT=1995.22
T1=8.7
 OPT
f=12
TT=25.914
T1=25.57
 OPT
f=12
TT=227.613
T1=226.68
 OPT
f=12
TT=29.599
T1=29.04
 OPT
f=12
TT=26.811
T1=26.25
 SAT (TO)
f=12
TT=2400.01
T1=0.2
 SAT (TO)
f=12
TT=2400.08
T1=0.21
 SAT (TO)
f=12
TT=2400.04
T1=0.21
 SAT (TO)
f=12
TT=2010.25
T1=40.83
 SAT (TO)
f=12
TT=2009.8
T1=1.95
 OPT
f=12
TT=32.278
T1=32.18
GraphColoring/
GraphColoring-m1-mono/
GraphColoring-lei450-05b.xml 		OPT
f=4
TT=233.796
T1=233.76
 SAT (TO)
f=7
TT=2400.04
T1=12.28
 SAT (TO)
f=7
TT=2400.75
T1=357.09
 OPT
f=4
TT=2245.01
T1=2244.22
 SAT (TO)
f=7
TT=2400.59
T1=87.27
 SAT (TO)
f=7
TT=1998.13
T1=423.16
 SAT (TO)
f=7
TT=2400.34
T1=372.95
 SAT (TO)
f=7
TT=1998.79
T1=136.57
 SAT (TO)
f=7
TT=2400.11
T1=25.35
 OPT
f=4
TT=1910.26
T1=1910.01
 SAT (TO)
f=7
TT=2400.09
T1=1826.46
 SAT (TO)
f=8
TT=2400.09
T1=647.9
 SAT (TO)
f=8
TT=2400.09
T1=25.58
 SAT (TO)
f=7
TT=2400.05
T1=112.66
 OPT
f=4
TT=233.796
T1=233.76
 OPT
f=4
TT=237.803
T1=237.7
 OPT
f=4
TT=269.82
T1=269.76
 OPT
f=4
TT=1480.05
T1=1479.72
 SAT (TO)
f=7
TT=2004.48
T1=26.23
 OPT
f=4
TT=749.199
T1=749.1
GraphColoring/
GraphColoring-m1-mono/
GraphColoring-lei450-05c.xml 		OPT
f=4
TT=1.937
T1=1.88
 OPT
f=4
TT=9.858
T1=9.77
 OPT
f=4
TT=12.451
T1=12.25
 OPT
f=4
TT=25.022
T1=24.68
 OPT
f=4
TT=11.881
T1=11.45
 OPT
f=4
TT=22.603
T1=22.14
 OPT
f=4
TT=13.214
T1=13.1
 OPT
f=4
TT=18.2
T1=17.25
 OPT
f=4
TT=8.24
T1=8.19
 OPT
f=4
TT=20.416
T1=19.88
 OPT
f=4
TT=161.096
T1=160.96
 OPT
f=4
TT=678.868
T1=678.75
 OPT
f=4
TT=83.804
T1=83.69
 OPT
f=4
TT=37.226
T1=37.09
 OPT
f=4
TT=1.937
T1=1.88
 OPT
f=4
TT=1.959
T1=1.89
 OPT
f=4
TT=1.949
T1=1.89
 OPT
f=4
TT=11.887
T1=10.96
 OPT
f=4
TT=8.125
T1=7.74
 OPT
f=4
TT=23.977
T1=23.89
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
GraphColoring/
GraphColoring-m1-mono/
GraphColoring-lei450-05d.xml 		OPT
f=4
TT=2.198
T1=2.09
 OPT
f=4
TT=9.733
T1=9.65
 OPT
f=4
TT=10.661
T1=7.87
 OPT
f=4
TT=12.265
T1=11.05
 OPT
f=4
TT=7.728
T1=7.12
 OPT
f=4
TT=11.602
T1=10.23
 OPT
f=4
TT=8.684
T1=7.93
 OPT
f=4
TT=13.002
T1=11.38
 OPT
f=4
TT=8.758
T1=8.68
 OPT
f=4
TT=12.778
T1=11.42
 OPT
f=4
TT=43.892
T1=43.82
 OPT
f=4
TT=1152.01
T1=1151.9
 OPT
f=4
TT=83.529
T1=83.46
 OPT
f=4
TT=48.534
T1=48.43
 OPT
f=4
TT=2.205
T1=2.1
 OPT
f=4
TT=2.211
T1=2.19
 OPT
f=4
TT=2.198
T1=2.09
 OPT
f=4
TT=11.425
T1=11.08
 OPT
f=4
TT=5.342
T1=4.81
 OPT
f=4
TT=23.113
T1=23.09
GraphColoring/
GraphColoring-m1-mono/
GraphColoring-lei450-25a.xml 		OPT
f=24
TT=31.214
T1=30.19
 SAT (TO)
f=24
TT=2400.12
T1=6.91
 SAT (TO)
f=24
TT=2400.36
T1=8.48
 SAT (TO)
f=24
TT=20035.2
T1=15.45
 SAT (TO)
f=24
TT=2400.68
T1=8.85
 SAT (TO)
f=24
TT=1995.11
T1=13.64
 SAT (TO)
f=24
TT=2400.55
T1=8.44
 SAT (TO)
f=24
TT=1995.47
T1=12.23
 SAT (TO)
f=24
TT=2400.11
T1=4.08
 SAT (TO)
f=24
TT=1994.95
T1=13.14
 OPT
f=24
TT=32.314
T1=31.5
 OPT
f=24
TT=448.467
T1=447.74
 OPT
f=24
TT=33.463
T1=32.41
 OPT
f=24
TT=31.214
T1=30.19
 SAT (TO)
f=24
TT=2400.02
T1=1.19
 SAT (TO)
f=24
TT=2400.02
T1=1.19
 SAT (TO)
f=24
TT=2400.02
T1=1.28
 SAT (TO)
f=24
TT=2001.1
T1=2.63
 SAT (TO)
f=24
TT=2001.29
T1=2.06
 ? (TO)

TT=2400.1
GraphColoring/
GraphColoring-m1-mono/
GraphColoring-myciel5.xml 		OPT
f=5
TT=19.389
T1=0
 OPT
f=5
TT=29.634
T1=3.37
 OPT
f=5
TT=41.307
T1=1.52
 OPT
f=5
TT=90.327
T1=1.98
 OPT
f=5
TT=48.057
T1=1.59
 OPT
f=5
TT=113.169
T1=2.01
 OPT
f=5
TT=45.238
T1=1.56
 OPT
f=5
TT=120.205
T1=2
 OPT
f=5
TT=80.145
T1=1.3
 OPT
f=5
TT=109.778
T1=1.97
 OPT
f=5
TT=345.989
T1=6.59
 OPT
f=5
TT=1075.18
T1=10.82
 OPT
f=5
TT=265.481
T1=6.55
 OPT
f=5
TT=249.521
T1=6.04
 OPT
f=5
TT=632.063
T1=0
 OPT
f=5
TT=630.952
T1=0
 OPT
f=5
TT=637.08
T1=0
 SAT (TO)
f=5
TT=2012.45
T1=0
 SAT (TO)
f=5
TT=2012.5
T1=0
 OPT
f=5
TT=19.389
T1=19.29
GraphColoring/
GraphColoring-m1-mono/
GraphColoring-school1.xml 		OPT
f=13
TT=79.683
T1=79.42
 SAT (TO)
f=13
TT=2400.03
T1=18.42
 SAT (TO)
f=13
TT=2400.46
T1=11.18
 SAT (TO)
f=13
TT=20023.3
T1=17.11
 SAT (TO)
f=13
TT=2400.46
T1=10.56
 SAT (TO)
f=13
TT=1984.77
T1=16.43
 SAT (TO)
f=13
TT=2400.38
T1=10.44
 SAT (TO)
f=13
TT=1985.2
T1=17.01
 SAT (TO)
f=13
TT=2400.02
T1=6.71
 SAT (TO)
f=13
TT=1980.71
T1=16.59
 OPT
f=13
TT=82.917
T1=82.81
 SAT (TO)
f=29
TT=2400.14
T1=2157.55
 OPT
f=13
TT=89.013
T1=88.76
 OPT
f=13
TT=79.683
T1=79.42
 SAT (TO)
f=13
TT=2400.04
T1=3.29
 SAT (TO)
f=13
TT=2400.03
T1=3.29
 SAT (TO)
f=13
TT=2400.08
T1=3.28
 SAT (TO)
f=13
TT=1987.84
T1=4.38
 SAT (TO)
f=13
TT=1987.4
T1=6.36
 OPT
f=13
TT=503.994
T1=503.94
GraphColoring/
GraphColoring-m1-mono/
GraphColoring-will199GPIA.xml 		OPT
f=6
TT=1.169
T1=1
 OPT
f=6
TT=7.432
T1=6.95
 OPT
f=6
TT=14.565
T1=9.44
 OPT
f=6
TT=26.557
T1=14.81
 OPT
f=6
TT=15.228
T1=10.34
 OPT
f=6
TT=24.579
T1=15.15
 OPT
f=6
TT=13.057
T1=8.69
 OPT
f=6
TT=30.193
T1=16.13
 OPT
f=6
TT=6.592
T1=3.74
 OPT
f=6
TT=29.076
T1=14.62
 OPT
f=6
TT=44.024
T1=40.97
 OPT
f=6
TT=1249.07
T1=1223.24
 OPT
f=6
TT=52.613
T1=47.89
 OPT
f=6
TT=52.207
T1=46.54
 OPT
f=6
TT=1.169
T1=1
 OPT
f=6
TT=1.185
T1=1
 OPT
f=6
TT=1.196
T1=1
 OPT
f=6
TT=53.201
T1=48.22
 OPT
f=6
TT=21.01
T1=15.56
 OPT
f=6
TT=29.489
T1=29.39
GraphColoring/
GraphColoring-m1-mono/
GraphColoring-zeroin-i-1.xml 		OPT
f=48
TT=18.837
T1=18.53
 SAT (TO)
f=48
TT=2400.05
T1=6.13
 SAT (TO)
f=48
TT=2400.86
T1=5.27
 SAT (TO)
f=48
TT=20028.3
T1=7.54
 SAT (TO)
f=48
TT=2400.67
T1=5.28
 SAT (TO)
f=48
TT=1992.05
T1=8.28
 SAT (TO)
f=48
TT=2400.35
T1=5.22
 SAT (TO)
f=48
TT=1995.6
T1=10.7
 SAT (TO)
f=48
TT=2400.04
T1=3.09
 SAT (TO)
f=48
TT=1996.84
T1=8.03
 OPT
f=48
TT=23.556
T1=23.41
 OPT
f=48
TT=567.092
T1=566.87
 OPT
f=48
TT=18.837
T1=18.53
 OPT
f=48
TT=23.817
T1=23.4
 SAT (TO)
f=48
TT=2400.09
T1=0.6
 SAT (TO)
f=48
TT=2400.07
T1=0.6
 SAT (TO)
f=48
TT=2400.05
T1=0.6
 SAT (TO)
f=48
TT=2007.41
T1=0.78
 SAT (TO)
f=48
TT=2007.34
T1=0.8
 ? (TO)

TT=2400.06
Knapsack/
Knapsack-m1-s40/
Knapsack-40-150-01.xml 		OPT
f=1128
TT=9.284
T1=0
 OPT
f=1128
TT=31.676
T1=31.6
 OPT
f=1128
TT=9.284
T1=2.48
 OPT
f=1128
TT=23.005
T1=4.93
 OPT
f=1128
TT=9.485
T1=3.92
 OPT
f=1128
TT=21.604
T1=3.62
 OPT
f=1128
TT=12.239
T1=3.18
 OPT
f=1128
TT=18.429
T1=3.64
 OPT
f=1128
TT=124.738
T1=1.6
 OPT
f=1128
TT=22.749
T1=6.02
 OPT
f=1128
TT=97.551
T1=10.33
 OPT
f=1128
TT=184.878
T1=9.8
 OPT
f=1128
TT=74.825
T1=10.04
 OPT
f=1128
TT=91.739
T1=8.24
 OPT
f=1128
TT=10.051
T1=1.79
 OPT
f=1128
TT=10.031
T1=1.69
 OPT
f=1128
TT=10.035
T1=1.69
 OPT
f=1128
TT=57.966
T1=0
 OPT
f=1128
TT=58.946
T1=4.03
 OPT
f=1128
TT=81.97
T1=81.89
Knapsack/
Knapsack-m1-s40/
Knapsack-40-150-08.xml 		OPT
f=887
TT=6.875
T1=0.31
 OPT
f=887
TT=45.47
T1=44.98
 OPT
f=887
TT=9.682
T1=3.92
 OPT
f=887
TT=15.422
T1=4.28
 OPT
f=887
TT=12.257
T1=2.71
 OPT
f=887
TT=17.474
T1=2.11
 OPT
f=887
TT=8.013
T1=3.92
 OPT
f=887
TT=16.879
T1=4.55
 OPT
f=887
TT=183.608
T1=1.32
 OPT
f=887
TT=13.966
T1=3.03
 OPT
f=887
TT=137.637
T1=14.33
 OPT
f=887
TT=580.958
T1=11.45
 OPT
f=887
TT=148.364
T1=11.39
 OPT
f=887
TT=160.473
T1=5.79
 OPT
f=887
TT=6.984
T1=0.31
 OPT
f=887
TT=6.875
T1=0.31
 OPT
f=887
TT=6.926
T1=0.31
 OPT
f=887
TT=31.506
T1=11.09
 OPT
f=887
TT=28.068
T1=1.71
 OPT
f=887
TT=120.699
T1=120.67
Knapsack/
Knapsack-m1-s50/
Knapsack-50-200-00.xml 		OPT
f=960
TT=24.266
T1=1.61
 OPT
f=960
TT=220.903
T1=220.77
 OPT
f=960
TT=26.299
T1=3.92
 OPT
f=960
TT=58.318
T1=5.17
 OPT
f=960
TT=24.266
T1=3.91
 OPT
f=960
TT=48.038
T1=3.44
 OPT
f=960
TT=26.102
T1=3.45
 OPT
f=960
TT=51.169
T1=3.55
 OPT
f=960
TT=936.797
T1=1.61
 OPT
f=960
TT=56.104
T1=3.33
 OPT
f=960
TT=740.932
T1=8.58
 SAT (TO)
f=960
TT=2400.08
T1=10.1
 OPT
f=960
TT=966.654
T1=8.17
 OPT
f=960
TT=649.78
T1=7.36
 OPT
f=960
TT=29.389
T1=6.29
 OPT
f=960
TT=29.317
T1=6.29
 OPT
f=960
TT=29.327
T1=6.29
 OPT
f=960
TT=186.73
T1=102.15
 OPT
f=960
TT=174.347
T1=3.31
 OPT
f=960
TT=215.921
T1=215.89
Knapsack/
Knapsack-m1-s50/
Knapsack-50-200-02.xml 		OPT
f=1003
TT=85.046
T1=1.55
 OPT
f=1003
TT=2076.07
T1=2054.19
 OPT
f=1003
TT=85.046
T1=4.24
 OPT
f=1003
TT=220.012
T1=5.53
 OPT
f=1003
TT=111.73
T1=6.83
 OPT
f=1003
TT=199.591
T1=4.37
 OPT
f=1003
TT=93.721
T1=4.32
 OPT
f=1003
TT=207.412
T1=5.22
 OPT
f=1003
TT=2005.12
T1=1.55
 OPT
f=1003
TT=191.399
T1=5.26
 SAT (TO)
f=1003
TT=2400.13
T1=21.28
 SAT (TO)
f=1003
TT=2400.07
T1=9.5
 SAT (TO)
f=1003
TT=2400.08
T1=11.96
 SAT (TO)
f=1003
TT=2400.06
T1=9.3
 OPT
f=1003
TT=245.073
T1=8.29
 OPT
f=1003
TT=242.975
T1=8.19
 OPT
f=1003
TT=243.622
T1=8.29
 OPT
f=1003
TT=944.038
T1=265.12
 OPT
f=1003
TT=1122.71
T1=212.34
 OPT
f=1003
TT=621.034
T1=182.48
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
Knapsack/
Knapsack-m1-s50/
Knapsack-50-200-03.xml 		OPT
f=1109
TT=92.473
T1=1.34
 OPT
f=1109
TT=627.082
T1=626.84
 OPT
f=1109
TT=92.473
T1=5.13
 OPT
f=1109
TT=252.096
T1=7.11
 OPT
f=1109
TT=93.314
T1=4.31
 OPT
f=1109
TT=218.62
T1=5.22
 OPT
f=1109
TT=88.183
T1=3.89
 OPT
f=1109
TT=212.026
T1=6.76
 OPT
f=1109
TT=1110.68
T1=1.34
 OPT
f=1109
TT=235.86
T1=2.94
 OPT
f=1109
TT=1736.3
T1=13.76
 SAT (TO)
f=1109
TT=2400.08
T1=57.14
 OPT
f=1109
TT=1342.82
T1=11.76
 OPT
f=1109
TT=1815.56
T1=13.07
 OPT
f=1109
TT=123.358
T1=12.59
 OPT
f=1109
TT=124.075
T1=12.68
 OPT
f=1109
TT=124.023
T1=12.68
 OPT
f=1109
TT=669.898
T1=1.67
 OPT
f=1109
TT=618.622
T1=34.25
 OPT
f=1109
TT=437.734
T1=376.8
Knapsack/
Knapsack-m1-s50/
Knapsack-50-200-04.xml 		OPT
f=1289
TT=77.947
T1=1.59
 OPT
f=1289
TT=1895.18
T1=1894.48
 OPT
f=1289
TT=90.151
T1=86.98
 OPT
f=1289
TT=149.943
T1=3.41
 OPT
f=1289
TT=77.947
T1=70.97
 OPT
f=1289
TT=109.858
T1=4.43
 OPT
f=1289
TT=47.251
T1=4.67
 OPT
f=1289
TT=117.358
T1=4.5
 OPT
f=1289
TT=1500.15
T1=1.59
 OPT
f=1289
TT=103.972
T1=3.73
 SAT (TO)
f=1289
TT=2400.09
T1=18.91
 SAT (TO)
f=1289
TT=2400.05
T1=10.79
 SAT (TO)
f=1289
TT=2400.12
T1=10.72
 OPT
f=1289
TT=1397.28
T1=11.25
 OPT
f=1289
TT=107.792
T1=4.59
 OPT
f=1289
TT=108.398
T1=4.59
 OPT
f=1289
TT=108.21
T1=4.59
 OPT
f=1289
TT=585.592
T1=190.02
 OPT
f=1289
TT=563.43
T1=8.77
 OPT
f=1289
TT=492.479
T1=492.43
Knapsack/
Knapsack-m1-s50/
Knapsack-50-200-05.xml 		OPT
f=1105
TT=22.636
T1=1.35
 OPT
f=1105
TT=473.187
T1=471.69
 OPT
f=1105
TT=24.388
T1=3.55
 OPT
f=1105
TT=59.1
T1=6.96
 OPT
f=1105
TT=22.636
T1=3.55
 OPT
f=1105
TT=50.99
T1=2.25
 OPT
f=1105
TT=22.452
T1=5.58
 OPT
f=1105
TT=54.471
T1=5.15
 OPT
f=1105
TT=1286.38
T1=1.35
 OPT
f=1105
TT=58.754
T1=3.74
 SAT (TO)
f=1105
TT=2400.11
T1=10.7
 SAT (TO)
f=1105
TT=2400.12
T1=8.3
 OPT
f=1105
TT=1852.8
T1=9.31
 OPT
f=1105
TT=1784.13
T1=10.36
 OPT
f=1105
TT=37.896
T1=22.19
 OPT
f=1105
TT=37.658
T1=22
 OPT
f=1105
TT=37.732
T1=22.1
 OPT
f=1105
TT=210.258
T1=10.29
 OPT
f=1105
TT=164.423
T1=4.76
 OPT
f=1105
TT=198.061
T1=197.99
Knapsack/
Knapsack-m1-s50/
Knapsack-50-200-06.xml 		OPT
f=1079
TT=30.656
T1=0
 OPT
f=1079
TT=649.754
T1=649.17
 OPT
f=1079
TT=31.379
T1=4.39
 OPT
f=1079
TT=69.116
T1=5.69
 OPT
f=1079
TT=30.656
T1=4.12
 OPT
f=1079
TT=71.098
T1=3.57
 OPT
f=1079
TT=27.531
T1=3.25
 OPT
f=1079
TT=62.956
T1=3.61
 OPT
f=1079
TT=1230.14
T1=1.08
 OPT
f=1079
TT=69.422
T1=5.79
 OPT
f=1079
TT=2132.22
T1=9.43
 SAT (TO)
f=1079
TT=2400.04
T1=9.02
 OPT
f=1079
TT=1775.96
T1=10.95
 OPT
f=1079
TT=1481.83
T1=8.27
 OPT
f=1079
TT=74.765
T1=0
 OPT
f=1079
TT=74.661
T1=0
 OPT
f=1079
TT=74.671
T1=0
 OPT
f=1079
TT=321.419
T1=4.12
 OPT
f=1079
TT=307.297
T1=54.2
 OPT
f=1079
TT=424.335
T1=166.9
Knapsack/
Knapsack-m1-s50/
Knapsack-50-200-07.xml 		OPT
f=1070
TT=21.67
T1=1.56
 OPT
f=1070
TT=512.736
T1=456.24
 OPT
f=1070
TT=22.398
T1=3.55
 OPT
f=1070
TT=59.783
T1=4.16
 OPT
f=1070
TT=21.67
T1=3.95
 OPT
f=1070
TT=60.083
T1=4.35
 OPT
f=1070
TT=33.144
T1=10.77
 OPT
f=1070
TT=48.197
T1=3.73
 OPT
f=1070
TT=1474.91
T1=1.56
 OPT
f=1070
TT=51.261
T1=2.3
 OPT
f=1070
TT=1286.87
T1=14.17
 SAT (TO)
f=1070
TT=2400.05
T1=11.34
 OPT
f=1070
TT=1845.48
T1=14.14
 OPT
f=1070
TT=1633.01
T1=9.2
 OPT
f=1070
TT=48.065
T1=9.69
 OPT
f=1070
TT=47.684
T1=9.59
 OPT
f=1070
TT=48.088
T1=9.69
 OPT
f=1070
TT=255.07
T1=54.22
 OPT
f=1070
TT=264.318
T1=63.86
 OPT
f=1070
TT=143.992
T1=143.88
Knapsack/
Knapsack-m1-s50/
Knapsack-50-200-09.xml 		OPT
f=1241
TT=39.148
T1=1.06
 OPT
f=1241
TT=1085.69
T1=1085.02
 OPT
f=1241
TT=39.148
T1=3.52
 OPT
f=1241
TT=71.529
T1=6.24
 OPT
f=1241
TT=42.335
T1=4.78
 OPT
f=1241
TT=84.548
T1=5.3
 OPT
f=1241
TT=48.278
T1=5.15
 OPT
f=1241
TT=85.668
T1=7.36
 OPT
f=1241
TT=1186.27
T1=1.06
 OPT
f=1241
TT=90.188
T1=5.45
 SAT (TO)
f=1241
TT=2400.06
T1=8.81
 SAT (TO)
f=1241
TT=2400.08
T1=14.42
 OPT
f=1241
TT=2396.34
T1=21.74
 OPT
f=1241
TT=2001.92
T1=24.37
 OPT
f=1241
TT=87.312
T1=14.18
 OPT
f=1241
TT=86.213
T1=13.99
 OPT
f=1241
TT=86.794
T1=14.1
 OPT
f=1241
TT=416.255
T1=43.82
 OPT
f=1241
TT=529.666
T1=233.11
 OPT
f=1241
TT=205.901
T1=205.88
Knapsack/
Knapsack-m1-s50/
Knapsack-50-200-11.xml 		OPT
f=1049
TT=43.918
T1=1.61
 OPT
f=1049
TT=700.212
T1=700.07
 OPT
f=1049
TT=47.978
T1=4
 OPT
f=1049
TT=54.172
T1=4.94
 OPT
f=1049
TT=43.918
T1=3.76
 OPT
f=1049
TT=114.044
T1=4.53
 OPT
f=1049
TT=45.129
T1=3.58
 OPT
f=1049
TT=138.955
T1=5.7
 OPT
f=1049
TT=1211.16
T1=1.61
 OPT
f=1049
TT=98.142
T1=10.79
 OPT
f=1049
TT=2342.46
T1=8.77
 SAT (TO)
f=1049
TT=2400.08
T1=14.08
 SAT (TO)
f=1049
TT=2400.14
T1=10.25
 OPT
f=1049
TT=2196.84
T1=9.38
 OPT
f=1049
TT=87.369
T1=18.1
 OPT
f=1049
TT=87.412
T1=18.1
 OPT
f=1049
TT=87.131
T1=18
 OPT
f=1049
TT=444.756
T1=122.88
 OPT
f=1049
TT=572.597
T1=75.76
 OPT
f=1049
TT=274.047
T1=133.18
Knapsack/
Knapsack-m1-s50/
Knapsack-50-200-13.xml 		OPT
f=1427
TT=98.254
T1=6.66
 OPT
f=1427
TT=1611.05
T1=1610.94
 OPT
f=1427
TT=98.254
T1=7.83
 Wrong Opt.
f=1268
TT=4.167
T1=4.03
 OPT
f=1427
TT=115.421
T1=6.66
 OPT
f=1427
TT=191.071
T1=15.5
 OPT
f=1427
TT=109.827
T1=7.46
 OPT
f=1427
TT=207.864
T1=4.95
 SAT (TO)
f=1427
TT=2400.08
T1=1.61
 OPT
f=1427
TT=236.097
T1=12.7
 SAT (TO)
f=1427
TT=2400.12
T1=24.36
 SAT (TO)
f=1427
TT=2400.05
T1=19.19
 SAT (TO)
f=1427
TT=2400.11
T1=10.53
 SAT (TO)
f=1427
TT=2400.1
T1=11.32
 OPT
f=1427
TT=319.635
T1=14.59
 OPT
f=1427
TT=316.619
T1=14.39
 OPT
f=1427
TT=363.924
T1=16.59
 OPT
f=1427
TT=1149.54
T1=196.38
 OPT
f=1427
TT=1250.51
T1=7.94
 OPT
f=1427
TT=302.569
T1=302.47
Knapsack/
Knapsack-m1-s50/
Knapsack-50-200-14.xml 		OPT
f=1121
TT=74.032
T1=1.34
 OPT
f=1121
TT=1482.02
T1=1481.87
 OPT
f=1121
TT=74.032
T1=4.76
 OPT
f=1121
TT=211.615
T1=5.05
 OPT
f=1121
TT=84.699
T1=3.57
 OPT
f=1121
TT=232.741
T1=5.92
 OPT
f=1121
TT=75.375
T1=5.13
 OPT
f=1121
TT=199.261
T1=4.36
 OPT
f=1121
TT=1624.05
T1=1.34
 OPT
f=1121
TT=201.224
T1=3.76
 SAT (TO)
f=1121
TT=2400.1
T1=8.08
 SAT (TO)
f=1121
TT=2400.11
T1=11.12
 SAT (TO)
f=1121
TT=2400.14
T1=10
 SAT (TO)
f=1121
TT=2400.04
T1=9.08
 OPT
f=1121
TT=181.03
T1=10.49
 OPT
f=1121
TT=181.519
T1=10.59
 OPT
f=1121
TT=205.614
T1=12
 OPT
f=1121
TT=1101.55
T1=105.32
 OPT
f=1121
TT=1312.78
T1=174.8
 OPT
f=1121
TT=844.345
T1=441.86
Knapsack/
Knapsack-m1-s50/
Knapsack-50-200-16.xml 		OPT
f=1429
TT=66.549
T1=1.6
 OPT
f=1429
TT=1625.86
T1=1625.34
 OPT
f=1429
TT=83.214
T1=3.96
 OPT
f=1429
TT=215.76
T1=4.01
 OPT
f=1429
TT=66.549
T1=3.47
 OPT
f=1429
TT=163.71
T1=9.11
 OPT
f=1429
TT=63.637
T1=4.79
 OPT
f=1429
TT=161.33
T1=5.24
 OPT
f=1429
TT=1423.17
T1=1.6
 OPT
f=1429
TT=162.339
T1=4.99
 OPT
f=1429
TT=1994.31
T1=9.35
 SAT (TO)
f=1429
TT=2400.06
T1=54
 OPT
f=1429
TT=1966.55
T1=10.32
 OPT
f=1429
TT=1653.81
T1=19.8
 OPT
f=1429
TT=313.461
T1=13.09
 OPT
f=1429
TT=312.577
T1=12.99
 OPT
f=1429
TT=310.503
T1=12.89
 OPT
f=1429
TT=1023.39
T1=7.96
 OPT
f=1429
TT=947.224
T1=0
 OPT
f=1429
TT=703.799
T1=646.55
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
Knapsack/
Knapsack-m1-s50/
Knapsack-50-200-17.xml 		OPT
f=992
TT=125.727
T1=1.35
 OPT
f=992
TT=1100.84
T1=1098.77
 OPT
f=992
TT=125.727
T1=3.99
 OPT
f=992
TT=306.049
T1=7.43
 OPT
f=992
TT=142.519
T1=4.72
 OPT
f=992
TT=364.148
T1=4.32
 OPT
f=992
TT=124.054
T1=7.89
 OPT
f=992
TT=262.115
T1=5.23
 OPT
f=992
TT=1321.34
T1=1.35
 OPT
f=992
TT=252.16
T1=5.93
 SAT (TO)
f=992
TT=2400.12
T1=12.17
 SAT (TO)
f=992
TT=2400.09
T1=10.18
 SAT (TO)
f=992
TT=2400.04
T1=11.16
 OPT
f=992
TT=2312.53
T1=19.12
 OPT
f=992
TT=222.157
T1=1.39
 OPT
f=992
TT=221.6
T1=1.39
 OPT
f=992
TT=221.329
T1=1.39
 OPT
f=992
TT=972.339
T1=18.27
 OPT
f=992
TT=1182.13
T1=132.49
 OPT
f=992
TT=410.569
T1=410.49
LowAutocorrelation/
LowAutocorrelation-m1-s1/
LowAutocorrelation-018.xml 		OPT
f=25
TT=10.047
T1=0.36
 OPT
f=25
TT=18.439
T1=7.25
 OPT
f=25
TT=31.648
T1=5.76
 OPT
f=25
TT=52.304
T1=8.1
 OPT
f=25
TT=34.723
T1=5.31
 OPT
f=25
TT=63.876
T1=8.15
 OPT
f=25
TT=34.69
T1=4.96
 OPT
f=25
TT=69.99
T1=8.91
 OPT
f=25
TT=10.047
T1=2.82
 OPT
f=25
TT=72.009
T1=8.2
 OPT
f=25
TT=201.323
T1=25.37
 OPT
f=25
TT=1013.95
T1=31.63
 OPT
f=25
TT=234.461
T1=16.01
 OPT
f=25
TT=323.481
T1=18.55
 OPT
f=25
TT=60.318
T1=1
 OPT
f=25
TT=60.742
T1=1
 OPT
f=25
TT=60.294
T1=1
 OPT
f=25
TT=136.052
T1=0.36
 OPT
f=25
TT=110.084
T1=4.98
 OPT
f=25
TT=17.291
T1=17.19
LowAutocorrelation/
LowAutocorrelation-m1-s1/
LowAutocorrelation-019.xml 		OPT
f=29
TT=19.321
T1=1.89
 OPT
f=29
TT=34.084
T1=10.35
 OPT
f=29
TT=64.294
T1=12.84
 OPT
f=29
TT=98.295
T1=15.07
 OPT
f=29
TT=74.986
T1=10.08
 OPT
f=29
TT=146.607
T1=12.71
 OPT
f=29
TT=74.199
T1=11.26
 OPT
f=29
TT=144.331
T1=15.13
 OPT
f=29
TT=19.321
T1=2.6
 OPT
f=29
TT=151.897
T1=24.56
 OPT
f=29
TT=350.407
T1=12.53
 SAT (TO)
f=29
TT=2400.07
T1=108.93
 OPT
f=29
TT=620.46
T1=71.63
 OPT
f=29
TT=513.281
T1=65.25
 OPT
f=29
TT=134.567
T1=1.89
 OPT
f=29
TT=134.609
T1=1.99
 OPT
f=29
TT=127.871
T1=1.89
 OPT
f=29
TT=359.559
T1=4.97
 OPT
f=29
TT=635.769
T1=7.28
 OPT
f=29
TT=33.862
T1=33.79
LowAutocorrelation/
LowAutocorrelation-m1-s1/
LowAutocorrelation-020.xml 		OPT
f=26
TT=23.208
T1=3.19
 OPT
f=26
TT=41.188
T1=17.17
 OPT
f=26
TT=90.253
T1=12.47
 OPT
f=26
TT=161.878
T1=16.8
 OPT
f=26
TT=86.611
T1=9.97
 OPT
f=26
TT=186.864
T1=13.46
 OPT
f=26
TT=89.819
T1=11.58
 OPT
f=26
TT=178.933
T1=19.74
 OPT
f=26
TT=23.208
T1=5.9
 OPT
f=26
TT=191.2
T1=18.17
 OPT
f=26
TT=740.893
T1=104.67
 SAT (TO)
f=26
TT=2400.05
T1=120.33
 OPT
f=26
TT=787.795
T1=28.38
 OPT
f=26
TT=1472.24
T1=34.56
 OPT
f=26
TT=358.219
T1=3.19
 OPT
f=26
TT=331.731
T1=3.19
 OPT
f=26
TT=408.954
T1=3.59
 OPT
f=26
TT=481.101
T1=4.16
 OPT
f=26
TT=827.187
T1=9.57
 OPT
f=26
TT=30.305
T1=30.29
LowAutocorrelation/
LowAutocorrelation-m1-s1/
LowAutocorrelation-021.xml 		OPT
f=26
TT=31.779
T1=8.06
 OPT
f=26
TT=71.391
T1=40.15
 OPT
f=26
TT=178.754
T1=50.81
 OPT
f=26
TT=346.971
T1=95.12
 OPT
f=26
TT=129.678
T1=24.67
 OPT
f=26
TT=259.366
T1=46.17
 OPT
f=26
TT=127.774
T1=23.87
 OPT
f=26
TT=269.796
T1=47.29
 OPT
f=26
TT=32.484
T1=8.06
 OPT
f=26
TT=234.589
T1=34.55
 OPT
f=26
TT=850.098
T1=407.31
 SAT (TO)
f=26
TT=2400.14
T1=1309.1
 SAT (TO)
f=26
TT=2400.12
T1=1612.1
 OPT
f=26
TT=2332.58
T1=316.01
 OPT
f=26
TT=382.954
T1=173.58
 OPT
f=26
TT=359.041
T1=163.01
 OPT
f=26
TT=360.785
T1=165.69
 OPT
f=26
TT=778.495
T1=166.99
 OPT
f=26
TT=801.995
T1=8.11
 OPT
f=26
TT=31.779
T1=31.69
LowAutocorrelation/
LowAutocorrelation-m1-s1/
LowAutocorrelation-031.xml 		SAT TO
f=67
TT=2400.3
T1=744.91
 SAT (TO)
f=87
TT=2400.07
T1=411.58
 SAT (TO)
f=67
TT=2400.44
T1=744.91
 SAT (TO)
f=67
TT=15233.1
T1=2352.8
 SAT (TO)
f=67
TT=2400.3
T1=2163.13
 SAT (TO)
f=83
TT=2001.73
T1=1627.94
 SAT (TO)
f=67
TT=2400.64
T1=973.54
 SAT (TO)
f=83
TT=2001.69
T1=1462.7
 SAT (TO)
f=71
TT=2400.04
T1=2283.03
 SAT (TO)
f=79
TT=2001.94
T1=729.74
 SAT (TO)
f=83
TT=2400.08
T1=1844.29
 SAT (TO)
f=111
TT=2400.11
T1=723.03
 SAT (TO)
f=87
TT=2400.07
T1=664.53
 SAT (TO)
f=91
TT=2400.1
T1=2231.72
 SAT (TO)
f=75
TT=2400.06
T1=550.7
 SAT (TO)
f=75
TT=2400.06
T1=545.35
 SAT (TO)
f=75
TT=2400.05
T1=558.37
 SAT (TO)
f=83
TT=2010.96
T1=1092.4
 SAT (TO)
f=75
TT=2010.87
T1=767.33
 ? (TO)

TT=2400.05
LowAutocorrelation/
LowAutocorrelation-m1-s1/
LowAutocorrelation-033.xml 		SAT TO
f=84
TT=2000.21
T1=1649.64
 SAT (TO)
f=88
TT=2400.08
T1=1108.29
 SAT (TO)
f=84
TT=2400.49
T1=1869.51
 SAT (TO)
f=64
TT=19561
T1=12764.3
 SAT (TO)
f=96
TT=2400.43
T1=799.1
 SAT (TO)
f=108
TT=2001.38
T1=983.11
 SAT (TO)
f=96
TT=2400.71
T1=884.58
 SAT (TO)
f=108
TT=2001
T1=1522.01
 SAT (TO)
f=92
TT=2400.11
T1=1029.91
 SAT (TO)
f=84
TT=2000.21
T1=1649.64
 SAT (TO)
f=120
TT=2400.05
T1=1546.92
 SAT (TO)
f=128
TT=2400.07
T1=377.69
 SAT (TO)
f=124
TT=2400.11
T1=2316.04
 SAT (TO)
f=112
TT=2400.07
T1=85.67
 SAT (TO)
f=96
TT=2400.06
T1=978.43
 SAT (TO)
f=96
TT=2400.02
T1=994.39
 SAT (TO)
f=96
TT=2400.03
T1=1066.9
 SAT (TO)
f=104
TT=2010.37
T1=1729.09
 SAT (TO)
f=92
TT=2010.39
T1=1747.55
 ? (TO)

TT=2400.05
LowAutocorrelation/
LowAutocorrelation-m1-s1/
LowAutocorrelation-053.xml 		SAT TO
f=318
TT=2400.07
T1=2136.16
 SAT (TO)
f=634
TT=2400.03
T1=1979.54
 SAT (TO)
f=454
TT=2400.43
T1=1588.47
 Wrong Cert.

TT=109.714

 SAT (TO)
f=322
TT=2400.53
T1=760.19
 SAT (TO)
f=342
TT=1990.86
T1=188.23
 SAT (TO)
f=306
TT=2400.63
T1=2398.11
 SAT (TO)
f=318
TT=1982.02
T1=615.07
 SAT (TO)
f=318
TT=2400.07
T1=2136.16
 SAT (TO)
f=394
TT=1990.41
T1=1680.18
 SAT (TO)
f=382
TT=2400.07
T1=2033.81
 SAT (TO)
f=438
TT=2400.08
T1=392.73
 SAT (TO)
f=378
TT=2400.07
T1=1716.52
 SAT (TO)
f=482
TT=2400.11
T1=1174.31
 SAT (TO)
f=398
TT=2400.05
T1=1110.72
 SAT (TO)
f=398
TT=2400.02
T1=1103.37
 SAT (TO)
f=398
TT=2400.06
T1=1129.06
 SAT (TO)
f=446
TT=2006.11
T1=1716.04
 SAT (TO)
f=442
TT=2005.91
T1=1925.93
 ? (TO)

TT=2400.05
LowAutocorrelation/
LowAutocorrelation-m1-s1/
LowAutocorrelation-072.xml 		SAT TO
f=584
TT=2400.45
T1=1085.56
 SAT (TO)
f=1428
TT=2400.09
T1=13.09
 SAT (TO)
f=1264
TT=2400.49
T1=736.23
 Wrong Opt.
f=1024
TT=320.785
T1=320.39
 SAT (TO)
f=584
TT=2400.45
T1=1085.56
 SAT (TO)
f=616
TT=1965.21
T1=1688.8
 SAT (MO)
f=63820
TT=13.785
T1=13.48
 SAT (TO)
f=600
TT=1973.24
T1=1099.15
 SAT (TO)
f=636
TT=2400.09
T1=2144.84
 SAT (TO)
f=684
TT=1970.55
T1=1241.75
 SAT (TO)
f=936
TT=2400.15
T1=1450.61
 SAT (TO)
f=1084
TT=2400.1
T1=1514.9
 SAT (TO)
f=980
TT=2400.05
T1=1817.49
 SAT (TO)
f=884
TT=2400.09
T1=2112.44
 SAT (TO)
f=996
TT=2400.09
T1=2281.26
 SAT (TO)
f=996
TT=2400.09
T1=2258.65
 SAT (TO)
f=996
TT=2400.03
T1=2301.5
 SAT (TO)
f=1172
TT=1996.84
T1=1412.5
 SAT (TO)
f=940
TT=1996.92
T1=1892.09
 ? (TO)

TT=2400.02
LowAutocorrelation/
LowAutocorrelation-m1-s1/
LowAutocorrelation-078.xml 		SAT TO
f=659
TT=2400.06
T1=876.66
 SAT (TO)
f=2499
TT=2400.06
T1=11.02
 SAT (MO)
f=97171
TT=11.679
T1=11.23
 Wrong Opt.
f=1459
TT=411.211
T1=410.8
 SAT (TO)
f=811
TT=2400.7
T1=1573
 SAT (TO)
f=731
TT=1950.99
T1=438.16
 SAT (TO)
f=811
TT=2400.52
T1=1994.3
 SAT (TO)
f=795
TT=1899.89
T1=357.56
 SAT (TO)
f=659
TT=2400.06
T1=876.66
 SAT (TO)
f=883
TT=1988.1
T1=93.52
 SAT (TO)
f=1179
TT=2400.09
T1=769.65
 SAT (TO)
f=1331
TT=2400.13
T1=685.46
 SAT (TO)
f=1299
TT=2400.13
T1=2214.79
 SAT (TO)
f=1235
TT=2400.11
T1=140.46
 SAT (TO)
f=1131
TT=2400.02
T1=479.06
 SAT (TO)
f=1131
TT=2400.09
T1=581.19
 SAT (TO)
f=1131
TT=2400.06
T1=516.42
 SAT (TO)
f=1403
TT=1997.42
T1=1424.98
 SAT (TO)
f=1355
TT=1996.49
T1=1913.24
 ? (TO)

TT=2400.1
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
LowAutocorrelation/
LowAutocorrelation-m1-s1/
LowAutocorrelation-086.xml 		SAT TO
f=887
TT=2400.54
T1=350.24
 SAT (TO)
f=2775
TT=2400.1
T1=45.42
 SAT (TO)
f=1871
TT=2400.77
T1=457.93
 SAT (TO)
f=1623
TT=12752.1
T1=742.03
 SAT (TO)
f=887
TT=2400.54
T1=350.24
 SAT (TO)
f=1031
TT=1985.33
T1=522.73
 SAT (TO)
f=887
TT=2400.46
T1=344.95
 SAT (TO)
f=855
TT=1955.21
T1=1620.78
 SAT (TO)
f=999
TT=2400.07
T1=116.87
 SAT (TO)
f=935
TT=1836.99
T1=201.54
 SAT (TO)
f=1487
TT=2400.13
T1=90.86
 SAT (TO)
f=1439
TT=2400.11
T1=218.37
 SAT (TO)
f=1543
TT=2400.12
T1=163.48
 SAT (TO)
f=1399
TT=2400.1
T1=1460.2
 SAT (TO)
f=1495
TT=2400.06
T1=1875.36
 SAT (TO)
f=1495
TT=2400.06
T1=1874.31
 SAT (TO)
f=1495
TT=2400.05
T1=1889.25
 SAT (TO)
f=1919
TT=1990.8
T1=803.4
 SAT (TO)
f=1807
TT=1992.53
T1=362.57
 ? (TO)

TT=2400.03
LowAutocorrelation/
LowAutocorrelation-m1-s1/
LowAutocorrelation-088.xml 		SAT TO
f=812
TT=2400.08
T1=1827.76
 SAT (TO)
f=3472
TT=2400.05
T1=12.65
 SAT (TO)
f=2216
TT=2400.55
T1=45.26
 SAT (TO)
f=1472
TT=10143
T1=158.81
 SAT (TO)
f=912
TT=2401.23
T1=882.83
 SAT (TO)
f=1828
TT=1958.77
T1=33.84
 SAT (TO)
f=912
TT=2400.43
T1=870.43
 SAT (TO)
f=1828
TT=1941.54
T1=38.73
 SAT (TO)
f=812
TT=2400.08
T1=1827.76
 SAT (TO)
f=1828
TT=1951.83
T1=33.13
 SAT (TO)
f=1448
TT=2400.07
T1=368.69
 SAT (TO)
f=1828
TT=2400.15
T1=422.18
 SAT (TO)
f=1600
TT=2400.16
T1=2269.23
 SAT (TO)
f=1740
TT=2400.11
T1=1678.17
 SAT (TO)
f=1876
TT=2400.05
T1=773.81
 SAT (TO)
f=1876
TT=2400.06
T1=748.31
 SAT (TO)
f=1876
TT=2400.04
T1=780.17
 SAT (TO)
f=1840
TT=1991.28
T1=1922.29
 SAT (TO)
f=2004
TT=1991.13
T1=1824.14
 ? (TO)

TT=2400.1
LowAutocorrelation/
LowAutocorrelation-m1-s1/
LowAutocorrelation-090.xml 		SAT TO
f=941
TT=1941.24
T1=611.69
 SAT (TO)
f=3269
TT=2400.02
T1=12.43
 ? (MO)

TT=14.067

 SAT (TO)
f=1013
TT=9698.11
T1=6152.63
 SAT (TO)
f=957
TT=2400.44
T1=997.17
 SAT (TO)
f=1053
TT=1821.88
T1=1803.63
 SAT (TO)
f=957
TT=2400.33
T1=762.11
 SAT (TO)
f=941
TT=1939.13
T1=627.2
 SAT (TO)
f=989
TT=2400.05
T1=186.18
 SAT (TO)
f=941
TT=1941.24
T1=611.69
 SAT (TO)
f=1789
TT=2400.15
T1=466.29
 SAT (TO)
f=2053
TT=2400.06
T1=40.12
 SAT (TO)
f=1773
TT=2400.07
T1=30.92
 SAT (TO)
f=1637
TT=2400.09
T1=601.36
 SAT (TO)
f=1541
TT=2400.06
T1=2291.43
 SAT (TO)
f=1845
TT=2400.05
T1=1025.28
 SAT (TO)
f=1541
TT=2400.04
T1=2327.34
 SAT (TO)
f=1989
TT=1951.17
T1=1940.54
 SAT (TO)
f=1741
TT=1990.15
T1=605.92
 ? (TO)

TT=2400.04
Mario/Mario-zinc-s1/
Mario-n-medium-2.xml 		OPT
f=1053
TT=198.816
T1=77.97
 OPT
f=1053
TT=452.987
T1=448.26
 OPT
f=1053
TT=241.716
T1=181.31
 OPT
f=1053
TT=372.598
T1=248.18
 OPT
f=1053
TT=198.816
T1=126.04
 OPT
f=1053
TT=344.2
T1=220.36
 Wrong UNSAT

TT=2.087

 Wrong UNSAT

TT=3.172

 OPT
f=1053
TT=208.192
T1=183.87
 OPT
f=1053
TT=370.712
T1=254.32
 OPT
f=1053
TT=933.751
T1=914.32
 SAT (TO)
f=990
TT=2400.06
T1=713.41
 OPT
f=1053
TT=1405.77
T1=1340.77
 OPT
f=1053
TT=827.171
T1=77.97
 OPT
f=1053
TT=559.623
T1=353.8
 OPT
f=1053
TT=556.498
T1=351.92
 OPT
f=1053
TT=552.992
T1=349.58
 SAT (TO)
f=1053
TT=2012.64
T1=1492.52
 OPT
f=1053
TT=1865.48
T1=487.84
 OPT
f=1053
TT=854.219
T1=418.33
Mario/Mario-zinc-s1/
Mario-n-medium-3.xml 		OPT
f=943
TT=57.142
T1=4.69
 OPT
f=943
TT=57.142
T1=47.06
 OPT
f=943
TT=100.021
T1=62.83
 OPT
f=943
TT=195.212
T1=87.03
 OPT
f=943
TT=90.477
T1=49.66
 OPT
f=943
TT=181.957
T1=123.01
 Wrong UNSAT

TT=1.961

 Wrong UNSAT

TT=2.912

 OPT
f=943
TT=99.95
T1=61.45
 OPT
f=943
TT=183.253
T1=44.43
 OPT
f=943
TT=301.965
T1=18.73
 OPT
f=943
TT=882.181
T1=140.75
 OPT
f=943
TT=391.622
T1=56.01
 OPT
f=943
TT=365.146
T1=31.49
 OPT
f=943
TT=281.165
T1=4.79
 OPT
f=943
TT=279.669
T1=4.79
 OPT
f=943
TT=278.501
T1=4.69
 OPT
f=943
TT=737.226
T1=101.21
 OPT
f=943
TT=797.284
T1=227.35
 OPT
f=943
TT=766.806
T1=198.48
Mario/Mario-zinc-s1/
Mario-n-medium-4.xml 		OPT
f=832
TT=83.624
T1=14.91
 OPT
f=832
TT=113.339
T1=50.49
 OPT
f=832
TT=83.624
T1=39.77
 OPT
f=832
TT=187.32
T1=136.4
 OPT
f=832
TT=95.613
T1=75.96
 OPT
f=832
TT=161.949
T1=64.16
 Wrong UNSAT

TT=1.958

 Wrong UNSAT

TT=3.126

 OPT
f=832
TT=133.532
T1=55.26
 OPT
f=832
TT=180.305
T1=116.09
 OPT
f=832
TT=220.529
T1=45.67
 OPT
f=832
TT=677.092
T1=30.34
 OPT
f=832
TT=310.762
T1=14.91
 OPT
f=832
TT=303.323
T1=165.47
 OPT
f=832
TT=235.061
T1=92.67
 OPT
f=832
TT=231.978
T1=91.38
 OPT
f=832
TT=233.001
T1=91.87
 OPT
f=832
TT=1058.49
T1=494.23
 OPT
f=832
TT=988.947
T1=141.18
 OPT
f=832
TT=324.532
T1=166.78
Mario/Mario-zinc-s1/
Mario-n-medium-5.xml 		OPT
f=771
TT=74.85
T1=19.07
 OPT
f=771
TT=74.85
T1=20.96
 OPT
f=771
TT=99.04
T1=32.26
 OPT
f=771
TT=187.47
T1=49.87
 OPT
f=771
TT=95.819
T1=62.82
 OPT
f=771
TT=175.434
T1=69.83
 Wrong UNSAT

TT=2.055

 Wrong UNSAT

TT=2.913

 OPT
f=771
TT=117.646
T1=19.07
 OPT
f=771
TT=174.483
T1=97.69
 OPT
f=771
TT=556.497
T1=141.4
 OPT
f=771
TT=918.132
T1=545.86
 OPT
f=771
TT=681.008
T1=252.16
 OPT
f=771
TT=593.528
T1=53.86
 OPT
f=771
TT=426.681
T1=309.78
 OPT
f=771
TT=424.211
T1=308
 OPT
f=771
TT=425.784
T1=309.18
 OPT
f=771
TT=1692.33
T1=430.24
 OPT
f=771
TT=1798.1
T1=1347.23
 OPT
f=771
TT=636.771
T1=180.79
Mario/Mario-zinc-s1/
Mario-t-hard-1.xml 		OPT
f=4783
TT=4.819
T1=4.79
 OPT
f=4783
TT=103.807
T1=103.71
 OPT
f=4783
TT=9.866
T1=9.83
 OPT
f=4783
TT=20.749
T1=20.55
 OPT
f=4783
TT=8.959
T1=8.82
 OPT
f=4783
TT=20.569
T1=20.53
 Wrong UNSAT

TT=3.652

 Wrong UNSAT

TT=6.335

 OPT
f=4783
TT=16.175
T1=16.11
 OPT
f=4783
TT=21.333
T1=21.06
 OPT
f=4783
TT=21.98
T1=21.9
 OPT
f=4783
TT=113.197
T1=113.08
 OPT
f=4783
TT=42.548
T1=42.29
 OPT
f=4783
TT=25.667
T1=25.56
 OPT
f=4783
TT=4.819
T1=4.79
 OPT
f=4783
TT=4.942
T1=4.88
 OPT
f=4783
TT=5.047
T1=4.99
 OPT
f=4783
TT=30.47
T1=30.12
 OPT
f=4783
TT=30.176
T1=30.11
 ? (TO)

TT=2400.09
Mario/Mario-zinc-s1/
Mario-t-hard-2.xml 		OPT
f=4850
TT=17.933
T1=17.8
 OPT
f=4850
TT=124.649
T1=124.53
 OPT
f=4850
TT=55.182
T1=55.12
 OPT
f=4850
TT=54.89
T1=54.78
 OPT
f=4850
TT=52.656
T1=52.56
 OPT
f=4850
TT=52.689
T1=52.63
 OPT
f=4850
TT=53.484
T1=53.26
 OPT
f=4850
TT=13.394
T1=13.24
 OPT
f=4850
TT=17.933
T1=17.8
 OPT
f=4850
TT=52.997
T1=52.39
 OPT
f=4850
TT=22.215
T1=22.06
 OPT
f=4850
TT=115.657
T1=115.53
 OPT
f=4850
TT=58.304
T1=58.19
 OPT
f=4850
TT=24.433
T1=24.27
 OPT
f=4850
TT=30.446
T1=30.39
 OPT
f=4850
TT=31.267
T1=31.19
 OPT
f=4850
TT=31.296
T1=31.28
 OPT
f=4850
TT=171.208
T1=170.69
 OPT
f=4850
TT=154.447
T1=153.9
 ? (TO)

TT=2400.02
Mario/Mario-zinc-s1/
Mario-t-hard-5.xml 		OPT
f=4482
TT=16.433
T1=16.37
 OPT
f=4482
TT=94.168
T1=94.09
 OPT
f=4482
TT=54.458
T1=54.42
 OPT
f=4482
TT=55.932
T1=55.83
 OPT
f=4482
TT=50.343
T1=50.26
 OPT
f=4482
TT=27.295
T1=27.24
 Wrong UNSAT

TT=3.906

 Wrong UNSAT

TT=6.478

 OPT
f=4482
TT=16.433
T1=16.37
 OPT
f=4482
TT=27.848
T1=27.73
 OPT
f=4482
TT=24.848
T1=24.69
 OPT
f=4482
TT=83.5
T1=83.32
 OPT
f=4482
TT=53.705
T1=53.56
 OPT
f=4482
TT=24.894
T1=24.74
 OPT
f=4482
TT=16.648
T1=16.58
 OPT
f=4482
TT=17.354
T1=17.3
 OPT
f=4482
TT=17.286
T1=17.19
 OPT
f=4482
TT=57.276
T1=56.48
 OPT
f=4482
TT=76.08
T1=75.61
 ? (TO)

TT=2400.03
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
NurseRostering/
NurseRostering-01_c18.xml 		OPT
f=607
TT=6.214
T1=1.69
 OPT
f=607
TT=9.296
T1=8.52
 OPT
f=607
TT=140.219
T1=128.37
 OPT
f=607
TT=134.738
T1=66.62
 OPT
f=607
TT=52.55
T1=14.77
 OPT
f=607
TT=157.821
T1=13.8
 OPT
f=607
TT=77.43
T1=14.22
 OPT
f=607
TT=161.389
T1=24.68
 OPT
f=607
TT=409.805
T1=2.98
 OPT
f=607
TT=154.542
T1=26.21
 OPT
f=607
TT=78.024
T1=11.35
 OPT
f=607
TT=427.759
T1=152.71
 OPT
f=607
TT=56.205
T1=13.09
 OPT
f=607
TT=65.295
T1=23.51
 OPT
f=607
TT=6.223
T1=1.79
 OPT
f=607
TT=6.607
T1=1.89
 OPT
f=607
TT=6.214
T1=1.69
 OPT
f=607
TT=21.293
T1=4.31
 OPT
f=607
TT=28.935
T1=9.88
 OPT
f=607
TT=67.437
T1=67.39
NurseRostering/
NurseRostering-18_c18.xml 		SAT TO
f=48151
TT=2400.1
T1=24.36
 SAT (TO)
f=48151
TT=2400.1
T1=24.36
 ? (TO)

TT=2400.32

 ? (TO)

TT=20072.2

 ? (TO)

TT=2400.48

 ? (TO)

TT=1987.64

 ? (TO)

TT=2400.67

 ? (TO)

TT=1987.29

 ? (TO)

TT=2400.03

 ? (TO)

TT=1983.86

 ? (TO)

TT=2400.08

 ? (TO)

TT=2400.08

 ? (TO)

TT=2400.11

 ? (TO)

TT=2400.1

 ? (TO)

TT=2400.07

 ? (TO)

TT=2400.02

 ? (TO)

TT=2400.05

 ? (TO)

TT=2001.85

 ? (TO)

TT=2002.61

 ? (TO)

TT=2400.04
Opd/Opd-sum-large/
Opd-03-350-100.xml 		OPT
f=0
TT=2.23
T1=2
 OPT
f=0
TT=3.969
T1=3.76
 OPT
f=0
TT=2.408
T1=2
 OPT
f=0
TT=5.565
T1=5.11
 OPT
f=0
TT=2.23
T1=2.06
 OPT
f=0
TT=4.495
T1=4.14
 OPT
f=0
TT=2.131
T1=2.03
 OPT
f=0
TT=4.672
T1=4.11
 OPT
f=0
TT=4.632
T1=4.61
 OPT
f=0
TT=5.292
T1=4.99
 OPT
f=0
TT=14.448
T1=14.07
 OPT
f=0
TT=667.545
T1=667.48
 OPT
f=0
TT=166.735
T1=166.61
 OPT
f=0
TT=39.865
T1=39.73
 ? (MO)

TT=2053.34

 ? (MO)

TT=2052.54

 ? (MO)

TT=2105.44

 ? (TO)

TT=252.352

 ? (TO)

TT=252.36

 OPT
f=0
TT=13.846
T1=13.79
Opd/Opd-sum-large/
Opd-04-350-100.xml 		OPT
f=9
TT=10.35
T1=10.28
 SAT (TO)
f=12
TT=2400.05
T1=12.23
 OPT
f=9
TT=41.016
T1=40.83
 OPT
f=9
TT=70.698
T1=70.59
 OPT
f=9
TT=20.037
T1=19.93
 OPT
f=9
TT=23.695
T1=23.46
 OPT
f=9
TT=21.373
T1=21.04
 OPT
f=9
TT=621.464
T1=621.04
 OPT
f=9
TT=10.35
T1=10.28
 OPT
f=9
TT=644.784
T1=644.14
 OPT
f=9
TT=40.363
T1=40.3
 OPT
f=9
TT=1367.68
T1=1367.64
 SAT (TO)
f=49
TT=2400.14
T1=2392.78
 SAT (TO)
f=35
TT=2400.09
T1=42.1
 ? (MO)

TT=2067.55

 ? (MO)

TT=2103.88

 ? (MO)

TT=2104.77

 ? (TO)

TT=252.324

 ? (TO)

TT=252.35

 OPT
f=9
TT=55.298
T1=55.2
Opd/Opd-sum-large/
Opd-09-350-100.xml 		SAT TO
f=63
TT=2400.15
T1=1364.28
 SAT (TO)
f=82
TT=2400.05
T1=906.74
 ? (TO)

TT=2400.5

 SAT (TO)
f=87
TT=20067.6
T1=17897.5
 ? (TO)

TT=2400.49

 ? (TO)

TT=2003.81

 ? (TO)

TT=2400.67

 ? (TO)

TT=2003.7

 ? (TO)

TT=2400.02

 ? (TO)

TT=2004.02

 SAT (TO)
f=69
TT=2400.11
T1=1167.06
 SAT (TO)
f=70
TT=2400.1
T1=708.98
 SAT (TO)
f=63
TT=2400.15
T1=1364.28
 SAT (TO)
f=68
TT=2400.06
T1=85.28
 ? (MO)

TT=2043.17

 ? (MO)

TT=2083.27

 ? (MO)

TT=2123.49

 ? (TO)

TT=252.397

 ? (TO)

TT=252.36

 ? (TO)

TT=2400.1
Opd/Opd-sum-large/
Opd-15-035-010.xml 		OPT
f=3
TT=6.161
T1=6.04
 OPT
f=3
TT=41.222
T1=41.11
 OPT
f=3
TT=13.049
T1=12.71
 OPT
f=3
TT=57.512
T1=57.01
 OPT
f=3
TT=13.208
T1=13.02
 OPT
f=3
TT=96.728
T1=96.25
 OPT
f=3
TT=12.794
T1=12.64
 OPT
f=3
TT=100.594
T1=100.47
 OPT
f=3
TT=6.161
T1=6.04
 OPT
f=3
TT=38.89
T1=38.17
 SAT (TO)
f=4
TT=2400.14
T1=25.51
 OPT
f=3
TT=217.314
T1=217.17
 SAT (TO)
f=4
TT=2400.08
T1=19.81
 SAT (TO)
f=4
TT=2400.06
T1=19.73
 ? (MO)

TT=1531.27

 ? (MO)

TT=1529.8

 ? (MO)

TT=1525.88

 ? (TO)

TT=252.387

 ? (TO)

TT=252.339

 OPT
f=3
TT=51.987
T1=51.89
Opd/Opd-sum-large/
Opd-16-035-010.xml 		OPT
f=3
TT=3.678
T1=3.55
 OPT
f=3
TT=9.962
T1=9.87
 OPT
f=3
TT=50.914
T1=50.78
 OPT
f=3
TT=40.041
T1=39.41
 OPT
f=3
TT=15.98
T1=15.67
 OPT
f=3
TT=123.944
T1=123.79
 OPT
f=3
TT=15.407
T1=15.06
 OPT
f=3
TT=44.998
T1=44.56
 OPT
f=3
TT=3.678
T1=3.55
 OPT
f=3
TT=46.331
T1=45.56
 OPT
f=3
TT=184.395
T1=184.25
 SAT (TO)
f=4
TT=2400.06
T1=61.75
 SAT (TO)
f=4
TT=2400.12
T1=23.05
 OPT
f=3
TT=95.687
T1=95.59
 ? (MO)

TT=1541.91

 ? (MO)

TT=1540.83

 ? (MO)

TT=1786.96

 ? (TO)

TT=252.394

 ? (TO)

TT=252.417

 OPT
f=3
TT=55.829
T1=55.78
Opd/Opd-sum-small/
Opd-09-024-008.xml 		OPT
f=2
TT=2.686
T1=2.48
 OPT
f=2
TT=5.328
T1=5.29
 OPT
f=2
TT=2.778
T1=2.48
 OPT
f=2
TT=4.364
T1=3.94
 OPT
f=2
TT=2.686
T1=2.5
 OPT
f=2
TT=5.507
T1=4.8
 OPT
f=2
TT=2.739
T1=2.46
 OPT
f=2
TT=4.251
T1=4.06
 OPT
f=2
TT=4.895
T1=4.77
 OPT
f=2
TT=6.596
T1=6.21
 SAT (TO)
f=3
TT=2400.09
T1=12.63
 SAT (TO)
f=3
TT=2400.12
T1=17.15
 SAT (TO)
f=3
TT=2400.09
T1=11.52
 SAT (TO)
f=3
TT=2400.14
T1=12.28
 ? (MO)

TT=1429.96

 ? (MO)

TT=1377.72

 ? (MO)

TT=1391.51

 ? (TO)

TT=252.409

 ? (TO)

TT=252.461

 OPT
f=2
TT=12.564
T1=12.49
Opd/Opd-sum-small/
Opd-10-015-006.xml 		OPT
f=2
TT=2.938
T1=2.86
 OPT
f=2
TT=11.95
T1=11.84
 OPT
f=2
TT=2.938
T1=2.86
 OPT
f=2
TT=6.287
T1=6.16
 OPT
f=2
TT=3.691
T1=3.65
 OPT
f=2
TT=9.364
T1=8.96
 OPT
f=2
TT=3.502
T1=3.28
 OPT
f=2
TT=5.538
T1=5
 OPT
f=2
TT=6.601
T1=6.5
 OPT
f=2
TT=6.971
T1=6.68
 SAT (TO)
f=3
TT=2400.11
T1=11.17
 SAT (TO)
f=3
TT=2400.07
T1=13.65
 SAT (TO)
f=3
TT=2400.08
T1=10.66
 OPT
f=2
TT=106.766
T1=106.62
 ? (MO)

TT=1180.28

 ? (MO)

TT=1181.68

 ? (MO)

TT=1176.74

 ? (TO)

TT=252.435

 ? (TO)

TT=252.427

 OPT
f=2
TT=9.643
T1=9.59
Opd/Opd-sum-small/
Opd-10-030-009.xml 		OPT
f=2
TT=7.296
T1=7.21
 SAT (TO)
f=3
TT=2400.11
T1=5.35
 OPT
f=2
TT=7.296
T1=7.21
 OPT
f=2
TT=13.99
T1=13.83
 OPT
f=2
TT=7.735
T1=7.58
 OPT
f=2
TT=14.14
T1=13.25
 OPT
f=2
TT=7.572
T1=7.18
 OPT
f=2
TT=14.952
T1=14.17
 SAT (TO)
f=3
TT=2400.06
T1=1.67
 OPT
f=2
TT=15.685
T1=14.99
 SAT (TO)
f=3
TT=2400.11
T1=13
 SAT (TO)
f=3
TT=2400.12
T1=22.9
 SAT (TO)
f=3
TT=2400.06
T1=16.55
 SAT (TO)
f=3
TT=2400.11
T1=12.54
 ? (MO)

TT=1271.28

 ? (MO)

TT=1290.67

 ? (MO)

TT=1292.45

 ? (TO)

TT=252.43

 ? (TO)

TT=252.436

 OPT
f=2
TT=31.379
T1=31.29
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
Opd/Opd-sum-small/
Opd-10-031-009.xml 		OPT
f=2
TT=3.786
T1=3.75
 OPT
f=2
TT=21.654
T1=21.6
 OPT
f=2
TT=7.009
T1=6.85
 OPT
f=2
TT=12.543
T1=12.4
 OPT
f=2
TT=8.261
T1=7.99
 OPT
f=2
TT=14.269
T1=13.99
 OPT
f=2
TT=7.208
T1=7.15
 OPT
f=2
TT=13.919
T1=13.32
 OPT
f=2
TT=3.786
T1=3.75
 OPT
f=2
TT=12.948
T1=12.56
 OPT
f=2
TT=1215.76
T1=1215.66
 SAT (TO)
f=3
TT=2400.08
T1=24.28
 SAT (TO)
f=3
TT=2400.06
T1=14.02
 OPT
f=2
TT=817.151
T1=817.01
 ? (MO)

TT=1318.7

 ? (MO)

TT=1298.14

 ? (MO)

TT=1323.52

 ? (TO)

TT=252.41

 ? (TO)

TT=252.415

 OPT
f=2
TT=32.55
T1=32.49
Opd/Opd-sum-small/
Opd-10-032-009.xml 		OPT
f=2
TT=7.232
T1=6.82
 OPT
f=2
TT=12.511
T1=12.42
 OPT
f=2
TT=7.999
T1=7.95
 OPT
f=2
TT=18.165
T1=17.68
 OPT
f=2
TT=7.232
T1=6.82
 OPT
f=2
TT=14.157
T1=14.09
 OPT
f=2
TT=7.25
T1=6.82
 OPT
f=2
TT=15.095
T1=14.78
 OPT
f=2
TT=24.33
T1=24.3
 OPT
f=2
TT=15.007
T1=14.79
 OPT
f=2
TT=23.407
T1=23.31
 SAT (TO)
f=3
TT=2400.12
T1=23.19
 OPT
f=2
TT=141.433
T1=141.3
 OPT
f=2
TT=34.47
T1=34.36
 ? (MO)

TT=1370.58

 ? (MO)

TT=1369.92

 ? (MO)

TT=1369.72

 ? (TO)

TT=252.381

 ? (TO)

TT=252.372

 OPT
f=2
TT=22.808
T1=22.78
Opd/Opd-sum-small/
Opd-10-037-014.xml 		OPT
f=5
TT=2.751
T1=2.65
 OPT
f=5
TT=107.884
T1=107.78
 OPT
f=5
TT=48.633
T1=48.51
 OPT
f=5
TT=99.05
T1=98.83
 OPT
f=5
TT=11.884
T1=11.53
 OPT
f=5
TT=26.745
T1=26.5
 OPT
f=5
TT=11.78
T1=11.48
 OPT
f=5
TT=17.57
T1=17.14
 OPT
f=5
TT=2.751
T1=2.65
 OPT
f=5
TT=10.241
T1=10.12
 SAT (TO)
f=6
TT=2400.08
T1=14.95
 OPT
f=5
TT=355.379
T1=355.31
 OPT
f=5
TT=65.113
T1=64.98
 SAT (TO)
f=6
TT=2400.08
T1=15.29
 ? (MO)

TT=1679.91

 ? (MO)

TT=1635.45

 ? (MO)

TT=1631.48

 ? (TO)

TT=252.349

 ? (TO)

TT=252.419

 OPT
f=5
TT=47.828
T1=47.77
Opd/Opd-sum-small/
Opd-10-038-010.xml 		OPT
f=2
TT=4.375
T1=4.28
 OPT
f=2
TT=27.597
T1=27.52
 OPT
f=2
TT=9.419
T1=9.2
 OPT
f=2
TT=19.964
T1=19.44
 OPT
f=2
TT=10.019
T1=9.6
 OPT
f=2
TT=19.807
T1=19.49
 OPT
f=2
TT=9.959
T1=9.92
 OPT
f=2
TT=9.822
T1=9.24
 OPT
f=2
TT=4.375
T1=4.28
 OPT
f=2
TT=20.008
T1=19.68
 SAT (TO)
f=3
TT=2400.06
T1=14.36
 SAT (TO)
f=3
TT=2400.07
T1=39.61
 SAT (TO)
f=3
TT=2400.04
T1=16.82
 SAT (TO)
f=3
TT=2400.08
T1=15.11
 ? (MO)

TT=1696.24

 ? (MO)

TT=1705.02

 ? (MO)

TT=1975.23

 ? (TO)

TT=252.343

 ? (TO)

TT=252.351

 OPT
f=2
TT=30.502
T1=30.49
Opd/Opd-sum-small/
Opd-11-011-005.xml 		OPT
f=2
TT=1.315
T1=1.29
 OPT
f=2
TT=3.9
T1=3.82
 OPT
f=2
TT=1.712
T1=1.63
 OPT
f=2
TT=2.769
T1=2.41
 OPT
f=2
TT=1.758
T1=1.67
 OPT
f=2
TT=2.597
T1=2.43
 OPT
f=2
TT=1.835
T1=1.5
 OPT
f=2
TT=2.762
T1=1.76
 OPT
f=2
TT=3.964
T1=3.91
 OPT
f=2
TT=2.495
T1=1.77
 OPT
f=2
TT=335.862
T1=335.75
 OPT
f=2
TT=172.14
T1=172.05
 SAT (TO)
f=3
TT=2400.07
T1=10.77
 SAT (TO)
f=3
TT=2400.09
T1=9.34
 SAT (TO)
f=3
TT=2400.04
T1=7.89
 SAT (TO)
f=3
TT=2400.01
T1=1.49
 SAT (TO)
f=3
TT=2400.04
T1=8
 SAT (TO)
f=3
TT=2011.7
T1=12.53
 SAT (TO)
f=3
TT=2011.79
T1=24.61
 OPT
f=2
TT=1.315
T1=1.29
Opd/Opd-sum-small/
Opd-15-015-004.xml 		OPT
f=1
TT=2.198
T1=2.03
 OPT
f=1
TT=5.506
T1=5.47
 OPT
f=1
TT=2.198
T1=2.04
 OPT
f=1
TT=3.309
T1=3
 OPT
f=1
TT=2.339
T1=2.03
 OPT
f=1
TT=3.552
T1=2.91
 OPT
f=1
TT=2.298
T1=1.97
 OPT
f=1
TT=3.425
T1=2.99
 OPT
f=1
TT=19.611
T1=19.54
 OPT
f=1
TT=3.878
T1=2.83
 SAT (TO)
f=2
TT=2400.1
T1=13.45
 SAT (TO)
f=2
TT=2400.07
T1=21.59
 SAT (TO)
f=2
TT=2400.13
T1=14.38
 SAT (TO)
f=2
TT=2400.15
T1=13.74
 ? (MO)

TT=1163.5

 ? (MO)

TT=1157.92

 ? (MO)

TT=1173.98

 ? (TO)

TT=252.402

 ? (TO)

TT=252.426

 OPT
f=1
TT=24.167
T1=24.1
Opd/Opd-sum-small/
Opd-19-020-009.xml 		OPT
f=4
TT=1381.62
T1=1381.59
 SAT (TO)
f=5
TT=2400.09
T1=7.28
 SAT (TO)
f=5
TT=2400.64
T1=105.37
 SAT (TO)
f=5
TT=20072.7
T1=231.81
 SAT (TO)
f=5
TT=2400.37
T1=11.1
 SAT (TO)
f=5
TT=2005.59
T1=12.03
 SAT (TO)
f=5
TT=2400.36
T1=11.09
 SAT (TO)
f=5
TT=2005.62
T1=27.14
 SAT (TO)
f=5
TT=2400.05
T1=6.29
 SAT (TO)
f=5
TT=2005.73
T1=13.47
 SAT (TO)
f=5
TT=2400.14
T1=20.21
 SAT (TO)
f=5
TT=2400.09
T1=80.11
 SAT (TO)
f=5
TT=2400.11
T1=19.32
 SAT (TO)
f=5
TT=2400.04
T1=19.71
 ? (MO)

TT=1117.74

 ? (MO)

TT=1114.63

 ? (MO)

TT=1296.65

 ? (TO)

TT=252.406

 ? (TO)

TT=252.437

 OPT
f=4
TT=1381.62
T1=1381.59
OpenStacks/
OpenStacks-m1c-s1/
OpenStacks-m1c-gp-050-1.xml 		OPT
f=45
TT=68.489
T1=18.2
 OPT
f=45
TT=69.407
T1=38.14
 OPT
f=45
TT=164.563
T1=20.04
 OPT
f=45
TT=157.074
T1=42.77
 OPT
f=45
TT=269.859
T1=18.2
 OPT
f=45
TT=357.197
T1=29.61
 OPT
f=45
TT=266.31
T1=19.46
 OPT
f=45
TT=433.295
T1=29.39
 SAT (TO)
f=45
TT=2400.1
T1=295.09
 OPT
f=45
TT=340.111
T1=32.93
 OPT
f=45
TT=155.775
T1=53.06
 SAT (TO)
f=45
TT=2400.41
T1=266.91
 OPT
f=45
TT=68.489
T1=44.37
 OPT
f=45
TT=215.211
T1=80.81
 SAT (TO)
f=47
TT=2400.08
T1=458.59
 SAT (TO)
f=47
TT=2400.06
T1=397.6
 SAT (TO)
f=47
TT=2400.04
T1=333.61
 SAT (TO)
f=47
TT=1997.21
T1=509.43
 SAT (TO)
f=47
TT=1997.41
T1=1761.46
 OPT
f=45
TT=624.23
T1=624.2
OpenStacks/OpenStacks-m1c-s1/
OpenStacks-m1c-pb-30-15-1.xml 		OPT
f=14
TT=67.008
T1=6.66
 OPT
f=14
TT=149.377
T1=17.98
 OPT
f=14
TT=168.549
T1=25.15
 OPT
f=14
TT=265.457
T1=21.12
 OPT
f=14
TT=120.103
T1=20.55
 OPT
f=14
TT=226.154
T1=19.16
 OPT
f=14
TT=120.307
T1=20.11
 OPT
f=14
TT=218.896
T1=18.89
 OPT
f=14
TT=173.808
T1=6.66
 OPT
f=14
TT=305.051
T1=51.44
 SAT (TO)
f=14
TT=2400.1
T1=70.31
 SAT (TO)
f=14
TT=2400.14
T1=139.75
 SAT (TO)
f=14
TT=2400.13
T1=32.92
 SAT (TO)
f=14
TT=2400.14
T1=276.05
 ? (TO)

TT=2400.09

 ? (TO)

TT=2400.03

 ? (TO)

TT=2400.11

 SAT (TO)
f=15
TT=2010.53
T1=706.43
 SAT (TO)
f=14
TT=2009.64
T1=863.82
 OPT
f=14
TT=67.008
T1=66.99
OpenStacks/OpenStacks-m1c-s1/
OpenStacks-m1c-wbo-30-15-1.xml 		OPT
f=7
TT=9.259
T1=5.79
 OPT
f=7
TT=14.12
T1=11.83
 OPT
f=7
TT=9.301
T1=5.79
 OPT
f=7
TT=18.31
T1=9.8
 OPT
f=7
TT=9.259
T1=5.85
 OPT
f=7
TT=15.914
T1=11.51
 OPT
f=7
TT=10.658
T1=5.72
 OPT
f=7
TT=24.956
T1=14.51
 OPT
f=7
TT=13.145
T1=9.68
 OPT
f=7
TT=20.037
T1=14.21
 OPT
f=7
TT=584.389
T1=37.13
 OPT
f=7
TT=358.694
T1=141.39
 OPT
f=7
TT=1395.49
T1=26.29
 OPT
f=7
TT=821.922
T1=37.71
 SAT (TO)
f=8
TT=2400.1
T1=351.43
 SAT (TO)
f=8
TT=2400.05
T1=342.9
 SAT (TO)
f=8
TT=2400.05
T1=235.88
 SAT (TO)
f=8
TT=2010.17
T1=1993.29
 SAT (TO)
f=8
TT=2009.8
T1=495.21
 OPT
f=7
TT=42.702
T1=42.69
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
OpenStacks/OpenStacks-m1c-s1/
OpenStacks-m1c-wbop-10-20-1.xml 		OPT
f=5
TT=27.921
T1=7.97
 OPT
f=5
TT=185.342
T1=7.97
 OPT
f=5
TT=225.061
T1=8.48
 OPT
f=5
TT=330.736
T1=16.95
 OPT
f=5
TT=185.19
T1=8.12
 OPT
f=5
TT=382.133
T1=15.84
 OPT
f=5
TT=190.807
T1=7.68
 OPT
f=5
TT=266.334
T1=18.19
 OPT
f=5
TT=804.555
T1=9.07
 OPT
f=5
TT=437.004
T1=19.12
 OPT
f=5
TT=1139.32
T1=13.77
 SAT (TO)
f=5
TT=2400.04
T1=21.37
 SAT (TO)
f=5
TT=2400.05
T1=34.54
 SAT (TO)
f=5
TT=2400.07
T1=22.58
 SAT (TO)
f=6
TT=2400.02
T1=26.28
 SAT (TO)
f=6
TT=2400.09
T1=26.67
 SAT (TO)
f=6
TT=2400.08
T1=26.88
 SAT (TO)
f=5
TT=2011.49
T1=14.79
 SAT (TO)
f=6
TT=2011.15
T1=7.68
 OPT
f=5
TT=27.921
T1=27.88
OpenStacks/OpenStacks-m1c-s1/
OpenStacks-m1c-wbop-30-15-1.xml 		OPT
f=10
TT=23.155
T1=5.34
 OPT
f=10
TT=24.836
T1=9.43
 OPT
f=10
TT=29.075
T1=5.34
 OPT
f=10
TT=55.743
T1=10.61
 OPT
f=10
TT=23.155
T1=5.41
 OPT
f=10
TT=50.893
T1=8.69
 OPT
f=10
TT=25.339
T1=5.37
 OPT
f=10
TT=44.173
T1=8.88
 OPT
f=10
TT=33.469
T1=7.98
 OPT
f=10
TT=52.442
T1=10.33
 OPT
f=10
TT=345.312
T1=19.66
 SAT (TO)
f=10
TT=2400.06
T1=32.48
 SAT (TO)
f=10
TT=2400.09
T1=307.62
 OPT
f=10
TT=555.047
T1=23.77
 SAT (TO)
f=11
TT=2400.06
T1=8.89
 SAT (TO)
f=11
TT=2400.02
T1=8.9
 SAT (TO)
f=11
TT=2400.1
T1=9.07
 SAT (TO)
f=11
TT=2010.51
T1=72.45
 SAT (TO)
f=10
TT=2010.25
T1=1009.63
 OPT
f=10
TT=49.679
T1=49.58
OpenStacks/OpenStacks-m1c-s1/
OpenStacks-m1c-wbop-30-30-1.xml 		OPT
f=3
TT=21.818
T1=21.24
 OPT
f=3
TT=28.359
T1=27.78
 OPT
f=3
TT=31.778
T1=31.33
 OPT
f=3
TT=46.797
T1=45.96
 OPT
f=3
TT=21.818
T1=21.24
 OPT
f=3
TT=39.443
T1=38.29
 OPT
f=3
TT=24.781
T1=24.01
 OPT
f=3
TT=31.963
T1=30.58
 OPT
f=3
TT=400.05
T1=273.11
 OPT
f=3
TT=37.48
T1=36.38
 OPT
f=3
TT=108.067
T1=106.81
 SAT (TO)
f=5
TT=2400.11
T1=308.72
 OPT
f=3
TT=224.823
T1=223.21
 OPT
f=3
TT=138.734
T1=84.82
 SAT (TO)
f=13
TT=2400.08
T1=6.27
 SAT (TO)
f=13
TT=2400.07
T1=6.19
 SAT (TO)
f=13
TT=2400.1
T1=6.18
 SAT (TO)
f=10
TT=2007.4
T1=79.15
 SAT (TO)
f=10
TT=2007.92
T1=353.8
 OPT
f=3
TT=44.115
T1=44.1
OpenStacks/OpenStacks-m1c-s1/
OpenStacks-m1c-wbp-15-15-1.xml 		OPT
f=4
TT=15.227
T1=1.89
 OPT
f=4
TT=42.898
T1=8.39
 OPT
f=4
TT=17.028
T1=3.97
 OPT
f=4
TT=24.949
T1=5.9
 OPT
f=4
TT=15.227
T1=3.72
 OPT
f=4
TT=21.009
T1=5.84
 OPT
f=4
TT=13.396
T1=3.32
 OPT
f=4
TT=39.905
T1=5.7
 OPT
f=4
TT=18.136
T1=1.89
 OPT
f=4
TT=38.287
T1=5.82
 OPT
f=4
TT=930.188
T1=14.51
 OPT
f=4
TT=620.939
T1=16.77
 OPT
f=4
TT=398.553
T1=17.07
 OPT
f=4
TT=356.874
T1=14
 SAT (TO)
f=4
TT=2400.03
T1=589.86
 SAT (TO)
f=4
TT=2400.03
T1=570.78
 SAT (TO)
f=4
TT=2400.07
T1=580.61
 SAT (TO)
f=4
TT=2011.76
T1=153.2
 SAT (TO)
f=4
TT=2011.66
T1=1170.55
 OPT
f=4
TT=15.712
T1=15.69
OpenStacks/
OpenStacks-m1-s1/
OpenStacks-m1-gp-050-1.xml 		OPT
f=45
TT=70.57
T1=17.48
 OPT
f=45
TT=78.921
T1=42.63
 OPT
f=45
TT=245.843
T1=18.36
 OPT
f=45
TT=99.204
T1=35.53
 OPT
f=45
TT=267.384
T1=17.48
 OPT
f=45
TT=314.186
T1=31.31
 OPT
f=45
TT=282.711
T1=17.54
 OPT
f=45
TT=414.213
T1=25.03
 SAT (TO)
f=45
TT=2400.04
T1=335.99
 OPT
f=45
TT=496.837
T1=29.73
 OPT
f=45
TT=192.664
T1=169.06
 OPT
f=45
TT=206.954
T1=142.78
 OPT
f=45
TT=97.131
T1=51.31
 OPT
f=45
TT=70.57
T1=37.29
 SAT (TO)
f=47
TT=2400.07
T1=281.75
 SAT (TO)
f=47
TT=2400.03
T1=342.6
 SAT (TO)
f=47
TT=2400.09
T1=308.83
 SAT (TO)
f=48
TT=1998.13
T1=30.72
 SAT (TO)
f=48
TT=1995.01
T1=34.1
 OPT
f=45
TT=618.108
T1=618
OpenStacks/
OpenStacks-m1-s1/
OpenStacks-m1-pb-30-15-1.xml 		OPT
f=14
TT=69.789
T1=6.73
 OPT
f=14
TT=148.919
T1=17.97
 OPT
f=14
TT=126.322
T1=22.12
 OPT
f=14
TT=241.746
T1=18.79
 OPT
f=14
TT=127.17
T1=21.36
 OPT
f=14
TT=214.472
T1=15.61
 OPT
f=14
TT=118.076
T1=20.88
 OPT
f=14
TT=223.751
T1=16.56
 OPT
f=14
TT=171.898
T1=6.73
 OPT
f=14
TT=243.936
T1=39.94
 SAT (TO)
f=14
TT=2400.13
T1=82.08
 SAT (TO)
f=14
TT=2400.04
T1=609.48
 SAT (TO)
f=14
TT=2400.14
T1=36.95
 SAT (TO)
f=14
TT=2400.09
T1=79.81
 ? (TO)

TT=2400.05

 ? (TO)

TT=2400.02

 ? (TO)

TT=2400.04

 SAT (TO)
f=15
TT=2010.46
T1=683.03
 SAT (TO)
f=15
TT=2010.43
T1=670.36
 OPT
f=14
TT=69.789
T1=69.68
OpenStacks/OpenStacks-m1-s1/
OpenStacks-m1-wbo-15-30-1.xml 		OPT
f=4
TT=78.16
T1=42.24
 OPT
f=4
TT=148.736
T1=106.35
 OPT
f=4
TT=82.975
T1=55.76
 OPT
f=4
TT=121.097
T1=61.39
 OPT
f=4
TT=78.16
T1=42.24
 OPT
f=4
TT=145.717
T1=84.29
 OPT
f=4
TT=110.326
T1=77.61
 OPT
f=4
TT=671.289
T1=604.85
 SAT (TO)
f=4
TT=2400.06
T1=874.09
 OPT
f=4
TT=101.52
T1=47.43
 SAT (TO)
f=4
TT=2400.09
T1=1644.25
 SAT (TO)
f=6
TT=2400.1
T1=130.66
 SAT (TO)
f=4
TT=2400.11
T1=1262.35
 SAT (TO)
f=4
TT=2400.11
T1=1828.85
 SAT (TO)
f=9
TT=2400.04
T1=598.58
 SAT (TO)
f=9
TT=2400.05
T1=624.49
 SAT (TO)
f=9
TT=2400.07
T1=638.23
 SAT (TO)
f=8
TT=2010.43
T1=1400.2
 SAT (TO)
f=7
TT=2010.33
T1=552.87
 OPT
f=4
TT=101.093
T1=101
OpenStacks/OpenStacks-m1-s1/
OpenStacks-m1-wbo-30-15-1.xml 		OPT
f=7
TT=8.145
T1=5.41
 OPT
f=7
TT=12.387
T1=10.85
 OPT
f=7
TT=8.145
T1=5.42
 OPT
f=7
TT=20.731
T1=10.78
 OPT
f=7
TT=8.45
T1=5.41
 OPT
f=7
TT=18.388
T1=12.22
 OPT
f=7
TT=8.898
T1=5.34
 OPT
f=7
TT=14.334
T1=9.17
 OPT
f=7
TT=12.136
T1=9.02
 OPT
f=7
TT=20.066
T1=12.33
 OPT
f=7
TT=101.853
T1=32.74
 OPT
f=7
TT=1439.26
T1=74.81
 OPT
f=7
TT=185.184
T1=18.73
 OPT
f=7
TT=493.281
T1=34.71
 SAT (TO)
f=8
TT=2400.04
T1=243.08
 SAT (TO)
f=8
TT=2400.03
T1=272.59
 SAT (TO)
f=8
TT=2400
T1=246.76
 SAT (TO)
f=8
TT=2010.47
T1=1474.48
 SAT (TO)
f=8
TT=2010.56
T1=374.37
 OPT
f=7
TT=43.066
T1=42.99
OpenStacks/OpenStacks-m1-s1/
OpenStacks-m1-wbop-10-20-1.xml 		OPT
f=5
TT=26.938
T1=7.71
 OPT
f=5
TT=210.856
T1=9.31
 OPT
f=5
TT=186.518
T1=8.46
 OPT
f=5
TT=411.912
T1=17.01
 OPT
f=5
TT=193.74
T1=7.71
 OPT
f=5
TT=363.824
T1=15.04
 OPT
f=5
TT=192.345
T1=10.41
 OPT
f=5
TT=407.926
T1=13.93
 OPT
f=5
TT=684.23
T1=7.91
 OPT
f=5
TT=387.221
T1=14.08
 OPT
f=5
TT=1158.13
T1=11.21
 SAT (TO)
f=5
TT=2400.13
T1=158.05
 SAT (TO)
f=5
TT=2400.07
T1=18.24
 OPT
f=5
TT=1811.16
T1=20
 SAT (TO)
f=6
TT=2400.01
T1=26.19
 SAT (TO)
f=6
TT=2400.08
T1=26.1
 SAT (TO)
f=6
TT=2400.07
T1=24.59
 SAT (TO)
f=5
TT=2011.88
T1=22.32
 SAT (TO)
f=5
TT=2011.62
T1=16.64
 OPT
f=5
TT=26.938
T1=26.88
OpenStacks/OpenStacks-m1-s1/
OpenStacks-m1-wbop-30-15-1.xml 		OPT
f=10
TT=24.286
T1=5.33
 OPT
f=10
TT=25.593
T1=9.3
 OPT
f=10
TT=24.743
T1=5.33
 OPT
f=10
TT=55.041
T1=11.24
 OPT
f=10
TT=24.286
T1=5.4
 OPT
f=10
TT=55.186
T1=11.67
 OPT
f=10
TT=25.798
T1=4.66
 OPT
f=10
TT=44.838
T1=10.09
 OPT
f=10
TT=33.235
T1=8.26
 OPT
f=10
TT=49.346
T1=9.44
 SAT (TO)
f=10
TT=2400.05
T1=52.89
 SAT (TO)
f=10
TT=2400.07
T1=1064.53
 SAT (TO)
f=10
TT=2400.05
T1=46.46
 SAT (TO)
f=10
TT=2400.11
T1=44.82
 SAT (TO)
f=11
TT=2400.02
T1=9.29
 SAT (TO)
f=11
TT=2400.07
T1=9.18
 SAT (TO)
f=11
TT=2400.01
T1=10.28
 SAT (TO)
f=10
TT=2010.31
T1=1206.94
 SAT (TO)
f=10
TT=2010.43
T1=1827.44
 OPT
f=10
TT=50.384
T1=50.29
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
OpenStacks/OpenStacks-m1-s1/
OpenStacks-m1-wbop-30-30-1.xml 		OPT
f=3
TT=25.43
T1=24.67
 OPT
f=3
TT=28.196
T1=27.79
 OPT
f=3
TT=28.889
T1=28.37
 OPT
f=3
TT=45.391
T1=44.55
 OPT
f=3
TT=25.43
T1=24.67
 OPT
f=3
TT=37.641
T1=36.3
 OPT
f=3
TT=24.356
T1=23.58
 OPT
f=3
TT=31.732
T1=30.29
 OPT
f=3
TT=557.518
T1=365.23
 OPT
f=3
TT=31.353
T1=30.17
 OPT
f=3
TT=324.713
T1=308.51
 OPT
f=3
TT=319.272
T1=314.99
 OPT
f=3
TT=676.386
T1=669.62
 OPT
f=3
TT=529.51
T1=241.64
 SAT (TO)
f=13
TT=2400.08
T1=6.1
 SAT (TO)
f=13
TT=2400.09
T1=6.18
 SAT (TO)
f=13
TT=2400.1
T1=6.1
 SAT (TO)
f=8
TT=2007.52
T1=106.26
 SAT (TO)
f=8
TT=2007.15
T1=117.12
 OPT
f=3
TT=54.229
T1=54.19
OpenStacks/OpenStacks-m1-s1/
OpenStacks-m1-wbp-15-15-1.xml 		OPT
f=4
TT=15.643
T1=1.88
 OPT
f=4
TT=41.363
T1=8.06
 OPT
f=4
TT=22.118
T1=3.31
 OPT
f=4
TT=25.626
T1=5.87
 OPT
f=4
TT=15.739
T1=3.28
 OPT
f=4
TT=41.023
T1=6.11
 OPT
f=4
TT=21.364
T1=3.34
 OPT
f=4
TT=37.758
T1=5.95
 OPT
f=4
TT=18.703
T1=1.88
 OPT
f=4
TT=28.278
T1=5.28
 SAT (TO)
f=4
TT=2400.09
T1=12.55
 OPT
f=4
TT=2238.68
T1=29.61
 OPT
f=4
TT=502.218
T1=43.85
 OPT
f=4
TT=2055.22
T1=17.07
 SAT (TO)
f=4
TT=2400.04
T1=560.08
 SAT (TO)
f=4
TT=2400.08
T1=548.08
 SAT (TO)
f=4
TT=2400.07
T1=582.48
 SAT (TO)
f=4
TT=2011.91
T1=154.8
 SAT (TO)
f=4
TT=2011.79
T1=184.41
 OPT
f=4
TT=15.643
T1=15.59
PeacableArmies/
PeacableArmies-m1-07_c18.xml 		OPT
f=7
TT=22.666
T1=0.3
 OPT
f=7
TT=46.383
T1=8.73
 OPT
f=7
TT=44.397
T1=3.75
 OPT
f=7
TT=152.319
T1=5.98
 OPT
f=7
TT=46.963
T1=3.77
 OPT
f=7
TT=116.066
T1=6.17
 OPT
f=7
TT=45.886
T1=3.65
 OPT
f=7
TT=127.975
T1=6.07
 OPT
f=7
TT=37.926
T1=3.06
 OPT
f=7
TT=121.618
T1=5.99
 OPT
f=7
TT=199.99
T1=14.69
 SAT (TO)
f=7
TT=2400.07
T1=17.9
 OPT
f=7
TT=226.712
T1=16.24
 OPT
f=7
TT=246.09
T1=16.77
 OPT
f=7
TT=147.73
T1=0.3
 OPT
f=7
TT=147.349
T1=0.31
 OPT
f=7
TT=146.824
T1=0.31
 OPT
f=7
TT=517.261
T1=0.3
 OPT
f=7
TT=544.025
T1=0.31
 OPT
f=7
TT=22.666
T1=22.58
PeacableArmies/
PeacableArmies-m2-07_c18.xml 		OPT
f=7
TT=9.634
T1=0.1
 OPT
f=7
TT=18.638
T1=8.52
 OPT
f=7
TT=25.064
T1=3.37
 OPT
f=7
TT=58.804
T1=3.83
 OPT
f=7
TT=26.633
T1=3.1
 OPT
f=7
TT=54.877
T1=4.77
 OPT
f=7
TT=27.278
T1=3.11
 OPT
f=7
TT=58.34
T1=3.47
 OPT
f=7
TT=13.523
T1=1.99
 OPT
f=7
TT=52.661
T1=3.48
 ? (TO)

TT=2400.14

 ? (TO)

TT=2400.08

 ? (TO)

TT=2400.11

 ? (TO)

TT=2400.13

 OPT
f=7
TT=9.695
T1=0.1
 OPT
f=7
TT=9.638
T1=0.1
 OPT
f=7
TT=9.634
T1=0.1
 OPT
f=7
TT=42.778
T1=0.1
 OPT
f=7
TT=50.467
T1=0.1
 OPT
f=7
TT=22.66
T1=22.59
PizzaVoucher/
PizzaVoucher-12a_c18.xml 		OPT
f=40
TT=10.886
T1=4.45
 OPT
f=40
TT=16.892
T1=12.83
 OPT
f=40
TT=12.972
T1=6.25
 OPT
f=40
TT=31.261
T1=25.04
 OPT
f=40
TT=10.886
T1=6.74
 OPT
f=40
TT=25.419
T1=10.3
 OPT
f=40
TT=11.991
T1=6.65
 OPT
f=40
TT=21.355
T1=10.74
 OPT
f=40
TT=194.8
T1=193.32
 OPT
f=40
TT=23.202
T1=8.58
 OPT
f=40
TT=73.153
T1=16.94
 OPT
f=40
TT=787.169
T1=167.01
 OPT
f=40
TT=90.948
T1=77.5
 OPT
f=40
TT=113.551
T1=66
 SAT (TO)
f=40
TT=2400.02
T1=540.39
 SAT (TO)
f=40
TT=2400.06
T1=533.56
 SAT (TO)
f=40
TT=2400.04
T1=538.37
 OPT
f=40
TT=41.699
T1=4.45
 OPT
f=40
TT=25.204
T1=2.14
 OPT
f=40
TT=15.772
T1=15.69
PrizeCollecting/
PrizeCollecting-jok-s1/
PrizeCollecting-18-3-6-8.xml 		OPT
f=32
TT=1.406
T1=0.96
 OPT
f=32
TT=7.235
T1=7.06
 OPT
f=32
TT=11.661
T1=11.13
 OPT
f=32
TT=10.655
T1=9.46
 OPT
f=32
TT=7.692
T1=6.7
 OPT
f=32
TT=11.379
T1=10.04
 OPT
f=32
TT=7.647
T1=5.89
 OPT
f=32
TT=11.262
T1=9.47
 OPT
f=32
TT=7.108
T1=6.48
 OPT
f=32
TT=12.818
T1=11.13
 OPT
f=32
TT=26.409
T1=23.26
 OPT
f=32
TT=31.311
T1=25.83
 OPT
f=32
TT=35.278
T1=32.41
 OPT
f=32
TT=55.182
T1=52.54
 SAT (TO)
f=-6986
TT=2400.01
T1=957.18
 SAT (TO)
f=-6986
TT=2400.01
T1=981.92
 SAT (TO)
f=-6986
TT=2400.07
T1=1127.78
 OPT
f=32
TT=1.406
T1=0.96
 OPT
f=32
TT=1.36
T1=0.94
 OPT
f=32
TT=52.431
T1=52.39
PrizeCollecting/
PrizeCollecting-jok-s1/
PrizeCollecting-20-4-5-0.xml 		OPT
f=54
TT=6.11
T1=0.62
 OPT
f=54
TT=11.39
T1=11.21
 OPT
f=54
TT=18.134
T1=11.93
 OPT
f=54
TT=22.51
T1=15.91
 OPT
f=54
TT=20.321
T1=14.87
 OPT
f=54
TT=20.502
T1=15.62
 OPT
f=54
TT=13.237
T1=8.92
 OPT
f=54
TT=20.165
T1=13.96
 OPT
f=54
TT=12.094
T1=8.75
 OPT
f=54
TT=20.037
T1=14.61
 OPT
f=54
TT=47.85
T1=24.34
 OPT
f=54
TT=108.873
T1=85.86
 ? (TO)

TT=2400.11

 OPT
f=54
TT=58.099
T1=32.92
 SAT (TO)
f=-19000
TT=2400.04
T1=0.1
 SAT (TO)
f=-19000
TT=2400.11
T1=0.1
 SAT (TO)
f=-19000
TT=2400.07
T1=0.1
 OPT
f=54
TT=6.11
T1=0.62
 OPT
f=54
TT=5.852
T1=2.19
 OPT
f=54
TT=97.1
T1=97.01
PrizeCollecting/
PrizeCollecting-jok-s1/
PrizeCollecting-20-4-5-8.xml 		OPT
f=20
TT=13.708
T1=2.2
 OPT
f=20
TT=16.703
T1=10.73
 OPT
f=20
TT=24.57
T1=8.16
 OPT
f=20
TT=38.765
T1=18.66
 OPT
f=20
TT=26.077
T1=9.34
 OPT
f=20
TT=35.059
T1=17.94
 OPT
f=20
TT=24.548
T1=10.15
 OPT
f=20
TT=35.71
T1=15.67
 OPT
f=20
TT=13.708
T1=7.13
 OPT
f=20
TT=32.856
T1=18.07
 OPT
f=20
TT=180.457
T1=28.7
 ? (TO)

TT=2400.09

 ? (TO)

TT=2400.09

 OPT
f=20
TT=523.659
T1=217.89
 SAT (TO)
f=-15984
TT=2400.06
T1=6.79
 SAT (TO)
f=-15984
TT=2400.02
T1=6.79
 SAT (TO)
f=-15984
TT=2400.01
T1=6.79
 OPT
f=20
TT=14.707
T1=2.2
 OPT
f=20
TT=17.602
T1=1.42
 OPT
f=20
TT=69.378
T1=69.29
PrizeCollecting/
PrizeCollecting-jok-s1/
PrizeCollecting-24-4-6-1.xml 		OPT
f=89
TT=50.44
T1=9.01
 OPT
f=89
TT=68.649
T1=28.85
 OPT
f=89
TT=347.492
T1=202.42
 Wrong Opt.
f=-961
TT=11.445
T1=11.08
 OPT
f=89
TT=171.197
T1=29.9
 OPT
f=89
TT=137.578
T1=27.73
 OPT
f=89
TT=188.634
T1=44.49
 OPT
f=89
TT=168.631
T1=39.07
 OPT
f=89
TT=50.44
T1=10.32
 OPT
f=89
TT=172.263
T1=33.85
 ? (TO)

TT=2400.15

 ? (TO)

TT=2400.11

 SAT (TO)
f=-4936
TT=2400.06
T1=1428.54
 ? (TO)

TT=2400.07

 SAT (TO)
f=-24000
TT=2400.05
T1=0.21
 SAT (TO)
f=-24000
TT=2400.03
T1=0.21
 SAT (TO)
f=-24000
TT=2400.04
T1=0.31
 OPT
f=89
TT=141.502
T1=9.01
 OPT
f=89
TT=119.906
T1=18.29
 OPT
f=89
TT=285.516
T1=285.5
PrizeCollecting/
PrizeCollecting-jok-s1/
PrizeCollecting-24-4-6-2.xml 		OPT
f=53
TT=33.625
T1=6.89
 OPT
f=53
TT=94.794
T1=88.88
 OPT
f=53
TT=223.576
T1=80.19
 Wrong Opt.
f=41
TT=42.165
T1=42.13
 OPT
f=53
TT=120.711
T1=29.35
 OPT
f=53
TT=133.821
T1=33.57
 OPT
f=53
TT=164.394
T1=65.53
 OPT
f=53
TT=120.563
T1=36.74
 OPT
f=53
TT=33.625
T1=6.89
 OPT
f=53
TT=157.071
T1=67.32
 ? (TO)

TT=2400.05

 OPT
f=53
TT=1651.35
T1=217.31
 OPT
f=53
TT=2272.21
T1=891.19
 ? (TO)

TT=2400.11

 SAT (TO)
f=-24000
TT=2400.06
T1=0.21
 SAT (TO)
f=-24000
TT=2400.02
T1=0.21
 SAT (TO)
f=-24000
TT=2400.04
T1=0.21
 OPT
f=53
TT=99.063
T1=14.68
 OPT
f=53
TT=139.177
T1=21.56
 OPT
f=53
TT=191.37
T1=191.28
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
PrizeCollecting/
PrizeCollecting-jok-s1/
PrizeCollecting-24-4-6-3.xml 		OPT
f=80
TT=40.999
T1=10.6
 OPT
f=80
TT=88.19
T1=85.71
 OPT
f=80
TT=236.599
T1=168.8
 OPT
f=80
TT=86.899
T1=55.22
 OPT
f=80
TT=92.831
T1=28.09
 OPT
f=80
TT=108.07
T1=62.52
 OPT
f=80
TT=99.272
T1=39.46
 OPT
f=80
TT=106.884
T1=27.55
 OPT
f=80
TT=40.999
T1=25.53
 OPT
f=80
TT=123.193
T1=55.67
 ? (TO)

TT=2400.08

 OPT
f=80
TT=1344.77
T1=525.73
 ? (TO)

TT=2400.05

 ? (TO)

TT=2400.08

 SAT (TO)
f=-24000
TT=2400.02
T1=0.21
 SAT (TO)
f=-24000
TT=2400.1
T1=0.2
 SAT (TO)
f=-24000
TT=2400.05
T1=0.21
 OPT
f=80
TT=84.072
T1=10.6
 OPT
f=80
TT=67.55
T1=15.4
 OPT
f=80
TT=232.329
T1=232.25
PrizeCollecting/
PrizeCollecting-jok-s1/
PrizeCollecting-24-4-6-4.xml 		OPT
f=35
TT=38.338
T1=4.21
 OPT
f=35
TT=73.526
T1=57.76
 OPT
f=35
TT=150.019
T1=62.1
 OPT
f=35
TT=105.628
T1=14.86
 OPT
f=35
TT=93.106
T1=30.57
 OPT
f=35
TT=100.464
T1=29.74
 OPT
f=35
TT=127.255
T1=44.71
 OPT
f=35
TT=131.115
T1=62.97
 OPT
f=35
TT=38.338
T1=16.6
 OPT
f=35
TT=132.067
T1=37.42
 OPT
f=35
TT=1076.41
T1=289.15
 OPT
f=35
TT=1769.94
T1=874.98
 OPT
f=35
TT=1933.53
T1=1258.92
 ? (TO)

TT=2400.12

 SAT (TO)
f=-24000
TT=2400.02
T1=0.21
 SAT (TO)
f=-24000
TT=2400.05
T1=0.21
 SAT (TO)
f=-24000
TT=2400.04
T1=0.31
 OPT
f=35
TT=78.296
T1=4.21
 OPT
f=35
TT=62.199
T1=4.73
 OPT
f=35
TT=150.205
T1=150.1
PrizeCollecting/
PrizeCollecting-jok-s1/
PrizeCollecting-24-4-6-6.xml 		OPT
f=25
TT=37.095
T1=9
 OPT
f=25
TT=77.127
T1=51.5
 OPT
f=25
TT=150.145
T1=49.78
 Wrong Opt.
f=-990
TT=16.365
T1=16.02
 OPT
f=25
TT=103.804
T1=29.59
 OPT
f=25
TT=178.061
T1=105.7
 OPT
f=25
TT=174.372
T1=124.17
 OPT
f=25
TT=172.827
T1=104.43
 OPT
f=25
TT=179.628
T1=155.56
 OPT
f=25
TT=177.243
T1=94.01
 OPT
f=25
TT=1135.13
T1=685.69
 OPT
f=25
TT=2059.35
T1=363.15
 OPT
f=25
TT=1596.15
T1=82.65
 OPT
f=25
TT=1039.11
T1=101.71
 SAT (TO)
f=-24000
TT=2400.03
T1=0.21
 SAT (TO)
f=-24000
TT=2400.03
T1=0.21
 SAT (TO)
f=-24000
TT=2400.05
T1=0.21
 OPT
f=25
TT=37.095
T1=9
 OPT
f=25
TT=102.448
T1=16.17
 OPT
f=25
TT=207.672
T1=207.59
PrizeCollecting/
PrizeCollecting-jok-s1/
PrizeCollecting-24-4-6-7.xml 		OPT
f=56
TT=22.667
T1=15.4
 OPT
f=56
TT=32.536
T1=28.47
 OPT
f=56
TT=76.246
T1=51.53
 Wrong Opt.
f=44
TT=23.832
T1=23.46
 OPT
f=56
TT=46.949
T1=32.16
 OPT
f=56
TT=67.75
T1=36.53
 OPT
f=56
TT=47.894
T1=29.36
 OPT
f=56
TT=75.915
T1=53.73
 OPT
f=56
TT=25.421
T1=19.24
 OPT
f=56
TT=62.102
T1=40.29
 OPT
f=56
TT=482.159
T1=269.08
 ? (TO)

TT=2400.05

 ? (TO)

TT=2400.07

 OPT
f=56
TT=1114.31
T1=951.2
 SAT (TO)
f=-24000
TT=2400.01
T1=0.21
 SAT (TO)
f=-24000
TT=2400.04
T1=0.21
 SAT (TO)
f=-24000
TT=2400.05
T1=0.21
 OPT
f=56
TT=22.667
T1=15.4
 OPT
f=56
TT=30.108
T1=21
 OPT
f=56
TT=303.793
T1=303.77
PrizeCollecting/
PrizeCollecting-jok-s1/
PrizeCollecting-24-4-6-8.xml 		OPT
f=63
TT=35.958
T1=2.68
 OPT
f=63
TT=48.743
T1=36.81
 OPT
f=63
TT=123.964
T1=67.51
 Wrong Opt.
f=50
TT=22.539
T1=22.11
 OPT
f=63
TT=131.767
T1=87.48
 OPT
f=63
TT=99.802
T1=20.9
 OPT
f=63
TT=84.409
T1=51.29
 OPT
f=63
TT=120.067
T1=50.13
 OPT
f=63
TT=35.958
T1=18.23
 OPT
f=63
TT=125.322
T1=29.57
 ? (TO)

TT=2400.08

 OPT
f=63
TT=2145.15
T1=1776.65
 OPT
f=63
TT=1097.87
T1=511.95
 ? (TO)

TT=2400.08

 SAT (TO)
f=-24000
TT=2400.06
T1=0.21
 SAT (TO)
f=-24000
TT=2400.04
T1=0.21
 SAT (TO)
f=-24000
TT=2400.02
T1=0.21
 OPT
f=63
TT=68.539
T1=2.68
 OPT
f=63
TT=41.554
T1=3.43
 OPT
f=63
TT=314.005
T1=313.93
PrizeCollecting/
PrizeCollecting-jok-s1/
PrizeCollecting-25-5-5-0.xml 		OPT
f=41
TT=34.28
T1=13
 OPT
f=41
TT=36.547
T1=34.1
 OPT
f=41
TT=179.059
T1=158.93
 OPT
f=41
TT=126.502
T1=66.69
 OPT
f=41
TT=41.444
T1=13
 OPT
f=41
TT=87.206
T1=26.52
 OPT
f=41
TT=42.041
T1=13.24
 OPT
f=41
TT=81.66
T1=24.92
 OPT
f=41
TT=34.28
T1=13.61
 OPT
f=41
TT=94.501
T1=29.31
 ? (TO)

TT=2400.05

 OPT
f=41
TT=464.045
T1=334.01
 OPT
f=41
TT=395.768
T1=105.82
 OPT
f=41
TT=436.022
T1=207.87
 SAT (TO)
f=-25000
TT=2400.02
T1=0.31
 SAT (TO)
f=-25000
TT=2400.02
T1=0.31
 SAT (TO)
f=-25000
TT=2400.06
T1=0.31
 OPT
f=41
TT=38.17
T1=17.41
 OPT
f=41
TT=30.749
T1=13.49
 OPT
f=41
TT=282.321
T1=282.26
PrizeCollecting/
PrizeCollecting-jok-s1/
PrizeCollecting-25-5-5-5.xml 		OPT
f=57
TT=62.092
T1=15.08
 OPT
f=57
TT=149.386
T1=147.99
 OPT
f=57
TT=219.017
T1=40.28
 OPT
f=57
TT=213.978
T1=103.24
 OPT
f=57
TT=130.274
T1=63.98
 OPT
f=57
TT=161.87
T1=46.16
 OPT
f=57
TT=157.692
T1=83.24
 OPT
f=57
TT=126.769
T1=25.16
 OPT
f=57
TT=62.092
T1=37.58
 OPT
f=57
TT=167.044
T1=28
 SAT (TO)
f=-944
TT=2400.07
T1=2072.06
 ? (TO)

TT=2400.13

 ? (TO)

TT=2400.09

 SAT (TO)
f=-933
TT=2400.11
T1=66.31
 SAT (TO)
f=-25000
TT=2400.04
T1=0.31
 SAT (TO)
f=-25000
TT=2400.03
T1=0.3
 SAT (TO)
f=-25000
TT=2400.03
T1=0.3
 OPT
f=57
TT=116.748
T1=15.08
 OPT
f=57
TT=76.158
T1=12.6
 OPT
f=57
TT=282.16
T1=282.08
PrizeCollecting/
PrizeCollecting-jok-s1/
PrizeCollecting-25-5-5-6.xml 		OPT
f=79
TT=47.708
T1=13.59
 OPT
f=79
TT=133.386
T1=114.74
 OPT
f=79
TT=283.356
T1=189.52
 OPT
f=79
TT=102.796
T1=60.79
 OPT
f=79
TT=149.945
T1=65.83
 OPT
f=79
TT=267.047
T1=149.26
 OPT
f=79
TT=164.071
T1=35.19
 OPT
f=79
TT=218.768
T1=106.12
 OPT
f=79
TT=47.708
T1=13.59
 OPT
f=79
TT=240.863
T1=77.26
 SAT (TO)
f=-924
TT=2400.09
T1=2172.73
 ? (TO)

TT=2400.13

 ? (TO)

TT=2400.11

 ? (TO)

TT=2400.06

 SAT (TO)
f=-25000
TT=2400.07
T1=0.3
 SAT (TO)
f=-25000
TT=2400.04
T1=0.31
 SAT (TO)
f=-25000
TT=2400.05
T1=0.3
 OPT
f=79
TT=182.056
T1=35.87
 OPT
f=79
TT=47.062
T1=7.09
 OPT
f=79
TT=226.695
T1=226.68
PrizeCollecting/
PrizeCollecting-jok-s1/
PrizeCollecting-25-5-5-9.xml 		OPT
f=65
TT=75.577
T1=14.31
 OPT
f=65
TT=75.577
T1=50.19
 OPT
f=65
TT=259.363
T1=114.62
 Wrong Cert.

TT=34.215

 OPT
f=65
TT=245.517
T1=93.99
 OPT
f=65
TT=252.068
T1=73.17
 OPT
f=65
TT=229.517
T1=88.86
 OPT
f=65
TT=309.601
T1=29.78
 OPT
f=65
TT=98.416
T1=21.77
 OPT
f=65
TT=340.865
T1=49.88
 ? (TO)

TT=2400.07

 SAT (TO)
f=65
TT=2400.07
T1=2259.51
 ? (TO)

TT=2400.05

 OPT
f=65
TT=1364.11
T1=102.75
 SAT (TO)
f=-25000
TT=2400.01
T1=0.31
 SAT (TO)
f=-25000
TT=2400.08
T1=0.31
 SAT (TO)
f=-25000
TT=2400.1
T1=0.31
 OPT
f=65
TT=182.458
T1=14.31
 OPT
f=65
TT=158.821
T1=19.86
 OPT
f=65
TT=275.779
T1=275.68
PrizeCollecting/
PrizeCollecting-jok-s1/
PrizeCollecting-28-4-7-3.xml 		OPT
f=77
TT=100.565
T1=18.21
 OPT
f=77
TT=820.636
T1=800.91
 OPT
f=77
TT=1355.97
T1=836.55
 OPT
f=77
TT=858.748
T1=559
 OPT
f=77
TT=408.458
T1=247.81
 OPT
f=77
TT=541.265
T1=109.48
 OPT
f=77
TT=339.654
T1=108.78
 OPT
f=77
TT=695.946
T1=171.3
 OPT
f=77
TT=100.565
T1=18.21
 OPT
f=77
TT=879.094
T1=345.94
 ? (TO)

TT=2400.08

 ? (TO)

TT=2400.12

 ? (TO)

TT=2400.08

 SAT (TO)
f=77
TT=2400.13
T1=1043.95
 SAT (TO)
f=-28000
TT=2400.02
T1=0.41
 SAT (TO)
f=-28000
TT=2400.1
T1=0.4
 SAT (TO)
f=-28000
TT=2400.05
T1=0.41
 OPT
f=77
TT=401.25
T1=81.61
 OPT
f=77
TT=348.528
T1=18.52
 OPT
f=77
TT=295.389
T1=295.28
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
PseudoBoolean/
PseudoBoolean-opt-bgr/
Pb-bgr-04.xml 		OPT
f=6
TT=0.013
T1=0
 OPT
f=6
TT=3.245
T1=3.16
 OPT
f=6
TT=1.316
T1=1.02
 OPT
f=6
TT=1.665
T1=1.38
 OPT
f=6
TT=1.299
T1=1.03
 OPT
f=6
TT=1.634
T1=1.36
 OPT
f=6
TT=1.27
T1=1.03
 OPT
f=6
TT=1.631
T1=1.63
 OPT
f=6
TT=1.084
T1=1.02
 OPT
f=6
TT=1.624
T1=1.38
 OPT
f=6
TT=6.558
T1=6.5
 OPT
f=6
TT=7.127
T1=6.87
 OPT
f=6
TT=7.01
T1=6.72
 OPT
f=6
TT=6.166
T1=5.96
 OPT
f=6
TT=0.013
T1=0
 OPT
f=6
TT=0.013
T1=0
 OPT
f=6
TT=0.013
T1=0
 OPT
f=6
TT=0.025
T1=0
 OPT
f=6
TT=0.027
T1=0
 OPT
f=6
TT=0.406
T1=0.31
PseudoBoolean/
PseudoBoolean-opt-dimacs/
Pb-hanoi4.xml 		OPT
f=718
TT=109.649
T1=24.65
 SAT (TO)
f=718
TT=2400.1
T1=135.28
 OPT
f=718
TT=623.045
T1=24.65
 OPT
f=718
TT=1308.29
T1=52.89
 OPT
f=718
TT=641.058
T1=342.65
 OPT
f=718
TT=1357.19
T1=726.84
 OPT
f=718
TT=678.572
T1=363.33
 OPT
f=718
TT=1350.42
T1=713.06
 OPT
f=718
TT=827.902
T1=72.61
 OPT
f=718
TT=1325.45
T1=360.46
 SAT (TO)
f=718
TT=2400.12
T1=363.07
 SAT (TO)
f=718
TT=2400.06
T1=1294.46
 SAT (TO)
f=718
TT=2400.07
T1=91.58
 SAT (TO)
f=718
TT=2400.09
T1=952.85
 ? (TO)

TT=2400.03

 ? (TO)

TT=2400.1

 ? (TO)

TT=2400.03

 SAT (TO)
f=718
TT=2007.41
T1=393.82
 ? (TO)

TT=2006.73

 OPT
f=718
TT=109.649
T1=109.6
PseudoBoolean/
PseudoBoolean-opt-dimacs/
Pb-ii32b3.xml 		OPT
f=331
TT=118.266
T1=11.97
 OPT
f=331
TT=624.202
T1=11.97
 OPT
f=331
TT=939.287
T1=22.3
 OPT
f=331
TT=1813.59
T1=27.16
 SAT (TO)
f=331
TT=2400.47
T1=22.96
 OPT
f=331
TT=765.207
T1=27.22
 OPT
f=331
TT=2346.94
T1=22.6
 OPT
f=331
TT=504.43
T1=26.39
 OPT
f=331
TT=431.514
T1=12.08
 OPT
f=331
TT=604.484
T1=26.31
 SAT (TO)
f=331
TT=2400.11
T1=801.75
 SAT (TO)
f=331
TT=2400.07
T1=185.38
 SAT (TO)
f=331
TT=2400.13
T1=70.76
 SAT (TO)
f=331
TT=2400.16
T1=36.92
 SAT (TO)
f=331
TT=2400.01
T1=19.79
 SAT (TO)
f=331
TT=2400.04
T1=19.89
 SAT (TO)
f=331
TT=2400.03
T1=19.57
 SAT (TO)
f=331
TT=2007.34
T1=170.13
 SAT (TO)
f=331
TT=2007.04
T1=168.56
 OPT
f=331
TT=118.266
T1=118.17
PseudoBoolean/
PseudoBoolean-opt-dimacs/
Pb-ii32e3.xml 		OPT
f=310
TT=91.958
T1=6.17
 OPT
f=310
TT=2369.49
T1=6.17
 SAT (TO)
f=310
TT=2400.65
T1=321.24
 OPT
f=310
TT=6229.76
T1=20.57
 SAT (TO)
f=310
TT=2400.48
T1=252.31
 OPT
f=310
TT=1991.48
T1=20.71
 SAT (TO)
f=310
TT=2400.67
T1=243.96
 OPT
f=310
TT=1896.71
T1=19.82
 OPT
f=310
TT=599.632
T1=215.4
 OPT
f=310
TT=1934.9
T1=18.46
 SAT (TO)
f=310
TT=2400.16
T1=28.18
 SAT (TO)
f=310
TT=2400.1
T1=41.32
 SAT (TO)
f=310
TT=2400.1
T1=57.54
 SAT (TO)
f=310
TT=2400.14
T1=273.25
 SAT (TO)
f=310
TT=2400.05
T1=25.69
 SAT (TO)
f=310
TT=2400.02
T1=26.09
 SAT (TO)
f=310
TT=2400.06
T1=25.99
 SAT (TO)
f=310
TT=2007.83
T1=47.02
 SAT (TO)
f=310
TT=2007.84
T1=46.28
 OPT
f=310
TT=91.958
T1=91.89
PseudoBoolean/
PseudoBoolean-opt-dimacs/
Pb-jnh210.xml 		OPT
f=88
TT=3.932
T1=0.22
 OPT
f=88
TT=5.885
T1=4.45
 OPT
f=88
TT=6.167
T1=3.48
 OPT
f=88
TT=15.015
T1=4.3
 OPT
f=88
TT=7.362
T1=3.48
 OPT
f=88
TT=10.94
T1=4.38
 OPT
f=88
TT=8.181
T1=2.7
 OPT
f=88
TT=11.197
T1=3.73
 OPT
f=88
TT=3.932
T1=2.29
 OPT
f=88
TT=10.919
T1=3.73
 OPT
f=88
TT=27.11
T1=12.49
 OPT
f=88
TT=145.299
T1=38.83
 OPT
f=88
TT=27.654
T1=15.05
 OPT
f=88
TT=28.208
T1=12.47
 OPT
f=88
TT=50.812
T1=0.89
 OPT
f=88
TT=51.9
T1=1
 OPT
f=88
TT=51.765
T1=1
 OPT
f=88
TT=25.38
T1=0.22
 OPT
f=88
TT=37.932
T1=0.11
 OPT
f=88
TT=27.11
T1=27
PseudoBoolean/
PseudoBoolean-opt-dimacs/
Pb-par16-3.xml 		OPT
f=1015
TT=53.822
T1=25.56
 OPT
f=1015
TT=455.623
T1=220.98
 OPT
f=1015
TT=62.301
T1=25.56
 OPT
f=1015
TT=144.905
T1=53.89
 OPT
f=1015
TT=64.67
T1=27.04
 OPT
f=1015
TT=130.213
T1=30.88
 OPT
f=1015
TT=67.376
T1=25.48
 OPT
f=1015
TT=129.643
T1=32.39
 OPT
f=1015
TT=59.686
T1=58.06
 OPT
f=1015
TT=128.29
T1=32.26
 OPT
f=1015
TT=552.549
T1=182.69
 ? (TO)

TT=2400.1

 OPT
f=1015
TT=779.452
T1=72.83
 OPT
f=1015
TT=700.264
T1=100.43
 SAT (TO)
f=1015
TT=2400.04
T1=119.47
 SAT (TO)
f=1015
TT=2400.08
T1=122.67
 SAT (TO)
f=1015
TT=2400.09
T1=125.1
 SAT (TO)
f=1015
TT=2007.91
T1=1879.2
 SAT (TO)
f=1015
TT=2007.25
T1=1864.22
 OPT
f=1015
TT=53.822
T1=53.79
PseudoBoolean/
PseudoBoolean-opt-factor/
Pb-factor-S9-P211-Q347.xml 		OPT
f=211
TT=0.087
T1=0
 OPT
f=211
TT=3.815
T1=3.51
 OPT
f=211
TT=2.253
T1=1.97
 OPT
f=211
TT=4.055
T1=3.09
 OPT
f=211
TT=2.272
T1=2.01
 OPT
f=211
TT=3.266
T1=3.04
 OPT
f=211
TT=2.263
T1=1.53
 OPT
f=211
TT=3.251
T1=2.35
 OPT
f=211
TT=1.554
T1=1.28
 OPT
f=211
TT=3.499
T1=2.33
 OPT
f=211
TT=9.915
T1=9.31
 OPT
f=211
TT=10.897
T1=8.61
 OPT
f=211
TT=9.555
T1=9.09
 OPT
f=211
TT=9.383
T1=9.09
 OPT
f=211
TT=0.088
T1=0
 OPT
f=211
TT=0.087
T1=0
 OPT
f=211
TT=0.101
T1=0
 OPT
f=211
TT=0.318
T1=0
 OPT
f=211
TT=0.318
T1=0
 OPT
f=211
TT=0.151
T1=0.09
PseudoBoolean/
PseudoBoolean-opt-factor/
Pb-factor-S9-P347-Q487.xml 		OPT
f=347
TT=0.076
T1=0
 OPT
f=347
TT=3.744
T1=3.46
 OPT
f=347
TT=2.234
T1=1.97
 OPT
f=347
TT=3.102
T1=3.02
 OPT
f=347
TT=2.303
T1=2.02
 OPT
f=347
TT=3.58
T1=3.07
 OPT
f=347
TT=2.212
T1=2.01
 OPT
f=347
TT=3.059
T1=2.26
 OPT
f=347
TT=1.362
T1=1.28
 OPT
f=347
TT=3.005
T1=2.34
 OPT
f=347
TT=9.373
T1=8.94
 OPT
f=347
TT=9.432
T1=8.57
 OPT
f=347
TT=8.906
T1=8.42
 OPT
f=347
TT=8.45
T1=8.29
 OPT
f=347
TT=0.076
T1=0
 OPT
f=347
TT=0.076
T1=0
 OPT
f=347
TT=0.087
T1=0
 OPT
f=347
TT=0.175
T1=0
 OPT
f=347
TT=0.165
T1=0
 OPT
f=347
TT=0.167
T1=0.09
PseudoBoolean/
PseudoBoolean-opt-fx/
Pb-fx84.xml 		OPT
f=8
TT=19.598
T1=19.39
 OPT
f=8
TT=19.598
T1=19.39
 OPT
f=8
TT=107.069
T1=106.75
 OPT
f=8
TT=286.429
T1=286.2
 OPT
f=8
TT=74.211
T1=73.88
 OPT
f=8
TT=152.823
T1=152.1
 OPT
f=8
TT=73.789
T1=73.45
 OPT
f=8
TT=152.578
T1=152.01
 ? (TO)

TT=2400.05

 OPT
f=8
TT=180.126
T1=179.95
 OPT
f=8
TT=43.099
T1=42.55
 OPT
f=8
TT=558.528
T1=558.39
 OPT
f=8
TT=388.859
T1=388.59
 ? (TO)

TT=2400.09

 OPT
f=8
TT=70.641
T1=70.49
 OPT
f=8
TT=71.416
T1=71.28
 OPT
f=8
TT=65.181
T1=65.08
 OPT
f=8
TT=176.624
T1=175.9
 OPT
f=8
TT=183.1
T1=182.49
 OPT
f=8
TT=138.036
T1=138.01
PseudoBoolean/
PseudoBoolean-opt-logicSynthesis/
Pb-logic-m100-100-30-30-r.xml 		OPT
f=5
TT=29.307
T1=29.28
 OPT
f=5
TT=351.37
T1=30.8
 OPT
f=5
TT=704.456
T1=629.1
 OPT
f=5
TT=1906.9
T1=1717.99
 OPT
f=5
TT=738.166
T1=662.49
 OPT
f=5
TT=1180.05
T1=956.11
 OPT
f=5
TT=714.075
T1=640.38
 OPT
f=5
TT=406.114
T1=133.57
 OPT
f=5
TT=1002.42
T1=1001.7
 OPT
f=5
TT=1549.13
T1=1366.86
 SAT (TO)
f=5
TT=2400.12
T1=279.08
 SAT (TO)
f=6
TT=2400.1
T1=76.88
 SAT (TO)
f=5
TT=2400.11
T1=1009.25
 SAT (TO)
f=6
TT=2400.16
T1=51.59
 OPT
f=5
TT=1158.35
T1=1040.45
 OPT
f=5
TT=1155.48
T1=1037.84
 OPT
f=5
TT=1164.35
T1=1045.96
 OPT
f=5
TT=1900.78
T1=676.27
 OPT
f=5
TT=1779.83
T1=345.57
 OPT
f=5
TT=29.307
T1=29.28
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
PseudoBoolean/
PseudoBoolean-opt-marketSplit/
Pb-msplit-4-30-2.xml 		UNSAT

TT=28.065

 UNSAT

TT=30.007

 UNSAT

TT=30.15

 UNSAT

TT=64.381

 UNSAT

TT=28.065

 UNSAT

TT=64.183

 UNSAT

TT=26.278

 UNSAT

TT=69.057

 UNSAT

TT=93.567

 UNSAT

TT=65.65

 UNSAT

TT=223.613

 UNSAT

TT=701.468

 UNSAT

TT=146.408

 UNSAT

TT=167.653

 UNSAT

TT=420.574

 UNSAT

TT=421.522

 UNSAT

TT=420.398

 UNSAT

TT=1407.7

 UNSAT

TT=1072.44

 UNSAT

TT=464.545
PseudoBoolean/
PseudoBoolean-opt-marketSplit/
Pb-msplit-opt-4-30-1.xml 		OPT
f=2
TT=82.739
T1=7.03
 OPT
f=2
TT=86.68
T1=7.03
 OPT
f=2
TT=82.739
T1=13.49
 OPT
f=2
TT=225.99
T1=24.82
 OPT
f=2
TT=88.812
T1=8.38
 OPT
f=2
TT=197.495
T1=11.9
 OPT
f=2
TT=92.386
T1=20.08
 OPT
f=2
TT=175.955
T1=47.52
 OPT
f=2
TT=163.587
T1=20.38
 OPT
f=2
TT=187.988
T1=27.95
 OPT
f=2
TT=292.708
T1=37.3
 OPT
f=2
TT=1338.63
T1=24.36
 OPT
f=2
TT=298.233
T1=16.53
 OPT
f=2
TT=255.106
T1=19.05
 OPT
f=2
TT=860.848
T1=35.5
 OPT
f=2
TT=855.161
T1=35.29
 OPT
f=2
TT=986.427
T1=40.89
 SAT (TO)
f=2
TT=2012.71
T1=27.84
 SAT (TO)
f=2
TT=2012.67
T1=110.1
 OPT
f=2
TT=1220.45
T1=1220.35
PseudoBoolean/
PseudoBoolean-opt-marketSplit/
Pb-msplit-opt-4-30-3.xml 		OPT
f=2
TT=142.375
T1=27.06
 OPT
f=2
TT=142.375
T1=57.99
 OPT
f=2
TT=191.435
T1=27.06
 OPT
f=2
TT=335.339
T1=9.4
 OPT
f=2
TT=171.009
T1=28.85
 OPT
f=2
TT=359.908
T1=59.18
 OPT
f=2
TT=154.591
T1=43.53
 OPT
f=2
TT=346.023
T1=33.36
 OPT
f=2
TT=394.577
T1=49.13
 OPT
f=2
TT=362.759
T1=150.44
 OPT
f=2
TT=539.614
T1=41.55
 SAT (TO)
f=2
TT=2400.06
T1=385.58
 OPT
f=2
TT=468.231
T1=34.15
 OPT
f=2
TT=472.756
T1=55.13
 OPT
f=2
TT=1192.52
T1=102.08
 OPT
f=2
TT=1189.27
T1=101.59
 OPT
f=2
TT=1185.22
T1=101.59
 SAT (TO)
f=2
TT=2013
T1=343.43
 SAT (TO)
f=2
TT=2012.85
T1=123.7
 OPT
f=2
TT=1359.26
T1=1359.24
PseudoBoolean/
PseudoBoolean-opt-mps/
Pb-mps-v2-20-10-lseu.xml 		OPT
f=1120
TT=101.21
T1=6.33
 OPT
f=1120
TT=160.136
T1=23.26
 OPT
f=1120
TT=140.894
T1=95.99
 OPT
f=1120
TT=1588.07
T1=508.38
 OPT
f=1120
TT=101.21
T1=6.33
 OPT
f=1120
TT=243.535
T1=50.02
 OPT
f=1120
TT=98.604
T1=68.8
 OPT
f=1120
TT=300.361
T1=264.1
 OPT
f=1120
TT=154.646
T1=29.91
 OPT
f=1120
TT=230.416
T1=226.39
 SAT (TO)
f=1128
TT=2400.12
T1=1338.21
 SAT (TO)
f=1120
TT=2400.15
T1=247.36
 SAT (TO)
f=1120
TT=2400.07
T1=162.5
 SAT (TO)
f=1120
TT=2400.05
T1=409.21
 SAT (TO)
f=1120
TT=2400.03
T1=655.28
 SAT (TO)
f=1120
TT=2400.03
T1=653.51
 SAT (TO)
f=1120
TT=2400.04
T1=752.11
 SAT (TO)
f=1128
TT=2012.68
T1=1974.98
 SAT (TO)
f=1120
TT=2012.64
T1=1673.05
 OPT
f=1120
TT=191.518
T1=117.8
PseudoBoolean/
PseudoBoolean-opt-routing/
Pb-routing-s3-3-3-5.xml 		OPT
f=34
TT=2.894
T1=0.6
 OPT
f=34
TT=5.182
T1=3.94
 OPT
f=34
TT=6.311
T1=1.96
 OPT
f=34
TT=7.506
T1=2.55
 OPT
f=34
TT=4.863
T1=1.95
 OPT
f=34
TT=7.634
T1=2.63
 OPT
f=34
TT=5.736
T1=1.97
 OPT
f=34
TT=7.777
T1=2.54
 OPT
f=34
TT=2.894
T1=1.31
 OPT
f=34
TT=7.809
T1=3.92
 OPT
f=34
TT=41.781
T1=19.15
 OPT
f=34
TT=92.571
T1=14.45
 SAT (TO)
f=34
TT=2400.1
T1=28.15
 OPT
f=34
TT=24.644
T1=16.84
 OPT
f=34
TT=8.245
T1=0.6
 OPT
f=34
TT=8.345
T1=0.6
 OPT
f=34
TT=8.309
T1=0.6
 OPT
f=34
TT=9.555
T1=1.23
 OPT
f=34
TT=11.769
T1=2
 OPT
f=34
TT=4.198
T1=4.1
QuadraticAssignment/
QuadraticAssignment-m1-s1/
QuadraticAssignment-chr15a.xml 		OPT
f=4948
TT=6.711
T1=6.29
 OPT
f=4948
TT=6.711
T1=6.29
 OPT
f=4948
TT=22.45
T1=21.53
 Wrong Opt.
f=5204
TT=12.596
T1=12.09
 OPT
f=4948
TT=19.589
T1=19.03
 OPT
f=4948
TT=18.865
T1=11.05
 OPT
f=4948
TT=18.765
T1=17.81
 OPT
f=4948
TT=20.716
T1=12.58
 OPT
f=4948
TT=10.301
T1=8.05
 OPT
f=4948
TT=21.456
T1=13.42
 OPT
f=4948
TT=17.821
T1=9.29
 OPT
f=4948
TT=27.872
T1=12.59
 OPT
f=4948
TT=23.353
T1=20.72
 OPT
f=4948
TT=21.339
T1=17.73
 OPT
f=4948
TT=22.867
T1=14.09
 OPT
f=4948
TT=22.516
T1=13.89
 OPT
f=4948
TT=22.626
T1=14
 OPT
f=4948
TT=158.214
T1=46.11
 OPT
f=4948
TT=176.91
T1=11.76
 OPT
f=4948
TT=195.758
T1=195.68
QuadraticAssignment/
QuadraticAssignment-m1-s1/
QuadraticAssignment-chr15c.xml 		OPT
f=4752
TT=7.916
T1=6
 OPT
f=4752
TT=7.916
T1=6
 OPT
f=4752
TT=42.992
T1=32.5
 OPT
f=4752
TT=47.319
T1=21.31
 OPT
f=4752
TT=24.963
T1=15.01
 OPT
f=4752
TT=40.701
T1=15.03
 OPT
f=4752
TT=27.618
T1=19.64
 OPT
f=4752
TT=41.328
T1=19.37
 OPT
f=4752
TT=34.054
T1=28.02
 OPT
f=4752
TT=39.423
T1=18.2
 OPT
f=4752
TT=27.007
T1=9.65
 OPT
f=4752
TT=42.193
T1=15.96
 OPT
f=4752
TT=36.179
T1=28.78
 OPT
f=4752
TT=34.713
T1=23.01
 OPT
f=4752
TT=49.843
T1=22.98
 OPT
f=4752
TT=49.301
T1=22.69
 OPT
f=4752
TT=49.425
T1=22.78
 OPT
f=4752
TT=444.282
T1=192.75
 OPT
f=4752
TT=345.854
T1=142.46
 OPT
f=4752
TT=193.7
T1=193.68
QuadraticAssignment/
QuadraticAssignment-m1-s1/
QuadraticAssignment-chr18a.xml 		OPT
f=5549
TT=12.985
T1=4.38
 OPT
f=5549
TT=12.985
T1=11.12
 OPT
f=5549
TT=208.108
T1=197.47
 Wrong Opt.
f=6018
TT=20.217
T1=18.85
 OPT
f=5549
TT=62.197
T1=9.35
 OPT
f=5549
TT=132.189
T1=28.17
 SAT (MO)
f=12491
TT=2.833
T1=2.63
 OPT
f=5549
TT=117.125
T1=51.68
 OPT
f=5549
TT=71.487
T1=4.38
 OPT
f=5549
TT=112.867
T1=17.56
 OPT
f=5549
TT=98.503
T1=11.27
 OPT
f=5549
TT=154.673
T1=27.18
 OPT
f=5549
TT=131.926
T1=26.4
 OPT
f=5549
TT=125.546
T1=13.17
 OPT
f=5549
TT=65.896
T1=27.79
 OPT
f=5549
TT=65.5
T1=27.59
 OPT
f=5549
TT=65.964
T1=27.79
 OPT
f=5549
TT=382.7
T1=81.13
 OPT
f=5549
TT=353.632
T1=112.16
 OPT
f=5549
TT=417.838
T1=147.47
QuadraticAssignment/
QuadraticAssignment-m1-s1/
QuadraticAssignment-chr22a.xml 		OPT
f=3078
TT=10.383
T1=7.46
 OPT
f=3078
TT=10.383
T1=7.46
 OPT
f=3078
TT=494.873
T1=369.28
 OPT
f=3078
TT=325.736
T1=147.52
 OPT
f=3078
TT=217.843
T1=24.4
 OPT
f=3078
TT=334.249
T1=35.1
 OPT
f=3078
TT=264.453
T1=90.07
 OPT
f=3078
TT=446.623
T1=264.94
 OPT
f=3078
TT=207.319
T1=79.04
 OPT
f=3078
TT=364.768
T1=191.83
 OPT
f=3078
TT=175.722
T1=25.82
 OPT
f=3078
TT=715.474
T1=24.27
 OPT
f=3078
TT=524.967
T1=15.22
 OPT
f=3078
TT=295.323
T1=17.93
 SAT (TO)
f=3078
TT=2400.06
T1=1596.82
 SAT (TO)
f=3078
TT=2400.06
T1=1594.82
 SAT (TO)
f=3078
TT=2400.05
T1=1586.35
 SAT (TO)
f=3089
TT=2012.27
T1=1974.57
 SAT (TO)
f=3103
TT=2012.53
T1=1887.79
 OPT
f=3078
TT=175.474
T1=175.45
QuadraticAssignment/
QuadraticAssignment-m1-s1/
QuadraticAssignment-esc16e.xml 		OPT
f=14
TT=13.143
T1=0
 OPT
f=14
TT=13.143
T1=3.44
 OPT
f=14
TT=43.583
T1=4
 OPT
f=14
TT=94.662
T1=5.04
 OPT
f=14
TT=52.809
T1=6.37
 OPT
f=14
TT=102.321
T1=6.53
 OPT
f=14
TT=51.778
T1=4.48
 OPT
f=14
TT=96.558
T1=8.7
 OPT
f=14
TT=88.073
T1=3.44
 OPT
f=14
TT=97.552
T1=7.3
 OPT
f=14
TT=78.287
T1=11.03
 OPT
f=14
TT=162.22
T1=9.16
 OPT
f=14
TT=70.974
T1=11.25
 OPT
f=14
TT=111.52
T1=9.12
 OPT
f=14
TT=30.644
T1=0
 OPT
f=14
TT=30.616
T1=0
 OPT
f=14
TT=30.603
T1=0
 OPT
f=14
TT=113.969
T1=0
 OPT
f=14
TT=120.973
T1=0
 OPT
f=14
TT=42.052
T1=41.99
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
QuadraticAssignment/
QuadraticAssignment-m1-s1/
QuadraticAssignment-kra30b.xml 		SAT TO
f=47490
TT=2400.03
T1=1251.61
 SAT (TO)
f=56570
TT=2400.03
T1=1003.74
 SAT (TO)
f=55695
TT=2400.55
T1=2192.79
 SAT (TO)
f=54750
TT=18811.7
T1=13592.9
 SAT (TO)
f=47955
TT=2400.73
T1=1132.01
 SAT (TO)
f=49035
TT=2001.14
T1=1003.9
 SAT (TO)
f=46630
TT=2400.64
T1=1107.36
 SAT (TO)
f=47255
TT=1998.47
T1=1977.29
 SAT (TO)
f=47490
TT=2400.03
T1=1251.61
 SAT (TO)
f=47945
TT=1998.74
T1=1410.54
 SAT (TO)
f=54045
TT=2400.1
T1=925.22
 SAT (TO)
f=56285
TT=2400.06
T1=346.14
 SAT (TO)
f=55660
TT=2400.04
T1=72.69
 SAT (TO)
f=56990
TT=2400.1
T1=61
 SAT (TO)
f=59555
TT=2400.08
T1=55.18
 SAT (TO)
f=59555
TT=2400.02
T1=55.3
 SAT (TO)
f=59555
TT=2400.05
T1=54.19
 SAT (TO)
f=60015
TT=2011.86
T1=63.28
 SAT (TO)
f=60000
TT=2011.69
T1=305.29
 ? (TO)

TT=2400.01
QuadraticAssignment/
QuadraticAssignment-m1-s1/
QuadraticAssignment-lipa50a.xml 		SAT TO
f=31118
TT=2400.08
T1=1694.48
 SAT (TO)
f=31573
TT=2400.08
T1=119.23
 SAT (TO)
f=31658
TT=2400.58
T1=312.28
 Wrong Cert.

TT=817.562

 SAT (TO)
f=31216
TT=2400.39
T1=2076.09
 SAT (TO)
f=31490
TT=1948.04
T1=571.8
 SAT (TO)
f=31216
TT=2400.61
T1=2046.31
 SAT (TO)
f=31244
TT=1686.84
T1=1684.34
 SAT (TO)
f=31118
TT=2400.08
T1=1694.48
 SAT (TO)
f=31258
TT=1760.66
T1=1735.83
 SAT (TO)
f=31539
TT=2400.14
T1=367.59
 SAT (TO)
f=31597
TT=2400.1
T1=1892.39
 SAT (TO)
f=31539
TT=2400.07
T1=365.04
 SAT (TO)
f=31620
TT=2400.13
T1=312.05
 SAT (TO)
f=31710
TT=2400.04
T1=1318.44
 SAT (TO)
f=31710
TT=2400.09
T1=1292.38
 SAT (TO)
f=31710
TT=2400.1
T1=1492.66
 SAT (TO)
f=31702
TT=2008.94
T1=1081.88
 SAT (TO)
f=31716
TT=2009.03
T1=258.25
 ? (TO)

TT=2400.12
QuadraticAssignment/
QuadraticAssignment-m1-s1/
QuadraticAssignment-scr15.xml 		OPT
f=25570
TT=22.63
T1=6.27
 OPT
f=25570
TT=22.63
T1=6.27
 OPT
f=25570
TT=1618.38
T1=1505.14
 OPT
f=25570
TT=1537.23
T1=693.32
 OPT
f=25570
TT=736.466
T1=45.2
 OPT
f=25570
TT=885.926
T1=700.91
 SAT (MO)
f=33951
TT=2.29
T1=1.69
 OPT
f=25570
TT=416.403
T1=40.1
 OPT
f=25570
TT=170.158
T1=11.74
 OPT
f=25570
TT=405.178
T1=32.23
 OPT
f=25570
TT=485.821
T1=223.21
 OPT
f=25570
TT=917.313
T1=17.83
 OPT
f=25570
TT=647.101
T1=28.64
 OPT
f=25570
TT=488.604
T1=33.54
 OPT
f=25570
TT=730.524
T1=505.09
 OPT
f=25570
TT=727.61
T1=502.93
 OPT
f=25570
TT=732.092
T1=506.17
 SAT (TO)
f=25860
TT=2012.47
T1=1894.14
 SAT (TO)
f=26489
TT=2012.35
T1=1432.4
 OPT
f=25570
TT=1441.24
T1=148.1
QuadraticAssignment/
QuadraticAssignment-m1-s1/
QuadraticAssignment-tai10a.xml 		OPT
f=67514
TT=30.471
T1=7.1
 OPT
f=67514
TT=30.471
T1=7.92
 OPT
f=67514
TT=233.41
T1=97.67
 Wrong Opt.
f=67820
TT=153.179
T1=152.6
 OPT
f=67514
TT=257.039
T1=62.85
 OPT
f=67514
TT=366.811
T1=110.43
 OPT
f=67514
TT=262.104
T1=104.18
 OPT
f=67514
TT=361.273
T1=125.12
 OPT
f=67514
TT=127.895
T1=7.1
 OPT
f=67514
TT=331.904
T1=133.69
 OPT
f=67514
TT=323.872
T1=25.24
 OPT
f=67514
TT=866.576
T1=337.92
 OPT
f=67514
TT=425.535
T1=18.91
 OPT
f=67514
TT=444.835
T1=58.66
 OPT
f=67514
TT=317.093
T1=143.19
 OPT
f=67514
TT=321.728
T1=145.17
 OPT
f=67514
TT=308.153
T1=139.25
 SAT (TO)
f=67514
TT=2012.38
T1=1045.89
 SAT (TO)
f=67514
TT=2012.55
T1=349.46
 ? (TO)

TT=2400.1
QueenAttacking/
QueenAttacking-m1-s1/
QueenAttacking-07.xml 		OPT
f=0
TT=44.884
T1=44.5
 OPT
f=0
TT=51.61
T1=51.56
 OPT
f=0
TT=786.376
T1=786.35
 OPT
f=0
TT=11.908
T1=11.56
 OPT
f=0
TT=81.912
T1=81.75
 OPT
f=0
TT=141.282
T1=141.13
 OPT
f=0
TT=82.656
T1=82.56
 OPT
f=0
TT=45.241
T1=44.69
 OPT
f=0
TT=63.996
T1=63.95
 OPT
f=0
TT=44.884
T1=44.5
 OPT
f=0
TT=49.396
T1=49.27
 SAT (TO)
f=1
TT=2400.04
T1=1948.71
 OPT
f=0
TT=55.014
T1=54.9
 OPT
f=0
TT=733.596
T1=733.5
 SAT (TO)
f=1
TT=2400.03
T1=1540.54
 SAT (TO)
f=1
TT=2400.05
T1=1541.05
 SAT (TO)
f=1
TT=2400.05
T1=1542.21
 SAT (TO)
f=2
TT=2011.61
T1=531.53
 SAT (TO)
f=3
TT=2011.74
T1=163.35
 OPT
f=0
TT=1420.97
T1=1420.89
Ramsey/
Ramsey-int-s1/
Ramsey-int-13.xml 		OPT
f=2
TT=0.319
T1=0.2
 OPT
f=2
TT=4.515
T1=4.35
 ?

TT=301.487

 ?

TT=10311.2

 ? (TO)

TT=2408.14

 ? (TO)

TT=1421.51

 ?

TT=279.331

 ? (TO)

TT=1386.76

 OPT
f=2
TT=223.935
T1=221.04
 ?

TT=890.937

 OPT
f=2
TT=76.479
T1=52.49
 SAT (TO)
f=2
TT=2400.07
T1=706.3
 OPT
f=2
TT=225.451
T1=187.7
 OPT
f=2
TT=188.47
T1=113.88
 OPT
f=2
TT=0.331
T1=0.2
 OPT
f=2
TT=0.328
T1=0.27
 OPT
f=2
TT=0.319
T1=0.2
 OPT
f=2
TT=14.316
T1=13.83
 OPT
f=2
TT=21.312
T1=21.31
 OPT
f=2
TT=4.329
T1=4.29
Ramsey/
Ramsey-m1-s1/
Ramsey-13.xml 		OPT
f=2
TT=0.027
T1=0
 OPT
f=2
TT=3.672
T1=3.51
 OPT
f=2
TT=13.606
T1=13.28
 OPT
f=2
TT=6.237
T1=5.7
 OPT
f=2
TT=36.301
T1=36.09
 OPT
f=2
TT=22.346
T1=22.22
 OPT
f=2
TT=15.303
T1=15.13
 OPT
f=2
TT=30.563
T1=29.7
 OPT
f=2
TT=1848.86
T1=1848.78
 OPT
f=2
TT=14.329
T1=14.13
 OPT
f=2
TT=9.364
T1=9.03
 OPT
f=2
TT=26.785
T1=26.69
 OPT
f=2
TT=10.171
T1=9.92
 OPT
f=2
TT=9.65
T1=9.53
 OPT
f=2
TT=0.027
T1=0
 OPT
f=2
TT=0.027
T1=0
 OPT
f=2
TT=0.028
T1=0
 OPT
f=2
TT=0.098
T1=0
 OPT
f=2
TT=0.086
T1=0
 OPT
f=2
TT=17.211
T1=17.19
Ramsey/
Ramsey-m1-s1/
Ramsey-14.xml 		OPT
f=2
TT=0.041
T1=0
 OPT
f=2
TT=3.829
T1=3.49
 OPT
f=2
TT=408.555
T1=408.38
 OPT
f=2
TT=40.781
T1=40.64
 OPT
f=2
TT=164.731
T1=164.41
 SAT (TO)
f=3
TT=1995.49
T1=7.16
 OPT
f=2
TT=264.103
T1=263.91
 OPT
f=2
TT=559.967
T1=559.73
 SAT (TO)
f=3
TT=2400.04
T1=1.91
 OPT
f=2
TT=836.264
T1=835.9
 OPT
f=2
TT=13.405
T1=13.2
 OPT
f=2
TT=64.821
T1=64.62
 OPT
f=2
TT=14.629
T1=14.5
 OPT
f=2
TT=11.511
T1=11.33
 OPT
f=2
TT=0.041
T1=0
 OPT
f=2
TT=0.041
T1=0
 OPT
f=2
TT=0.041
T1=0
 OPT
f=2
TT=0.158
T1=0
 OPT
f=2
TT=0.147
T1=0
 OPT
f=2
TT=28.291
T1=28.19
Ramsey/
Ramsey-m1-s1/
Ramsey-45.xml 		SAT TO
f=4
TT=1998.35
T1=1.18
 SAT (TO)
f=4
TT=2400.07
T1=10.33
 SAT (TO)
f=5
TT=2400.55
T1=1030.09
 SAT (TO)
f=4
TT=19985.5
T1=1078.72
 SAT (TO)
f=5
TT=2400.51
T1=1198.62
 SAT (TO)
f=5
TT=1754.5
T1=1431.99
 SAT (TO)
f=5
TT=2400.44
T1=1105.47
 SAT (TO)
f=5
TT=1823.97
T1=1536.65
 SAT (TO)
f=5
TT=2400.04
T1=1763.86
 SAT (TO)
f=5
TT=1653.31
T1=1434.68
 SAT (TO)
f=4
TT=2400.1
T1=105.88
 SAT (TO)
f=961
TT=2400.17
T1=2350.72
 SAT (TO)
f=4
TT=2400.12
T1=130.52
 SAT (TO)
f=4
TT=2400.04
T1=143.17
 SAT (TO)
f=4
TT=2400.06
T1=1.18
 SAT (TO)
f=4
TT=2400.03
T1=1.19
 SAT (TO)
f=4
TT=2400.03
T1=1.19
 SAT (TO)
f=4
TT=1998.35
T1=22.57
 SAT (TO)
f=4
TT=1998
T1=22.3
 ? (TO)

TT=2400.06
Rcpsp/Rcpsp-m1-j120/
Rcpsp-j120-41-06.xml 		OPT
f=113
TT=59.9
T1=15.14
 ? (exit code)

TT=4.002

 OPT
f=113
TT=64.416
T1=37.82
 OPT
f=113
TT=136.284
T1=71.7
 OPT
f=113
TT=59.9
T1=27.98
 OPT
f=113
TT=156.696
T1=65.02
 OPT
f=113
TT=81.163
T1=51.06
 OPT
f=113
TT=189.127
T1=72.51
 SAT (TO)
f=114
TT=2400.04
T1=986.21
 OPT
f=113
TT=158.121
T1=105.31
 OPT
f=113
TT=670.235
T1=69.29
 SAT (TO)
f=113
TT=2400.12
T1=49.7
 OPT
f=113
TT=1442.08
T1=135.65
 OPT
f=113
TT=353.644
T1=15.14
 ? (NS)

TT=0.102

 ? (NS)

TT=0.104

 ? (NS)

TT=0.105

 ? (NS)

TT=0.108

 ? (NS)

TT=0.109

 OPT
f=113
TT=168.917
T1=168.87
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
Rcpsp/Rcpsp-m1-j120/
Rcpsp-j120-43-06.xml 		OPT
f=98
TT=22.965
T1=13.34
 ? (exit code)

TT=4.026

 OPT
f=98
TT=22.965
T1=13.34
 Wrong Opt.
f=107
TT=5.044
T1=4.49
 OPT
f=98
TT=35.079
T1=21.32
 OPT
f=98
TT=67.358
T1=36.27
 OPT
f=98
TT=29.351
T1=9.39
 OPT
f=98
TT=83.495
T1=22.81
 SAT (TO)
f=98
TT=2400.08
T1=8.1
 OPT
f=98
TT=80.996
T1=37.39
 OPT
f=98
TT=901.799
T1=22.73
 SAT (TO)
f=98
TT=2400.09
T1=49.73
 SAT (TO)
f=98
TT=2400.08
T1=36.28
 OPT
f=98
TT=1811.92
T1=14.31
 ? (NS)

TT=0.103

 ? (NS)

TT=0.104

 ? (NS)

TT=0.105

 ? (NS)

TT=0.109

 ? (NS)

TT=0.109

 OPT
f=98
TT=289.918
T1=289.41
Rcpsp/Rcpsp-m1-j30/
Rcpsp-j30-29-02.xml 		OPT
f=90
TT=226.554
T1=11.47
 ? (exit code)

TT=3.286

 OPT
f=90
TT=226.554
T1=69.87
 Wrong Opt.
f=103
TT=4.322
T1=3.63
 OPT
f=90
TT=305.785
T1=26.97
 OPT
f=90
TT=837.797
T1=92.76
 OPT
f=90
TT=318.842
T1=65.8
 OPT
f=90
TT=700.327
T1=89.35
 SAT (TO)
f=90
TT=2400.04
T1=22.93
 OPT
f=90
TT=378.73
T1=70.11
 OPT
f=90
TT=972.171
T1=66.76
 OPT
f=90
TT=2196.42
T1=56.03
 OPT
f=90
TT=2246.82
T1=17.17
 OPT
f=90
TT=1912.52
T1=11.47
 ? (NS)

TT=0.027

 ? (NS)

TT=0.027

 ? (NS)

TT=0.027

 ? (NS)

TT=0.028

 ? (NS)

TT=0.028

 OPT
f=90
TT=322.667
T1=262.3
Rcpsp/Rcpsp-m1-j30/
Rcpsp-j30-29-05.xml 		OPT
f=98
TT=208.649
T1=52.32
 ? (exit code)

TT=3.288

 OPT
f=98
TT=234.613
T1=180.8
 OPT
f=98
TT=470.227
T1=353.23
 OPT
f=98
TT=223.192
T1=172.21
 OPT
f=98
TT=332.667
T1=164.94
 OPT
f=98
TT=192.953
T1=117.88
 OPT
f=98
TT=352.81
T1=176.9
 OPT
f=98
TT=1275.76
T1=839.61
 OPT
f=98
TT=399.599
T1=254.14
 OPT
f=98
TT=552.953
T1=25.83
 OPT
f=98
TT=789.777
T1=96.06
 OPT
f=98
TT=724.194
T1=52.32
 OPT
f=98
TT=487.804
T1=236.01
 ? (NS)

TT=0.027

 ? (NS)

TT=0.027

 ? (NS)

TT=0.028

 ? (NS)

TT=0.028

 ? (NS)

TT=0.029

 OPT
f=98
TT=208.649
T1=208.59
Rcpsp/Rcpsp-m1-j30/
Rcpsp-j30-29-07.xml 		OPT
f=73
TT=185.851
T1=30.06
 ? (exit code)

TT=3.281

 OPT
f=73
TT=274.232
T1=190.95
 OPT
f=73
TT=339.803
T1=81.16
 OPT
f=73
TT=185.851
T1=52.76
 OPT
f=73
TT=403.714
T1=126.69
 OPT
f=73
TT=284.82
T1=188.55
 OPT
f=73
TT=391.601
T1=190.58
 SAT (TO)
f=76
TT=2400.1
T1=11.76
 OPT
f=73
TT=439.542
T1=89.38
 OPT
f=73
TT=1171.3
T1=490.48
 SAT (TO)
f=73
TT=2400.07
T1=347.81
 OPT
f=73
TT=1203.52
T1=282.22
 OPT
f=73
TT=888.884
T1=30.06
 ? (NS)

TT=0.026

 ? (NS)

TT=0.027

 ? (NS)

TT=0.026

 ? (NS)

TT=0.028

 ? (NS)

TT=0.028

 OPT
f=73
TT=316.612
T1=316.53
Rcpsp/Rcpsp-m1-j30/
Rcpsp-j30-41-06.xml 		OPT
f=103
TT=115.382
T1=58.25
 ? (exit code)

TT=3.318

 OPT
f=103
TT=658.774
T1=138.48
 OPT
f=103
TT=1065.41
T1=114.87
 OPT
f=103
TT=649.592
T1=118.36
 OPT
f=103
TT=1302.83
T1=113.18
 OPT
f=103
TT=666.972
T1=155.48
 OPT
f=103
TT=1141.25
T1=48.63
 SAT (TO)
f=107
TT=2400.05
T1=1.89
 OPT
f=103
TT=796.116
T1=71.73
 OPT
f=103
TT=1982.84
T1=21.21
 SAT (TO)
f=103
TT=2400.13
T1=182.48
 OPT
f=103
TT=1737.2
T1=58.25
 SAT (TO)
f=103
TT=2400.04
T1=35.61
 ? (NS)

TT=0.03

 ? (NS)

TT=0.031

 ? (NS)

TT=0.03

 ? (NS)

TT=0.031

 ? (NS)

TT=0.032

 OPT
f=103
TT=115.382
T1=115.27
Rcpsp/Rcpsp-m1-j30/
Rcpsp-j30-45-01.xml 		OPT
f=82
TT=244.284
T1=41.21
 ? (exit code)

TT=3.302

 OPT
f=82
TT=244.284
T1=41.21
 Wrong Opt.
f=90
TT=4.49
T1=3.29
 OPT
f=82
TT=260.235
T1=75.94
 OPT
f=82
TT=528.38
T1=77.98
 OPT
f=82
TT=322.58
T1=99.4
 OPT
f=82
TT=637.123
T1=88.47
 OPT
f=82
TT=2313.99
T1=474.04
 OPT
f=82
TT=294.222
T1=71.57
 OPT
f=82
TT=1756.74
T1=143.23
 SAT (TO)
f=82
TT=2400.06
T1=328.33
 SAT (TO)
f=82
TT=2400.05
T1=111.91
 OPT
f=82
TT=1961.92
T1=477.51
 ? (NS)

TT=0.03

 ? (NS)

TT=0.03

 ? (NS)

TT=0.031

 ? (NS)

TT=0.032

 ? (NS)

TT=0.032

 OPT
f=82
TT=280.314
T1=269.59
Rcpsp/Rcpsp-m1-j60/
Rcpsp-j60-21-01.xml 		OPT
f=103
TT=80.737
T1=27.09
 ? (exit code)

TT=3.507

 OPT
f=103
TT=93.34
T1=85.76
 OPT
f=103
TT=140.366
T1=73.61
 OPT
f=103
TT=80.737
T1=56.02
 OPT
f=103
TT=162.343
T1=125.71
 OPT
f=103
TT=71.547
T1=42.92
 OPT
f=103
TT=123.093
T1=70.68
 OPT
f=103
TT=1743.78
T1=1347.61
 OPT
f=103
TT=229.206
T1=197.63
 OPT
f=103
TT=225.233
T1=24.74
 OPT
f=103
TT=703.943
T1=390.01
 OPT
f=103
TT=1203.21
T1=909.98
 OPT
f=103
TT=469.587
T1=27.09
 ? (NS)

TT=0.048

 ? (NS)

TT=0.048

 ? (NS)

TT=0.049

 ? (NS)

TT=0.049

 ? (NS)

TT=0.05

 OPT
f=103
TT=333.8
T1=333.78
Rcpsp/Rcpsp-m1-j60/
Rcpsp-j60-21-05.xml 		OPT
f=89
TT=306.205
T1=165.2
 ? (exit code)

TT=3.521

 OPT
f=89
TT=883.66
T1=611.51
 OPT
f=89
TT=732.409
T1=240.6
 OPT
f=89
TT=584.003
T1=224.23
 SAT (TO)
f=89
TT=2004.15
T1=1216.28
 OPT
f=89
TT=408.978
T1=135.44
 OPT
f=89
TT=1231.64
T1=342.8
 SAT (TO)
f=89
TT=2400.09
T1=416.99
 OPT
f=89
TT=1150.7
T1=452.73
 SAT (TO)
f=89
TT=2400.1
T1=363.83
 SAT (TO)
f=90
TT=2400.09
T1=243.83
 SAT (TO)
f=89
TT=2400.07
T1=458.34
 SAT (TO)
f=89
TT=2400.05
T1=12.76
 ? (NS)

TT=0.047

 ? (NS)

TT=0.049

 ? (NS)

TT=0.047

 ? (NS)

TT=0.049

 ? (NS)

TT=0.05

 OPT
f=89
TT=306.205
T1=165.2
Rcpsp/Rcpsp-m1-j60/
Rcpsp-j60-21-07.xml 		OPT
f=103
TT=110.856
T1=31.31
 ? (exit code)

TT=3.497

 OPT
f=103
TT=110.856
T1=57.63
 OPT
f=103
TT=231.594
T1=123.53
 OPT
f=103
TT=122.51
T1=31.31
 OPT
f=103
TT=240.451
T1=52.64
 OPT
f=103
TT=123.618
T1=30.51
 OPT
f=103
TT=250.961
T1=85.89
 SAT (TO)
f=104
TT=2400.1
T1=557.52
 OPT
f=103
TT=243.175
T1=55.57
 OPT
f=103
TT=1273.15
T1=791.36
 SAT (TO)
f=104
TT=2400.07
T1=160.31
 OPT
f=103
TT=1709.86
T1=158.26
 OPT
f=103
TT=2251.33
T1=480.79
 ? (NS)

TT=0.047

 ? (NS)

TT=0.047

 ? (NS)

TT=0.048

 ? (NS)

TT=0.05

 ? (NS)

TT=0.05

 OPT
f=103
TT=296.002
T1=288.98
Rcpsp/Rcpsp-m1-j60/
Rcpsp-j60-26-09.xml 		OPT
f=65
TT=37.142
T1=13.41
 ? (exit code)

TT=3.574

 OPT
f=65
TT=37.142
T1=13.41
 Wrong Opt.
f=68
TT=11.427
T1=11.15
 OPT
f=65
TT=59.404
T1=17.75
 OPT
f=65
TT=119.918
T1=19.42
 OPT
f=65
TT=57.632
T1=18.13
 OPT
f=65
TT=138.855
T1=65.83
 SAT (TO)
f=66
TT=2400.1
T1=15.53
 OPT
f=65
TT=105.742
T1=41.57
 OPT
f=65
TT=2267.12
T1=56.64
 SAT (TO)
f=65
TT=2400.05
T1=263.89
 OPT
f=65
TT=1770.93
T1=20.91
 SAT (TO)
f=65
TT=2400.07
T1=23.58
 ? (NS)

TT=0.047

 ? (NS)

TT=0.048

 ? (NS)

TT=0.048

 ? (NS)

TT=0.049

 ? (NS)

TT=0.049

 OPT
f=65
TT=366.834
T1=294.73
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
Rcpsp/Rcpsp-m1-j60/
Rcpsp-j60-37-01.xml 		OPT
f=97
TT=201.766
T1=78.61
 ? (exit code)

TT=3.549

 OPT
f=97
TT=262.039
T1=78.61
 OPT
f=97
TT=529.864
T1=197
 OPT
f=97
TT=395.932
T1=137.88
 OPT
f=97
TT=771.761
T1=257.2
 OPT
f=97
TT=370.656
T1=191.97
 OPT
f=97
TT=477.84
T1=107.23
 SAT (TO)
f=98
TT=2400.09
T1=1801.79
 OPT
f=97
TT=575.961
T1=155.74
 OPT
f=97
TT=1043
T1=42.85
 SAT (TO)
f=97
TT=2400.11
T1=991.89
 OPT
f=97
TT=1114.84
T1=264
 OPT
f=97
TT=2165.51
T1=1367.44
 ? (NS)

TT=0.054

 ? (NS)

TT=0.055

 ? (NS)

TT=0.056

 ? (NS)

TT=0.056

 ? (NS)

TT=0.057

 OPT
f=97
TT=201.766
T1=191.68
Rcpsp/Rcpsp-m1-j60/
Rcpsp-j60-37-03.xml 		OPT
f=139
TT=248.551
T1=160.07
 ? (exit code)

TT=3.601

 OPT
f=139
TT=376.657
T1=346.57
 Wrong Opt.
f=156
TT=18.358
T1=17.89
 OPT
f=139
TT=267.854
T1=160.07
 OPT
f=139
TT=588.703
T1=227.41
 OPT
f=139
TT=158.432
T1=108.08
 OPT
f=139
TT=409.292
T1=250.19
 SAT (TO)
f=148
TT=2400.04
T1=718.66
 OPT
f=139
TT=492.885
T1=374
 SAT (TO)
f=139
TT=2400.12
T1=1576.71
 SAT (TO)
f=139
TT=2400.12
T1=1119.16
 SAT (TO)
f=141
TT=2400.12
T1=1382.1
 SAT (TO)
f=139
TT=2400.13
T1=790.82
 ? (NS)

TT=0.054

 ? (NS)

TT=0.055

 ? (NS)

TT=0.055

 ? (NS)

TT=0.056

 ? (NS)

TT=0.056

 OPT
f=139
TT=248.551
T1=248.48
Rcpsp/Rcpsp-m1-j60/
Rcpsp-j60-46-08.xml 		OPT
f=75
TT=84.947
T1=34.29
 ? (exit code)

TT=3.579

 OPT
f=75
TT=139.893
T1=134.02
 OPT
f=75
TT=292.093
T1=277.91
 OPT
f=75
TT=84.947
T1=56.76
 OPT
f=75
TT=1429.19
T1=1404.33
 OPT
f=75
TT=243.718
T1=235.74
 OPT
f=75
TT=961.195
T1=944.68
 OPT
f=75
TT=148.244
T1=34.29
 OPT
f=75
TT=342.594
T1=268.92
 OPT
f=75
TT=358.645
T1=329.43
 OPT
f=75
TT=139.995
T1=82.46
 OPT
f=75
TT=450.25
T1=424.52
 OPT
f=75
TT=107.475
T1=84.79
 ? (NS)

TT=0.054

 ? (NS)

TT=0.054

 ? (NS)

TT=0.055

 ? (NS)

TT=0.057

 ? (NS)

TT=0.056

 OPT
f=75
TT=1380.17
T1=1380.15
Rcpsp/Rcpsp-m1-j90/
Rcpsp-j90-06-08.xml 		OPT
f=68
TT=35.382
T1=19.98
 ? (exit code)

TT=3.673

 OPT
f=68
TT=35.382
T1=19.98
 Wrong Opt.
f=76
TT=6.236
T1=6.13
 OPT
f=68
TT=70.014
T1=44.88
 OPT
f=68
TT=109.465
T1=28.63
 OPT
f=68
TT=83.005
T1=45.58
 OPT
f=68
TT=101.517
T1=32.81
 SAT (TO)
f=68
TT=2400.04
T1=2260.69
 OPT
f=68
TT=152.129
T1=81.26
 OPT
f=68
TT=204.159
T1=184.74
 OPT
f=68
TT=241.62
T1=39.34
 OPT
f=68
TT=237.787
T1=121.52
 OPT
f=68
TT=244.22
T1=180.03
 ? (NS)

TT=0.057

 ? (NS)

TT=0.058

 ? (NS)

TT=0.059

 ? (NS)

TT=0.062

 ? (NS)

TT=0.061

 OPT
f=68
TT=391.301
T1=382.47
Rlfap/Rlfap-opt/
Rlfap-graph-05-opt_c18.xml 		OPT
f=221
TT=9.585
T1=3.1
 OPT
f=221
TT=9.585
T1=7.89
 SAT (TO)
f=40765
TT=2400.59
T1=114.73
 SAT (TO)
f=5642
TT=19803.1
T1=7499.56
 SAT (MO)
f=144731
TT=15.813
T1=14.21
 SAT (TO)
f=14482
TT=1644.51
T1=1414.41
 SAT (TO)
f=12293
TT=2400.39
T1=2207.18
 SAT (TO)
f=17387
TT=1446.82
T1=1295.78
 SAT (TO)
f=11031
TT=2400.06
T1=2259.96
 SAT (TO)
f=20631
TT=1645.35
T1=1612.54
 SAT (TO)
f=32420
TT=2400.1
T1=22.6
 SAT (TO)
f=35620
TT=2400.11
T1=154.13
 SAT (TO)
f=36553
TT=2400.09
T1=840.76
 SAT (TO)
f=16644
TT=2400.1
T1=23.22
 OPT
f=221
TT=10.678
T1=9.58
 OPT
f=221
TT=10.832
T1=9.72
 OPT
f=221
TT=10.749
T1=3.1
 OPT
f=221
TT=527.748
T1=526.49
 OPT
f=221
TT=201.407
T1=187.18
 OPT
f=221
TT=642.246
T1=642.19
Rlfap/Rlfap-opt/
Rlfap-graph-08-opt_c18.xml 		SAT TO
f=18
TT=2400.11
T1=19.99
 SAT (TO)
f=18
TT=2400.11
T1=19.99
 SAT (TO)
f=36
TT=2400.54
T1=2237.41
 SAT (TO)
f=22
TT=19975.4
T1=2379.17
 SAT (TO)
f=36
TT=2400.53
T1=2244.62
 SAT (TO)
f=34
TT=1551.22
T1=1425.01
 SAT (TO)
f=36
TT=2400.49
T1=2244.91
 SAT (TO)
f=34
TT=1708.03
T1=1577.88
 SAT (TO)
f=22
TT=2400.05
T1=213.32
 SAT (TO)
f=22
TT=1946.73
T1=1727.17
 SAT (TO)
f=18
TT=2400.1
T1=915.93
 ?

TT=17.941

 ?

TT=19.52

 ?

TT=19.676

 SAT (TO)
f=20
TT=2400.06
T1=5.58
 SAT (TO)
f=20
TT=2400.07
T1=5.48
 SAT (TO)
f=20
TT=2400.03
T1=5.53
 SAT (TO)
f=20
TT=1974.46
T1=21.1
 SAT (TO)
f=20
TT=1974.45
T1=20.13
 ? (TO)

TT=2400.07
Rlfap/Rlfap-opt/
Rlfap-graph-10-opt_c18.xml 		OPT
f=394
TT=5.69
T1=5.58
 OPT
f=394
TT=11.723
T1=11.57
 SAT (TO)
f=778
TT=2400.34
T1=17.66
 OPT
f=394
TT=35.41
T1=34.89
 OPT
f=394
TT=64.757
T1=64.32
 OPT
f=394
TT=31.632
T1=31.28
 OPT
f=394
TT=65.608
T1=65.49
 OPT
f=394
TT=29.682
T1=29.06
 OPT
f=394
TT=19.78
T1=19.63
 OPT
f=394
TT=31.865
T1=31.73
 OPT
f=394
TT=67.09
T1=66.93
 OPT
f=394
TT=194.952
T1=194.89
 OPT
f=394
TT=41.718
T1=41.58
 OPT
f=394
TT=49.37
T1=49.29
 OPT
f=394
TT=5.69
T1=5.58
 OPT
f=394
TT=5.822
T1=5.7
 OPT
f=394
TT=5.719
T1=5.68
 OPT
f=394
TT=12.453
T1=11.74
 OPT
f=394
TT=12.546
T1=12.09
 OPT
f=394
TT=476.958
T1=476.86
Rlfap/Rlfap-opt/
Rlfap-scen-09-opt_c18.xml 		SAT TO
f=18575
TT=2400.06
T1=2312.7
 SAT (TO)
f=35986
TT=2400.13
T1=262.07
 SAT (TO)
f=34602
TT=2400.73
T1=223.93
 SAT (TO)
f=34602
TT=12553.8
T1=313.06
 SAT (TO)
f=24644
TT=2400.52
T1=873.7
 SAT (TO)
f=22656
TT=1700.71
T1=1667.14
 SAT (TO)
f=24644
TT=2400.39
T1=890.33
 SAT (TO)
f=22662
TT=1713.3
T1=482.68
 SAT (TO)
f=18575
TT=2400.06
T1=2312.7
 SAT (TO)
f=21220
TT=1758.41
T1=1724.14
 SAT (TO)
f=209400
TT=2400.13
T1=86.23
 SAT (TO)
f=197124
TT=2400.14
T1=351.87
 SAT (TO)
f=94383
TT=2400.08
T1=90.55
 SAT (TO)
f=86586
TT=2400.09
T1=88.48
 SAT (TO)
f=58361
TT=2400.05
T1=174.1
 SAT (TO)
f=58361
TT=2400.05
T1=186.36
 SAT (TO)
f=58361
TT=2400.06
T1=194.32
 SAT (TO)
f=56168
TT=1847.81
T1=1737.17
 SAT (TO)
f=56333
TT=1847.47
T1=450.38
 ? (TO)

TT=2400.09
Scheduling/
Scheduling-fs-taillard/
Taillard-fs-200-10-1.xml



? (problem)

TT=48.997

 ? (TO)

TT=2400.78

 ? (TO)

TT=20064.7

 ? (TO)

TT=2400.74

 ? (TO)

TT=1997.08

 ? (TO)

TT=2400.47

 ? (TO)

TT=1997.15

 ? (TO)

TT=2400.03

 ? (TO)

TT=1996.73

 ? (TO)

TT=2402.06

 ? (TO)

TT=2402.11

 ? (TO)

TT=2402.14

 ? (TO)

TT=2402.06

 ? (TO)

TT=2400.1

 ? (TO)

TT=2400.05

 ? (TO)

TT=2400.1

 ? (TO)

TT=1945.34

 ? (TO)

TT=1943.98

 ? (TO)

TT=2400.09
Scheduling/
Scheduling-js-taillard/
Taillard-js-030-15-2.xml



? (TO)

TT=2400.1

 ? (TO)

TT=2400.32

 ? (TO)

TT=19939.3

 ? (TO)

TT=2400.34

 ? (TO)

TT=2001.96

 ? (TO)

TT=2400.34

 ? (TO)

TT=2003.66

 ? (TO)

TT=2400.09

 ? (TO)

TT=2001.82

 ? (TO)

TT=2400.15

 ? (TO)

TT=2400.17

 ? (TO)

TT=2400.13

 ? (TO)

TT=2400.13

 ? (TO)

TT=2400.05

 ? (TO)

TT=2400.05

 ? (TO)

TT=2400.02

 ? (TO)

TT=2008.89

 ? (TO)

TT=2009.51

 ? (TO)

TT=2400.02
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
Scheduling/
Scheduling-js-taillard/
Taillard-js-050-15-1.xml



? (TO)

TT=2400.11

 ? (TO)

TT=2400.5

 ? (TO)

TT=20010.9

 ? (TO)

TT=2400.56

 ? (TO)

TT=2003.97

 ? (TO)

TT=2400.68

 ? (TO)

TT=2003.96

 ? (TO)

TT=2400.07

 ? (TO)

TT=2003.74

 ? (TO)

TT=2400.22

 ? (TO)

TT=2400.25

 ? (TO)

TT=2400.08

 ? (TO)

TT=2400.07

 ? (TO)

TT=2400.1

 ? (TO)

TT=2400.03

 ? (TO)

TT=2400.03

 ? (TO)

TT=2006.2

 ? (TO)

TT=2006

 ? (TO)

TT=2400.03
Scheduling/
Scheduling-js-taillard/
Taillard-js-100-20-6.xml



? (problem)

TT=80.305

 ? (TO)

TT=2400.47

 ? (TO)

TT=20067.8

 ? (TO)

TT=2400.69

 ? (TO)

TT=1995.99

 ? (TO)

TT=2400.69

 ? (TO)

TT=1997.66

 ? (TO)

TT=2400.12

 ? (TO)

TT=1997.03

 ? (TO)

TT=2402.15

 ? (TO)

TT=2402.09

 ? (TO)

TT=2402.07

 ? (TO)

TT=2402.13

 ? (TO)

TT=2400.04

 ? (TO)

TT=2400.09

 ? (TO)

TT=2400.04

 ? (TO)

TT=1973.78

 ? (TO)

TT=1973.75

 ? (TO)

TT=2400.1
Scheduling/
Scheduling-os-taillard/
Taillard-os-05-05-0.xml 		OPT
f=300
TT=28.123
T1=28.09
 OPT
f=300
TT=1763.91
T1=529.94
 OPT
f=300
TT=173.801
T1=97.76
 OPT
f=300
TT=344.741
T1=51.22
 OPT
f=300
TT=231.873
T1=66.92
 OPT
f=300
TT=223.216
T1=87.5
 OPT
f=300
TT=103.232
T1=24.28
 OPT
f=300
TT=204.383
T1=80.62
 OPT
f=300
TT=2339.56
T1=1054.47
 OPT
f=300
TT=257.337
T1=78.97
 SAT (TO)
f=300
TT=2400.07
T1=30.74
 SAT (TO)
f=300
TT=2400.09
T1=193.55
 SAT (TO)
f=301
TT=2400.13
T1=92.72
 SAT (TO)
f=300
TT=2400.2
T1=64.05
 SAT (TO)
f=317
TT=2400.01
T1=289.87
 SAT (TO)
f=317
TT=2400.06
T1=290.64
 SAT (TO)
f=317
TT=2400.08
T1=288.61
 SAT (TO)
f=304
TT=2012.55
T1=538.08
 SAT (TO)
f=303
TT=2012.47
T1=1282.37
 OPT
f=300
TT=28.123
T1=28.09
Scheduling/
Scheduling-os-taillard/
Taillard-os-05-05-1.xml 		OPT
f=262
TT=28.34
T1=28.29
 OPT
f=262
TT=518.175
T1=157.66
 OPT
f=262
TT=240.444
T1=150.17
 OPT
f=262
TT=134.287
T1=49.52
 OPT
f=262
TT=125.245
T1=42.26
 OPT
f=262
TT=176.656
T1=40.22
 OPT
f=262
TT=92.912
T1=34.3
 OPT
f=262
TT=152.189
T1=56.74
 OPT
f=262
TT=200.337
T1=50.77
 OPT
f=262
TT=239.548
T1=96.79
 OPT
f=262
TT=755.898
T1=44.44
 SAT (TO)
f=262
TT=2400.13
T1=178.54
 OPT
f=262
TT=797.676
T1=204.96
 OPT
f=262
TT=1190.08
T1=36.61
 SAT (TO)
f=276
TT=2400.01
T1=1488.16
 SAT (TO)
f=276
TT=2400.07
T1=1498.93
 SAT (TO)
f=276
TT=2400.01
T1=1712.18
 SAT (TO)
f=262
TT=2012.59
T1=1094.82
 SAT (TO)
f=262
TT=2012.51
T1=839.95
 OPT
f=262
TT=28.34
T1=28.29
Scheduling/
Scheduling-os-taillard/
Taillard-os-05-05-3.xml 		OPT
f=310
TT=32.871
T1=32.78
 OPT
f=310
TT=831.537
T1=608.63
 OPT
f=310
TT=139.853
T1=88.47
 OPT
f=310
TT=221.565
T1=177.33
 OPT
f=310
TT=96.857
T1=62.56
 OPT
f=310
TT=168.521
T1=92.37
 OPT
f=310
TT=150.003
T1=137.54
 OPT
f=310
TT=193.569
T1=111.68
 OPT
f=310
TT=1526.56
T1=863.89
 OPT
f=310
TT=168.394
T1=143.82
 SAT (TO)
f=310
TT=2400.04
T1=1307.07
 SAT (TO)
f=311
TT=2400.11
T1=92.01
 SAT (TO)
f=310
TT=2400.11
T1=563.44
 SAT (TO)
f=311
TT=2400.22
T1=162.79
 SAT (TO)
f=321
TT=2400.09
T1=2279.48
 SAT (TO)
f=321
TT=2400.07
T1=2282.08
 SAT (TO)
f=321
TT=2400.08
T1=2279.65
 SAT (TO)
f=316
TT=2012.6
T1=1238.57
 SAT (TO)
f=316
TT=2012.47
T1=735.35
 OPT
f=310
TT=32.871
T1=32.78
Scheduling/
Scheduling-os-taillard/
Taillard-os-05-05-4.xml 		OPT
f=326
TT=26.205
T1=26.18
 OPT
f=326
TT=583.062
T1=359.42
 OPT
f=326
TT=132.712
T1=97.35
 OPT
f=326
TT=179.646
T1=142.47
 OPT
f=326
TT=76.492
T1=37.91
 OPT
f=326
TT=144.57
T1=53.48
 OPT
f=326
TT=73.757
T1=58.99
 OPT
f=326
TT=150.806
T1=44.58
 OPT
f=326
TT=1470.03
T1=343.42
 OPT
f=326
TT=132.018
T1=57.11
 SAT (TO)
f=326
TT=2400.14
T1=155.52
 SAT (TO)
f=329
TT=2400.08
T1=100.7
 SAT (TO)
f=326
TT=2400.07
T1=58.11
 SAT (TO)
f=326
TT=2400.21
T1=73.83
 SAT (TO)
f=348
TT=2400.06
T1=972.59
 SAT (TO)
f=348
TT=2400.03
T1=974.69
 SAT (TO)
f=348
TT=2400.06
T1=976.7
 SAT (TO)
f=332
TT=2012.64
T1=1149.07
 SAT (TO)
f=334
TT=2012.61
T1=758.54
 OPT
f=326
TT=26.205
T1=26.18
Scheduling/
Scheduling-os-taillard/
Taillard-os-05-05-5.xml 		OPT
f=312
TT=31.767
T1=14.86
 OPT
f=312
TT=1072.37
T1=48.46
 SAT (MO)
f=382
TT=16.561
T1=16.24
 OPT
f=312
TT=298.745
T1=260.6
 OPT
f=312
TT=208.256
T1=36.47
 OPT
f=312
TT=297.381
T1=183.02
 OPT
f=312
TT=156.546
T1=87.11
 OPT
f=312
TT=365.98
T1=25.77
 OPT
f=312
TT=986.681
T1=14.86
 OPT
f=312
TT=348.57
T1=115.62
 SAT (TO)
f=312
TT=2400.12
T1=76.99
 SAT (TO)
f=312
TT=2400.1
T1=166.8
 SAT (TO)
f=312
TT=2400.13
T1=49.52
 SAT (TO)
f=312
TT=2400.28
T1=59.59
 SAT (TO)
f=338
TT=2400.08
T1=1767.97
 SAT (TO)
f=338
TT=2400.1
T1=1769.57
 SAT (TO)
f=338
TT=2400.03
T1=1776.64
 SAT (TO)
f=318
TT=2012.65
T1=832.82
 SAT (TO)
f=317
TT=2012.64
T1=1409.45
 OPT
f=312
TT=31.767
T1=31.69
Scheduling/
Scheduling-os-taillard/
Taillard-os-05-05-6.xml 		OPT
f=303
TT=29.715
T1=29.69
 SAT (TO)
f=304
TT=2400.03
T1=1437.1
 OPT
f=303
TT=359.557
T1=233.77
 OPT
f=303
TT=288.943
T1=140.98
 OPT
f=303
TT=218.4
T1=159.19
 OPT
f=303
TT=425.665
T1=280.5
 OPT
f=303
TT=230.164
T1=155.84
 OPT
f=303
TT=392.523
T1=264.73
 OPT
f=303
TT=1459.33
T1=312.72
 OPT
f=303
TT=436.975
T1=340.64
 SAT (TO)
f=303
TT=2400.07
T1=732.62
 SAT (TO)
f=303
TT=2400.09
T1=187.47
 SAT (TO)
f=303
TT=2400.07
T1=604.54
 SAT (TO)
f=303
TT=2400.08
T1=229.94
 SAT (TO)
f=312
TT=2400.03
T1=1277.05
 SAT (TO)
f=312
TT=2400.09
T1=1275.93
 SAT (TO)
f=312
TT=2400.05
T1=1275.83
 SAT (TO)
f=309
TT=2012.9
T1=1547.06
 SAT (TO)
f=309
TT=2012.67
T1=466.22
 OPT
f=303
TT=29.715
T1=29.69
Scheduling/
Scheduling-os-taillard/
Taillard-os-05-05-8.xml 		OPT
f=353
TT=27.442
T1=27.39
 OPT
f=353
TT=447.255
T1=251.5
 OPT
f=353
TT=191.249
T1=150.93
 OPT
f=353
TT=148.404
T1=88.83
 OPT
f=353
TT=77.218
T1=53.25
 OPT
f=353
TT=187.165
T1=84.76
 OPT
f=353
TT=88.428
T1=49.43
 OPT
f=353
TT=106.706
T1=55.96
 OPT
f=353
TT=389.109
T1=250.18
 OPT
f=353
TT=137.047
T1=116.51
 SAT (TO)
f=353
TT=2400.11
T1=802.07
 SAT (TO)
f=354
TT=2400.12
T1=224.53
 SAT (TO)
f=353
TT=2400.12
T1=90.93
 SAT (TO)
f=354
TT=2400.18
T1=25.09
 SAT (TO)
f=387
TT=2400.01
T1=1229.39
 SAT (TO)
f=387
TT=2400.02
T1=1231.88
 SAT (TO)
f=387
TT=2400.08
T1=1230.41
 SAT (TO)
f=358
TT=2012.64
T1=598
 SAT (TO)
f=359
TT=2012.42
T1=1703.19
 OPT
f=353
TT=27.442
T1=27.39
Scheduling/
Scheduling-os-taillard/
Taillard-os-05-05-9.xml 		OPT
f=326
TT=36.698
T1=18.09
 SAT (TO)
f=326
TT=2400.02
T1=678.26
 OPT
f=326
TT=343.847
T1=138.35
 OPT
f=326
TT=416.808
T1=59.67
 OPT
f=326
TT=300.039
T1=28.49
 OPT
f=326
TT=472.194
T1=18.09
 SAT (MO)
f=345
TT=16.459
T1=16.33
 OPT
f=326
TT=467.894
T1=138.47
 OPT
f=326
TT=1151.85
T1=50.93
 OPT
f=326
TT=439.811
T1=34.62
 SAT (TO)
f=326
TT=2400.06
T1=120.92
 SAT (TO)
f=326
TT=2400.08
T1=53.67
 SAT (TO)
f=326
TT=2400.08
T1=357.18
 SAT (TO)
f=326
TT=2400.19
T1=667.14
 SAT (TO)
f=349
TT=2400.02
T1=1994.71
 SAT (TO)
f=349
TT=2400.05
T1=2004.21
 SAT (TO)
f=349
TT=2400.02
T1=2010.77
 SAT (TO)
f=328
TT=2012.58
T1=1991.65
 SAT (TO)
f=330
TT=2012.51
T1=542.03
 OPT
f=326
TT=36.698
T1=36.68
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
Scheduling/
Scheduling-os-taillard/
Taillard-os-07-07-8.xml 		OPT
f=458
TT=29.452
T1=29.38
 SAT (TO)
f=556
TT=2400.11
T1=1367.01
 OPT
f=458
TT=1597.54
T1=1597.41
 Wrong Opt.
f=460
TT=622.42
T1=622.37
 OPT
f=458
TT=1248.93
T1=1248.49
 SAT (TO)
f=460
TT=1992.85
T1=929.98
 OPT
f=458
TT=1181.35
T1=1181.24
 SAT (TO)
f=459
TT=1992.76
T1=1511.8
 SAT (TO)
f=464
TT=2400.12
T1=23.66
 OPT
f=458
TT=898.189
T1=898.04
 SAT (TO)
f=463
TT=2400.12
T1=275.58
 SAT (TO)
f=473
TT=2400.06
T1=1376.58
 SAT (TO)
f=466
TT=2400.11
T1=702.83
 SAT (TO)
f=464
TT=2400.1
T1=2014.27
 ? (TO)

TT=2400.07

 ? (TO)

TT=2400.01

 ? (TO)

TT=2400.04

 SAT (TO)
f=523
TT=2012.49
T1=1640.95
 SAT (TO)
f=509
TT=2012.5
T1=1982.76
 OPT
f=458
TT=29.452
T1=29.38
Scheduling/
Scheduling-os-taillard/
Taillard-os-10-10-6.xml 		OPT
f=616
TT=1752.82
T1=1752.76
 ? (TO)

TT=2400.04

 SAT (TO)
f=687
TT=2400.37
T1=2162.61
 SAT (TO)
f=656
TT=11337.9
T1=10339.3
 SAT (TO)
f=668
TT=2400.41
T1=2268.5
 SAT (TO)
f=695
TT=1996.39
T1=1706.9
 SAT (TO)
f=668
TT=2400.41
T1=2309.24
 SAT (TO)
f=685
TT=1996.02
T1=1754.52
 SAT (TO)
f=643
TT=2400.06
T1=1101.65
 SAT (TO)
f=708
TT=1999.92
T1=1363.29
 SAT (TO)
f=664
TT=2400.12
T1=1895.2
 SAT (TO)
f=700
TT=2400.1
T1=1855.05
 SAT (TO)
f=671
TT=2400.12
T1=2355.88
 SAT (TO)
f=682
TT=2400.08
T1=1317.67
 ? (TO)

TT=2400.07

 ? (TO)

TT=2400.02

 ? (TO)

TT=2400.06

 ? (TO)

TT=2012.13

 ? (TO)

TT=2011.96

 OPT
f=616
TT=1752.82
T1=1752.76
Scheduling/
Scheduling-os-taillard/
Taillard-os-15-15-5.xml 		SAT TO
f=1058
TT=2400.17
T1=652.48
 ? (TO)

TT=2400.05

 ? (TO)

TT=2400.45

 ? (TO)

TT=20008.1

 ? (TO)

TT=2400.39

 ? (TO)

TT=2000.01

 ? (TO)

TT=2400.34

 ? (TO)

TT=2003.68

 ? (TO)

TT=2400.09

 ? (TO)

TT=2001.41

 ? (TO)

TT=2400.12

 ? (TO)

TT=2400.12

 ? (TO)

TT=2400.14

 SAT (TO)
f=1058
TT=2400.17
T1=652.48
 ? (TO)

TT=2400.12

 ? (TO)

TT=2400.05

 ? (TO)

TT=2400.02

 ? (TO)

TT=2010.75

 ? (TO)

TT=2010.78

 ? (TO)

TT=2400.07
SteelMillSlab/
SteelMillSlab-bench_10_9.xml 		SAT TO
f=142
TT=2400.11
T1=2357.13
 ? (TO)

TT=2400.09

 SAT (TO)
f=305
TT=2400.75
T1=295.54
 SAT (TO)
f=266
TT=19791.6
T1=6320.21
 SAT (TO)
f=267
TT=2400.73
T1=2216.89
 SAT (TO)
f=305
TT=1983.9
T1=1514.33
 SAT (TO)
f=267
TT=2400.83
T1=2300.46
 SAT (TO)
f=305
TT=1981.87
T1=1605.72
 SAT (TO)
f=142
TT=2400.11
T1=2357.13
 SAT (TO)
f=297
TT=1987.64
T1=1975.75
 SAT (TO)
f=269
TT=2400.14
T1=47.2
 SAT (TO)
f=278
TT=2400.18
T1=161.93
 SAT (TO)
f=293
TT=2400.07
T1=50.23
 SAT (TO)
f=421
TT=2400.08
T1=55.19
 ? (MO)

TT=1527.38

 ? (MO)

TT=1523.26

 ? (MO)

TT=1753.81

 ? (TO)

TT=252.398

 ? (TO)

TT=252.412

 ? (TO)

TT=2400.09
SteelMillSlab/
SteelMillSlab-bench_11_1.xml 		SAT TO
f=260
TT=2400.12
T1=2362.72
 ? (TO)

TT=2400.03

 SAT (TO)
f=414
TT=2400.59
T1=291.85
 SAT (TO)
f=412
TT=20050.8
T1=859.89
 SAT (TO)
f=409
TT=2400.55
T1=816.65
 SAT (TO)
f=412
TT=1993.95
T1=838.57
 SAT (TO)
f=409
TT=2400.62
T1=859.59
 SAT (TO)
f=408
TT=1996.94
T1=763.85
 SAT (TO)
f=260
TT=2400.12
T1=2362.72
 SAT (TO)
f=408
TT=1996.45
T1=758.89
 SAT (TO)
f=429
TT=2400.16
T1=47.55
 SAT (TO)
f=509
TT=2400.17
T1=235.1
 SAT (TO)
f=462
TT=2400.1
T1=50.4
 SAT (TO)
f=505
TT=2400.09
T1=65.3
 ? (MO)

TT=1519.8

 ? (MO)

TT=1535.1

 ? (MO)

TT=1558.44

 ? (TO)

TT=252.422

 ? (TO)

TT=252.387

 ? (TO)

TT=2400.09
SteelMillSlab/
SteelMillSlab-bench_12_14.xml 		SAT TO
f=290
TT=2400.5
T1=534.48
 ? (TO)

TT=2400.11

 SAT (TO)
f=332
TT=2400.43
T1=1207.37
 SAT (TO)
f=338
TT=20076.9
T1=18151.2
 SAT (TO)
f=290
TT=2400.5
T1=534.48
 SAT (TO)
f=339
TT=1994.69
T1=832.21
 SAT (TO)
f=290
TT=2400.59
T1=554.68
 SAT (TO)
f=338
TT=1994.81
T1=1191.7
 ? (TO)

TT=2400.1

 SAT (TO)
f=339
TT=1996.37
T1=763.5
 SAT (TO)
f=367
TT=2400.14
T1=55.29
 SAT (TO)
f=402
TT=2400.11
T1=352.13
 SAT (TO)
f=385
TT=2400.09
T1=54.33
 SAT (TO)
f=401
TT=2400.07
T1=72.48
 ? (MO)

TT=1528.05

 ? (MO)

TT=1518.73

 ? (MO)

TT=1522.79

 ? (TO)

TT=252.377

 ? (TO)

TT=252.449

 ? (TO)

TT=2400.09
SteelMillSlab/
SteelMillSlab-bench_13_19.xml 		SAT TO
f=328
TT=2400.56
T1=2096.48
 ? (TO)

TT=2400.11

 SAT (TO)
f=351
TT=2400.35
T1=312.83
 SAT (TO)
f=351
TT=20072.7
T1=764.91
 SAT (TO)
f=328
TT=2400.56
T1=2096.48
 SAT (TO)
f=346
TT=1989.22
T1=1111.31
 SAT (TO)
f=328
TT=2400.5
T1=2047.16
 SAT (TO)
f=346
TT=1982.09
T1=1069.72
 ? (TO)

TT=2400.12

 SAT (TO)
f=346
TT=1989.69
T1=1032.71
 SAT (TO)
f=437
TT=2400.09
T1=70.5
 SAT (TO)
f=442
TT=2400.12
T1=291.85
 SAT (TO)
f=457
TT=2400.1
T1=63.51
 SAT (TO)
f=437
TT=2400.16
T1=61.48
 ? (MO)

TT=1516.79

 ? (MO)

TT=1515.35

 ? (MO)

TT=1510.85

 ? (TO)

TT=252.438

 ? (TO)

TT=252.405

 ? (TO)

TT=2400.05
SteelMillSlab/
SteelMillSlab-bench_13_6.xml 		SAT TO
f=274
TT=1996.42
T1=1217.3
 ? (TO)

TT=2400.05

 SAT (TO)
f=380
TT=2400.38
T1=1992.81
 SAT (TO)
f=312
TT=19880
T1=14848.3
 SAT (TO)
f=330
TT=2400.63
T1=589.49
 SAT (TO)
f=274
TT=1996.42
T1=1217.3
 SAT (TO)
f=330
TT=2401.75
T1=593.25
 SAT (TO)
f=337
TT=1996.13
T1=775.1
 ? (TO)

TT=2400.04

 SAT (TO)
f=337
TT=1996.08
T1=783.88
 SAT (TO)
f=314
TT=2400.07
T1=58.66
 SAT (TO)
f=354
TT=2400.1
T1=517.54
 SAT (TO)
f=344
TT=2400.15
T1=67.27
 SAT (TO)
f=349
TT=2400.13
T1=65.97
 ? (MO)

TT=1515.33

 ? (MO)

TT=1520.63

 ? (MO)

TT=1516.27

 ? (TO)

TT=252.319

 ? (TO)

TT=252.398

 ? (TO)

TT=2400.09
SteelMillSlab/
SteelMillSlab-bench_14_1.xml 		SAT TO
f=261
TT=2400.07
T1=51.14
 ? (TO)

TT=2400.09

 SAT (TO)
f=279
TT=2400.57
T1=948.19
 SAT (TO)
f=262
TT=20081.6
T1=8315.96
 SAT (TO)
f=306
TT=2400.48
T1=1863.68
 SAT (TO)
f=269
TT=1996.73
T1=745.6
 SAT (TO)
f=306
TT=2400.78
T1=1832.57
 SAT (TO)
f=269
TT=1995.94
T1=783.71
 ? (TO)

TT=2400.04

 SAT (TO)
f=269
TT=1996.48
T1=755.95
 SAT (TO)
f=294
TT=2400.09
T1=60.83
 SAT (TO)
f=286
TT=2400.13
T1=338.96
 SAT (TO)
f=293
TT=2400.14
T1=78.46
 SAT (TO)
f=261
TT=2400.07
T1=51.14
 ? (MO)

TT=1523.19

 ? (MO)

TT=1518.02

 ? (MO)

TT=1536.38

 ? (TO)

TT=252.371

 ? (TO)

TT=252.366

 ? (TO)

TT=2400.1
SteelMillSlab/
SteelMillSlab-bench_15_2.xml 		SAT TO
f=105
TT=2400.86
T1=445.67
 ? (TO)

TT=2400.08

 SAT (TO)
f=258
TT=2400.52
T1=1546.64
 SAT (TO)
f=188
TT=19515.8
T1=8126.61
 SAT (TO)
f=105
TT=2400.86
T1=445.67
 SAT (TO)
f=242
TT=1996.39
T1=784.25
 SAT (TO)
f=105
TT=2400.68
T1=433.25
 SAT (TO)
f=105
TT=1991.83
T1=1046.24
 SAT (TO)
f=132
TT=2400.13
T1=2362.03
 SAT (TO)
f=242
TT=1997.18
T1=745.38
 SAT (TO)
f=259
TT=2400.14
T1=55.02
 SAT (TO)
f=267
TT=2400.2
T1=2267.17
 SAT (TO)
f=273
TT=2400.08
T1=58.97
 SAT (TO)
f=225
TT=2400.14
T1=1426.42
 ? (MO)

TT=1513.71

 ? (MO)

TT=1508.89

 ? (MO)

TT=1517.02

 ? (TO)

TT=252.376

 ? (TO)

TT=252.381

 ? (TO)

TT=2400.07
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
SteelMillSlab/
SteelMillSlab-bench_16_2.xml 		SAT TO
f=97
TT=2400.44
T1=2394.47
 ? (TO)

TT=2400.04

 SAT (TO)
f=139
TT=2400.64
T1=1418.81
 SAT (TO)
f=133
TT=19485.3
T1=12314.3
 SAT (TO)
f=97
TT=2400.44
T1=2394.47
 SAT (TO)
f=117
TT=1996.83
T1=975.74
 SAT (TO)
f=103
TT=2400.65
T1=1966.33
 SAT (TO)
f=132
TT=1994.73
T1=1928.61
 ? (TO)

TT=2400.05

 SAT (TO)
f=135
TT=1996.24
T1=1534.21
 SAT (TO)
f=208
TT=2400.08
T1=88.34
 SAT (TO)
f=171
TT=2400.08
T1=164.68
 SAT (TO)
f=169
TT=2400.14
T1=68.32
 SAT (TO)
f=190
TT=2400.16
T1=75.81
 ? (MO)

TT=1533.14

 ? (MO)

TT=1519.68

 ? (MO)

TT=1537.47

 ? (TO)

TT=252.373

 ? (TO)

TT=252.346

 ? (TO)

TT=2400.05
SteelMillSlab/
SteelMillSlab-bench_17_11.xml 		SAT TO
f=25
TT=2400.17
T1=2025.72
 ? (TO)

TT=2400.11

 SAT (TO)
f=111
TT=2400.79
T1=2305.72
 SAT (TO)
f=111
TT=18890.2
T1=5074.07
 SAT (TO)
f=72
TT=2400.62
T1=2359.7
 SAT (TO)
f=178
TT=1996.6
T1=802.62
 SAT (TO)
f=69
TT=2400.47
T1=2375.34
 SAT (TO)
f=138
TT=1996.2
T1=1678.01
 SAT (TO)
f=25
TT=2400.17
T1=2025.72
 SAT (TO)
f=138
TT=1995.21
T1=1728.57
 SAT (TO)
f=189
TT=2400.14
T1=57.11
 SAT (TO)
f=205
TT=2400.15
T1=432.88
 SAT (TO)
f=206
TT=2400.08
T1=53.66
 SAT (TO)
f=205
TT=2400.11
T1=78.82
 ? (MO)

TT=1519.9

 ? (MO)

TT=1515.96

 ? (MO)

TT=1527.72

 ? (TO)

TT=252.28

 ? (TO)

TT=252.436

 ? (TO)

TT=2400.09
SteelMillSlab/
SteelMillSlab-bench_19_19.xml 		OPT
f=0
TT=1288.59
T1=1288.56
 ? (TO)

TT=2400.04

 SAT (TO)
f=135
TT=2400.73
T1=319.56
 SAT (TO)
f=133
TT=18720.2
T1=17263.7
 SAT (TO)
f=114
TT=2400.33
T1=1061.19
 SAT (TO)
f=126
TT=1996.41
T1=1957.41
 SAT (TO)
f=100
TT=2400.55
T1=2105.68
 SAT (TO)
f=133
TT=1996.3
T1=1664.38
 SAT (TO)
f=31
TT=2400.19
T1=2268.56
 SAT (TO)
f=133
TT=1996.44
T1=1553.74
 SAT (TO)
f=196
TT=2400.12
T1=110.54
 SAT (TO)
f=228
TT=2400.12
T1=306.76
 SAT (TO)
f=223
TT=2400.07
T1=81.83
 SAT (TO)
f=193
TT=2400.14
T1=100.13
 ? (MO)

TT=1522.84

 ? (MO)

TT=1564.35

 ? (MO)

TT=1556.8

 ? (TO)

TT=252.43

 ? (TO)

TT=252.378

 OPT
f=0
TT=1288.59
T1=1288.56
SteelMillSlab/
SteelMillSlab-bench_20_8.xml 		SAT TO
f=222
TT=2400.51
T1=559.69
 ? (TO)

TT=2400.08

 SAT (TO)
f=254
TT=2400.77
T1=1878.14
 SAT (TO)
f=194
TT=20054.4
T1=12613.5
 SAT (TO)
f=222
TT=2400.51
T1=559.69
 SAT (TO)
f=224
TT=1992.32
T1=738.02
 SAT (TO)
f=222
TT=2400.61
T1=538.78
 SAT (TO)
f=223
TT=1993.93
T1=1587.37
 ? (TO)

TT=2400.06

 SAT (TO)
f=224
TT=1994.96
T1=832.16
 SAT (TO)
f=212
TT=2400.14
T1=52.3
 SAT (TO)
f=242
TT=2400.12
T1=276.8
 SAT (TO)
f=246
TT=2400.05
T1=61.88
 SAT (TO)
f=250
TT=2400.16
T1=63.42
 ? (MO)

TT=1526.73

 ? (MO)

TT=1508.56

 ? (MO)

TT=1557.32

 ? (TO)

TT=252.452

 ? (TO)

TT=252.382

 ? (TO)

TT=2400.06
SteelMillSlab/
SteelMillSlab-bench_3_12.xml 		SAT TO
f=1336
TT=1997.76
T1=735.41
 ? (TO)

TT=2400.12

 SAT (TO)
f=1336
TT=2400.45
T1=2059.88
 SAT (TO)
f=1336
TT=20081.3
T1=760.18
 SAT (TO)
f=1348
TT=2400.65
T1=442.73
 SAT (TO)
f=1336
TT=1997.77
T1=735.41
 SAT (TO)
f=1348
TT=2400.81
T1=466.41
 SAT (TO)
f=1336
TT=1994.31
T1=695.1
 ? (TO)

TT=2400.05

 SAT (TO)
f=1336
TT=1997.76
T1=780.76
 SAT (TO)
f=1352
TT=2400.11
T1=49.83
 SAT (TO)
f=1352
TT=2400.1
T1=293.39
 SAT (TO)
f=1356
TT=2400.08
T1=54.99
 SAT (TO)
f=1356
TT=2400.18
T1=65.39
 ? (MO)

TT=1513.4

 ? (MO)

TT=1520.94

 ? (MO)

TT=1514.29

 ? (TO)

TT=252.371

 ? (TO)

TT=252.41

 ? (TO)

TT=2400.04
SteelMillSlab/
SteelMillSlab-bench_5_11.xml 		SAT TO
f=432
TT=2400.09
T1=1931.06
 ? (TO)

TT=2400.08

 SAT (TO)
f=471
TT=2400.91
T1=303.73
 SAT (TO)
f=438
TT=17723.8
T1=12461.2
 SAT (TO)
f=435
TT=2400.5
T1=1075.65
 SAT (TO)
f=453
TT=1996.56
T1=800.5
 SAT (TO)
f=435
TT=2400.46
T1=1201.96
 SAT (TO)
f=453
TT=1995.88
T1=812.5
 SAT (TO)
f=432
TT=2400.09
T1=1931.06
 SAT (TO)
f=453
TT=1997.07
T1=772.44
 SAT (TO)
f=655
TT=2400.09
T1=1433.41
 SAT (TO)
f=619
TT=2400.18
T1=281.41
 SAT (TO)
f=669
TT=2400.15
T1=54.6
 SAT (TO)
f=626
TT=2400.13
T1=53.49
 ? (MO)

TT=1514.64

 ? (MO)

TT=1525.69

 ? (MO)

TT=1563.35

 ? (TO)

TT=252.43

 ? (TO)

TT=252.446

 ? (TO)

TT=2400.03
SteelMillSlab/
SteelMillSlab-bench_9_11.xml 		SAT TO
f=382
TT=2400.08
T1=1833.07
 ? (TO)

TT=2400.09

 SAT (TO)
f=675
TT=2400.76
T1=1619.22
 SAT (TO)
f=413
TT=20031
T1=10242.5
 SAT (TO)
f=482
TT=2400.58
T1=499.04
 SAT (TO)
f=482
TT=1996.37
T1=1183.18
 SAT (TO)
f=482
TT=2400.68
T1=508.52
 SAT (TO)
f=597
TT=1996.03
T1=811.07
 SAT (TO)
f=382
TT=2400.08
T1=1833.07
 SAT (TO)
f=597
TT=1996.03
T1=797.06
 SAT (TO)
f=536
TT=2400.17
T1=48.58
 SAT (TO)
f=645
TT=2400.12
T1=315.94
 SAT (TO)
f=482
TT=2400.15
T1=52.64
 SAT (TO)
f=641
TT=2400.11
T1=71.49
 ? (MO)

TT=1514.44

 ? (MO)

TT=1526.61

 ? (MO)

TT=1513.83

 ? (TO)

TT=252.391

 ? (TO)

TT=252.384

 ? (TO)

TT=2400.02
SteelMillSlab/
SteelMillSlab-bench_9_13.xml 		SAT TO
f=291
TT=2400.73
T1=1651.69
 ? (TO)

TT=2400.08

 SAT (TO)
f=340
TT=2400.93
T1=304.54
 SAT (TO)
f=333
TT=20038.4
T1=11354.9
 SAT (TO)
f=291
TT=2400.73
T1=1651.69
 SAT (TO)
f=316
TT=1996.85
T1=1896.47
 SAT (TO)
f=291
TT=2400.82
T1=1686.96
 SAT (TO)
f=316
TT=1994.7
T1=1816.97
 ? (TO)

TT=2400.08

 SAT (TO)
f=311
TT=1988.91
T1=1811.25
 SAT (TO)
f=402
TT=2400.12
T1=51.96
 SAT (TO)
f=400
TT=2400.15
T1=390.55
 SAT (TO)
f=435
TT=2400.1
T1=52.49
 SAT (TO)
f=402
TT=2400.11
T1=60.2
 ? (MO)

TT=1564.48

 ? (MO)

TT=1517.22

 ? (MO)

TT=1506.79

 ? (TO)

TT=252.356

 ? (TO)

TT=252.372

 ? (TO)

TT=2400.03
StillLife/
StillLife-m1-s1/
StillLife-03-14.xml 		OPT
f=22
TT=4.786
T1=0
 OPT
f=22
TT=8.205
T1=7.44
 OPT
f=22
TT=8.863
T1=4.25
 OPT
f=22
TT=17.725
T1=6.78
 OPT
f=22
TT=9.233
T1=2.32
 OPT
f=22
TT=14.408
T1=3.87
 OPT
f=22
TT=9.074
T1=2.43
 OPT
f=22
TT=14.67
T1=3.17
 OPT
f=22
TT=4.786
T1=3.13
 OPT
f=22
TT=14.668
T1=3.06
 OPT
f=22
TT=32.467
T1=9.1
 OPT
f=22
TT=71.699
T1=18.13
 OPT
f=22
TT=30.03
T1=8.98
 OPT
f=22
TT=37.63
T1=8.05
 OPT
f=22
TT=7.753
T1=0
 OPT
f=22
TT=7.747
T1=0
 OPT
f=22
TT=7.745
T1=0
 OPT
f=22
TT=16.773
T1=0
 OPT
f=22
TT=16.339
T1=0
 OPT
f=22
TT=4.867
T1=4.79
StillLife/
StillLife-m1-s1/
StillLife-04-09.xml 		OPT
f=20
TT=1.836
T1=0
 OPT
f=20
TT=6.732
T1=6.65
 OPT
f=20
TT=3.444
T1=3.22
 OPT
f=20
TT=5.807
T1=3.85
 OPT
f=20
TT=3.427
T1=2.73
 OPT
f=20
TT=6.683
T1=3.05
 OPT
f=20
TT=3.76
T1=3.62
 OPT
f=20
TT=5.558
T1=3.93
 OPT
f=20
TT=2.708
T1=2.55
 OPT
f=20
TT=5.14
T1=3.97
 OPT
f=20
TT=21.853
T1=11.72
 OPT
f=20
TT=19.5
T1=10.96
 OPT
f=20
TT=16.734
T1=10.21
 OPT
f=20
TT=14.587
T1=10.96
 OPT
f=20
TT=1.836
T1=0.21
 OPT
f=20
TT=1.836
T1=0.21
 OPT
f=20
TT=2.107
T1=0.21
 OPT
f=20
TT=3.183
T1=0
 OPT
f=20
TT=4.203
T1=0
 OPT
f=20
TT=6.481
T1=6.39
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
StillLife/
StillLife-m1-s1/
StillLife-04-14.xml 		OPT
f=30
TT=16.786
T1=5.47
 OPT
f=30
TT=52.832
T1=49.41
 OPT
f=30
TT=62.519
T1=9.49
 OPT
f=30
TT=117.263
T1=22.44
 OPT
f=30
TT=49.035
T1=9.01
 OPT
f=30
TT=163.672
T1=13.76
 OPT
f=30
TT=60.343
T1=19.33
 OPT
f=30
TT=113.897
T1=14.6
 OPT
f=30
TT=16.786
T1=5.47
 OPT
f=30
TT=101.573
T1=6.82
 OPT
f=30
TT=835.998
T1=26.22
 OPT
f=30
TT=804.713
T1=12.58
 OPT
f=30
TT=469.489
T1=46.19
 OPT
f=30
TT=518.353
T1=163.75
 OPT
f=30
TT=343.572
T1=23.39
 OPT
f=30
TT=345.421
T1=23.58
 OPT
f=30
TT=392.73
T1=26.78
 OPT
f=30
TT=314.475
T1=19.79
 OPT
f=30
TT=149.145
T1=8.69
 OPT
f=30
TT=16.923
T1=16.88
StillLife/
StillLife-m1-s1/
StillLife-04-15.xml 		OPT
f=32
TT=22.594
T1=1.84
 OPT
f=32
TT=117.933
T1=115.58
 OPT
f=32
TT=177.698
T1=23.29
 OPT
f=32
TT=268.416
T1=6.56
 OPT
f=32
TT=160.842
T1=15.81
 OPT
f=32
TT=233.086
T1=39.9
 OPT
f=32
TT=129.318
T1=20.59
 OPT
f=32
TT=229.377
T1=25.72
 OPT
f=32
TT=137.122
T1=1.84
 OPT
f=32
TT=285.913
T1=36.1
 OPT
f=32
TT=1003.99
T1=9.61
 SAT (TO)
f=32
TT=2400.07
T1=33.11
 OPT
f=32
TT=746.788
T1=120.42
 OPT
f=32
TT=483.533
T1=120.88
 OPT
f=32
TT=1516.15
T1=7.59
 OPT
f=32
TT=1498.86
T1=7.49
 OPT
f=32
TT=1500.58
T1=7.49
 OPT
f=32
TT=457.428
T1=22.99
 SAT (TO)
f=32
TT=2012.49
T1=28.58
 OPT
f=32
TT=22.594
T1=22.58
StillLife/
StillLife-m1-s1/
StillLife-05-09.xml 		OPT
f=26
TT=3.848
T1=0.79
 OPT
f=26
TT=13.54
T1=12.25
 OPT
f=26
TT=5.125
T1=2.72
 OPT
f=26
TT=12.996
T1=6.83
 OPT
f=26
TT=5.975
T1=3.5
 OPT
f=26
TT=11.527
T1=6.15
 OPT
f=26
TT=5.735
T1=3.55
 OPT
f=26
TT=11.373
T1=7.75
 OPT
f=26
TT=3.848
T1=1.3
 OPT
f=26
TT=11.403
T1=5.4
 OPT
f=26
TT=31.439
T1=15.2
 OPT
f=26
TT=118.433
T1=106.81
 OPT
f=26
TT=40.126
T1=24.08
 OPT
f=26
TT=37.402
T1=7.29
 OPT
f=26
TT=9.692
T1=0.79
 OPT
f=26
TT=9.686
T1=0.79
 OPT
f=26
TT=9.785
T1=0.87
 OPT
f=26
TT=36.665
T1=10.23
 OPT
f=26
TT=37.527
T1=15.02
 OPT
f=26
TT=13.711
T1=13.69
StillLife/
StillLife-m1-s1/
StillLife-05-11.xml 		OPT
f=32
TT=17.088
T1=4.72
 OPT
f=32
TT=50.257
T1=48.12
 OPT
f=32
TT=24.201
T1=4.72
 OPT
f=32
TT=54.564
T1=13.06
 OPT
f=32
TT=37.108
T1=36.81
 OPT
f=32
TT=48.56
T1=12.42
 OPT
f=32
TT=30.104
T1=18.19
 OPT
f=32
TT=52.14
T1=8.35
 OPT
f=32
TT=17.088
T1=9.58
 OPT
f=32
TT=46.973
T1=6.86
 OPT
f=32
TT=174.301
T1=141.86
 OPT
f=32
TT=325.579
T1=45.7
 OPT
f=32
TT=128.304
T1=24.44
 OPT
f=32
TT=781.882
T1=642.06
 OPT
f=32
TT=126.569
T1=70.38
 OPT
f=32
TT=126.001
T1=70.11
 OPT
f=32
TT=125.754
T1=70
 OPT
f=32
TT=369.276
T1=11.02
 OPT
f=32
TT=451.848
T1=36.57
 OPT
f=32
TT=18.82
T1=18.79
StillLife/
StillLife-m1-s1/
StillLife-05-12.xml 		OPT
f=34
TT=14.925
T1=1.86
 OPT
f=34
TT=111.186
T1=91.25
 OPT
f=34
TT=79.186
T1=4.7
 OPT
f=34
TT=181.493
T1=61.98
 OPT
f=34
TT=78.063
T1=10.26
 OPT
f=34
TT=182.924
T1=20.23
 OPT
f=34
TT=79.292
T1=9.44
 OPT
f=34
TT=181.415
T1=26.44
 OPT
f=34
TT=77.073
T1=1.86
 OPT
f=34
TT=163.51
T1=5.94
 OPT
f=34
TT=514.017
T1=10.05
 SAT (TO)
f=34
TT=2400.13
T1=174.97
 OPT
f=34
TT=1282.43
T1=53.89
 OPT
f=34
TT=1984.29
T1=12.46
 OPT
f=34
TT=571.545
T1=39.78
 OPT
f=34
TT=571.597
T1=39.69
 OPT
f=34
TT=569.983
T1=39.59
 SAT (TO)
f=34
TT=2012.55
T1=62.91
 OPT
f=34
TT=885.835
T1=79.74
 OPT
f=34
TT=14.925
T1=14.89
StillLife/
StillLife-m1-s1/
StillLife-05-14.xml 		OPT
f=40
TT=28.235
T1=12.91
 OPT
f=40
TT=835.412
T1=826.37
 OPT
f=40
TT=806.69
T1=684.19
 OPT
f=40
TT=1250.35
T1=120.74
 OPT
f=40
TT=613.032
T1=50.77
 OPT
f=40
TT=1400.74
T1=12.91
 OPT
f=40
TT=786.333
T1=521.99
 OPT
f=40
TT=1399.24
T1=110.57
 OPT
f=40
TT=425.501
T1=227.51
 OPT
f=40
TT=1504.83
T1=420.54
 SAT (TO)
f=40
TT=2400.14
T1=1238.89
 SAT (TO)
f=39
TT=2400.09
T1=15.84
 SAT (TO)
f=40
TT=2400.08
T1=1123.72
 SAT (TO)
f=38
TT=2400.14
T1=23.14
 SAT (TO)
f=40
TT=2400.04
T1=48.38
 SAT (TO)
f=40
TT=2400.05
T1=48.4
 SAT (TO)
f=40
TT=2400.07
T1=48.49
 SAT (TO)
f=39
TT=2012.55
T1=1128.27
 SAT (TO)
f=40
TT=2012.56
T1=0
 OPT
f=40
TT=28.235
T1=28.19
StillLife/
StillLife-m1-s1/
StillLife-05-15.xml 		OPT
f=43
TT=29.62
T1=29.59
 OPT
f=43
TT=1591.53
T1=1467.38
 OPT
f=43
TT=2124.57
T1=1686.25
 OPT
f=43
TT=2990.14
T1=82.16
 OPT
f=43
TT=2109.11
T1=1653.87
 SAT (TO)
f=43
TT=1996.92
T1=764.94
 OPT
f=43
TT=2089.4
T1=1646.41
 SAT (TO)
f=43
TT=1996.43
T1=875.09
 OPT
f=43
TT=577.311
T1=48.37
 SAT (TO)
f=43
TT=1995.02
T1=468.05
 SAT (TO)
f=43
TT=2400.09
T1=557.6
 SAT (TO)
f=42
TT=2400.05
T1=1335.1
 SAT (TO)
f=42
TT=2400.14
T1=268.06
 SAT (TO)
f=43
TT=2400.07
T1=147.86
 SAT (TO)
f=41
TT=2400.02
T1=71.79
 SAT (TO)
f=41
TT=2400.04
T1=72
 SAT (TO)
f=41
TT=2400.03
T1=71.89
 SAT (TO)
f=43
TT=2012.65
T1=1451.01
 SAT (TO)
f=42
TT=2012.56
T1=19.74
 OPT
f=43
TT=29.62
T1=29.59
StillLife/
StillLife-m1-s1/
StillLife-06-11.xml 		OPT
f=34
TT=38.762
T1=2.18
 OPT
f=34
TT=1225.15
T1=551.88
 OPT
f=34
TT=568.74
T1=3.16
 OPT
f=34
TT=1394.06
T1=12.24
 OPT
f=34
TT=571.86
T1=2.69
 OPT
f=34
TT=1294.27
T1=8.22
 OPT
f=34
TT=559.846
T1=3.16
 OPT
f=34
TT=1296.74
T1=6.76
 OPT
f=34
TT=591.966
T1=2.18
 OPT
f=34
TT=1222.18
T1=7.52
 SAT (TO)
f=34
TT=2400.15
T1=52.84
 SAT (TO)
f=34
TT=2400.07
T1=39.35
 SAT (TO)
f=34
TT=2400.09
T1=193.55
 SAT (TO)
f=34
TT=2400.15
T1=14.97
 SAT (TO)
f=34
TT=2400.02
T1=645.22
 SAT (TO)
f=34
TT=2400.06
T1=651.06
 SAT (TO)
f=34
TT=2400.04
T1=746.6
 SAT (TO)
f=34
TT=2012.56
T1=102.85
 SAT (TO)
f=34
TT=2012.63
T1=0.73
 OPT
f=34
TT=38.762
T1=38.69
StillLife/
StillLife-m1-s1/
StillLife-06-12.xml 		OPT
f=38
TT=41.423
T1=41.38
 SAT (TO)
f=38
TT=2400.11
T1=2113.85
 OPT
f=38
TT=1827.09
T1=232.26
 OPT
f=38
TT=3893.33
T1=1571.33
 OPT
f=38
TT=1784.92
T1=180.45
 SAT (TO)
f=38
TT=1995.37
T1=117.66
 OPT
f=38
TT=1905.97
T1=653.8
 SAT (TO)
f=38
TT=1995.49
T1=330.88
 OPT
f=38
TT=951.217
T1=306.34
 SAT (TO)
f=37
TT=1995.77
T1=58.95
 SAT (TO)
f=38
TT=2400.06
T1=1576.66
 SAT (TO)
f=38
TT=2400.1
T1=1999.13
 SAT (TO)
f=37
TT=2400.09
T1=11.08
 SAT (TO)
f=38
TT=2400.15
T1=449.02
 SAT (TO)
f=37
TT=2400.04
T1=1145.17
 SAT (TO)
f=37
TT=2400.09
T1=1138.96
 SAT (TO)
f=37
TT=2400.01
T1=1146.74
 SAT (TO)
f=37
TT=2012.83
T1=390.39
 SAT (TO)
f=37
TT=2012.57
T1=110.83
 OPT
f=38
TT=41.423
T1=41.38
StillLife/
StillLife-m1-s1/
StillLife-07-10.xml 		OPT
f=39
TT=31.41
T1=6.53
 SAT (TO)
f=38
TT=2400.09
T1=1356.59
 OPT
f=39
TT=495.029
T1=144.05
 OPT
f=39
TT=988.986
T1=40.41
 OPT
f=39
TT=426.532
T1=21.68
 OPT
f=39
TT=908.694
T1=44.86
 OPT
f=39
TT=438.17
T1=42.77
 OPT
f=39
TT=932.458
T1=44.71
 OPT
f=39
TT=392.871
T1=6.53
 OPT
f=39
TT=915.05
T1=147.99
 SAT (TO)
f=39
TT=2400.05
T1=12.33
 SAT (TO)
f=39
TT=2400.06
T1=43.06
 SAT (TO)
f=39
TT=2400.07
T1=1892.93
 SAT (TO)
f=39
TT=2400.13
T1=24.32
 SAT (TO)
f=39
TT=2400.08
T1=128.1
 SAT (TO)
f=39
TT=2400.1
T1=129.77
 SAT (TO)
f=39
TT=2400.03
T1=129
 SAT (TO)
f=39
TT=2012.6
T1=342.42
 SAT (TO)
f=39
TT=2012.53
T1=122.8
 OPT
f=39
TT=31.41
T1=31.38
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
StillLife/
StillLife-m1-s1/
StillLife-08-09.xml 		OPT
f=40
TT=32.01
T1=31.99
 SAT (TO)
f=38
TT=2400.07
T1=2240.96
 OPT
f=40
TT=809.811
T1=802.75
 OPT
f=40
TT=1774.32
T1=1758.72
 OPT
f=40
TT=693.51
T1=686.64
 OPT
f=40
TT=1617.54
T1=1307.35
 OPT
f=40
TT=731.646
T1=724.09
 OPT
f=40
TT=1362.28
T1=1094.18
 OPT
f=40
TT=541.253
T1=115.94
 OPT
f=40
TT=1145.73
T1=295.04
 SAT (TO)
f=39
TT=2400.04
T1=48.56
 SAT (TO)
f=40
TT=2400.11
T1=658.25
 SAT (TO)
f=38
TT=2400.05
T1=1928.09
 SAT (TO)
f=40
TT=2400.12
T1=2280.74
 SAT (TO)
f=40
TT=2400.04
T1=165.88
 SAT (TO)
f=40
TT=2400.03
T1=165.59
 SAT (TO)
f=40
TT=2400.04
T1=190.19
 SAT (TO)
f=40
TT=2012.55
T1=1881.42
 SAT (TO)
f=39
TT=2012.62
T1=134.01
 OPT
f=40
TT=32.01
T1=31.99
StillLife/
StillLife-m1-s1/
StillLife-10-14.xml 		SAT TO
f=72
TT=1996.23
T1=1349.93
 SAT (TO)
f=42
TT=2400.04
T1=622.6
 SAT (TO)
f=70
TT=2400.49
T1=1389.36
 SAT (TO)
f=72
TT=18137.9
T1=4379.76
 SAT (TO)
f=70
TT=2400.47
T1=6.7
 SAT (TO)
f=72
TT=1996.23
T1=1349.93
 SAT (TO)
f=70
TT=2400.48
T1=6.66
 SAT (TO)
f=70
TT=1995.88
T1=10.26
 SAT (TO)
f=72
TT=2400.09
T1=2070.81
 SAT (TO)
f=70
TT=1995.63
T1=1622.23
 SAT (TO)
f=70
TT=2400.07
T1=1733.03
 SAT (TO)
f=68
TT=2400.05
T1=103.38
 SAT (TO)
f=71
TT=2400.13
T1=403.58
 SAT (TO)
f=71
TT=2400.06
T1=31.23
 SAT (TO)
f=66
TT=2400.08
T1=1483.14
 SAT (TO)
f=66
TT=2400.04
T1=1484.9
 SAT (TO)
f=66
TT=2400.03
T1=1476.47
 SAT (TO)
f=70
TT=2012.71
T1=1304.85
 SAT (TO)
f=71
TT=2012.38
T1=143.51
 ? (TO)

TT=2400.02
StillLife/
StillLife-wst-s1/
StillLife-wastage-10.xml 		OPT
f=54
TT=18.459
T1=18.38
 OPT
f=54
TT=230.12
T1=197.98
 OPT
f=54
TT=198.784
T1=166.54
 OPT
f=54
TT=611.401
T1=539.08
 OPT
f=54
TT=191.947
T1=164.16
 OPT
f=54
TT=108.736
T1=41
 OPT
f=54
TT=119.381
T1=87.63
 OPT
f=54
TT=411.258
T1=350.36
 OPT
f=54
TT=427.12
T1=167.56
 OPT
f=54
TT=275.493
T1=198.42
 OPT
f=54
TT=2058.91
T1=17.09
 SAT (TO)
f=52
TT=2400.09
T1=48.34
 SAT (TO)
f=54
TT=2400.12
T1=148.06
 OPT
f=54
TT=619.952
T1=494.35
 OPT
f=54
TT=418.143
T1=39.69
 OPT
f=54
TT=411.793
T1=39.17
 OPT
f=54
TT=419.582
T1=39.98
 OPT
f=54
TT=1690.33
T1=140.12
 SAT (TO)
f=54
TT=2012.08
T1=432.38
 OPT
f=54
TT=18.459
T1=18.38
Tal/
Tal-03_c18.xml 		OPT
f=96
TT=32.98
T1=8.94
 OPT
f=96
TT=32.98
T1=27.64
 OPT
f=96
TT=84.5
T1=69.41
 OPT
f=96
TT=157.032
T1=129.36
 OPT
f=96
TT=322.157
T1=51.87
 OPT
f=96
TT=378.408
T1=69.02
 OPT
f=96
TT=333.96
T1=220.26
 OPT
f=96
TT=343.411
T1=90.26
 OPT
f=96
TT=75.154
T1=8.94
 OPT
f=96
TT=357.275
T1=77.55
 OPT
f=96
TT=1710.83
T1=86.17
 OPT
f=96
TT=1864.62
T1=153.45
 OPT
f=96
TT=1071.29
T1=329
 OPT
f=96
TT=1104.58
T1=56.81
 OPT
f=96
TT=1327.75
T1=127.57
 OPT
f=96
TT=1319.04
T1=126.55
 OPT
f=96
TT=1312.54
T1=125.11
 OPT
f=96
TT=1703.07
T1=178.43
 OPT
f=96
TT=1333.11
T1=109.81
 OPT
f=96
TT=404.083
T1=404.02
Tal/
Tal-05_c18.xml 		OPT
f=16
TT=26.185
T1=5.61
 OPT
f=16
TT=26.185
T1=9.97
 OPT
f=16
TT=2301.85
T1=40.16
 OPT
f=16
TT=2133.78
T1=128.45
 OPT
f=16
TT=64.907
T1=16.21
 OPT
f=16
TT=425.969
T1=34.35
 OPT
f=16
TT=45.414
T1=15.69
 OPT
f=16
TT=421.489
T1=34.42
 OPT
f=16
TT=80.333
T1=5.61
 OPT
f=16
TT=293.921
T1=32.42
 OPT
f=16
TT=245.924
T1=20.87
 OPT
f=16
TT=681.904
T1=29.62
 OPT
f=16
TT=330.59
T1=27.19
 OPT
f=16
TT=280.18
T1=21.26
 ? (MO)

TT=542.531

 ? (MO)

TT=546.518

 ? (MO)

TT=546.836

 ? (TO)

TT=252.499

 ? (TO)

TT=252.593

 OPT
f=16
TT=590.743
T1=511.03
TemplateDesign/
TemplateDesign-m2-herbs_c18.xml 		OPT
f=2
TT=15.87
T1=15.58
 ? (exit code)

TT=3.499

 OPT
f=2
TT=2228.65
T1=2228.29
 OPT
f=2
TT=126.394
T1=126.2
 OPT
f=2
TT=192.133
T1=191.59
 SAT (TO)
f=13
TT=2004.27
T1=327.92
 SAT (TO)
f=11
TT=2400.52
T1=2373.5
 SAT (TO)
f=21
TT=2001.6
T1=504.52
 ? (TO)

TT=2400.1

 SAT (TO)
f=14
TT=2002.25
T1=1702.72
 ? (TO)

TT=2400.08

 OPT
f=2
TT=15.87
T1=15.58
 ? (TO)

TT=2400.14

 ? (TO)

TT=2400.04

 ? (MO)

TT=1277.08

 ? (MO)

TT=1269

 ? (MO)

TT=1452.32

 ? (TO)

TT=252.423

 ? (TO)

TT=252.455

 OPT
f=2
TT=406.633
T1=406.53
Tpp/Tpp-zinc-s1/
Tpp-3-5-30-1.xml 		OPT
f=171
TT=0.215
T1=0.1
 OPT
f=171
TT=5.828
T1=5.44
 OPT
f=171
TT=6.587
T1=5.89
 OPT
f=171
TT=9.156
T1=7.75
 OPT
f=171
TT=6.146
T1=5.64
 OPT
f=171
TT=9.716
T1=8.51
 Wrong UNSAT

TT=3.934

 Wrong UNSAT

TT=6.523

 OPT
f=171
TT=2.788
T1=2.61
 OPT
f=171
TT=8.983
T1=8.37
 Wrong Opt.
f=176
TT=8.896
T1=8.87
 OPT
f=171
TT=13.817
T1=12.34
 OPT
f=171
TT=10.634
T1=10.02
 OPT
f=171
TT=9.96
T1=9.17
 OPT
f=171
TT=0.217
T1=0.1
 OPT
f=171
TT=0.22
T1=0.1
 OPT
f=171
TT=0.215
T1=0.1
 OPT
f=171
TT=0.349
T1=0.1
 OPT
f=171
TT=0.345
T1=0.24
 OPT
f=171
TT=19.625
T1=19.58
Tpp/Tpp-zinc-s1/
Tpp-4-3-20-1.xml 		OPT
f=126
TT=0.112
T1=0.1
 OPT
f=126
TT=4.946
T1=4.76
 OPT
f=126
TT=4.092
T1=3.74
 OPT
f=126
TT=7.35
T1=6.91
 SAT (MO)
f=224
TT=3.22
T1=3.16
 OPT
f=126
TT=6.312
T1=6.03
 Wrong Opt.
f=175
TT=3.278
T1=3.17
 Wrong Opt.
f=175
TT=4.812
T1=4.65
 OPT
f=126
TT=2.054
T1=1.7
 OPT
f=126
TT=6.212
T1=5.93
 Wrong Opt.
f=152
TT=7.593
T1=6.91
 OPT
f=126
TT=9.93
T1=8.83
 OPT
f=126
TT=9.697
T1=9.51
 OPT
f=126
TT=8.733
T1=8.2
 OPT
f=126
TT=0.112
T1=0.1
 OPT
f=126
TT=0.112
T1=0.1
 OPT
f=126
TT=0.119
T1=0.1
 OPT
f=126
TT=0.167
T1=0.11
 OPT
f=126
TT=0.198
T1=0.1
 OPT
f=126
TT=12.633
T1=12.59
Tpp/Tpp-zinc-s1/
Tpp-4-5-20-1.xml 		OPT
f=115
TT=0.249
T1=0.21
 OPT
f=115
TT=5.971
T1=5.76
 OPT
f=115
TT=7.153
T1=5.63
 OPT
f=115
TT=10.75
T1=9.9
 OPT
f=115
TT=6.449
T1=5.62
 OPT
f=115
TT=10.632
T1=10.38
 Wrong Opt.
f=235
TT=6.05
T1=5.96
 Wrong Opt.
f=235
TT=8.653
T1=8.55
 OPT
f=115
TT=3.17
T1=1.73
 OPT
f=115
TT=9.261
T1=8.05
 Wrong Opt.
f=159
TT=10.696
T1=8.77
 OPT
f=115
TT=13.77
T1=11.61
 OPT
f=115
TT=11.067
T1=9.18
 OPT
f=115
TT=11.025
T1=10.3
 OPT
f=115
TT=0.25
T1=0.21
 OPT
f=115
TT=0.254
T1=0.21
 OPT
f=115
TT=0.249
T1=0.21
 OPT
f=115
TT=0.644
T1=0.48
 OPT
f=115
TT=0.656
T1=0.43
 OPT
f=115
TT=26.686
T1=26.59
Tpp/Tpp-zinc-s1/
Tpp-4-5-30-1.xml 		OPT
f=140
TT=0.315
T1=0.21
 OPT
f=140
TT=6.711
T1=6.46
 OPT
f=140
TT=9.588
T1=7.56
 OPT
f=140
TT=13.346
T1=11.89
 SAT (MO)
f=188
TT=6.837
T1=6.1
 OPT
f=140
TT=14.073
T1=12.01
 Wrong Opt.
f=256
TT=7.762
T1=7.44
 Wrong Opt.
f=256
TT=10.239
T1=10.11
 OPT
f=140
TT=3.898
T1=3.67
 OPT
f=140
TT=13.544
T1=11.53
 Wrong Opt.
f=180
TT=12.213
T1=11.02
 OPT
f=140
TT=17.766
T1=16.35
 OPT
f=140
TT=13.938
T1=12.81
 OPT
f=140
TT=11.059
T1=10.77
 OPT
f=140
TT=0.315
T1=0.21
 OPT
f=140
TT=0.319
T1=0.21
 OPT
f=140
TT=0.323
T1=0.21
 OPT
f=140
TT=1.292
T1=0.58
 OPT
f=140
TT=1.101
T1=0.59
 OPT
f=140
TT=24.669
T1=24.59
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
Tpp/Tpp-zinc-s1/
Tpp-5-3-20-1.xml 		OPT
f=141
TT=0.151
T1=0.1
 OPT
f=141
TT=4.848
T1=4.74
 OPT
f=141
TT=5.002
T1=4.29
 OPT
f=141
TT=7.136
T1=6.13
 OPT
f=141
TT=4.845
T1=4.4
 OPT
f=141
TT=7.242
T1=6.51
 Wrong UNSAT

TT=3.285

 Wrong UNSAT

TT=5.18

 OPT
f=141
TT=2.545
T1=2.32
 OPT
f=141
TT=7.382
T1=6.83
 Wrong Opt.
f=150
TT=8.554
T1=8.37
 OPT
f=141
TT=11.64
T1=10.82
 OPT
f=141
TT=10.35
T1=9.31
 OPT
f=141
TT=9.169
T1=8.46
 OPT
f=141
TT=0.151
T1=0.1
 OPT
f=141
TT=0.151
T1=0.1
 OPT
f=141
TT=0.154
T1=0.1
 OPT
f=141
TT=0.322
T1=0.1
 OPT
f=141
TT=0.334
T1=0.1
 OPT
f=141
TT=24.459
T1=24.38
Tpp/Tpp-zinc-s1/
Tpp-5-5-30-1.xml 		OPT
f=165
TT=0.692
T1=0.6
 OPT
f=165
TT=9.136
T1=9.03
 OPT
f=165
TT=15.19
T1=8.32
 OPT
f=165
TT=26.298
T1=14.48
 OPT
f=165
TT=13.245
T1=7.53
 OPT
f=165
TT=22.387
T1=14.33
 Wrong UNSAT

TT=5.062

 Wrong UNSAT

TT=8.43

 OPT
f=165
TT=4.915
T1=4.38
 OPT
f=165
TT=19.66
T1=13.61
 Wrong Opt.
f=189
TT=18.447
T1=10.53
 OPT
f=165
TT=28.956
T1=17.3
 OPT
f=165
TT=19.026
T1=14.85
 OPT
f=165
TT=16.596
T1=14.07
 OPT
f=165
TT=0.692
T1=0.6
 OPT
f=165
TT=0.695
T1=0.6
 OPT
f=165
TT=0.7
T1=0.6
 OPT
f=165
TT=4.643
T1=2.38
 OPT
f=165
TT=4.652
T1=2.4
 OPT
f=165
TT=29.824
T1=29.78
Tpp/Tpp-zinc-s1/
Tpp-6-3-20-1.xml 		OPT
f=131
TT=0.189
T1=0.1
 OPT
f=131
TT=5.214
T1=5.06
 OPT
f=131
TT=5.936
T1=4.71
 Wrong Opt.
f=166
TT=7.258
T1=7.16
 OPT
f=131
TT=5.366
T1=4.38
 OPT
f=131
TT=9.53
T1=8.83
 Wrong Opt.
f=223
TT=4.642
T1=4.38
 Wrong Opt.
f=223
TT=6.647
T1=6.03
 OPT
f=131
TT=2.77
T1=2.63
 OPT
f=131
TT=7.934
T1=7.06
 Wrong Opt.
f=180
TT=9.124
T1=7.28
 OPT
f=131
TT=13.256
T1=11.85
 OPT
f=131
TT=10.113
T1=8.9
 OPT
f=131
TT=9.802
T1=8.2
 OPT
f=131
TT=0.189
T1=0.1
 OPT
f=131
TT=0.191
T1=0.1
 OPT
f=131
TT=0.191
T1=0.1
 OPT
f=131
TT=0.529
T1=0.1
 OPT
f=131
TT=0.478
T1=0.1
 OPT
f=131
TT=23.293
T1=23.19
Tpp/Tpp-zinc-s1/
Tpp-6-3-30-1.xml 		OPT
f=164
TT=0.326
T1=0.21
 OPT
f=164
TT=7.254
T1=7
 SAT (MO)
f=308
TT=5.205
T1=5.11
 OPT
f=164
TT=11.475
T1=9.44
 OPT
f=164
TT=8.971
T1=7.55
 OPT
f=164
TT=10.334
T1=9.2
 Wrong Opt.
f=240
TT=6.157
T1=6.02
 Wrong Opt.
f=240
TT=7.672
T1=7.28
 OPT
f=164
TT=3.455
T1=3.03
 OPT
f=164
TT=10.684
T1=9.39
 Wrong Opt.
f=204
TT=10.349
T1=9.73
 OPT
f=164
TT=15.639
T1=14.95
 OPT
f=164
TT=11.885
T1=11.16
 OPT
f=164
TT=12.027
T1=11.41
 OPT
f=164
TT=0.326
T1=0.21
 OPT
f=164
TT=0.331
T1=0.21
 OPT
f=164
TT=0.329
T1=0.3
 OPT
f=164
TT=1.033
T1=0.79
 OPT
f=164
TT=0.923
T1=0.8
 OPT
f=164
TT=15.236
T1=15.19
Tpp/Tpp-zinc-s1/
Tpp-6-5-20-1.xml 		OPT
f=102
TT=0.555
T1=0.41
 OPT
f=102
TT=7.294
T1=7.22
 OPT
f=102
TT=9.409
T1=7.19
 OPT
f=102
TT=16.765
T1=12.01
 OPT
f=102
TT=8.914
T1=6.79
 OPT
f=102
TT=14.834
T1=11.71
 Wrong Opt.
f=293
TT=8.909
T1=8.91
 Wrong Opt.
f=293
TT=11.666
T1=10.67
 OPT
f=102
TT=3.541
T1=2.89
 OPT
f=102
TT=14.249
T1=12.51
 Wrong Opt.
f=175
TT=22.18
T1=15.99
 OPT
f=102
TT=18.64
T1=16.44
 OPT
f=102
TT=14.036
T1=12.66
 OPT
f=102
TT=12.798
T1=10.43
 OPT
f=102
TT=0.555
T1=0.41
 OPT
f=102
TT=0.557
T1=0.41
 OPT
f=102
TT=0.56
T1=0.41
 OPT
f=102
TT=4.649
T1=3.58
 OPT
f=102
TT=4.582
T1=3.6
 OPT
f=102
TT=19.277
T1=19.18
Tpp/Tpp-zinc-s1/
Tpp-6-5-30-1.xml 		OPT
f=132
TT=1.769
T1=1.59
 OPT
f=132
TT=9.313
T1=9.24
 SAT (MO)
f=132
TT=14.418
T1=12.62
 OPT
f=132
TT=35.245
T1=23.78
 SAT (MO)
f=248
TT=7.615
T1=7.17
 OPT
f=132
TT=23.559
T1=17.12
 Wrong Opt.
f=308
TT=11.306
T1=10.4
 Wrong Opt.
f=308
TT=15.591
T1=13.65
 OPT
f=132
TT=5.209
T1=3.49
 OPT
f=132
TT=24.439
T1=18.56
 Wrong Opt.
f=190
TT=32.123
T1=26.04
 OPT
f=132
TT=36.89
T1=27.48
 OPT
f=132
TT=21.658
T1=17.56
 OPT
f=132
TT=17.6
T1=15.18
 OPT
f=132
TT=1.769
T1=1.59
 OPT
f=132
TT=1.786
T1=1.59
 OPT
f=132
TT=1.774
T1=1.59
 OPT
f=132
TT=10.88
T1=9.83
 OPT
f=132
TT=16.162
T1=14.58
 OPT
f=132
TT=46.731
T1=46.69
Tpp/Tpp-zinc-s1/
Tpp-7-3-20-1.xml 		OPT
f=125
TT=0.251
T1=0.21
 OPT
f=125
TT=4.979
T1=4.76
 OPT
f=125
TT=9.664
T1=6.02
 OPT
f=125
TT=10.313
T1=8.6
 OPT
f=125
TT=8.439
T1=6.38
 OPT
f=125
TT=10.065
T1=8.89
 Wrong UNSAT

TT=4.279

 Wrong UNSAT

TT=6.931

 OPT
f=125
TT=3.528
T1=2.95
 OPT
f=125
TT=10.209
T1=8.64
 Wrong Opt.
f=175
TT=10.502
T1=9.84
 OPT
f=125
TT=12.77
T1=10.69
 OPT
f=125
TT=11.368
T1=10.89
 OPT
f=125
TT=9.93
T1=8.48
 OPT
f=125
TT=0.251
T1=0.21
 OPT
f=125
TT=0.254
T1=0.21
 OPT
f=125
TT=0.262
T1=0.21
 OPT
f=125
TT=1.263
T1=0.39
 OPT
f=125
TT=0.757
T1=0.41
 OPT
f=125
TT=20.609
T1=20.58
Tpp/Tpp-zinc-s1/
Tpp-7-3-30-1.xml 		OPT
f=147
TT=0.359
T1=0.31
 OPT
f=147
TT=6.501
T1=6.37
 OPT
f=147
TT=9.915
T1=7.41
 OPT
f=147
TT=12.215
T1=11.72
 OPT
f=147
TT=9.668
T1=8.24
 OPT
f=147
TT=14.678
T1=12.77
 Wrong UNSAT

TT=4.942

 Wrong UNSAT

TT=8.693

 OPT
f=147
TT=3.896
T1=3.29
 OPT
f=147
TT=13.354
T1=11.21
 Wrong Opt.
f=199
TT=11.513
T1=11.4
 OPT
f=147
TT=16.277
T1=14.47
 OPT
f=147
TT=11.388
T1=9.77
 OPT
f=147
TT=11.829
T1=9.71
 OPT
f=147
TT=0.359
T1=0.31
 OPT
f=147
TT=0.361
T1=0.31
 OPT
f=147
TT=0.364
T1=0.31
 OPT
f=147
TT=0.98
T1=0.49
 OPT
f=147
TT=1.231
T1=0.46
 OPT
f=147
TT=27.227
T1=27.19
Tpp/Tpp-zinc-s1/
Tpp-7-5-20-1.xml 		OPT
f=105
TT=1.038
T1=0.89
 OPT
f=105
TT=8.981
T1=8.86
 OPT
f=105
TT=14.837
T1=7.72
 Wrong Opt.
f=185
TT=15.33
T1=14.57
 OPT
f=105
TT=12.343
T1=8.43
 OPT
f=105
TT=24.164
T1=20.9
 Wrong UNSAT

TT=5.319

 Wrong UNSAT

TT=12.296

 OPT
f=105
TT=4.196
T1=3.75
 OPT
f=105
TT=20.375
T1=18.59
 Wrong Opt.
f=190
TT=60.822
T1=51.9
 OPT
f=105
TT=28.531
T1=27.38
 OPT
f=105
TT=15.255
T1=12.8
 OPT
f=105
TT=15.824
T1=14.82
 OPT
f=105
TT=1.038
T1=0.89
 OPT
f=105
TT=1.049
T1=0.89
 OPT
f=105
TT=1.041
T1=0.89
 OPT
f=105
TT=11.729
T1=9.63
 OPT
f=105
TT=7.858
T1=6.48
 OPT
f=105
TT=53.46
T1=53.39
Tpp/Tpp-zinc-s1/
Tpp-7-5-30-1.xml 		OPT
f=124
TT=2.069
T1=1.79
 OPT
f=124
TT=8.578
T1=8.48
 OPT
f=124
TT=20.613
T1=12.41
 OPT
f=124
TT=42.256
T1=23.09
 OPT
f=124
TT=15.106
T1=10.71
 OPT
f=124
TT=28.483
T1=22.92
 Wrong UNSAT

TT=6.906

 Wrong UNSAT

TT=19.523

 OPT
f=124
TT=5.446
T1=4.17
 OPT
f=124
TT=30.693
T1=26.14
 Wrong Opt.
f=205
TT=57.808
T1=29.27
 OPT
f=124
TT=24.922
T1=18.2
 OPT
f=124
TT=20.578
T1=17.15
 OPT
f=124
TT=18.267
T1=15.38
 OPT
f=124
TT=2.069
T1=1.79
 OPT
f=124
TT=2.081
T1=1.89
 OPT
f=124
TT=2.071
T1=1.79
 OPT
f=124
TT=14.04
T1=13.27
 OPT
f=124
TT=15.687
T1=14.77
 OPT
f=124
TT=47.243
T1=47.18
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
TravellingSalesman/
TravellingSalesman-m1-n100/
TravellingSalesman-100-50-02.xml 		SAT TO
f=421
TT=2011.35
T1=366.44
 SAT (TO)
f=533
TT=2400.05
T1=5.27
 SAT (TO)
f=558
TT=2400.67
T1=686.9
 SAT (TO)
f=450
TT=17589.3
T1=417.23
 SAT (TO)
f=476
TT=2400.37
T1=2045.36
 SAT (TO)
f=467
TT=1999.48
T1=15.86
 SAT (TO)
f=476
TT=2400.47
T1=2111.99
 SAT (TO)
f=467
TT=1999.16
T1=20.91
 SAT (TO)
f=469
TT=2400.08
T1=828.12
 SAT (TO)
f=459
TT=1998.86
T1=16.54
 SAT (TO)
f=787
TT=2400.07
T1=1746.88
 SAT (TO)
f=725
TT=2400.13
T1=1485.01
 SAT (TO)
f=864
TT=2400.08
T1=2396.49
 SAT (TO)
f=781
TT=2400.06
T1=50.76
 SAT (TO)
f=967
TT=2400.05
T1=1471.81
 SAT (TO)
f=967
TT=2400.07
T1=1479.05
 SAT (TO)
f=967
TT=2400.05
T1=1475.96
 SAT (TO)
f=421
TT=2011.35
T1=366.44
 SAT (TO)
f=421
TT=2011.56
T1=376.02
 ? (TO)

TT=2400.08
TravellingSalesman/
TravellingSalesman-m1-n100/
TravellingSalesman-100-50-08.xml 		SAT TO
f=443
TT=2011.47
T1=35.9
 SAT (TO)
f=494
TT=2400.07
T1=4.71
 SAT (TO)
f=663
TT=2400.39
T1=24.41
 SAT (TO)
f=462
TT=20069.9
T1=13938.3
 SAT (TO)
f=554
TT=2400.71
T1=1857.59
 SAT (TO)
f=500
TT=1998.03
T1=18.07
 SAT (TO)
f=554
TT=2400.51
T1=1720.63
 SAT (TO)
f=500
TT=1998.51
T1=21.08
 SAT (TO)
f=505
TT=2400.05
T1=1610.14
 SAT (TO)
f=500
TT=2000.33
T1=17.62
 SAT (TO)
f=836
TT=2400.12
T1=962.78
 SAT (TO)
f=782
TT=2400.1
T1=170.36
 SAT (TO)
f=827
TT=2400.1
T1=102.3
 SAT (TO)
f=864
TT=2400.04
T1=37.64
 SAT (TO)
f=816
TT=2400.03
T1=1891.45
 SAT (TO)
f=816
TT=2400.01
T1=1885.35
 SAT (TO)
f=816
TT=2400.11
T1=1894.63
 SAT (TO)
f=443
TT=2011.47
T1=35.9
 SAT (TO)
f=443
TT=2011.25
T1=35.91
 ? (TO)

TT=2400.05
TravellingSalesman/
TravellingSalesman-m1-n150/
TravellingSalesman-150-50-13.xml 		SAT TO
f=549
TT=2009.97
T1=283.79
 SAT (TO)
f=821
TT=2400.07
T1=54.93
 SAT (TO)
f=1997
TT=2400.43
T1=2106.64
 SAT (TO)
f=564
TT=19997.7
T1=150.18
 SAT (TO)
f=1244
TT=2400.63
T1=2265.48
 SAT (TO)
f=1516
TT=1846.38
T1=1841.02
 SAT (TO)
f=1244
TT=2400.73
T1=2272.25
 SAT (TO)
f=1294
TT=1794.7
T1=1691.98
 SAT (TO)
f=999
TT=2400.08
T1=2279.67
 SAT (TO)
f=1362
TT=1829.29
T1=1828.09
 SAT (TO)
f=1174
TT=2400.08
T1=651.31
 SAT (TO)
f=1272
TT=2400.05
T1=571.79
 SAT (TO)
f=956
TT=2400.07
T1=2381.43
 SAT (TO)
f=1100
TT=2400.08
T1=107.44
 SAT (TO)
f=1300
TT=2400.05
T1=2385.85
 SAT (TO)
f=1300
TT=2400.05
T1=2377.24
 SAT (TO)
f=1300
TT=2400.06
T1=2376.56
 SAT (TO)
f=549
TT=2009.97
T1=283.79
 SAT (TO)
f=549
TT=2010.03
T1=279.79
 ? (TO)

TT=2400.06
TravellingSalesman/
TravellingSalesman-m1-n15/
TravellingSalesman-15-30-00.xml 		OPT
f=93
TT=108.124
T1=10.03
 OPT
f=93
TT=167.055
T1=10.03
 OPT
f=93
TT=1731.35
T1=24.18
 OPT
f=93
TT=3458.69
T1=19.16
 OPT
f=93
TT=1233.98
T1=20.68
 SAT (TO)
f=93
TT=1998.92
T1=55.67
 OPT
f=93
TT=1297.36
T1=27.11
 SAT (TO)
f=93
TT=1998.04
T1=18.74
 SAT (TO)
f=93
TT=2400.07
T1=1.03
 SAT (TO)
f=93
TT=1998.95
T1=14.25
 OPT
f=93
TT=1501.71
T1=11.84
 SAT (TO)
f=93
TT=2400.14
T1=13.07
 OPT
f=93
TT=2001.22
T1=10.87
 SAT (TO)
f=93
TT=2400.11
T1=10.37
 SAT (TO)
f=93
TT=2400.01
T1=91.68
 SAT (TO)
f=93
TT=2400.02
T1=91.19
 SAT (TO)
f=93
TT=2400.04
T1=104.89
 SAT (TO)
f=93
TT=2012.68
T1=101.32
 SAT (TO)
f=93
TT=2012.97
T1=33.43
 OPT
f=93
TT=108.124
T1=108.09
TravellingSalesman/
TravellingSalesman-m1-n15/
TravellingSalesman-15-30-04.xml 		OPT
f=116
TT=84.93
T1=8.32
 OPT
f=116
TT=137.082
T1=19.74
 OPT
f=116
TT=1498.87
T1=53.73
 OPT
f=116
TT=3213.68
T1=2.63
 OPT
f=116
TT=1215.73
T1=8.32
 SAT (TO)
f=116
TT=2006.42
T1=2.6
 OPT
f=116
TT=1239.7
T1=31.83
 SAT (TO)
f=116
TT=1999.61
T1=2.53
 SAT (TO)
f=116
TT=2400.19
T1=2.87
 SAT (TO)
f=116
TT=1999.93
T1=2.77
 OPT
f=116
TT=1429.84
T1=16.14
 SAT (TO)
f=116
TT=2400.08
T1=15.46
 SAT (TO)
f=116
TT=2400.08
T1=16.45
 OPT
f=116
TT=2010.3
T1=9.39
 SAT (TO)
f=116
TT=2400.09
T1=56.99
 SAT (TO)
f=116
TT=2400.04
T1=56.68
 SAT (TO)
f=116
TT=2400.05
T1=56.79
 SAT (TO)
f=116
TT=2012.78
T1=175.67
 SAT (TO)
f=116
TT=2012.75
T1=78.15
 OPT
f=116
TT=84.93
T1=84.89
TravellingSalesman/
TravellingSalesman-m1-n15/
TravellingSalesman-15-30-10.xml 		OPT
f=104
TT=38.582
T1=4.69
 OPT
f=104
TT=38.582
T1=8.24
 OPT
f=104
TT=819.861
T1=10.42
 OPT
f=104
TT=1718.66
T1=18.09
 OPT
f=104
TT=668.691
T1=4.69
 OPT
f=104
TT=1341.64
T1=8.1
 OPT
f=104
TT=665.771
T1=4.32
 OPT
f=104
TT=1254.62
T1=7.39
 SAT (TO)
f=104
TT=2400.08
T1=1.61
 OPT
f=104
TT=1218.14
T1=11.16
 OPT
f=104
TT=1801.23
T1=11.18
 SAT (TO)
f=104
TT=2400.1
T1=11.49
 OPT
f=104
TT=1499.13
T1=9.19
 OPT
f=104
TT=1688.85
T1=10.62
 SAT (TO)
f=104
TT=2400.03
T1=12.59
 SAT (TO)
f=104
TT=2400.04
T1=12.49
 SAT (TO)
f=104
TT=2400.02
T1=12.58
 SAT (TO)
f=104
TT=2012.68
T1=239.54
 SAT (TO)
f=104
TT=2012.8
T1=102.11
 OPT
f=104
TT=105.868
T1=105.78
TravellingSalesman/
TravellingSalesman-m1-n15/
TravellingSalesman-15-30-11.xml 		OPT
f=76
TT=49.425
T1=2.89
 OPT
f=76
TT=49.425
T1=9.88
 OPT
f=76
TT=754.565
T1=2.89
 OPT
f=76
TT=1511.93
T1=2.66
 OPT
f=76
TT=565.111
T1=3.5
 OPT
f=76
TT=1213.69
T1=3.42
 OPT
f=76
TT=566.814
T1=4.32
 OPT
f=76
TT=1147.28
T1=2.7
 OPT
f=76
TT=1763.32
T1=4.56
 OPT
f=76
TT=1157.27
T1=3.37
 OPT
f=76
TT=783.317
T1=10.19
 OPT
f=76
TT=1663.24
T1=8.88
 OPT
f=76
TT=1114.72
T1=10.75
 OPT
f=76
TT=980.331
T1=10.46
 OPT
f=76
TT=1279.78
T1=26.1
 OPT
f=76
TT=1274.73
T1=25.89
 OPT
f=76
TT=1274.95
T1=26
 SAT (TO)
f=76
TT=2012.77
T1=2.44
 SAT (TO)
f=76
TT=2013.08
T1=2.42
 OPT
f=76
TT=96.492
T1=96.39
TravellingSalesman/
TravellingSalesman-m1-n15/
TravellingSalesman-15-30-12.xml 		OPT
f=105
TT=42.864
T1=4.72
 OPT
f=105
TT=154.135
T1=5.32
 OPT
f=105
TT=1815.22
T1=46.88
 OPT
f=105
TT=3584
T1=2.77
 OPT
f=105
TT=1329.31
T1=4.72
 SAT (TO)
f=105
TT=1998.76
T1=3.44
 OPT
f=105
TT=1345.21
T1=5.38
 SAT (TO)
f=105
TT=1998.18
T1=2.71
 SAT (TO)
f=105
TT=2400.07
T1=1.6
 SAT (TO)
f=105
TT=1998.12
T1=2.81
 OPT
f=105
TT=1782.33
T1=13.84
 SAT (TO)
f=105
TT=2400.07
T1=15
 OPT
f=105
TT=1931.02
T1=11.09
 OPT
f=105
TT=2253.8
T1=10.61
 SAT (TO)
f=105
TT=2400.05
T1=35.19
 SAT (TO)
f=105
TT=2400.02
T1=35
 SAT (TO)
f=105
TT=2400.04
T1=35.19
 SAT (TO)
f=105
TT=2012.73
T1=1.65
 SAT (TO)
f=105
TT=2013.08
T1=1.66
 OPT
f=105
TT=42.864
T1=42.8
TravellingSalesman/
TravellingSalesman-m1-n15/
TravellingSalesman-15-30-14.xml 		OPT
f=91
TT=53.995
T1=5.09
 OPT
f=91
TT=58.629
T1=5.09
 SAT (TO)
f=91
TT=2400.6
T1=25.56
 OPT
f=91
TT=4682.74
T1=8.98
 OPT
f=91
TT=1803.44
T1=6.43
 SAT (TO)
f=91
TT=1994.94
T1=8.96
 OPT
f=91
TT=1756.54
T1=6.11
 SAT (TO)
f=91
TT=1997.04
T1=20.82
 SAT (TO)
f=91
TT=2400.11
T1=1
 SAT (TO)
f=91
TT=1997.48
T1=14.28
 OPT
f=91
TT=1812.74
T1=11.66
 SAT (TO)
f=91
TT=2400.12
T1=10.89
 SAT (TO)
f=91
TT=2400.14
T1=12.18
 SAT (TO)
f=91
TT=2400.1
T1=20.48
 SAT (TO)
f=91
TT=2400.06
T1=19.39
 SAT (TO)
f=91
TT=2400.05
T1=19.39
 SAT (TO)
f=91
TT=2400.03
T1=19.48
 SAT (TO)
f=91
TT=2013.12
T1=0
 SAT (TO)
f=91
TT=2012.65
T1=0
 OPT
f=91
TT=53.995
T1=53.89
TravellingSalesman/
TravellingSalesman-m1-n15/
TravellingSalesman-15-30-17.xml 		OPT
f=85
TT=113.298
T1=1.46
 OPT
f=85
TT=126.07
T1=16.74
 OPT
f=85
TT=1008.55
T1=48.51
 OPT
f=85
TT=1942.07
T1=1.98
 OPT
f=85
TT=691.074
T1=9.58
 OPT
f=85
TT=1465.76
T1=1.52
 OPT
f=85
TT=765.752
T1=4.37
 OPT
f=85
TT=1486.8
T1=1.56
 OPT
f=85
TT=1906.1
T1=1.96
 OPT
f=85
TT=1582.61
T1=1.46
 OPT
f=85
TT=901.281
T1=9.73
 OPT
f=85
TT=2149.62
T1=9.37
 OPT
f=85
TT=1090.34
T1=8.87
 OPT
f=85
TT=1218.71
T1=12.01
 OPT
f=85
TT=1969.29
T1=67.18
 OPT
f=85
TT=1934.01
T1=65.88
 OPT
f=85
TT=1950.41
T1=66.58
 SAT (TO)
f=85
TT=2012.93
T1=3.24
 SAT (TO)
f=85
TT=2012.56
T1=3.24
 OPT
f=85
TT=113.298
T1=113.28
Bench nameBest resultsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
TravellingSalesman/
TravellingSalesman-m1-n25/
TravellingSalesman-25-30-03.xml 		OPT
f=130
TT=1888.66
T1=585.9
 SAT (TO)
f=134
TT=2400.09
T1=221.01
 SAT (TO)
f=160
TT=2400.43
T1=2240.99
 SAT (TO)
f=130
TT=18673.1
T1=7789.53
 SAT (TO)
f=130
TT=2400.44
T1=12.56
 SAT (TO)
f=140
TT=2001.62
T1=1.96
 SAT (TO)
f=130
TT=2400.49
T1=14.72
 SAT (TO)
f=140
TT=2001.65
T1=1.95
 SAT (TO)
f=130
TT=2400.05
T1=14.92
 SAT (TO)
f=140
TT=1999.96
T1=1.98
 SAT (TO)
f=130
TT=2400.13
T1=1332.13
 SAT (TO)
f=131
TT=2400.05
T1=1122.01
 SAT (TO)
f=130
TT=2400.08
T1=50.79
 SAT (TO)
f=130
TT=2400.06
T1=1258.86
 SAT (TO)
f=206
TT=2400.01
T1=1998.14
 SAT (TO)
f=206
TT=2400.05
T1=1974.68
 SAT (TO)
f=206
TT=2400.07
T1=1980.96
 SAT (TO)
f=131
TT=2012.76
T1=11.05
 SAT (TO)
f=131
TT=2012.9
T1=47.01
 OPT
f=130
TT=1888.66
T1=585.9
TravellingSalesman/
TravellingSalesman-m1-n30/
TravellingSalesman-30-30-00.xml 		SAT TO
f=126
TT=2400.1
T1=34.98
 SAT (TO)
f=140
TT=2400.09
T1=818.5
 SAT (TO)
f=126
TT=2400.42
T1=772.43
 SAT (TO)
f=129
TT=20051.5
T1=25.32
 SAT (TO)
f=126
TT=2400.46
T1=34.98
 SAT (TO)
f=132
TT=2002.15
T1=2.55
 SAT (TO)
f=126
TT=2400.51
T1=33.41
 SAT (TO)
f=132
TT=2001.24
T1=2.36
 SAT (TO)
f=126
TT=2400.1
T1=721.68
 SAT (TO)
f=132
TT=2001.87
T1=2.54
 SAT (TO)
f=129
TT=2400.1
T1=155.73
 SAT (TO)
f=150
TT=2400.06
T1=2336.45
 SAT (TO)
f=134
TT=2400.06
T1=1173.64
 SAT (TO)
f=134
TT=2400.05
T1=1791.26
 SAT (TO)
f=202
TT=2400.07
T1=2271.84
 SAT (TO)
f=202
TT=2400.06
T1=2242.44
 SAT (TO)
f=202
TT=2400.06
T1=2265.55
 SAT (TO)
f=129
TT=2012.6
T1=40.65
 SAT (TO)
f=129
TT=2012.69
T1=42.18
 ? (TO)

TT=2400.02
TravellingSalesman/
TravellingSalesman-m1-n30/
TravellingSalesman-30-30-11.xml 		SAT TO
f=119
TT=2400.04
T1=74.66
 SAT (TO)
f=157
TT=2400.06
T1=1907.57
 SAT (TO)
f=139
TT=2400.56
T1=149.89
 SAT (TO)
f=120
TT=17652.5
T1=287.51
 SAT (TO)
f=119
TT=2400.76
T1=88.83
 SAT (TO)
f=142
TT=2001.98
T1=3.14
 SAT (TO)
f=119
TT=2400.71
T1=91.59
 SAT (TO)
f=142
TT=2003.97
T1=3.21
 SAT (TO)
f=119
TT=2400.04
T1=74.66
 SAT (TO)
f=142
TT=2003.83
T1=2.61
 SAT (TO)
f=123
TT=2400.12
T1=691.29
 SAT (TO)
f=127
TT=2400.12
T1=1697.73
 SAT (TO)
f=122
TT=2400.12
T1=1049.43
 SAT (TO)
f=124
TT=2400.06
T1=2249.15
 SAT (TO)
f=221
TT=2400.01
T1=684.13
 SAT (TO)
f=221
TT=2400.09
T1=680.44
 SAT (TO)
f=221
TT=2400.05
T1=683.37
 SAT (TO)
f=121
TT=2012.7
T1=97.28
 SAT (TO)
f=121
TT=2012.69
T1=94.9
 ? (TO)

TT=2400.02
TravellingSalesman/
TravellingSalesman-m1-n30/
TravellingSalesman-30-30-19.xml 		SAT TO
f=126
TT=2400.08
T1=298.62
 SAT (TO)
f=142
TT=2400.1
T1=1272.13
 SAT (TO)
f=148
TT=2400.56
T1=349.73
 SAT (TO)
f=139
TT=20055.2
T1=83.67
 SAT (TO)
f=143
TT=2400.69
T1=15.07
 SAT (TO)
f=142
TT=2002.77
T1=1254.16
 SAT (TO)
f=143
TT=2400.35
T1=15.85
 SAT (TO)
f=142
TT=2003.16
T1=1731.14
 SAT (TO)
f=140
TT=2400.08
T1=251.54
 SAT (TO)
f=141
TT=2006.12
T1=1577.35
 SAT (TO)
f=151
TT=2400.12
T1=59.23
 SAT (TO)
f=138
TT=2400.05
T1=151.64
 SAT (TO)
f=126
TT=2400.08
T1=298.62
 SAT (TO)
f=136
TT=2400.09
T1=251.97
 SAT (TO)
f=231
TT=2400.06
T1=2373.84
 SAT (TO)
f=231
TT=2400.04
T1=2357.92
 SAT (TO)
f=234
TT=2400.04
T1=2014.41
 SAT (TO)
f=144
TT=2012.73
T1=1634.78
 SAT (TO)
f=144
TT=2012.82
T1=1729.85
 ? (TO)

TT=2400.03
TravellingSalesman/
TravellingSalesman-m1-n35/
TravellingSalesman-35-30-07.xml 		SAT TO
f=143
TT=2400.49
T1=1622.86
 SAT (TO)
f=167
TT=2400.12
T1=2375.1
 SAT (TO)
f=182
TT=2400.31
T1=186.21
 SAT (TO)
f=150
TT=16759.8
T1=16195.7
 SAT (TO)
f=143
TT=2400.49
T1=1622.86
 SAT (TO)
f=184
TT=2002.9
T1=5.53
 SAT (TO)
f=143
TT=2400.27
T1=1658.59
 SAT (TO)
f=156
TT=2005.13
T1=1835.95
 SAT (TO)
f=168
TT=2400.04
T1=225.56
 SAT (TO)
f=158
TT=2003.89
T1=7.61
 SAT (TO)
f=158
TT=2400.04
T1=563.96
 SAT (TO)
f=144
TT=2400.11
T1=2390.49
 SAT (TO)
f=174
TT=2400.08
T1=1336.62
 SAT (TO)
f=174
TT=2400.11
T1=621.78
 SAT (TO)
f=276
TT=2400.04
T1=0
 SAT (TO)
f=276
TT=2400.02
T1=0
 SAT (TO)
f=276
TT=2400.05
T1=0
 SAT (TO)
f=155
TT=2012.62
T1=1830.32
 SAT (TO)
f=155
TT=2012.95
T1=1771.56
 ? (TO)

TT=2400.03
Vrp/Vrp-zinc-s1/
Vrp-A-n38-k5.xml 		SAT TO
f=770
TT=2400.11
T1=1805.81
 SAT (TO)
f=1548
TT=2400.12
T1=860.53
 SAT (TO)
f=1826
TT=2400.64
T1=2102.36
 SAT (TO)
f=1581
TT=16946
T1=10639.5
 SAT (TO)
f=845
TT=2400.34
T1=1398.1
 SAT (TO)
f=906
TT=2002
T1=1656.71
 SAT (TO)
f=845
TT=2400.64
T1=1383.48
 SAT (TO)
f=884
TT=2001.23
T1=1999.86
 SAT (TO)
f=770
TT=2400.11
T1=1805.81
 SAT (TO)
f=932
TT=2000.51
T1=1668.78
 SAT (TO)
f=1470
TT=2400.12
T1=182.03
 SAT (TO)
f=1467
TT=2400.11
T1=1119.67
 SAT (TO)
f=1500
TT=2400.11
T1=925.12
 SAT (TO)
f=1535
TT=2400.19
T1=701.92
 SAT (TO)
f=1967
TT=2400.04
T1=7.19
 SAT (TO)
f=1967
TT=2400.09
T1=1.48
 SAT (TO)
f=1967
TT=2400.01
T1=7.29
 SAT (TO)
f=1508
TT=2010.93
T1=1533.93
 SAT (TO)
f=1516
TT=2010.7
T1=736
 ? (TO)

TT=2400.05
Vrp/Vrp-zinc-s1/
Vrp-P-n16-k8.xml 		OPT
f=450
TT=138.159
T1=3.87
 OPT
f=450
TT=301.636
T1=14.63
 OPT
f=450
TT=417.83
T1=62.4
 OPT
f=450
TT=795.218
T1=214.98
 OPT
f=450
TT=428.218
T1=5.08
 OPT
f=450
TT=847.188
T1=9.6
 OPT
f=450
TT=389.668
T1=4.62
 OPT
f=450
TT=835.035
T1=5.67
 OPT
f=450
TT=138.159
T1=3.87
 OPT
f=450
TT=788.315
T1=7.16
 OPT
f=450
TT=2210.61
T1=12.82
 SAT (TO)
f=450
TT=2400.12
T1=2052.33
 OPT
f=450
TT=2046.08
T1=18.41
 SAT (TO)
f=450
TT=2400.16
T1=11.7
 SAT (TO)
f=450
TT=2400.02
T1=129
 SAT (TO)
f=450
TT=2400.07
T1=129.6
 SAT (TO)
f=450
TT=2400.05
T1=129.59
 SAT (TO)
f=450
TT=2012.45
T1=224.12
 SAT (TO)
f=450
TT=2012.52
T1=11.66
 OPT
f=450
TT=201.16
T1=159.8
Vrp/Vrp-zinc-s1/
Vrp-P-n40-k5.xml 		SAT TO
f=514
TT=2400.04
T1=731.86
 SAT (TO)
f=1013
TT=2400.03
T1=604.86
 SAT (TO)
f=1062
TT=2400.56
T1=415.56
 SAT (TO)
f=1106
TT=16485.6
T1=14508.6
 SAT (TO)
f=519
TT=2400.44
T1=1529.88
 SAT (TO)
f=525
TT=1997.74
T1=1463.43
 SAT (TO)
f=519
TT=2400.35
T1=1504.16
 SAT (TO)
f=563
TT=1997.93
T1=1782.49
 SAT (TO)
f=514
TT=2400.04
T1=731.86
 SAT (TO)
f=555
TT=2002.3
T1=1892.27
 SAT (TO)
f=1041
TT=2400.11
T1=668.41
 SAT (TO)
f=987
TT=2400.14
T1=600.74
 SAT (TO)
f=985
TT=2400.07
T1=2080.46
 SAT (TO)
f=917
TT=2400.16
T1=119.87
 SAT (TO)
f=1209
TT=2400.01
T1=12.28
 SAT (TO)
f=1209
TT=2400.01
T1=12.39
 SAT (TO)
f=1209
TT=2400.04
T1=12.49
 SAT (TO)
f=985
TT=2008.66
T1=1959.8
 SAT (TO)
f=1022
TT=2010.35
T1=687.9
 ? (TO)

TT=2400.05
Warehouse/
Warehouse-m1-s1/
Warehouse-cap081.xml 		OPT
f=804126
TT=93.952
T1=4.47
 SAT (TO)
f=819089
TT=2400.08
T1=2389.56
 OPT
f=804126
TT=2238.43
T1=2220.75
 OPT
f=804126
TT=797.07
T1=601.56
 OPT
f=804126
TT=427.555
T1=10.35
 OPT
f=804126
TT=773.956
T1=54.52
 OPT
f=804126
TT=405.087
T1=9.77
 OPT
f=804126
TT=765.744
T1=23.42
 OPT
f=804126
TT=93.952
T1=4.47
 OPT
f=804126
TT=725.165
T1=14.05
 OPT
f=804126
TT=367.831
T1=19.44
 OPT
f=804126
TT=1191.83
T1=87.25
 OPT
f=804126
TT=537.389
T1=15.25
 OPT
f=804126
TT=600.726
T1=16.09
 OPT
f=804126
TT=302.691
T1=19
 OPT
f=804126
TT=304.339
T1=19.09
 OPT
f=804126
TT=301.733
T1=18.89
 OPT
f=804126
TT=1102.47
T1=9.34
 OPT
f=804126
TT=1148.83
T1=9.36
 ? (TO)

TT=2400.1
Warehouse/
Warehouse-m1-s1/
Warehouse-cap101.xml 		OPT
f=804126
TT=94.026
T1=4.99
 SAT (TO)
f=819226
TT=2400.04
T1=2379.54
 OPT
f=804126
TT=1995.5
T1=1426.75
 OPT
f=804126
TT=808.107
T1=694.22
 OPT
f=804126
TT=409.567
T1=9.07
 OPT
f=804126
TT=812.017
T1=15.47
 OPT
f=804126
TT=413.362
T1=7.78
 OPT
f=804126
TT=744.365
T1=14.87
 OPT
f=804126
TT=94.026
T1=4.99
 OPT
f=804126
TT=715.262
T1=56.07
 OPT
f=804126
TT=457.342
T1=23.55
 OPT
f=804126
TT=1202.74
T1=19.91
 OPT
f=804126
TT=515.196
T1=15.76
 OPT
f=804126
TT=626.43
T1=13.6
 OPT
f=804126
TT=302.991
T1=19
 OPT
f=804126
TT=300.668
T1=18.79
 OPT
f=804126
TT=302.754
T1=19
 OPT
f=804126
TT=577.995
T1=31.8
 OPT
f=804126
TT=896.891
T1=22.16
 ? (TO)

TT=2400.06



StatisticsAbsCon
2019-07-23
(complete)		choco-solver
2019-06-14
(complete)		choco-solver
2019-06-14 parallel
(complete)		choco-solver
2019-09-16
(complete)		choco-solver
2019-09-16 parallel
(complete)		choco-solver
2019-09-20
(complete)		choco-solver
2019-09-20 parallel
(complete)		choco-solver
2019-09-24
(complete)		choco-solver
2019-09-24 parallel
(complete)		Concrete
3.10
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.2
(complete)		Concrete
3.12.3
(complete)		cosoco
2
(complete)		cosoco
2.0
(complete)		cosoco
2.0
(complete)		cosoco
2.0 parallel
(complete)		cosoco
2.O parallel
(complete)		PicatSAT
2019-09-12
(complete)
Number of times the solver is able to give the best known answer20222102292120020021701271641741221221221430221
Number of times the solver is the best solver from a complete solver point of view
(i.e. best known answer and best TT time)		4729040500487028102691013050