2017 XCSP3 competition: main track (CSP and COP, sequential and parallel solvers): results by benchmark

Results by benchmark for category all categories

This page displays the results of the different solvers for each benchmark for category all categories

REMINDER

Keep in mind that the 'Best result' columns only provide the best result given by one of the solvers. This 'Best result' may be wrong in case of an UNSATISFIABLE or OPTIMUM FOUND answer (because there's no efficient way to check these answers).

Description of a cell contents:

Cell example	Meaning
Answer	Solver result
f=...	value of the objective function for the model reported by the solver
TT=...	Total Time (TT): this is the CPU time (in seconds) used by the solver until termination. This time is only meaningful for complete solvers because incomplete solvers will always run until they time out

Remember that CPU time and wall clock time are two very different notions. The CPU time represents the time during which the instructions of the solver were executed by the processor. The wall clock time represents how much time ellapsed on the clock. For a same event, the CPU time may be either smaller or greater than the wall clock time depending on the number of threads of execution and the number of processors.

Meaning of some abbreviations:

Abbreviation	Meaning
f=...	Value of the objective function
TO	Time Out
MO	Mem. Out (out of memory)

Meaning of the different colors:

Color	Meaning
text	the solver cannot handle this instance
text	the solver gave no answer
text	the solver could give an answer (SAT)
text	the solver gave a definitive answer (OPTIMUM FOUND or UNSAT)
text	the solver performed better than the other ones on that instance (complete solvers point of view)
text	the solver performed better than the other ones on that instance (incomplete solvers point of view)
text	the solver was ended by a signal or other problem
text	the solver gave an incomplete answer
text	the solver gave a wrong answer

For better readability, you may choose to hide some solvers:
AbsCon-basic 2017-06-11 (complete)
BTD 2017-07-25 (complete)
BTD 2017-08-10 (complete)
choco-solver 4.0.5 par (2017-08-09) (complete)
choco-solver 4.0.5 par (2017-08-18) (complete)
choco-solver 4.0.5 seq (2017-08-09) (complete)
choco-solver 4.0.5 seq (2017-08-18) (complete)
choco-solver 5a (2017-07-26) (complete)
choco-solver 5a (2017-08-18) (complete)
Concrete 3.4 (complete)
cosoco 1.12 (complete)
cosoco-sat 1.12 (complete)
Mistral-2.0 2017-07-28 (complete)
OscaR - ALNS 2017-07-26 (complete)
OscaR - Conflict Ordering 2017-07-26 (complete)
OscaR - Hybrid 2017-07-26 (complete)
OscaR - Parallel with EPS 2017-07-26 (complete)
OscaR - Parallel with EPS 2017-08-22 (complete)
R1: AbsCon-basic 2017-06-11 (complete)
R1: BTD 2017-06-30 (complete)
R1: choco-solver 4.0.5 (2017-07-05) (complete)
R1: choco-solver 5a (2017-07-05) (complete)
R1: Concrete 3.4 (complete)
R1: cosoco 1.1 (complete)
R1: cosoco-sat 1.1 (complete)
R1: Mistral-2.0 2017-06-28 (complete)
R1: OscaR - ALNS 2017-06-30 (complete)
R1: OscaR - Conflict Ordering 2017-06-30 (complete)
R1: OscaR - Hybrid 2017-06-30 (complete)
R1: sat4j-CSP 2017-07-05 (complete)
sat4j-CSP 2017-07-05 (complete)

Bench name	Best results on this instance	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
AllInterval/ AllInterval-m1-s1/ AllInterval-007.xml	SAT TT=0.006	SAT TT=1.016	SAT TT=0.005	SAT TT=0.006	SAT TT=1.033	SAT TT=1.012	SAT TT=0.883	SAT TT=0.876	SAT TT=0.986	SAT TT=1.015	SAT TT=6.058	SAT TT=0.012	SAT TT=0.012	SAT TT=0.015	No data	SAT TT=1.088	No data	SAT TT=6.394	SAT TT=5.904	SAT TT=1.166	SAT TT=0.008	SAT TT=1.12	SAT TT=1.182	SAT TT=7.092	SAT TT=0.022	SAT TT=0.016	SAT TT=0.026	No data	SAT TT=1.13	No data	SAT TT=0.947	SAT TT=0.693
AllInterval/ AllInterval-m1-s1/ AllInterval-012.xml	SAT TT=0.011	SAT TT=1.104	SAT TT=0.011	SAT TT=0.011	SAT TT=1.091	SAT TT=1.117	SAT TT=0.966	SAT TT=0.96	SAT TT=1.29	SAT TT=1.311	SAT TT=6.073	SAT TT=0.024	SAT TT=0.024	SAT TT=0.025	No data	SAT TT=1.127	No data	SAT TT=44.499	SAT TT=4.632	SAT TT=1.287	SAT TT=0.014	SAT TT=1.237	SAT TT=1.26	SAT TT=7.317	SAT TT=0.031	SAT TT=0.04	SAT TT=0.041	No data	SAT TT=1.184	No data	SAT TT=1.217	SAT TT=1.01
AllInterval/ AllInterval-m1-s1/ AllInterval-016.xml	SAT TT=0.02	SAT TT=1.239	SAT TT=0.02	SAT TT=0.02	SAT TT=1.24	SAT TT=1.202	SAT TT=1.249	SAT TT=1.226	SAT TT=2.667	SAT TT=2.903	SAT TT=6.487	SAT TT=0.047	SAT TT=0.033	SAT TT=0.032	No data	SAT TT=1.173	No data	SAT TT=17748.699	SAT TT=4.639	SAT TT=1.467	SAT TT=0.036	SAT TT=1.389	SAT TT=1.395	SAT TT=8.484	SAT TT=0.082	SAT TT=0.055	SAT TT=0.053	No data	SAT TT=1.172	No data	SAT TT=26.004	SAT TT=25.796
AllInterval/ AllInterval-m1-s1/ AllInterval-035.xml	SAT TT=0.066	SAT TT=1.813	SAT TT=0.314	SAT TT=0.318	SAT TT=1.838	SAT TT=1.833	SAT TT=2.491	SAT TT=3.126	SAT TT=17.734	SAT TT=48.578	SAT TT=8.299	? (TO) TT=2520.05	? (TO) TT=2520.02	SAT TT=0.066	No data	SAT TT=1.393	No data	SAT (TO) TT=19847.301	SAT TT=5.4	SAT TT=2.151	SAT TT=0.346	SAT TT=2.018	SAT TT=2.137	SAT TT=10.19	? (TO) TT=2400.07	? (TO) TT=2400.05	SAT TT=0.156	No data	SAT TT=1.484	No data	? (TO) TT=2400.16	? (TO) TT=2520.1
AllInterval/ AllInterval-m1-s1/ AllInterval-050.xml	SAT TT=0.095	SAT TT=2.557	SAT TT=1.591	SAT TT=1.602	SAT TT=2.184	SAT TT=2.096	SAT TT=8.424	SAT TT=8.77	SAT TT=221.266	SAT TT=8.33	SAT TT=10.712	? (TO) TT=2519.97	? (TO) TT=2520.04	SAT TT=0.095	No data	SAT TT=1.526	No data	SAT (TO) TT=19840.199	SAT TT=6.603	SAT TT=2.876	SAT TT=1.643	SAT TT=2.292	SAT TT=2.521	SAT TT=13.647	? (TO) TT=2400.02	? (TO) TT=2400.05	SAT TT=0.142	No data	SAT TT=1.765	No data	? (TO) TT=2400.09	? (TO) TT=2520.16
AllInterval/ AllInterval-m1-s1/ AllInterval-080.xml	SAT TT=0.16	SAT TT=6.041	SAT TT=14.175	SAT TT=14.152	SAT TT=3.046	SAT TT=2.887	SAT TT=21.578	SAT TT=21.691	? (TO) TT=2520.07	? (TO) TT=2520.17	? (TO) TT=2520.56	? (TO) TT=2520.02	? (TO) TT=2520.05	SAT TT=0.16	No data	SAT TT=1.786	No data	SAT (TO) TT=19878.5	SAT TT=7.925	SAT TT=6.222	SAT TT=14.003	SAT TT=3.31	SAT TT=3.143	? (TO) TT=2401.11	? (TO) TT=2400.01	? (TO) TT=2400.04	SAT TT=1.289	No data	SAT TT=2.126	No data	? (TO) TT=2402.52	? (TO) TT=2520.11
Bibd/Bibd-sc-mini/ Bibd-sc-03-03-01.xml	SAT TT=0.008	SAT TT=1.039	? (NS) TT=0.008	? (NS) TT=0.008	SAT TT=1.011	SAT TT=0.984	SAT TT=0.85	SAT TT=0.845	SAT TT=0.88	SAT TT=0.88	SAT TT=5.962	SAT TT=0.008	SAT TT=0.008	SAT TT=0.01	No data	SAT TT=1.052	No data	SAT TT=1.693	SAT TT=1.7	SAT TT=1.098	? (NS) TT=0.01	SAT TT=1.161	SAT TT=1.266	SAT TT=7.352	SAT TT=0.012	SAT TT=0.012	SAT TT=0.018	No data	SAT TT=1.114	No data	SAT TT=0.692	SAT TT=0.588
Bibd/Bibd-sc-open/ Bibd-sc-56-088-33-21-12.xml		? (problem) TT=69.342	? (NS) TT=1827.67	? (NS) TT=1844.55	? (TO) TT=19899.9	? (TO) TT=19899.301	? (TO) TT=2520.12	? (TO) TT=2520.04	? (TO) TT=2520.1	? (TO) TT=2520.11	? (TO) TT=2527.84	? (MO) TT=18.333	? (MO) TT=18.353	? (TO) TT=2519.75	No data	? (TO) TT=2520.12	No data	? TT=8910.17	? TT=8404.11	? (problem) TT=130.983	? (NS) TT=1855.82	? (TO) TT=2400.21	? (TO) TT=2400.45	? (TO) TT=2415.42	? (MO) TT=18.138	? (MO) TT=19.417	? (TO) TT=2400.03	No data	? (TO) TT=2400.09	No data	? (TO) TT=2400.23	? (TO) TT=2520.16
Bibd/Bibd-sc-open/ Bibd-sc-65-104-40-25-15.xml		? (problem) TT=89.605	? (TO) TT=2519.92	? (TO) TT=2519.73	? (TO) TT=19785.301	? (TO) TT=19783.801	? (TO) TT=2520.07	? (TO) TT=2520.07	? (TO) TT=2520.03	? (TO) TT=2520.08	? (TO) TT=2527.77	? (MO) TT=18.005	? (MO) TT=17.667	? (TO) TT=2519.98	No data	? (TO) TT=2520.11	No data	? (TO) TT=4970.33	? (TO) TT=4813.02	? (problem) TT=157.489	? (TO) TT=2400.04	? (TO) TT=2400.38	? (TO) TT=2400.09	? (TO) TT=2415.46	? (MO) TT=18.026	? (MO) TT=17.838	? (TO) TT=2400.07	No data	? (TO) TT=2400.12	No data	? (TO) TT=2416.21	? TT=1074.6
Bibd/Bibd-sc-open/ Bibd-sc-85-085-36-36-15.xml		? (problem) TT=107.957	? (TO) TT=2519.85	? (TO) TT=2519.68	? (TO) TT=19688.6	? (TO) TT=19676.199	? (TO) TT=2520.42	? (TO) TT=2520.06	? (TO) TT=2520.05	? (TO) TT=2520.36	? (TO) TT=2527.95	? TT=18.541	? (MO) TT=18.677	? (TO) TT=2520.11	No data	? (TO) TT=2520.1	No data	? (TO) TT=2548.34	? (TO) TT=2554.81	? (problem) TT=192.504	? (TO) TT=2400.07	? (TO) TT=2400.12	? (TO) TT=2400.69	? (TO) TT=2415.12	? (MO) TT=18.786	? (MO) TT=20.422	? (TO) TT=2400.07	No data	? (TO) TT=2400.03	No data	? (TO) TT=2416.07	? TT=2284.91
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
Bibd/Bibd-sc-stab2/ Bibd-sc-06-03-06.xml	SAT TT=0.87	SAT TT=4.02	? (NS) TT=0.292	? (NS) TT=0.291	SAT TT=3.7	SAT TT=3.78	SAT TT=2.033	SAT TT=2.005	SAT TT=3.142	SAT TT=3.116	SAT TT=15.076	SAT TT=6.56	SAT TT=1432.09	SAT TT=0.87	No data	SAT TT=6.224	No data	SAT TT=31.495	SAT TT=18.17	SAT TT=4.682	? (NS) TT=0.303	SAT TT=4.708	SAT TT=4.566	SAT TT=20.047	SAT TT=6.527	SAT TT=1437.2	SAT TT=0.946	No data	SAT TT=6.816	No data	SAT TT=6.831	SAT TT=7.308
Bibd/Bibd-sc-stab2/ Bibd-sc-10-05-04.xml	SAT TT=1.66	SAT TT=16.387	? (NS) TT=0.533	? (NS) TT=0.532	SAT TT=6.022	SAT TT=6.216	SAT TT=8.463	SAT TT=9.152	SAT TT=712.149	SAT TT=712.389	SAT TT=25.677	? (TO) TT=2520.01	? (TO) TT=2519.88	SAT TT=1.66	No data	? (TO) TT=2520.1	No data	SAT (TO) TT=19917	SAT TT=482.292	SAT TT=17.259	? (NS) TT=0.586	SAT TT=7.355	SAT TT=6.483	SAT TT=30.345	? (TO) TT=2400.08	? (TO) TT=2400.1	SAT TT=2.676	No data	? (TO) TT=2400.1	No data	SAT TT=21.921	SAT TT=21.694
Bibd/Bibd-sum-open/ Bibd-sum-39-057-19-13-06.xml		? (TO) TT=2520.12	? (NS) TT=0.119	? (NS) TT=0.119	? (TO) TT=19833	? (TO) TT=19883	? (TO) TT=2520.1	? (TO) TT=2520.04	? (TO) TT=2520.05	? (TO) TT=2520.07	? (TO) TT=2527.53	? (TO) TT=2520.06	? (TO) TT=2519.9	? (TO) TT=2519.75	No data	? (TO) TT=2520.09	No data	? (TO) TT=20056.801	? (TO) TT=20068.5	? (TO) TT=2400.37	? (NS) TT=0.166	? (TO) TT=2400.54	? (TO) TT=2400.05	? (TO) TT=2414.82	? (TO) TT=2400.09	? (TO) TT=2400.06	? (TO) TT=2400.05	No data	? (TO) TT=2400.08	No data	? (TO) TT=2400.22	? (TO) TT=2520.19
Bibd/Bibd-sum-open/ Bibd-sum-55-099-27-15-07.xml		? (TO) TT=2520.07	? (NS) TT=0.658	? (NS) TT=0.663	? (TO) TT=20044.801	? (TO) TT=20038.4	? (TO) TT=2520.04	? (TO) TT=2520.02	? (TO) TT=2520.04	? (TO) TT=2520.08	? (TO) TT=2527.79	? (TO) TT=2519.95	? (TO) TT=2520.06	? (TO) TT=2519.64	No data	? (TO) TT=2520.08	No data	? (TO) TT=20051.199	? (TO) TT=20047	? (TO) TT=2400.05	? (NS) TT=0.712	? (TO) TT=2400.19	? (TO) TT=2400.63	? (TO) TT=2415.35	? (TO) TT=2400.07	? (TO) TT=2400.03	? (TO) TT=2400.03	No data	? (TO) TT=2400.08	No data	? (TO) TT=2400.13	? (TO) TT=2520.17
Bibd/Bibd-sum-stab1/ Bibd-sum-12-03-04.xml	SAT TT=6.855	SAT TT=6.855	? (NS) TT=0.034	? (NS) TT=0.034	SAT TT=40.745	SAT TT=45.782	? (TO) TT=2520.03	? (TO) TT=2520.09	? (TO) TT=2520.04	? (TO) TT=2520.06	? (TO) TT=2521.7	? (TO) TT=2519.52	? (TO) TT=2518.86	SAT TT=67.782	No data	? (TO) TT=2520.07	No data	? (TO) TT=19986.1	? (TO) TT=19982.6	SAT TT=7.235	? (NS) TT=0.043	SAT TT=77.438	SAT TT=81.195	? (TO) TT=2404.84	? (TO) TT=2400.04	? (TO) TT=2400.05	SAT TT=714.601	No data	? (TO) TT=2400.05	No data	? (TO) TT=2400.26	? (TO) TT=2520.14
Bibd/Bibd-sum-stab2/ Bibd-sum-07-03-09.xml	SAT TT=0.731	? (TO) TT=2520.04	? (NS) TT=0.013	? (NS) TT=0.014	SAT TT=4.466	SAT TT=5.057	SAT TT=2.113	SAT TT=2.066	? (TO) TT=2520.1	? (TO) TT=2520.08	SAT TT=1221.33	? (TO) TT=2519.8	? (TO) TT=2520.03	SAT TT=0.731	No data	? (TO) TT=2520.03	No data	? (TO) TT=19885.801	? (TO) TT=19891.301	? (TO) TT=2400.1	? (NS) TT=0.022	SAT TT=4.578	SAT TT=4.317	SAT TT=1312.08	? (TO) TT=2400.01	? (TO) TT=2400.02	SAT TT=2.188	No data	? (TO) TT=2400.03	No data	? (TO) TT=2400.16	? (TO) TT=2520.15
Bibd/Bibd-sum-sym/ Bibd-sum-07-077-33-03-11.xml	SAT TT=2.025	? (TO) TT=2520.09	? (NS) TT=0.015	? (NS) TT=0.016	SAT TT=5.695	SAT TT=6.599	? (TO) TT=2520.07	? (TO) TT=2520.1	? (TO) TT=2520.11	? (TO) TT=2520.11	SAT TT=1030.16	? (TO) TT=2519.88	? (TO) TT=2519.85	SAT TT=2.025	No data	? (TO) TT=2520.08	No data	? (TO) TT=19883.4	? (TO) TT=19892	? (TO) TT=2400.1	? (NS) TT=0.028	SAT TT=5.598	SAT TT=5.756	SAT TT=1068.92	? (TO) TT=2400.05	? (TO) TT=2400.02	SAT TT=2.254	No data	? (TO) TT=2400.06	No data	SAT TT=803.186	SAT TT=815.123
Bibd/Bibd-sum-sym/ Bibd-sum-09-084-28-03-07.xml	SAT TT=5.59	SAT TT=6.263	? (NS) TT=0.022	? (NS) TT=0.022	SAT TT=11.588	SAT TT=9.103	SAT TT=480.274	SAT TT=477.957	? (TO) TT=2520.02	? (TO) TT=2520.03	SAT TT=716.654	? (TO) TT=2520	? (TO) TT=2519.96	SAT TT=5.59	No data	? (TO) TT=2520.04	No data	? (TO) TT=19957.801	? (TO) TT=19937.699	SAT TT=6.336	? (NS) TT=0.039	SAT TT=14.494	SAT TT=13.271	SAT TT=700.392	? (TO) TT=2400.02	? (TO) TT=2400.05	SAT TT=39.22	No data	? (TO) TT=2400.07	No data	? (TO) TT=2400.2	? (TO) TT=2520.1
BinPacking/ BinPacking-mdd-ft/ BinPacking-mdd-ft120-11.xml	SAT TO f=7 TT=2400.03 T1=35.2	SAT (TO) f=7 TT=2520.02 T1=294.26	No data	No data	SAT (TO) f=7 TT=20033.1 T1=1275.46	SAT (TO) f=7 TT=20031.5 T1=427.19	SAT (TO) f=0 TT=2520.1 T1=1435.09	SAT (TO) f=0 TT=2520.04 T1=1462.58	SAT (TO) f=0 TT=2520.06 T1=2086.6	SAT (TO) f=0 TT=2520.09 T1=2109.11	? (TO) TT=2521.31	? (TO) TT=2520.03	? (TO) TT=2520	SAT (TO) f=7 TT=2519.79 T1=580.43	SAT (TO) f=7 TT=2520.14 T1=258.63	SAT (TO) f=6 TT=2520.11 T1=12.89	SAT (TO) f=7 TT=2520.08 T1=1788.58	SAT (TO) f=7 TT=19960.4 T1=35.2	SAT (TO) f=7 TT=19962.1 T1=90.87	SAT (TO) f=7 TT=2400.03 T1=263.18	No data	SAT (TO) f=4 TT=2400.67 T1=210.73	SAT (TO) f=6 TT=2400.57 T1=194.59	? (TO) TT=2403.19	? (TO) TT=2400.09	? (TO) TT=2400.05	SAT (TO) f=7 TT=2400.06 T1=551.88	SAT (TO) f=7 TT=2400.13 T1=153.39	SAT (TO) f=6 TT=2400.12 T1=13.87	SAT (TO) f=7 TT=2400.04 T1=44.27	? (TO) TT=2400.22	? (TO) TT=2520.34
BinPacking/ BinPacking-mdd-ft/ BinPacking-mdd-ft120-13.xml	SAT TO f=7 TT=2400.03 T1=31.25	SAT (TO) f=7 TT=2520.03 T1=216.12	No data	No data	SAT (TO) f=7 TT=20054.801 T1=39.55	SAT (TO) f=7 TT=20040.6 T1=41.3	SAT (TO) f=2 TT=2520.11 T1=1418.66	SAT (TO) f=2 TT=2520.09 T1=1423.89	SAT (TO) f=2 TT=2520.04 T1=2351.75	SAT (TO) f=2 TT=2520.03 T1=2375.52	? (TO) TT=2521.3	? (TO) TT=2519.87	SAT (TO) f=0 TT=2520.07 T1=750.13	SAT (TO) f=7 TT=2519.66 T1=612.92	SAT (TO) f=7 TT=2520.12 T1=516.72	SAT (TO) f=5 TT=2520.06 T1=1078.06	SAT (TO) f=7 TT=2520.07 T1=1060.53	SAT (TO) f=7 TT=19947.699 T1=31.25	SAT (TO) f=7 TT=19958.9 T1=97.41	SAT (TO) f=7 TT=2400.03 T1=215.65	No data	SAT (TO) f=7 TT=2400.41 T1=167.25	SAT (TO) f=7 TT=2400.07 T1=163.82	? (TO) TT=2402.67	? (TO) TT=2400.06	? (TO) TT=2400.1	SAT (TO) f=7 TT=2400.07 T1=653.38	SAT (TO) f=7 TT=2400.09 T1=149.18	SAT (TO) f=5 TT=2400.06 T1=1106.4	SAT (TO) f=7 TT=2400.1 T1=628.98	? (TO) TT=2400.15	? (TO) TT=2520.25
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
BinPacking/ BinPacking-mdd-ft/ BinPacking-mdd-ft120-15.xml	SAT TO f=6 TT=2400.08 T1=24.02	SAT (TO) f=6 TT=2520.02 T1=2175.27	No data	No data	SAT (TO) f=3 TT=20024.199 T1=86.57	SAT (TO) f=6 TT=20024.301 T1=800.36	SAT (TO) f=1 TT=2520.12 T1=864.06	SAT (TO) f=1 TT=2520.06 T1=771.78	SAT (TO) f=0 TT=2520.06 T1=156.5	SAT (TO) f=0 TT=2520.06 T1=144.72	? (TO) TT=2521.37	? (TO) TT=2519.84	? (TO) TT=2519.91	SAT (TO) f=6 TT=2519.78 T1=35.3	SAT (TO) f=6 TT=2520.08 T1=1082.73	SAT (TO) f=4 TT=2520.07 T1=13	SAT (TO) f=6 TT=2520.03 T1=220.61	SAT (TO) f=6 TT=19996.5 T1=24.02	SAT (TO) f=6 TT=19984 T1=90.02	SAT (TO) f=6 TT=2400.12 T1=2186.6	No data	SAT (TO) f=4 TT=2400.54 T1=229.01	SAT (TO) f=4 TT=2400.34 T1=235.94	? (TO) TT=2402.47	? (TO) TT=2400.08	? (TO) TT=2400.09	SAT (TO) f=6 TT=2400.08 T1=35.48	SAT (TO) f=6 TT=2400.09 T1=350.91	SAT (TO) f=4 TT=2400.12 T1=13.04	SAT (TO) f=6 TT=2400.14 T1=954.62	? (TO) TT=2400.17	? (TO) TT=2520.26
BinPacking/ BinPacking-mdd-ft/ BinPacking-mdd-ft249-19.xml	SAT TO f=13 TT=2400.06 T1=1791.24	SAT (TO) f=3 TT=2520.04 T1=1356.07	No data	No data	? (TO) TT=20026	? (TO) TT=20031.1	? (TO) TT=2520.08	? (TO) TT=2520.03	? (TO) TT=2520.11	? (TO) TT=2520.05	? (TO) TT=2524.21	? (TO) TT=2519.84	? (TO) TT=2520.01	? (TO) TT=2520.03	SAT (TO) f=13 TT=2520.12 T1=2255.51	SAT (TO) f=3 TT=2520.06 T1=1772.67	SAT (TO) f=12 TT=2520.1 T1=2338.48	? (TO) TT=10182.9	SAT (TO) f=13 TT=11302.6 T1=2973	SAT (TO) f=3 TT=2400.12 T1=1298.57	No data	? (TO) TT=2400.35	? (TO) TT=2400.54	? (TO) TT=2407.02	? (TO) TT=2400.07	? (TO) TT=2400.05	? (TO) TT=2400.11	SAT (TO) f=12 TT=2400.15 T1=1212.37	SAT (TO) f=3 TT=2400.13 T1=1785.88	SAT (TO) f=13 TT=2400.06 T1=1791.24	? (TO) TT=2415.9	? TT=1695.85
BinPacking/ BinPacking-mdd-ft/ BinPacking-mdd-ft501-07.xml		? (TO) TT=2520.08	No data	No data	? (TO) TT=19785.699	? (TO) TT=19801.199	? (TO) TT=2520.07	? (TO) TT=2520.08	? (TO) TT=2520.09	? (TO) TT=2520.03	? (TO) TT=2525.88	? (TO) TT=2519.94	? (TO) TT=2520.03	? (TO) TT=2520.06	? (TO) TT=2520.07	? (TO) TT=2520.04	? (TO) TT=2520.05	? (TO) TT=2531.97	? (TO) TT=2538.9	? (TO) TT=2400.1	No data	? (TO) TT=2400.66	? (TO) TT=2400.44	? (TO) TT=2410.36	? (TO) TT=2400.02	? (TO) TT=2400.09	? (TO) TT=2400.08	? (TO) TT=2400.05	? (TO) TT=2400.1	? (TO) TT=2400.03	? (TO) TT=2416.08	? TT=1684.21
BinPacking/ BinPacking-mdd-sw100/ BinPacking-mdd-sw100-03.xml	SAT TO f=0 TT=2400.03 T1=0.39	SAT (TO) f=0 TT=2520.07 T1=5.59	No data	No data	SAT (TO) f=0 TT=20008.801 T1=1091.72	? (TO) TT=20018.199	? (TO) TT=2520.08	? (TO) TT=2520.04	? (TO) TT=2514.51	? (TO) TT=2520.07	SAT (TO) f=0 TT=2520.09 T1=26.23	SAT (TO) f=0 TT=2520.01 T1=0.39	? (TO) TT=2520.11	SAT (TO) f=0 TT=2519.77 T1=1352.7	? (TO) TT=2520.06	? (TO) TT=2526.4	? (TO) TT=2520.1	? (TO) TT=2579.96	? (TO) TT=2577.72	SAT (TO) f=0 TT=2400.03 T1=5.54	No data	? (TO) TT=2400.59	? (TO) TT=2400.69	SAT (TO) f=0 TT=2400.14 T1=30.71	? (TO) TT=2400.02	? (TO) TT=2400.07	SAT (TO) f=0 TT=2400.03 T1=1399.42	? (TO) TT=2400.04	? (TO) TT=2400.1	? (TO) TT=2400.08	? (TO) TT=2416.33	? TT=1672.34
BinPacking/ BinPacking-mdd-sw100/ BinPacking-mdd-sw100-43.xml	SAT TO f=0 TT=2400.08 T1=0.4	SAT (TO) f=0 TT=2520.02 T1=1945.41	No data	No data	? (TO) TT=20023	? (TO) TT=20022.9	? (TO) TT=2518.35	? (TO) TT=2520.1	? (TO) TT=2520.08	? (TO) TT=2520.11	? (TO) TT=2522.15	SAT (TO) f=0 TT=2519.91 T1=0.4	? (TO) TT=2519.83	? (TO) TT=2519.81	? (TO) TT=2526.72	? (TO) TT=2520.1	? (TO) TT=2520.06	? (TO) TT=2564.22	? (TO) TT=2555.6	SAT (TO) f=0 TT=2400.08 T1=1974.24	No data	? (TO) TT=2400.74	? (TO) TT=2400.06	? (TO) TT=2404.83	? (TO) TT=2400.03	? (TO) TT=2400.04	? (TO) TT=2400.06	? (TO) TT=2401.86	? (TO) TT=2400.07	? (TO) TT=2400.06	? (TO) TT=2415.8	? TT=1673.19
BinPacking/ BinPacking-mdd-sw100/ BinPacking-mdd-sw100-63.xml	SAT TO f=0 TT=2400.03 T1=4.87	SAT (TO) f=0 TT=2520.03 T1=5.06	No data	No data	? (TO) TT=20016.6	? (TO) TT=20016.199	? (TO) TT=2520.1	? (TO) TT=2520.04	? (TO) TT=2520.11	? (TO) TT=2520.03	? (TO) TT=2522.07	? (TO) TT=2519.79	? (TO) TT=2519.8	? (TO) TT=2520.02	? (TO) TT=2520.09	? (TO) TT=2520.11	? (TO) TT=2520.06	? (TO) TT=2556.84	? (TO) TT=2563.18	SAT (TO) f=0 TT=2400.03 T1=4.87	No data	? (TO) TT=2400.29	? (TO) TT=2400.37	? (TO) TT=2404.12	? (TO) TT=2400.06	? (TO) TT=2400.11	? (TO) TT=2400.05	? (TO) TT=2400.05	? (TO) TT=2400.05	? (TO) TT=2400.11	? (TO) TT=2416.29	? TT=1678.15
BinPacking/ BinPacking-mdd-sw100/ BinPacking-mdd-sw100-70.xml	SAT TO f=0 TT=2400.02 T1=5.24	SAT (TO) f=0 TT=2520.02 T1=5.25	No data	No data	? (TO) TT=20010.6	? (TO) TT=20011.4	? (TO) TT=2520.03	? (TO) TT=2520.08	? (TO) TT=2520.11	? (TO) TT=2520.08	? (TO) TT=2522.81	? (TO) TT=2519.93	? (TO) TT=2519.99	? (TO) TT=2519.66	? (TO) TT=2520.09	? (TO) TT=2520.12	? (TO) TT=2520.12	? (TO) TT=2567.93	? (TO) TT=2558.92	SAT (TO) f=0 TT=2400.02 T1=5.24	No data	? (TO) TT=2400.69	? (TO) TT=2400.39	? (TO) TT=2404.91	? (TO) TT=2400.08	? (TO) TT=2400.04	? (TO) TT=2400.07	? (TO) TT=2400.08	? (TO) TT=2400.07	? (TO) TT=2400.08	? (TO) TT=2416.52	? TT=1688.52
BinPacking/ BinPacking-mdd-sw100/ BinPacking-mdd-sw100-75.xml	SAT TO f=0 TT=2400.08 T1=4.94	SAT (TO) f=0 TT=2520.06 T1=5.25	No data	No data	? (TO) TT=20012.199	? (TO) TT=20017.699	? (TO) TT=2520.05	? (TO) TT=2520.05	? (TO) TT=2520.09	? (TO) TT=2520.05	? (TO) TT=2522.63	? (TO) TT=2519.78	? (TO) TT=2520.04	? (TO) TT=2519.82	? (TO) TT=2520.06	? (TO) TT=2520.08	? (TO) TT=2520.02	? (TO) TT=2559.98	? (TO) TT=2568.34	SAT (TO) f=0 TT=2400.08 T1=4.94	No data	? (TO) TT=2400.48	? (TO) TT=2400.66	? (TO) TT=2404.6	? (TO) TT=2400.01	? (TO) TT=2400.09	? (TO) TT=2400.02	? (TO) TT=2400.05	? (TO) TT=2400.03	? (TO) TT=2400.08	? (TO) TT=2416.23	? TT=1696.58
BinPacking/ BinPacking-mdd-sw100/ BinPacking-mdd-sw100-92.xml	SAT TO f=0 TT=2400.05 T1=0.41	SAT (TO) f=0 TT=2520.06 T1=5.53	No data	No data	SAT (TO) f=0 TT=20029.199 T1=792.8	SAT (TO) f=0 TT=20026.1 T1=77.47	? (TO) TT=2520.05	? (TO) TT=2520.05	? (TO) TT=2520.09	? (TO) TT=2520.09	? (TO) TT=2522.59	SAT (TO) f=0 TT=2519.87 T1=0.41	? (TO) TT=2520.05	SAT (TO) f=0 TT=2520.03 T1=694.41	? (TO) TT=2520.07	? (TO) TT=2520.04	? (TO) TT=2520.07	? (TO) TT=2577.83	? (TO) TT=2569.45	SAT (TO) f=0 TT=2400.08 T1=5.25	No data	SAT (TO) f=0 TT=2400.04 T1=125.49	SAT (TO) f=0 TT=2400.04 T1=134.82	? (TO) TT=2406.03	? (TO) TT=2400.06	? (TO) TT=2400.07	SAT (TO) f=0 TT=2400.05 T1=701.43	? (TO) TT=2400.07	? (TO) TT=2400.05	? (TO) TT=2400.05	? (TO) TT=2415.83	? TT=1639.62
BinPacking/ BinPacking-mdd-sw120/ BinPacking-mdd-sw120-20.xml	SAT TO f=0 TT=2400.1 T1=196.97	SAT (TO) f=0 TT=2520.06 T1=198.47	No data	No data	? (TO) TT=20002.301	? (TO) TT=20011.301	? (TO) TT=2520.06	? (TO) TT=2520.07	? (TO) TT=2520.06	? (TO) TT=2520.04	? (TO) TT=2522.73	? (TO) TT=2519.61	? (TO) TT=2520.02	? (TO) TT=2519.65	? (TO) TT=2520.12	? (TO) TT=2520.1	? (TO) TT=2520.93	? (TO) TT=2552.97	? (TO) TT=2602.55	SAT (TO) f=0 TT=2400.1 T1=196.97	No data	? (TO) TT=2400.05	? (TO) TT=2400.28	? (TO) TT=2405.86	? (TO) TT=2400.05	? (TO) TT=2400.08	? (TO) TT=2400.09	? (TO) TT=2400.09	? (TO) TT=2400.05	? (TO) TT=2400.11	? (TO) TT=2415.95	? TT=1685.64
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
BinPacking/ BinPacking-mdd-sw120/ BinPacking-mdd-sw120-30.xml	SAT TO f=0 TT=2400.08 T1=0.9	SAT (TO) f=0 TT=2520.04 T1=12.18	No data	No data	SAT (TO) f=0 TT=20012.1 T1=247.76	SAT (TO) f=0 TT=20043.5 T1=247.89	SAT (TO) f=0 TT=2520.02 T1=105.63	SAT (TO) f=0 TT=2520.07 T1=109.94	SAT (TO) f=0 TT=2520.02 T1=112.86	SAT (TO) f=0 TT=2520.05 T1=117.32	? (TO) TT=2523.02	SAT (TO) f=0 TT=2519.86 T1=0.9	SAT (TO) f=0 TT=2519.87 T1=1.66	SAT (TO) f=0 TT=2519.81 T1=1735.82	? (TO) TT=2520.1	? (TO) TT=2520.09	? (TO) TT=2520.04	? (TO) TT=2580.1	? (TO) TT=2576.02	SAT (TO) f=0 TT=2400.08 T1=12.11	No data	SAT (TO) f=0 TT=2400.57 T1=192.8	SAT (TO) f=0 TT=2400.32 T1=192.92	? (TO) TT=2405.78	? (TO) TT=2400.04	? (TO) TT=2400.04	SAT (TO) f=0 TT=2400.1 T1=1842.55	? (TO) TT=2400.07	? (TO) TT=2400.06	? (TO) TT=2400.1	? (TO) TT=2415.85	? TT=1673.27
BinPacking/ BinPacking-mdd-sw120/ BinPacking-mdd-sw120-63.xml	SAT TO f=0 TT=2400.06 T1=0.57	SAT (TO) f=0 TT=2520.09 T1=9.87	No data	No data	SAT (TO) f=0 TT=20020.199 T1=689.51	SAT (TO) f=0 TT=20026 T1=1899.61	? (TO) TT=2520.1	? (TO) TT=2520.07	? (TO) TT=2520.09	? (TO) TT=2520.02	SAT (TO) f=0 TT=2520.08 T1=2450.4	SAT (TO) f=0 TT=2520.08 T1=0.57	? (TO) TT=2519.65	SAT (TO) f=0 TT=2520.01 T1=652.23	? (TO) TT=2520.12	? (TO) TT=2520.12	? (TO) TT=2520.08	? (TO) TT=2580.43	? (TO) TT=2568.1	SAT (TO) f=0 TT=2400.08 T1=9.81	No data	? (TO) TT=2400.07	? (TO) TT=2400.02	? (TO) TT=2405.78	? (TO) TT=2400.05	? (TO) TT=2400.06	SAT (TO) f=0 TT=2400.06 T1=676.07	? (TO) TT=2400.07	? (TO) TT=2400.09	? (TO) TT=2400.08	? (TO) TT=2415.8	? TT=1760.7
BinPacking/ BinPacking-mdd-sw120/ BinPacking-mdd-sw120-83.xml	SAT TO f=0 TT=2400.07 T1=3.64	SAT (TO) f=0 TT=2520.02 T1=29.78	No data	No data	SAT (TO) f=0 TT=20001.5 T1=13.89	SAT (TO) f=0 TT=20010.4 T1=13.4	? (TO) TT=2520.07	? (TO) TT=2520.09	? (TO) TT=2520.12	? (TO) TT=2520.03	? (TO) TT=2522.7	SAT (TO) f=0 TT=2519.86 T1=3.64	? (TO) TT=2519.84	SAT (TO) f=0 TT=2519.79 T1=75.75	? (TO) TT=2520.09	? (TO) TT=2520.07	? (TO) TT=2520.09	? (TO) TT=2589.08	? (TO) TT=2583.64	SAT (TO) f=0 TT=2400.1 T1=29.68	No data	SAT (TO) f=0 TT=2400.23 T1=15.21	SAT (TO) f=0 TT=2400.57 T1=15.48	? (TO) TT=2406.06	? (TO) TT=2400.05	? (TO) TT=2400.06	SAT (TO) f=0 TT=2400.07 T1=77.08	? (TO) TT=2400.06	? (TO) TT=2400.1	? (TO) TT=2400.11	? (TO) TT=2416.14	? TT=1736.59
BinPacking/ BinPacking-mdd-sw120/ BinPacking-mdd-sw120-91.xml	SAT TO f=0 TT=2400.08 T1=2.15	SAT (TO) f=0 TT=2520.03 T1=9.78	No data	No data	SAT (TO) f=0 TT=20002.9 T1=11.81	SAT (TO) f=0 TT=20023.801 T1=12.33	SAT (TO) f=0 TT=2520.1 T1=39.39	SAT (TO) f=0 TT=2520.06 T1=38.96	SAT (TO) f=0 TT=2520.11 T1=38.87	SAT (TO) f=0 TT=2520.03 T1=40.37	SAT (TO) f=0 TT=2520.07 T1=729.87	SAT (TO) f=0 TT=2520.02 T1=7.19	SAT (TO) f=0 TT=2519.91 T1=12.29	SAT (TO) f=0 TT=2519.74 T1=2.16	? (TO) TT=2520.05	? (TO) TT=2520.12	? (TO) TT=2520.07	? (TO) TT=2574.1	? (TO) TT=2570.96	SAT (TO) f=0 TT=2400.1 T1=9.38	No data	SAT (TO) f=0 TT=2400.46 T1=12.87	SAT (TO) f=0 TT=2400.3 T1=14.3	SAT (TO) f=0 TT=2400.12 T1=773.96	? (TO) TT=2400.03	? (TO) TT=2400.03	SAT (TO) f=0 TT=2400.08 T1=2.15	? (TO) TT=2400.07	? (TO) TT=2400.1	? (TO) TT=2400.04	? (TO) TT=2416.38	? TT=1697.84
BinPacking/ BinPacking-mdd-sw120/ BinPacking-mdd-sw120-99.xml	SAT TO f=0 TT=2400.11 T1=188.58	SAT (TO) f=0 TT=2520.1 T1=198.48	No data	No data	SAT (TO) f=0 TT=20008.4 T1=1407.81	SAT (TO) f=0 TT=20008.801 T1=1039.39	? (TO) TT=2520.05	? (TO) TT=2520.12	? (TO) TT=2520.08	? (TO) TT=2520.04	SAT (TO) f=0 TT=2520.14 T1=1971.68	? (TO) TT=2519.78	? (TO) TT=2519.77	? (TO) TT=2520.02	? (TO) TT=2520.11	? (TO) TT=2520.04	? (TO) TT=2520.07	? (TO) TT=2564.41	? (TO) TT=2557.06	SAT (TO) f=0 TT=2400.11 T1=188.58	No data	? (TO) TT=2400.15	? (TO) TT=2400.44	SAT (TO) f=0 TT=2400.11 T1=1983.2	? (TO) TT=2400.08	? (TO) TT=2400.06	? (TO) TT=2400.06	? (TO) TT=2400.09	? (TO) TT=2400.12	? (TO) TT=2400.11	? (TO) TT=2416.34	? TT=1658.71
BinPacking/ BinPacking-sum-ft/ BinPacking-sum-ft060-11.xml	SAT TO f=2 TT=2400.03 T1=1.61	SAT (TO) f=2 TT=2520.08 T1=47.9	No data	No data	SAT (TO) f=2 TT=20078.5 T1=3.55	SAT (TO) f=2 TT=20068.1 T1=4.52	? (TO) TT=2520.09	? (TO) TT=2520.08	? (TO) TT=2520.16	? (TO) TT=2520.11	SAT (TO) f=2 TT=2520.1 T1=14.69	? (TO) TT=2520.08	? (TO) TT=2519.92	SAT (TO) f=2 TT=2520.09 T1=1.63	? (TO) TT=2520.06	? (TO) TT=2520.11	? (TO) TT=2520.05	? (TO) TT=19880.4	? (TO) TT=19894	SAT (TO) f=2 TT=2400.03 T1=47.88	No data	SAT (TO) f=2 TT=2400.57 T1=6.6	SAT (TO) f=2 TT=2400.34 T1=6.84	SAT (TO) f=2 TT=2400.11 T1=15.38	? (TO) TT=2400.04	? (TO) TT=2400.04	SAT (TO) f=2 TT=2400.06 T1=1.61	? (TO) TT=2400.06	? (TO) TT=2400.02	? (TO) TT=2400.06	SAT (TO) f=0 TT=2400.23 T1=1946.51	SAT (TO) f=0 TT=2520.27 T1=1887.51
BinPacking/ BinPacking-sum-s28/ BinPacking-sum-s28-561.xml		? (TO) TT=2520.06	No data	No data	? (TO) TT=20055.301	? (TO) TT=20053.1	? (TO) TT=2520.12	? (TO) TT=2520.07	? (TO) TT=2520.56	? (TO) TT=2520.11	? (TO) TT=2523.62	? (TO) TT=2520.04	? (TO) TT=2520.01	? (TO) TT=2519.99	? (TO) TT=2520.09	? (TO) TT=2520.08	? (TO) TT=2520.1	? (TO) TT=19788.699	? (TO) TT=19821.4	? (TO) TT=2400.12	No data	? (TO) TT=2400.7	? (TO) TT=2400.24	? (TO) TT=2406.43	? (TO) TT=2400.09	? (TO) TT=2400.04	? (TO) TT=2400.01	? (TO) TT=2400.11	? (TO) TT=2400.08	? (TO) TT=2400.09	? (TO) TT=2416.07	? (problem) TT=1423.87
BinPacking/ BinPacking-sum-skj1/ BinPacking-sum-n1c3w4d.xml	OPT f=8 TT=75.977 T1=34.04	SAT (TO) f=6 TT=2520.1 T1=805.05	No data	No data	SAT (TO) f=8 TT=20070.4 T1=430.84	SAT (TO) f=8 TT=20065.4 T1=441.84	? (TO) TT=2520.07	? (TO) TT=2520.06	? (TO) TT=2520.09	? (TO) TT=2520.04	? (TO) TT=2520.64	? (TO) TT=2520.01	? (TO) TT=2519.76	OPT f=8 TT=75.977 T1=34.04	? (TO) TT=2520.06	? (TO) TT=2520.1	? (TO) TT=2520.04	SAT (TO) f=5 TT=14647.5 T1=816.53	SAT (TO) f=5 TT=14920.1 T1=352.76	SAT (TO) f=6 TT=2400.07 T1=818.06	No data	SAT (TO) f=7 TT=2400.71 T1=45.43	SAT (TO) f=7 TT=2400.1 T1=44.68	? (TO) TT=2401.27	? (TO) TT=2400.09	? (TO) TT=2400.03	OPT f=8 TT=77.025 T1=34.69	? (TO) TT=2400.11	? (TO) TT=2400.04	? (TO) TT=2400.1	SAT (TO) f=1 TT=2403.18 T1=2283.06	? (TO) TT=2520.16
BinPacking/ BinPacking-sum-skj1/ BinPacking-sum-n1c3w4r.xml	OPT f=7 TT=1984.32 T1=1411.43	SAT (TO) f=4 TT=2520.11 T1=98.71	No data	No data	SAT (TO) f=7 TT=20091.6 T1=52.6	SAT (TO) f=7 TT=20077.699 T1=53.08	? (TO) TT=2520.05	? (TO) TT=2520.05	? (TO) TT=2520.09	? (TO) TT=2520.11	? (TO) TT=2520.59	? (TO) TT=2519.77	? (TO) TT=2520.06	SAT (TO) f=7 TT=2519.85 T1=3.83	SAT (TO) f=7 TT=2520.03 T1=44.05	SAT (TO) f=7 TT=2520.08 T1=45.14	SAT (TO) f=7 TT=2520.06 T1=46.94	SAT (TO) f=6 TT=11590.9 T1=60.53	SAT (TO) f=6 TT=18681 T1=9926.04	SAT (TO) f=4 TT=2400.04 T1=99.03	No data	SAT (TO) f=6 TT=2400.73 T1=183.79	SAT (TO) f=6 TT=2400.59 T1=250.3	? (TO) TT=2401.21	? (TO) TT=2400.06	? (TO) TT=2400.06	SAT (TO) f=7 TT=2400.05 T1=3.87	SAT (TO) f=7 TT=2400.09 T1=86.11	SAT (TO) f=7 TT=2400.13 T1=46.24	SAT (TO) f=7 TT=2400.07 T1=47.74	OPT f=7 TT=1984.32 T1=1411.43	OPT f=7 TT=2177.37 T1=1554.78
BinPacking/ BinPacking-sum-skj1/ BinPacking-sum-n3c3w4h.xml	SAT TO f=33 TT=20094.801 T1=5.57	? (TO) TT=2520.05	No data	No data	SAT (TO) f=33 TT=20102.199 T1=4.82	SAT (TO) f=33 TT=20094.801 T1=5.57	? (TO) TT=2520.03	? (TO) TT=2520.07	? (TO) TT=2520.11	? (TO) TT=2520.05	? (TO) TT=2521.1	? (TO) TT=2520.02	? (TO) TT=2519.87	? (TO) TT=2520.1	? (TO) TT=2520.06	? (TO) TT=2520.09	? (TO) TT=2520.11	? (TO) TT=19923.699	? (TO) TT=19940.1	? (TO) TT=2400.06	No data	SAT (TO) f=32 TT=2400.18 T1=1.74	SAT (TO) f=32 TT=2400.58 T1=2.02	? (TO) TT=2402.49	? (TO) TT=2400.07	? (TO) TT=2400.08	? (TO) TT=2400.03	? (TO) TT=2400.07	? (TO) TT=2400.08	? (TO) TT=2400.11	? (TO) TT=2400.19	? (TO) TT=2520.2
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
BinPacking/ BinPacking-sum-skj1/ BinPacking-sum-n4c2w2n.xml	SAT TO f=87 TT=20045.199 T1=6.95	? (TO) TT=2520.03	No data	No data	SAT (TO) f=87 TT=20029.199 T1=9.33	SAT (TO) f=87 TT=20045.199 T1=6.95	? (TO) TT=2520.05	? (TO) TT=2520.14	? (TO) TT=2520.02	? (TO) TT=2520.04	? (TO) TT=2522.02	? (TO) TT=2520.06	? (TO) TT=2519.83	? (TO) TT=2519.78	? (TO) TT=2520.07	? (TO) TT=2520.08	? (TO) TT=2520.08	? (TO) TT=19645.1	? (TO) TT=19647.801	? (TO) TT=2400.06	No data	SAT (TO) f=87 TT=2400.1 T1=11.52	SAT (TO) f=87 TT=2400.57 T1=13.38	? (TO) TT=2407.25	? (TO) TT=2400.08	? (TO) TT=2400.06	? (TO) TT=2400.11	? (TO) TT=2400.12	? (TO) TT=2400.05	? (TO) TT=2400.13	? (TO) TT=2415.89	? TT=1429.88
BinPacking/ BinPacking-sum-skj1/ BinPacking-sum-n4c3w4o.xml	SAT TO f=93 TT=20067.6 T1=5.41	? (TO) TT=2520.09	No data	No data	SAT (TO) f=93 TT=20062.6 T1=5.06	SAT (TO) f=93 TT=20067.6 T1=5.41	? (TO) TT=2520.02	? (TO) TT=2520.09	? (TO) TT=2520.06	? (TO) TT=2520.05	? (TO) TT=2521.97	? (TO) TT=2520.02	? (TO) TT=2519.89	? (TO) TT=2520.08	? (TO) TT=2520.07	? (TO) TT=2520.04	? (TO) TT=2520.08	? (TO) TT=19928.1	? (TO) TT=19910.801	? (TO) TT=2400.03	No data	SAT (TO) f=94 TT=2400.36 T1=68.68	SAT (TO) f=94 TT=2400.01 T1=67.53	? (TO) TT=2404.76	? (TO) TT=2400.08	? (TO) TT=2400.01	? (TO) TT=2400.07	? (TO) TT=2400.08	? (TO) TT=2400.1	? (TO) TT=2400.1	? (TO) TT=2416.38	? TT=1749.71
BinPacking/ BinPacking-sum-skj2/ BinPacking-sum-n1w4b2r0.xml		? (TO) TT=2520.07	No data	No data	? (TO) TT=20081.4	? (TO) TT=20064	? (TO) TT=2520.04	? (TO) TT=2520.12	? (TO) TT=2520.07	? (TO) TT=2520.06	? (TO) TT=2520.6	? (TO) TT=2519.75	? (TO) TT=2519.7	? (TO) TT=2520.02	? (TO) TT=2520.02	? (TO) TT=2520.08	? (TO) TT=2520.05	? (TO) TT=19876.699	? (TO) TT=19881.4	? (TO) TT=2400.06	No data	? (TO) TT=2400.04	? (TO) TT=2400.62	? (TO) TT=2401.11	? (TO) TT=2400.08	? (TO) TT=2400.07	? (TO) TT=2400.03	? (TO) TT=2400.1	? (TO) TT=2400.03	? (TO) TT=2400.09	? (TO) TT=2400.21	? (TO) TT=2520.15
BinPacking/ BinPacking-sum-skj2/ BinPacking-sum-n1w4b3r4.xml		? (TO) TT=2520.03	No data	No data	? (TO) TT=20075.9	? (TO) TT=20060.699	? (TO) TT=2520.08	? (TO) TT=2520.07	? (TO) TT=2520.13	? (TO) TT=2520.03	? (TO) TT=2520.7	? (TO) TT=2519.73	? (TO) TT=2520.04	? (TO) TT=2519.64	? (TO) TT=2520.07	? (TO) TT=2520.05	? (TO) TT=2520.09	? (TO) TT=19855.801	? (TO) TT=19882.5	? (TO) TT=2400.08	No data	? (TO) TT=2400.5	? (TO) TT=2400.45	? (TO) TT=2401.41	? (TO) TT=2400.04	? (TO) TT=2400.07	? (TO) TT=2400.05	? (TO) TT=2400.07	? (TO) TT=2400.1	? (TO) TT=2400.04	? (TO) TT=2400.18	? (TO) TT=2520.15
BinPacking/ BinPacking-sum-skj2/ BinPacking-sum-n2w3b3r1.xml	SAT TO f=0 TT=20085.1 T1=579.21	? (TO) TT=2520.04	No data	No data	? (TO) TT=20107.4	SAT (TO) f=0 TT=20085.1 T1=579.21	? (TO) TT=2520.12	? (TO) TT=2520.11	? (TO) TT=2520.02	? (TO) TT=2520.06	? (TO) TT=2520.98	? (TO) TT=2520.11	? (TO) TT=2519.78	? (TO) TT=2519.73	? (TO) TT=2520.11	? (TO) TT=2520.05	? (TO) TT=2520.1	? (TO) TT=19918	? (TO) TT=19899.4	? (TO) TT=2400.04	No data	? (TO) TT=2400.68	? (TO) TT=2400.43	? (TO) TT=2402.27	? (TO) TT=2400.07	? (TO) TT=2400.05	? (TO) TT=2400.06	? (TO) TT=2400.08	? (TO) TT=2400.09	? (TO) TT=2400.06	? (TO) TT=2416.16	? TT=1622.15
BinPacking/ BinPacking-sum-skj2/ BinPacking-sum-n2w4b2r4.xml	SAT TO f=0 TT=20086.801 T1=87.49	? (TO) TT=2520.08	No data	No data	SAT (TO) f=0 TT=20101.6 T1=6.44	SAT (TO) f=0 TT=20086.801 T1=87.49	? (TO) TT=2520.05	? (TO) TT=2520.1	? (TO) TT=2520.03	? (TO) TT=2520.09	? (TO) TT=2520.73	? (TO) TT=2520.04	? (TO) TT=2520.07	? (TO) TT=2519.79	? (TO) TT=2520.11	? (TO) TT=2520.07	? (TO) TT=2520.05	? (TO) TT=19880.6	? (TO) TT=19888.9	? (TO) TT=2400.05	No data	SAT (TO) f=0 TT=2400.3 T1=189.24	SAT (TO) f=0 TT=2400.35 T1=181.2	? (TO) TT=2401.51	? (TO) TT=2400.04	? (TO) TT=2400.09	? (TO) TT=2400.08	? (TO) TT=2400.11	? (TO) TT=2400.07	? (TO) TT=2400.04	? (TO) TT=2400.14	? (TO) TT=2520.19
BinPacking/ BinPacking-sum-skj2/ BinPacking-sum-n3w3b3r7.xml		? (TO) TT=2520.11	No data	No data	? (TO) TT=20075.1	? (TO) TT=20064.5	? (TO) TT=2520.04	? (TO) TT=2520.11	? (TO) TT=2520.08	? (TO) TT=2520.03	? (TO) TT=2521.82	? (TO) TT=2519.98	? (TO) TT=2519.88	? (TO) TT=2519.93	? (TO) TT=2520.05	? (TO) TT=2520.12	? (TO) TT=2520.09	? (TO) TT=19934	? (TO) TT=19958.199	? (TO) TT=2400.11	No data	? (TO) TT=2400.55	? (TO) TT=2400.38	? (TO) TT=2405.6	? (TO) TT=2400.04	? (TO) TT=2400.12	? (TO) TT=2400.01	? (TO) TT=2400.04	? (TO) TT=2400.02	? (TO) TT=2400.09	? (TO) TT=2416.33	? TT=1451.42
BinPacking/ BinPacking-sum-skj2/ BinPacking-sum-n3w4b3r3.xml		? (TO) TT=2520.07	No data	No data	? (TO) TT=20093.301	? (TO) TT=20094.9	? (TO) TT=2520.02	? (TO) TT=2520.08	? (TO) TT=2520.09	? (TO) TT=2520.04	? (TO) TT=2522.01	? (TO) TT=2520.05	? (TO) TT=2519.86	? (TO) TT=2520.03	? (TO) TT=2520.08	? (TO) TT=2520.11	? (TO) TT=2520.1	? (TO) TT=19935	? (TO) TT=19943.199	? (TO) TT=2400.1	No data	? (TO) TT=2400.75	? (TO) TT=2400.77	? (TO) TT=2405.31	? (TO) TT=2400.04	? (TO) TT=2400.03	? (TO) TT=2400.02	? (TO) TT=2400.11	? (TO) TT=2400.1	? (TO) TT=2400.02	? (TO) TT=2416.35	? (problem) TT=1482.34
BinPacking/ BinPacking-sum-skj2/ BinPacking-sum-n4w2b3r4.xml		? (TO) TT=2520.07	No data	No data	? (TO) TT=20028.801	? (TO) TT=20026.801	? (TO) TT=2520.05	? (TO) TT=2520.11	? (TO) TT=2520.12	? (TO) TT=2520.1	? (TO) TT=2525.9	? (TO) TT=2520.05	? (TO) TT=2519.8	? (TO) TT=2519.93	? (TO) TT=2520.11	? (TO) TT=2520.11	? (TO) TT=2520.09	? (TO) TT=19886.801	? (TO) TT=19896	? (TO) TT=2400.05	No data	? (TO) TT=2400.23	? (TO) TT=2400.34	? (TO) TT=2415.52	? (TO) TT=2400.04	? (TO) TT=2400.09	? (TO) TT=2400.1	? (TO) TT=2400.05	? (TO) TT=2400.06	? (TO) TT=2400.1	? (TO) TT=2416.11	? (problem) TT=1407.86
BinPacking/ BinPacking-sum-skj2/ BinPacking-sum-n4w3b2r8.xml		? (TO) TT=2520.06	No data	No data	? (TO) TT=20074.199	? (TO) TT=20054.199	? (TO) TT=2520.09	? (TO) TT=2520.04	? (TO) TT=2520.11	? (TO) TT=2520.04	? (TO) TT=2522.68	? (TO) TT=2520.04	? (TO) TT=2519.98	? (TO) TT=2519.93	? (TO) TT=2520.06	? (TO) TT=2520.05	? (TO) TT=2520.11	? (TO) TT=19925.301	? (TO) TT=19955.1	? (TO) TT=2400.04	No data	? (TO) TT=2400.37	? (TO) TT=2400.2	? (TO) TT=2406.06	? (TO) TT=2400.05	? (TO) TT=2400.01	? (TO) TT=2400.08	? (TO) TT=2400.12	? (TO) TT=2400.11	? (TO) TT=2400.08	? (TO) TT=2416.24	? TT=1464.75
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
BinPacking/ BinPacking-sum-skj2/ BinPacking-sum-n4w4b3r4.xml		? (TO) TT=2520.12	No data	No data	? (TO) TT=19986.1	? (TO) TT=19970	? (TO) TT=2520.13	? (TO) TT=2520.07	? (TO) TT=2520.06	? (TO) TT=2520.03	? (TO) TT=2524.37	? (TO) TT=2519.61	? (TO) TT=2519.87	? (TO) TT=2519.65	? (TO) TT=2520.03	? (TO) TT=2520.03	? (TO) TT=2520.06	? (TO) TT=19852.5	? (TO) TT=19844.301	? (TO) TT=2400.1	No data	? (TO) TT=2400.43	? (TO) TT=2400.77	? (TO) TT=2408.35	? (TO) TT=2400.01	? (TO) TT=2400.02	? (TO) TT=2400.1	? (TO) TT=2400.03	? (TO) TT=2400.02	? (TO) TT=2400.07	? (TO) TT=2416.15	? (problem) TT=1442.48
BinPacking/ BinPacking-sum-sw100/ BinPacking-sum-sw100-11.xml		? (TO) TT=2520.04	No data	No data	? (TO) TT=20104.4	? (TO) TT=20072.5	? (TO) TT=2520.06	? (TO) TT=2520.09	? (TO) TT=2520.07	? (TO) TT=2520.06	? (TO) TT=2520.65	? (TO) TT=2520.02	? (TO) TT=2519.69	? (TO) TT=2519.99	? (TO) TT=2520.12	? (TO) TT=2520.05	? (TO) TT=2520.02	? (TO) TT=19876.6	? (TO) TT=19869.9	? (TO) TT=2400.04	No data	? (TO) TT=2400.79	? (TO) TT=2400.33	? (TO) TT=2401.15	? (TO) TT=2400.02	? (TO) TT=2400.04	? (TO) TT=2400.06	? (TO) TT=2400.1	? (TO) TT=2400.07	? (TO) TT=2400.16	? (TO) TT=2400.13	? (TO) TT=2522.37
BinPacking/ BinPacking-tab-ft/ BinPacking-tab-ft060-06.xml	SAT TO f=3 TT=2400.01 T1=2.3	SAT (TO) f=3 TT=2520.11 T1=6.85	No data	No data	SAT (TO) f=3 TT=20097.699 T1=16.83	SAT (TO) f=3 TT=20080.9 T1=18.73	SAT (TO) f=3 TT=2520.1 T1=1718.91	SAT (TO) f=3 TT=2520.04 T1=1738.46	SAT (TO) f=3 TT=2520.05 T1=531.27	SAT (TO) f=3 TT=2520.11 T1=515.87	? (TO) TT=2520.63	SAT (TO) f=0 TT=2519.9 T1=0.27	SAT (TO) f=1 TT=2520.02 T1=624.93	SAT (TO) f=3 TT=2519.86 T1=2.3	SAT (TO) f=3 TT=2520.05 T1=7.94	SAT (TO) f=3 TT=2520.07 T1=960.94	SAT (TO) f=3 TT=2520.12 T1=9.76	SAT (TO) f=3 TT=19883.699 T1=3.37	SAT (TO) f=3 TT=19923.801 T1=12.9	SAT (TO) f=3 TT=2400.05 T1=6.86	No data	SAT (TO) f=3 TT=2400.03 T1=15.06	SAT (TO) f=3 TT=2400.24 T1=11.17	? (TO) TT=2401.14	? (TO) TT=2400.07	? (TO) TT=2400.04	SAT (TO) f=3 TT=2400.01 T1=2.3	SAT (TO) f=3 TT=2400.1 T1=26.96	SAT (TO) f=3 TT=2400.03 T1=1005.61	SAT (TO) f=3 TT=2400.04 T1=9.01	? (TO) TT=2400.17	? (TO) TT=2520.09
BinPacking/ BinPacking-tab-ft/ BinPacking-tab-ft120-10.xml	SAT TO f=7 TT=2400.06 T1=13.18	SAT (TO) f=7 TT=2520.07 T1=162.86	No data	No data	SAT (TO) f=5 TT=19951.301 T1=168.42	SAT (TO) f=7 TT=19983.4 T1=760.34	? (TO) TT=2520.05	? (TO) TT=2520.07	SAT (TO) f=0 TT=2520.12 T1=816.08	SAT (TO) f=0 TT=2520.12 T1=836.46	? (TO) TT=2521.16	? (TO) TT=2519.72	? (TO) TT=2519.8	SAT (TO) f=7 TT=2520.03 T1=434.99	SAT (TO) f=7 TT=2520.13 T1=696.62	SAT (TO) f=6 TT=2520.12 T1=17.85	SAT (TO) f=7 TT=2520.04 T1=454.26	SAT (TO) f=7 TT=20040.9 T1=13.18	SAT (TO) f=7 TT=20037.6 T1=128.59	SAT (TO) f=7 TT=2400.06 T1=161.71	No data	SAT (TO) f=7 TT=2400.74 T1=281.73	SAT (TO) f=7 TT=2400.57 T1=311.51	? (TO) TT=2402.8	? (TO) TT=2400.07	? (TO) TT=2400.07	SAT (TO) f=7 TT=2400.1 T1=408.99	SAT (TO) f=7 TT=2400.12 T1=1587.04	SAT (TO) f=6 TT=2400.03 T1=18.24	SAT (TO) f=7 TT=2400.09 T1=343.63	? TT=1125.02	? TT=493.992
BinPacking/ BinPacking-tab-ft/ BinPacking-tab-ft120-15.xml	SAT TO f=6 TT=2400.05 T1=11.02	SAT (TO) f=6 TT=2520.11 T1=277.3	No data	No data	SAT (TO) f=4 TT=19984.199 T1=489.28	SAT (TO) f=6 TT=19972.801 T1=1700.41	SAT (TO) f=0 TT=2520.02 T1=284.4	SAT (TO) f=0 TT=2520.09 T1=285.07	SAT (TO) f=0 TT=2520.07 T1=294.32	SAT (TO) f=0 TT=2520.08 T1=297.53	? (TO) TT=2521.3	? (TO) TT=2520.04	? (TO) TT=2520.1	SAT (TO) f=6 TT=2519.94 T1=664.59	SAT (TO) f=6 TT=2520.09 T1=355.67	SAT (TO) f=4 TT=2520.1 T1=2.99	SAT (TO) f=6 TT=2520.07 T1=164.82	SAT (TO) f=6 TT=20049.5 T1=11.02	SAT (TO) f=6 TT=20044.4 T1=69.87	SAT (TO) f=6 TT=2400.05 T1=280.98	No data	SAT (TO) f=6 TT=2400.06 T1=100.3	SAT (TO) f=6 TT=2400.3 T1=106.47	? (TO) TT=2402.82	? (TO) TT=2400.07	? (TO) TT=2400.1	SAT (TO) f=6 TT=2400.1 T1=709.56	SAT (TO) f=6 TT=2400.05 T1=774.5	SAT (TO) f=4 TT=2400.11 T1=2.81	SAT (TO) f=6 TT=2400.05 T1=306.28	? TT=1028.01	? TT=487.734
BinPacking/ BinPacking-tab-ft/ BinPacking-tab-ft120-19.xml	SAT TO f=6 TT=2400.07 T1=12.35	SAT (TO) f=6 TT=2520.06 T1=70.73	No data	No data	SAT (TO) f=5 TT=19997.699 T1=1438.54	SAT (TO) f=5 TT=19981.199 T1=742.1	SAT (TO) f=0 TT=2520.11 T1=412.64	SAT (TO) f=0 TT=2520.1 T1=413.63	SAT (TO) f=1 TT=2520.1 T1=1128.8	SAT (TO) f=1 TT=2520.07 T1=1145.49	? (TO) TT=2521.52	? (TO) TT=2520.03	? (TO) TT=2520.04	SAT (TO) f=6 TT=2519.68 T1=1396.71	SAT (TO) f=6 TT=2520.04 T1=695.1	SAT (TO) f=3 TT=2520.11 T1=3.57	SAT (TO) f=6 TT=2520.09 T1=309.64	SAT (TO) f=6 TT=20032.301 T1=12.35	SAT (TO) f=6 TT=20030 T1=55.61	SAT (TO) f=6 TT=2400.07 T1=70.54	No data	SAT (TO) f=6 TT=2400.25 T1=49.52	SAT (TO) f=6 TT=2400.61 T1=49.3	? (TO) TT=2402.98	? (TO) TT=2400.03	? (TO) TT=2400.03	SAT (TO) f=6 TT=2400.1 T1=1476.86	SAT (TO) f=6 TT=2400.12 T1=1206.06	SAT (TO) f=3 TT=2400.08 T1=3.54	SAT (TO) f=6 TT=2400.11 T1=301.37	? TT=874.731	? TT=354.819
BinPacking/ BinPacking-tab-ft/ BinPacking-tab-ft249-06.xml	SAT TO f=15 TT=2400.08 T1=354.02	SAT (TO) f=5 TT=2520.09 T1=2219.95	No data	No data	? (TO) TT=19847.5	? (TO) TT=19808.801	? (TO) TT=2520.04	? (TO) TT=2520.08	? (TO) TT=2520.09	? (TO) TT=2520.02	? (TO) TT=2523.31	? (TO) TT=2519.36	? (TO) TT=2520	? (TO) TT=2519.94	SAT (TO) f=15 TT=2520.06 T1=926.64	SAT (TO) f=13 TT=2520.1 T1=340.65	SAT (TO) f=15 TT=2520.08 T1=354.02	? (TO) TT=2934.58	SAT (TO) f=9 TT=19628 T1=2989.39	SAT (TO) f=5 TT=2400.09 T1=2234.85	No data	? TT=225.279	? TT=233.895	? (TO) TT=2408.99	? (TO) TT=2400.04	? (TO) TT=2400.06	? (TO) TT=2400.09	SAT (TO) f=15 TT=2400.08 T1=725.95	SAT (TO) f=13 TT=2400.06 T1=336.31	SAT (TO) f=14 TT=2400.12 T1=2300.63	? TT=970.002	? TT=444.478
BinPacking/ BinPacking-tab-ft/ BinPacking-tab-ft249-09.xml	SAT TO f=15 TT=2400.08 T1=312.32	SAT (TO) f=4 TT=2520.09 T1=1528.4	No data	No data	? (TO) TT=19803.199	? (TO) TT=19770.801	? (TO) TT=2520.07	? (TO) TT=2520.05	? (TO) TT=2520.11	? (TO) TT=2520.03	? (TO) TT=2527.76	? (TO) TT=2520.07	? (TO) TT=2520.05	? (TO) TT=2519.99	SAT (TO) f=15 TT=2520.11 T1=947.34	SAT (TO) f=11 TT=2520.11 T1=31.16	SAT (TO) f=15 TT=2520.05 T1=1576.38	? TT=865.23	SAT (TO) f=14 TT=19613.5 T1=4926.38	SAT (TO) f=4 TT=2400.07 T1=1531.78	No data	? TT=248.595	? TT=246.657	? (TO) TT=2414.42	? (TO) TT=2400.1	? (TO) TT=2400.02	? (TO) TT=2400.09	SAT (TO) f=15 TT=2400.1 T1=312.32	SAT (TO) f=11 TT=2400.07 T1=29.13	SAT (TO) f=15 TT=2400.08 T1=450.77	? TT=965.147	? TT=552.334
BinPacking/BinPacking-tab-fu/ BinPacking-tab-fu0120-17.xml	SAT TO f=22 TT=2400.06 T1=37.39	SAT (TO) f=21 TT=2520.12 T1=79.71	No data	No data	? (TO) TT=20005.9	? (TO) TT=20002.4	? (TO) TT=2520.11	? (TO) TT=2520.05	? (TO) TT=2520.07	? (TO) TT=2520.07	? (TO) TT=2521.7	? (TO) TT=2519.77	? (TO) TT=2520.03	SAT (TO) f=22 TT=2519.94 T1=164.99	SAT (TO) f=22 TT=2520.07 T1=480.07	SAT (TO) f=21 TT=2520.11 T1=4.38	SAT (TO) f=22 TT=2520.08 T1=127.57	SAT (TO) f=21 TT=15035.2 T1=31.58	SAT (TO) f=22 TT=15028.7 T1=2087.86	SAT (TO) f=21 TT=2400.11 T1=76.4	No data	? (TO) TT=2400.26	? (TO) TT=2400.12	? (TO) TT=2404.04	? (TO) TT=2400.08	? (TO) TT=2400.07	SAT (TO) f=22 TT=2400.07 T1=177.5	SAT (TO) f=22 TT=2400.06 T1=208.84	SAT (TO) f=21 TT=2400.06 T1=4.33	SAT (TO) f=22 TT=2400.09 T1=37.39	? (TO) TT=2415.76	? TT=2021.21
BinPacking/BinPacking-tab-fu/ BinPacking-tab-fu0250-08.xml	SAT TO f=41 TT=2400.07 T1=498.51	SAT (TO) f=41 TT=2520.06 T1=996.85	No data	No data	? (TO) TT=18866.801	? (TO) TT=18956.801	? (TO) TT=2520.09	? (TO) TT=2520.12	? (TO) TT=2520.04	? (TO) TT=2520.11	? (TO) TT=2524.41	? (TO) TT=2520.08	? (TO) TT=2520.08	? (TO) TT=2519.94	SAT (TO) f=41 TT=2520.14 T1=1657.69	SAT (TO) f=37 TT=2520.06 T1=44.88	SAT (TO) f=41 TT=2520.14 T1=498.51	SAT (TO) f=39 TT=17944 T1=832.87	SAT (TO) f=35 TT=17948.4 T1=17890.15	SAT (TO) f=41 TT=2400.11 T1=1011.17	No data	? (TO) TT=2400.42	? (TO) TT=2400.76	? (TO) TT=2408.97	? (TO) TT=2400.06	? (TO) TT=2400.06	? (TO) TT=2400.1	SAT (TO) f=41 TT=2400.2 T1=1051.17	SAT (TO) f=37 TT=2400.13 T1=45.44	SAT (TO) f=41 TT=2400.07 T1=647.49	? (TO) TT=2416.53	? TT=2087.12
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
BinPacking/BinPacking-tab-fu/ BinPacking-tab-fu0250-15.xml	SAT TO f=37 TT=2400.1 T1=1408.03	SAT (TO) f=37 TT=2520.05 T1=1416.99	No data	No data	? (TO) TT=18735.801	? (TO) TT=18797.6	? (TO) TT=2520.09	? (TO) TT=2520.1	? (TO) TT=2520.08	? (TO) TT=2520.09	? (TO) TT=2525.45	? (TO) TT=2519.76	? (TO) TT=2520.08	? (TO) TT=2519.67	? (TO) TT=2520.11	? (TO) TT=2520.06	? (TO) TT=2520.1	SAT (TO) f=36 TT=3898.33 T1=404.25	SAT (TO) f=36 TT=2944.32 T1=811.88	SAT (TO) f=37 TT=2400.1 T1=1408.03	No data	? TT=461.844	? TT=538.065	? (TO) TT=2412.34	? (TO) TT=2400.07	? (TO) TT=2400.06	? (TO) TT=2400.05	? (TO) TT=2400.08	? (TO) TT=2400.08	? (TO) TT=2400.1	? TT=2363.03	? TT=1198.71
BinPacking/BinPacking-tab-fu/ BinPacking-tab-fu0500-09.xml	SAT TO f=75 TT=2400.11 T1=1143.2	SAT (TO) f=56 TT=2520.07 T1=1809.93	No data	No data	? TT=820.424	? TT=750.465	? (TO) TT=2520.09	? (TO) TT=2520.27	? (TO) TT=2520.05	? (TO) TT=2520.13	? (TO) TT=2527.82	? (TO) TT=2519.84	? (TO) TT=2519.92	? (TO) TT=2520.19	SAT (TO) f=75 TT=2520.07 T1=1143.2	SAT (TO) f=69 TT=2520.12 T1=856.89	SAT (TO) f=75 TT=2520.12 T1=1572.69	? TT=2729.19	? TT=3444.42	SAT (TO) f=56 TT=2400.05 T1=1826.48	No data	? TT=435.212	? TT=423.516	? (TO) TT=2415.38	? (TO) TT=2400.05	? (TO) TT=2400.02	? (TO) TT=2400.18	SAT (TO) f=74 TT=2400.53 T1=1376.74	SAT (TO) f=69 TT=2400.11 T1=858.12	SAT (TO) f=75 TT=2400.11 T1=1364.08	? (TO) TT=2415.24	? TT=2322.61
BinPacking/BinPacking-tab-fu/ BinPacking-tab-fu0500-12.xml	SAT TO f=73 TT=2520.08 T1=2119.45	SAT (TO) f=71 TT=2520.09 T1=2181.37	No data	No data	? TT=706.875	? (TO) TT=11315.4	? (TO) TT=2520.05	? (TO) TT=2520.08	? (TO) TT=2520.06	? (TO) TT=2520.1	? (TO) TT=2527.92	? (TO) TT=2519.97	? (TO) TT=2520	? (TO) TT=2520.16	SAT (TO) f=73 TT=2520.08 T1=2119.45	SAT (TO) f=55 TT=2520.08 T1=175	SAT (TO) f=72 TT=2520.32 T1=1120.19	? TT=1736.15	? TT=2473.28	SAT (TO) f=71 TT=2400.08 T1=2258.66	No data	? TT=441.368	? TT=390.719	? (TO) TT=2415.51	? (TO) TT=2400.01	? (TO) TT=2400.06	? (TO) TT=2400.19	SAT (TO) f=72 TT=2400.07 T1=675.55	SAT (TO) f=55 TT=2400.13 T1=177.24	SAT (TO) f=72 TT=2400.14 T1=1176.25	? (TO) TT=2414.77	? TT=1727.8
BinPacking/ BinPacking-tab-sw100/ BinPacking-tab-sw100-15.xml	SAT TO f=0 TT=2400.09 T1=30.77	SAT (TO) f=0 TT=2520.05 T1=30.77	No data	No data	? (TO) TT=15932.3	? TT=559.353	? TT=146.398	SAT (TO) f=0 TT=2520.12 T1=175.38	SAT (TO) f=0 TT=2521.94 T1=187.98	? TT=142.932	? (TO) TT=2521.99	SAT (TO) f=0 TT=2520.09 T1=35.08	? (TO) TT=2520.03	SAT (TO) f=0 TT=2519.95 T1=34.85	SAT (TO) f=0 TT=2520.15 T1=65.99	SAT (TO) f=0 TT=2520.1 T1=64.98	SAT (TO) f=0 TT=2520.09 T1=60.39	? TT=1189.53	? TT=2200.96	SAT (TO) f=0 TT=2400.13 T1=32.46	No data	? TT=233.425	? TT=214.394	? (TO) TT=2406.46	? (TO) TT=2400.01	? (TO) TT=2400.08	SAT (TO) f=0 TT=2400.13 T1=34.96	SAT (TO) f=0 TT=2400.09 T1=67.95	SAT (TO) f=0 TT=2400.09 T1=75.84	SAT (TO) f=0 TT=2400.12 T1=63.88	? (TO) TT=2416.11	? TT=1688.13
BinPacking/ BinPacking-tab-sw100/ BinPacking-tab-sw100-74.xml	SAT TO f=1 TT=2400.06 T1=96.09	SAT (TO) f=1 TT=2520.04 T1=875.04	No data	No data	? TT=484.257	? TT=492.621	SAT (TO) f=0 TT=2520.12 T1=159.09	SAT (TO) f=0 TT=2520.09 T1=158.66	SAT (TO) f=0 TT=2520.14 T1=171.85	SAT (TO) f=0 TT=2520.08 T1=173.38	SAT (TO) f=1 TT=2520.06 T1=493.57	SAT (TO) f=0 TT=2520.08 T1=155.56	SAT (TO) f=0 TT=2520.04 T1=612.12	SAT (TO) f=0 TT=2520 T1=258.59	SAT (TO) f=1 TT=2520.07 T1=149.07	SAT (TO) f=0 TT=2520.09 T1=37.33	SAT (TO) f=1 TT=2520.04 T1=169.79	? TT=1172.01	? (TO) TT=16464.301	SAT (TO) f=1 TT=2400.12 T1=891.76	No data	? TT=219.443	? TT=225.216	SAT (TO) f=1 TT=2400.09 T1=491.1	? (TO) TT=2400.08	? (TO) TT=2400.01	SAT (TO) f=0 TT=2400.09 T1=262.84	SAT (TO) f=1 TT=2400.06 T1=102.24	SAT (TO) f=0 TT=2400.16 T1=35.32	SAT (TO) f=1 TT=2400.1 T1=96.09	? (TO) TT=2415.7	? TT=2081.48
BinPacking/ BinPacking-tab-sw120/ BinPacking-tab-sw120-10.xml	OPT f=1 TT=679.957 T1=85.19	OPT f=1 TT=679.957 T1=85.19	No data	No data	? TT=493.844	? TT=516.101	? TT=163.708	? TT=164.959	? TT=174.503	? TT=139.487	SAT (TO) f=0 TT=2520.09 T1=266.15	SAT (TO) f=0 TT=2520.09 T1=749.46	? (TO) TT=2520.01	SAT (TO) f=0 TT=2520.02 T1=2244.94	SAT (TO) f=0 TT=2523.74 T1=96.62	SAT (TO) f=1 TT=2520.11 T1=280.94	SAT (TO) f=0 TT=2520.14 T1=89.18	? TT=1525.24	? TT=3343.74	OPT f=1 TT=713.808 T1=88.23	No data	? TT=264.223	? TT=258.441	SAT (TO) f=0 TT=2400.09 T1=275.96	? (TO) TT=2400.07	? (TO) TT=2400.12	SAT (TO) f=0 TT=2400.33 T1=2284.31	SAT (TO) f=0 TT=2403.62 T1=102.14	SAT (TO) f=1 TT=2400.09 T1=303.71	SAT (TO) f=0 TT=2400.15 T1=117.46	? (TO) TT=2416.15	? (TO) TT=2527.99
BinPacking/ BinPacking-tab-sw120/ BinPacking-tab-sw120-31.xml	SAT TO f=0 TT=2400.04 T1=45.29	SAT (TO) f=0 TT=2520.09 T1=45.29	No data	No data	? TT=496.891	? TT=487.467	? TT=147.268	? TT=164.799	? TT=144.811	? TT=150.738	SAT (TO) f=0 TT=2520.09 T1=515.25	? (TO) TT=2520.09	? (TO) TT=2519.64	? (TO) TT=2520.14	SAT (TO) f=0 TT=2520.12 T1=82.67	SAT (TO) f=0 TT=2520.16 T1=78.31	SAT (TO) f=0 TT=2520.07 T1=87.99	? TT=1473.98	? TT=2131.79	SAT (TO) f=0 TT=2400.04 T1=48.74	No data	? TT=215.772	? TT=212.066	SAT (TO) f=0 TT=2400.08 T1=622.26	? (TO) TT=2400.06	? (TO) TT=2400.1	? (TO) TT=2400.47	SAT (TO) f=0 TT=2400.09 T1=80.7	SAT (TO) f=0 TT=2400.12 T1=82.79	SAT (TO) f=0 TT=2400.15 T1=79.64	? (TO) TT=2416.29	? TT=1519.73
BinPacking/ BinPacking-tab-sw120/ BinPacking-tab-sw120-41.xml	SAT TO f=0 TT=2400.14 T1=47.6	SAT (TO) f=0 TT=2520.05 T1=47.6	No data	No data	? TT=483.238	? TT=446.89	? TT=159.307	? TT=149.041	? TT=167.691	? TT=159.293	? (TO) TT=2522.36	? (TO) TT=2520.09	? (TO) TT=2519.88	? (TO) TT=2520.22	SAT (TO) f=0 TT=2520.1 T1=85.74	SAT (TO) f=0 TT=2520.09 T1=90.01	SAT (TO) f=0 TT=2520.13 T1=88.16	? TT=1118.87	? TT=2513.38	SAT (TO) f=0 TT=2400.17 T1=50.93	No data	? TT=241.483	? TT=240.988	? (TO) TT=2405.32	? (TO) TT=2400.09	? (TO) TT=2400.06	? (TO) TT=2400.37	SAT (TO) f=0 TT=2406.17 T1=92.48	SAT (TO) f=0 TT=2400.14 T1=87.08	SAT (TO) f=0 TT=2403.61 T1=88.75	? (TO) TT=2416.24	? TT=1176.04
BinPacking/ BinPacking-tab-sw120/ BinPacking-tab-sw120-50.xml	SAT TO f=0 TT=2400.08 T1=51.49	SAT (TO) f=0 TT=2520.06 T1=62.79	No data	No data	? TT=507.982	? TT=509.645	? TT=155.335	? TT=156.367	? TT=157.693	? TT=166.441	SAT (TO) f=0 TT=2520.15 T1=2391.59	SAT (TO) f=0 TT=2520.07 T1=51.49	? (TO) TT=2520.03	? (TO) TT=2520.12	SAT (TO) f=0 TT=2520.14 T1=83.79	SAT (TO) f=0 TT=2520.33 T1=87.66	SAT (TO) f=0 TT=2520.1 T1=89.87	? TT=1011.76	? TT=2547.81	SAT (TO) f=0 TT=2414.83 T1=66.31	No data	? TT=229.384	? TT=221.764	? (TO) TT=2406.68	? (TO) TT=2400.09	? (TO) TT=2400.04	? (TO) TT=2400.49	SAT (TO) f=0 TT=2408.39 T1=90.98	SAT (TO) f=0 TT=2400.08 T1=102.74	SAT (TO) f=0 TT=2400.13 T1=89.85	? (TO) TT=2415.66	? (TO) TT=2527.92
Blackhole/ Blackhole-m1-s04/ Blackhole-04-3-07.xml	SAT TT=0.018	SAT TT=1.569	? (NS) TT=0.006	? (NS) TT=0.006	SAT TT=1.463	SAT TT=1.445	SAT TT=0.937	SAT TT=0.915	SAT TT=0.961	SAT TT=0.979	SAT TT=6.597	SAT TT=166.101	SAT TT=35.034	SAT TT=0.018	No data	SAT TT=1.196	No data	SAT TT=18.545	SAT TT=4.957	SAT TT=1.886	? (NS) TT=0.01	SAT TT=1.544	SAT TT=1.554	SAT TT=8.32	SAT TT=166.962	SAT TT=35.588	SAT TT=0.03	No data	SAT TT=1.264	No data	SAT TT=3.598	SAT TT=2.943
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
Blackhole/ Blackhole-m1-s04/ Blackhole-04-3-09.xml	SAT TT=0.018	SAT TT=2.357	? (NS) TT=0.007	? (NS) TT=0.006	SAT TT=1.429	SAT TT=1.468	SAT TT=0.95	SAT TT=0.952	SAT TT=0.977	SAT TT=0.967	SAT TT=6.898	SAT TT=1714	SAT TT=406.955	SAT TT=0.018	No data	SAT TT=1.195	No data	SAT TT=15.737	SAT TT=4.766	SAT TT=2.815	? (NS) TT=0.013	SAT TT=1.596	SAT TT=1.536	SAT TT=8.001	SAT TT=1704.28	SAT TT=406.688	SAT TT=0.03	No data	SAT TT=1.214	No data	SAT TT=2.902	SAT TT=2.386
Blackhole/ Blackhole-m1-s07/ Blackhole-07-3-10.xml	SAT TT=0.035	? (TO) TT=2520.05	? (NS) TT=0.007	? (NS) TT=0.007	SAT TT=2.106	SAT TT=1.891	SAT TT=1.222	SAT TT=1.223	SAT TT=2.117	SAT TT=2.104	SAT TT=7.572	? (TO) TT=2520.01	? (TO) TT=2520	SAT TT=0.035	No data	SAT TT=2.702	No data	SAT TT=11889.1	SAT TT=6.488	? (TO) TT=2400.12	? (NS) TT=0.012	SAT TT=2.111	SAT TT=2.297	SAT TT=9.398	? (TO) TT=2400.04	? (TO) TT=2400.04	SAT TT=0.077	No data	SAT TT=3.098	No data	SAT TT=12.237	SAT TT=11.754
Blackhole/ Blackhole-m1-s10/ Blackhole-10-3-01.xml	SAT TT=0.071	? (TO) TT=2520.03	? (NS) TT=0.008	? (NS) TT=0.008	SAT TT=2.841	SAT TT=2.894	SAT TT=1.202	SAT TT=1.197	SAT TT=1.385	SAT TT=1.405	SAT TT=8.707	? (TO) TT=2519.83	? (TO) TT=2520.06	SAT TT=0.071	No data	SAT TT=3.26	No data	SAT (TO) TT=19853.9	SAT TT=7.197	? (TO) TT=2400.05	? (NS) TT=0.011	SAT TT=2.777	SAT TT=2.719	SAT TT=11.468	? (TO) TT=2400.04	? (TO) TT=2400.05	SAT TT=0.106	No data	SAT TT=3.187	No data	SAT TT=68.452	SAT TT=70.163
Blackhole/ Blackhole-m1-s10/ Blackhole-10-3-04.xml	SAT TT=0.09	? (TO) TT=2520.07	? (NS) TT=0.008	? (NS) TT=0.008	SAT TT=3.439	SAT TT=3.392	SAT TT=1.735	SAT TT=1.77	SAT TT=5.359	SAT TT=5.864	SAT TT=8.781	? (TO) TT=2520.02	? (TO) TT=2519.91	SAT TT=0.09	No data	SAT TT=1.68	No data	SAT (TO) TT=19852.699	SAT TT=8.029	? (TO) TT=2400.06	? (NS) TT=0.014	SAT TT=3.731	SAT TT=4.15	SAT TT=10.275	? (TO) TT=2400.05	? (TO) TT=2400.06	SAT TT=0.181	No data	SAT TT=1.94	No data	SAT TT=91.493	SAT TT=89.668
Blackhole/ Blackhole-m1-s13/ Blackhole-13-3-01.xml	UNSAT TT=0.117	? (TO) TT=2520.11	? (NS) TT=0.01	? (NS) TT=0.01	UNSAT TT=2.811	UNSAT TT=2.781	UNSAT TT=1.191	UNSAT TT=1.194	UNSAT TT=1.339	UNSAT TT=1.292	UNSAT TT=7.889	? (TO) TT=2519.19	? (TO) TT=2519.73	UNSAT TT=0.117	No data	UNSAT TT=1.514	No data	UNSAT TT=1.563	UNSAT TT=1.59	? (TO) TT=2400.02	? (NS) TT=0.018	UNSAT TT=2.59	UNSAT TT=2.668	UNSAT TT=9.776	? (TO) TT=2400.05	? (TO) TT=2400.01	UNSAT TT=0.168	No data	UNSAT TT=1.831	No data	UNSAT TT=9.286	UNSAT TT=5.885
Blackhole/ Blackhole-xcsp2-s04/ Blackhole-4-04-2_X2.xml	UNSAT TT=0.225	UNSAT TT=2.136	UNSAT TT=0.34	UNSAT TT=0.34	UNSAT TT=11.764	UNSAT TT=7.971	UNSAT TT=2.971	UNSAT TT=2.883	UNSAT TT=4.843	UNSAT TT=5.041	UNSAT TT=15.437	UNSAT TT=0.225	UNSAT TT=0.141	UNSAT TT=1.486	No data	UNSAT TT=3.016	No data	UNSAT TT=13.524	UNSAT TT=12.072	UNSAT TT=2.672	UNSAT TT=0.391	UNSAT TT=11.393	UNSAT TT=11.085	UNSAT TT=16.307	UNSAT TT=0.277	UNSAT TT=0.181	UNSAT TT=1.69	No data	UNSAT TT=3.179	No data	? (TO) TT=2400.12	? (TO) TT=2520.1
Blackhole/ Blackhole-xcsp2-s04/ Blackhole-4-04-9_X2.xml	UNSAT TT=0.228	UNSAT TT=2.174	UNSAT TT=0.338	UNSAT TT=0.341	UNSAT TT=10.977	UNSAT TT=13.173	UNSAT TT=3.058	UNSAT TT=2.947	UNSAT TT=4.968	UNSAT TT=5.639	UNSAT TT=13.456	UNSAT TT=0.228	UNSAT TT=0.14	UNSAT TT=1.491	No data	UNSAT TT=3.142	No data	UNSAT TT=11.977	UNSAT TT=14.125	UNSAT TT=2.656	UNSAT TT=0.397	UNSAT TT=12.824	UNSAT TT=11.579	UNSAT TT=17.166	UNSAT TT=0.252	UNSAT TT=0.198	UNSAT TT=1.599	No data	UNSAT TT=3.346	No data	? (TO) TT=2400.16	? (TO) TT=2520.12
Blackhole/ Blackhole-xcsp2-s07/ Blackhole-4-07-6_X2.xml	UNSAT TT=2382.8	? (TO) TT=2520.09	? (TO) TT=2519.76	? (TO) TT=2519.81	? (TO) TT=20076.1	? (TO) TT=20074.199	? (TO) TT=2520.08	? (TO) TT=2520.09	? (TO) TT=2520.03	? (TO) TT=2520.1	? (TO) TT=2520.67	? (TO) TT=2519.92	? (TO) TT=2519.69	? (TO) TT=2520.06	No data	? (TO) TT=2520.07	No data	? (TO) TT=19874.699	? (TO) TT=19862.5	? (TO) TT=2400.03	? TT=2400.01	? (TO) TT=2400.48	? (TO) TT=2400.12	? (TO) TT=2401.44	? (TO) TT=2400.08	? (TO) TT=2400.09	? (TO) TT=2400.06	No data	? (TO) TT=2400.05	No data	UNSAT TT=2382.8	? (TO) TT=2520.14
Blackhole/ Blackhole-xcsp2-s07/ Blackhole-4-07h-5_X2.xml		? (TO) TT=2520.02	? (TO) TT=2519.98	? (TO) TT=2519.77	? (TO) TT=20076.4	? (TO) TT=20072.9	? (TO) TT=2520.07	? (TO) TT=2520.09	? (TO) TT=2520.11	? (TO) TT=2520.02	? (TO) TT=2520.57	? (TO) TT=2519.94	? (TO) TT=2519.85	? (TO) TT=2519.67	No data	? (TO) TT=2520.11	No data	? (TO) TT=19853.301	? (TO) TT=19846.801	? (TO) TT=2400.07	? TT=2400.01	? (TO) TT=2400.11	? (TO) TT=2400.32	? (TO) TT=2401.39	? (TO) TT=2400.08	? (TO) TT=2400.07	? (TO) TT=2400.04	No data	? (TO) TT=2400.06	No data	? (TO) TT=2400.14	? (TO) TT=2520.11
Blackhole/ Blackhole-xcsp2-s07/ Blackhole-4-07h-9_X2.xml		? (TO) TT=2520.03	? (TO) TT=2520	? (TO) TT=2519.8	? (TO) TT=20076.699	? (TO) TT=20063.199	? (TO) TT=2520.12	? (TO) TT=2520.04	? (TO) TT=2520.07	? (TO) TT=2520.1	? (TO) TT=2520.64	? (TO) TT=2519.83	? (TO) TT=2519.38	? (TO) TT=2519.73	No data	? (TO) TT=2520.12	No data	? (TO) TT=19855.4	? (TO) TT=19855.801	? (TO) TT=2400.05	? TT=2400.01	? (TO) TT=2400.52	? (TO) TT=2400.58	? (TO) TT=2401.5	? (TO) TT=2400.09	? (TO) TT=2400.1	? (TO) TT=2400.05	No data	? (TO) TT=2400.1	No data	? (TO) TT=2400.07	? (TO) TT=2520.13
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
Blackhole/ Blackhole-xcsp2-s13/ Blackhole-4-13-2_X2.xml		? (TO) TT=2520.08	? (TO) TT=2519.8	? (TO) TT=2519.78	? (TO) TT=20096.6	? (TO) TT=20097.6	? (TO) TT=2520.06	? (TO) TT=2520.11	? (TO) TT=2520.06	? (TO) TT=2520.06	? (TO) TT=2521.01	? (TO) TT=2519.91	? (TO) TT=2519.87	? (TO) TT=2519.89	No data	? (TO) TT=2520.06	No data	? (TO) TT=19846.9	? (TO) TT=19842.6	? (TO) TT=2400.07	? TT=2400.05	? (TO) TT=2400.13	? (TO) TT=2400.46	? (TO) TT=2402.61	? (TO) TT=2400.07	? (TO) TT=2400.06	? (TO) TT=2400.05	No data	? (TO) TT=2400.03	No data	? (TO) TT=2401.4	? (TO) TT=2520.1
BusScheduling/ BusScheduling-cnt-s1/ BusScheduling-cnt-c1a.xml	SAT TO f=29 TT=2400.1 T1=67.42	SAT (TO) f=30 TT=2520.1 T1=663.15	No data	No data	SAT (TO) f=36 TT=20100.199 T1=2.54	SAT (TO) f=36 TT=20095.5 T1=2.51	? (TO) TT=2520.03	? (TO) TT=2520.07	? (TO) TT=2520.1	? (TO) TT=2520.06	SAT (TO) f=29 TT=2520.08 T1=69.25	? (TO) TT=2520.09	? (TO) TT=2520.03	SAT (TO) f=29 TT=2520.07 T1=182.11	? (TO) TT=2520.08	? TT=2519.53	? (TO) TT=2520.2	SAT (TO) f=31 TT=19921.5 T1=249.13	SAT (TO) f=31 TT=19914.9 T1=2007.88	SAT (TO) f=30 TT=2400.03 T1=675.77	No data	SAT (TO) f=35 TT=2400.46 T1=142.09	SAT (TO) f=35 TT=2400.51 T1=139.08	SAT (TO) f=29 TT=2400.14 T1=67.42	? (TO) TT=2400.09	? (TO) TT=2400.08	SAT (TO) f=29 TT=2400.1 T1=176.2	? (TO) TT=2400.1	? (TO) TT=2400.1	? (TO) TT=2400.12	? (TO) TT=2400.19	? (TO) TT=2520.25
BusScheduling/ BusScheduling-cnt-s1/ BusScheduling-cnt-c1.xml	SAT TO f=28 TT=2400.07 T1=35.09	SAT (TO) f=29 TT=2520.11 T1=2462.69	No data	No data	SAT (TO) f=27 TT=20104.1 T1=1285.24	SAT (TO) f=28 TT=20099.6 T1=705.8	? (TO) TT=2520.12	? (TO) TT=2520.02	? (TO) TT=2520.12	? (TO) TT=2520.12	SAT (TO) f=29 TT=2520.05 T1=195.58	? (TO) TT=2519.7	? (TO) TT=2519.94	SAT (TO) f=28 TT=2519.7 T1=36.2	SAT (TO) f=33 TT=2520.05 T1=456.58	SAT f=30 TT=2519.08 T1=1649.65	SAT (TO) f=31 TT=2520.07 T1=30.8	SAT (TO) f=30 TT=19989.6 T1=1338.56	SAT (TO) f=30 TT=19982.1 T1=10461.61	SAT (TO) f=30 TT=2400.03 T1=458.13	No data	SAT (TO) f=31 TT=2400.02 T1=42.38	SAT (TO) f=31 TT=2400.13 T1=45.23	SAT (TO) f=29 TT=2400.13 T1=201.48	? (TO) TT=2400.07	? (TO) TT=2400.08	SAT (TO) f=28 TT=2400.07 T1=35.09	SAT (TO) f=28 TT=2400.1 T1=2232.44	SAT (TO) f=30 TT=2400.04 T1=1644.15	SAT (TO) f=31 TT=2400.1 T1=30.18	? (TO) TT=2400.19	? (TO) TT=2520.78
BusScheduling/ BusScheduling-cnt-s1/ BusScheduling-cnt-r1a.xml	SAT TO f=11 TT=20073.4 T1=27.01	SAT (TO) f=12 TT=2520.08 T1=1073.16	No data	No data	SAT (TO) f=11 TT=20075 T1=26.71	SAT (TO) f=11 TT=20073.4 T1=27.01	SAT (TO) f=15 TT=2520.07 T1=1263.42	SAT (TO) f=15 TT=2520.08 T1=1169.99	SAT (TO) f=16 TT=2520.07 T1=847.12	SAT (TO) f=16 TT=2520.07 T1=860.66	SAT (TO) f=13 TT=2520.14 T1=21.88	SAT (TO) f=15 TT=2520.01 T1=2519.9	SAT (TO) f=15 TT=2519.77 T1=2520	SAT (TO) f=12 TT=2519.98 T1=356.93	SAT (TO) f=12 TT=2520.1 T1=78.03	SAT f=14 TT=2519.27 T1=42.34	SAT (TO) f=12 TT=2520.08 T1=42.46	SAT (TO) f=13 TT=19881.801 T1=17.57	SAT (TO) f=13 TT=19886.199 T1=23.46	SAT (TO) f=12 TT=2400.07 T1=1111.99	No data	SAT (TO) f=11 TT=2400.71 T1=48.94	SAT (TO) f=11 TT=2400.55 T1=50.4	SAT (TO) f=13 TT=2400.1 T1=22.14	No Cert. TT=2400.1	No Cert. TT=2400.04	SAT (TO) f=12 TT=2400.1 T1=368.27	SAT (TO) f=12 TT=2400.16 T1=29.73	SAT (TO) f=14 TT=2400.1 T1=42.16	SAT (TO) f=12 TT=2400.15 T1=15.91	? (TO) TT=2400.12	? (TO) TT=2520.11
BusScheduling/ BusScheduling-cnt-s1/ BusScheduling-cnt-r1.xml	SAT TO f=11 TT=20062.9 T1=219.47	SAT (TO) f=12 TT=2520.02 T1=570	No data	No data	SAT (TO) f=11 TT=20071.801 T1=197.41	SAT (TO) f=11 TT=20062.9 T1=219.47	SAT (TO) f=14 TT=2520.12 T1=169.43	SAT (TO) f=14 TT=2520.1 T1=172.41	SAT (TO) f=16 TT=2520.05 T1=15.71	SAT (TO) f=15 TT=2520.09 T1=2466.69	SAT (TO) f=13 TT=2520.12 T1=36.16	SAT (TO) f=14 TT=2519.23 T1=2520	SAT (TO) f=14 TT=2519.94 T1=2520	SAT (TO) f=12 TT=2519.78 T1=54.67	SAT (TO) f=12 TT=2520.09 T1=1031.38	SAT f=14 TT=2519.16 T1=15.57	SAT (TO) f=12 TT=2520.13 T1=355.34	SAT (TO) f=13 TT=19871.1 T1=9.34	SAT (TO) f=13 TT=19890 T1=13.01	SAT (TO) f=12 TT=2400.04 T1=594	No data	SAT (TO) f=12 TT=2400.05 T1=3.54	SAT (TO) f=12 TT=2400.37 T1=3.55	SAT (TO) f=13 TT=2400.16 T1=36.4	No Cert. TT=2400.11	SAT (TO) f=14 TT=2400.06 T1=416.72	SAT (TO) f=12 TT=2400.07 T1=51.86	SAT (TO) f=12 TT=2400.15 T1=1195.48	SAT (TO) f=14 TT=2400.14 T1=16.31	SAT (TO) f=12 TT=2400.06 T1=614.69	? (TO) TT=2400.22	? (TO) TT=2520.13
BusScheduling/ BusScheduling-cnt-s1/ BusScheduling-cnt-r2.xml	SAT TO f=14 TT=2400.04 T1=12.96	SAT (TO) f=14 TT=2520.1 T1=179.68	No data	No data	SAT (TO) f=14 TT=20065.9 T1=30.01	SAT (TO) f=14 TT=20071.5 T1=43.86	SAT (TO) f=17 TT=2520.04 T1=48.81	SAT (TO) f=17 TT=2520.09 T1=45.15	SAT (TO) f=18 TT=2520.11 T1=66.1	SAT (TO) f=18 TT=2520.1 T1=66.03	SAT (TO) f=14 TT=2520.13 T1=17.81	SAT (TO) f=16 TT=2519.37 T1=2520	SAT (TO) f=17 TT=2520.07 T1=2520	SAT (TO) f=14 TT=2519.79 T1=13	SAT (TO) f=15 TT=2520.1 T1=18.74	SAT f=17 TT=2518.7 T1=1.16	SAT (TO) f=14 TT=2520.11 T1=828.87	SAT (TO) f=15 TT=19855.699 T1=12.26	SAT (TO) f=15 TT=19869.1 T1=25.48	SAT (TO) f=14 TT=2400.09 T1=177.51	No data	SAT (TO) f=14 TT=2400.32 T1=35.9	SAT (TO) f=14 TT=2400.38 T1=17.38	SAT (TO) f=14 TT=2400.1 T1=18.43	No Cert. TT=2400.07	No Cert. TT=2400.11	SAT (TO) f=14 TT=2400.04 T1=12.96	SAT (TO) f=14 TT=2400.14 T1=777.84	SAT (TO) f=17 TT=2400.14 T1=1.29	SAT (TO) f=14 TT=2400.11 T1=2037.74	? (TO) TT=2400.2	? (TO) TT=2524.4
BusScheduling/ BusScheduling-cnt-s1/ BusScheduling-cnt-r3.xml	SAT TO f=17 TT=2400.14 T1=450.72	? (TO) TT=2520.1	No data	No data	? (TO) TT=20052.5	? (TO) TT=20004	? (TO) TT=2520.08	? (TO) TT=2520.08	? (TO) TT=2520.06	? (TO) TT=2520.12	? (TO) TT=2523.87	? (TO) TT=2519.74	? (TO) TT=2520.04	? (TO) TT=2519.79	SAT (TO) f=17 TT=2520.17 T1=450.72	? (TO) TT=2520.07	? (TO) TT=2520.07	SAT (TO) f=17 TT=17199.1 T1=1414.49	SAT (TO) f=17 TT=17204 T1=9596.79	? (TO) TT=2400.09	No data	? (TO) TT=2400.17	? (TO) TT=2400.32	? (TO) TT=2409.06	? (TO) TT=2400.08	? (TO) TT=2400.08	? (TO) TT=2400.07	SAT (TO) f=17 TT=2400.14 T1=452.93	? (TO) TT=2400.03	? (TO) TT=2400.07	? (TO) TT=2416.18	? TT=1702.18
BusScheduling/ BusScheduling-cnt-s1/ BusScheduling-cnt-r4.xml	SAT TO f=26 TT=20038.4 T1=466.18	SAT (TO) f=28 TT=2520.06 T1=2336.87	No data	No data	SAT (TO) f=26 TT=20072.9 T1=476.42	SAT (TO) f=26 TT=20038.4 T1=466.18	? (TO) TT=2520.04	? (TO) TT=2520.11	SAT (TO) f=31 TT=2520.11 T1=432.19	SAT (TO) f=31 TT=2520.06 T1=425.24	SAT (TO) f=28 TT=2520.1 T1=5.26	? (TO) TT=2520.02	SAT (TO) f=30 TT=2520.02 T1=2519.9	SAT (TO) f=27 TT=2519.94 T1=389.93	SAT (TO) f=27 TT=2520.15 T1=2394.16	SAT f=29 TT=2519.21 T1=26.51	SAT (TO) f=29 TT=2520.12 T1=2445.86	SAT (TO) f=28 TT=19936.699 T1=138.94	SAT (TO) f=28 TT=19945.4 T1=1076.54	SAT (TO) f=28 TT=2400.05 T1=2395.67	No data	SAT (TO) f=28 TT=2400.57 T1=93.19	SAT (TO) f=28 TT=2400.33 T1=32.19	SAT (TO) f=28 TT=2400.15 T1=5.39	? (TO) TT=2400.08	No Cert. TT=2400.05	SAT (TO) f=27 TT=2400.02 T1=390.31	SAT (TO) f=30 TT=2400.08 T1=1.72	SAT (TO) f=29 TT=2400.06 T1=25.19	SAT (TO) f=28 TT=2400.09 T1=592.64	SAT (TO) f=28 TT=2402.51 T1=2202.75	SAT (TO) f=28 TT=2522.09 T1=2244.49
BusScheduling/ BusScheduling-cnt-s1/ BusScheduling-cnt-r5.xml		? (TO) TT=2520.11	No data	No data	? (TO) TT=20068.301	? (TO) TT=20060.199	? (TO) TT=2520.07	? (TO) TT=2520.05	? (TO) TT=2520.05	? (TO) TT=2520.09	? (TO) TT=2520.96	? (TO) TT=2519.98	? (TO) TT=2519.8	? (TO) TT=2519.66	? TT=2519.2	? TT=2519.03	? (TO) TT=2520.08	? (TO) TT=20031.199	? (TO) TT=20035.9	? (TO) TT=2400.05	No data	? (TO) TT=2400.16	? (TO) TT=2400.21	? (TO) TT=2402.12	? (TO) TT=2400.01	? (TO) TT=2400.1	? (TO) TT=2400.07	? (TO) TT=2400.11	? (TO) TT=2400.07	? (TO) TT=2400.04	? (TO) TT=2400.26	? (TO) TT=2520.12
BusScheduling/ BusScheduling-cnt-s1/ BusScheduling-cnt-t1.xml	OPT f=7 TT=0.018 T1=0.01	OPT f=7 TT=1.216 T1=0.69	No data	No data	OPT f=7 TT=1.524 T1=0.55	OPT f=7 TT=1.532 T1=0.55	OPT f=7 TT=1.054 T1=0.62	OPT f=7 TT=1.048 T1=0.62	OPT f=7 TT=1.811 T1=0.63	OPT f=7 TT=1.878 T1=0.63	OPT f=7 TT=7.591 T1=3.56	OPT f=7 TT=0.018 T1=0.12	OPT f=7 TT=0.02 T1=0.08	OPT f=7 TT=0.021 T1=0.1	SAT (TO) f=7 TT=2520.11 T1=0.97	OPT f=7 TT=1.315 T1=1.14	OPT f=7 TT=1.315 T1=0.7	OPT f=7 TT=3.276 T1=1.27	OPT f=7 TT=3.141 T1=2.77	OPT f=7 TT=1.494 T1=0.71	No data	OPT f=7 TT=1.813 T1=0.61	OPT f=7 TT=1.979 T1=0.69	OPT f=7 TT=8.922 T1=3.5	OPT f=7 TT=0.027 T1=0.01	OPT f=7 TT=0.035 T1=0.01	OPT f=7 TT=0.029 T1=0.01	SAT (TO) f=7 TT=2400.07 T1=1.02	OPT f=7 TT=1.43 T1=0.75	OPT f=7 TT=1.436 T1=0.76	OPT f=7 TT=1.755 T1=0.59	OPT f=7 TT=1.619 T1=0.68
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
BusScheduling/ BusScheduling-cnt-s1/ BusScheduling-cnt-t2.xml	SAT TO f=20 TT=2400.03 T1=204.63	SAT (TO) f=21 TT=2520.03 T1=92.55	No data	No data	SAT (TO) f=21 TT=20079.9 T1=12.56	SAT (TO) f=21 TT=20083.6 T1=26.49	SAT (TO) f=22 TT=2520.07 T1=924.4	SAT (TO) f=22 TT=2520.09 T1=978.12	? (TO) TT=2522.33	? (TO) TT=2520.17	SAT (TO) f=21 TT=2520.07 T1=7.12	? (TO) TT=2519.89	? (TO) TT=2519.9	SAT (TO) f=20 TT=2520.08 T1=1161.62	SAT (TO) f=22 TT=2520.09 T1=1.49	SAT f=21 TT=2519.16 T1=39.86	SAT (TO) f=21 TT=2520.11 T1=1939.68	SAT (TO) f=20 TT=19973.699 T1=204.63	SAT (TO) f=20 TT=19977.5 T1=1639.66	SAT (TO) f=21 TT=2400.1 T1=94.39	No data	SAT (TO) f=21 TT=2400.18 T1=160.28	SAT (TO) f=21 TT=2400.49 T1=161.7	SAT (TO) f=21 TT=2400.1 T1=7.61	? (TO) TT=2400.09	? (TO) TT=2400.08	SAT (TO) f=20 TT=2400.03 T1=1149.46	SAT (TO) f=22 TT=2400.14 T1=1.41	SAT (TO) f=21 TT=2400.15 T1=38.4	SAT (TO) f=21 TT=2400.11 T1=1855.95	? (TO) TT=2400.24	? (TO) TT=2520.17
CarSequencing/ CarSequencing-m1-gagne/ CarSequencing-200-01.xml		? (TO) TT=2520.07	? (NS) TT=0.017	? (NS) TT=0.016	? (TO) TT=20092.199	? (TO) TT=20071.699	? (TO) TT=2520.09	? (TO) TT=2520.06	? (TO) TT=2520.12	? (TO) TT=2520.09	? (TO) TT=2520.92	? (TO) TT=2519.89	? (TO) TT=2519.85	? (TO) TT=2520.04	No data	? (TO) TT=2520.1	No data	? (TO) TT=19940.199	? (TO) TT=19908.199	? (TO) TT=2400.07	? (NS) TT=0.03	? (TO) TT=2400.03	? (TO) TT=2400.55	? (TO) TT=2403.63	? (TO) TT=2400.09	? (TO) TT=2400.05	? (TO) TT=2400.04	No data	? (TO) TT=2400.08	No data	? (TO) TT=2400.15	? (TO) TT=2520.11
CarSequencing/ CarSequencing-m1-jcr/ CarSequencing-04-72.xml	SAT TT=1596.57	? (TO) TT=2520.08	? (NS) TT=0.01	? (NS) TT=0.01	? (TO) TT=20057.699	? (TO) TT=20071.4	? (TO) TT=2520.11	? (TO) TT=2520.1	? (TO) TT=2520.13	? (TO) TT=2520.05	? (TO) TT=2521	? (TO) TT=2519.96	? (TO) TT=2519.96	SAT TT=2459.21	No data	? (TO) TT=2520.03	No data	? (TO) TT=19886.4	? (TO) TT=19881.699	? (TO) TT=2400.02	? (NS) TT=0.013	SAT TT=714.677	SAT TT=703.15	? (TO) TT=2401.98	? (TO) TT=2400.05	? (TO) TT=2400.04	SAT TT=937.367	No data	? (TO) TT=2400.1	No data	SAT TT=1667.56	SAT TT=1596.57
CarSequencing/ CarSequencing-m1-jcr/ CarSequencing-19-71.xml		? (TO) TT=2520.11	? (NS) TT=0.01	? (NS) TT=0.01	? (TO) TT=20060.801	? (TO) TT=20043.6	? (TO) TT=2520.12	? (TO) TT=2520.13	? (TO) TT=2520.06	? (TO) TT=2520.09	? (TO) TT=2520.99	? (TO) TT=2520.08	? (TO) TT=2519.91	? (TO) TT=2519.84	No data	? (TO) TT=2520.03	No data	? (TO) TT=19913.6	? (TO) TT=19893.9	? (TO) TT=2400.1	? (NS) TT=0.013	? (TO) TT=2400.35	? (TO) TT=2400.47	? (TO) TT=2401.98	? (TO) TT=2400.06	? (TO) TT=2400.06	? (TO) TT=2400.08	No data	? (TO) TT=2400.07	No data	? (TO) TT=2400.15	? (TO) TT=2520.12
CarSequencing/ CarSequencing-m1-jcr/ CarSequencing-60-02.xml	SAT TT=1.181	SAT TT=1195.97	? (NS) TT=0.016	? (NS) TT=0.015	Wrong UNSAT TT=2824.88	SAT TT=7.907	Wrong UNSAT TT=612.457	SAT TT=6.711	Wrong UNSAT TT=178.172	SAT TT=15.64	? (TO) TT=2521.27	SAT TT=1.181	SAT TT=0.834	SAT TT=123.078	No data	? (TO) TT=2520.03	No data	? (TO) TT=19979	? (TO) TT=19932.1	SAT TT=1197.52	? (NS) TT=0.026	? (TO) TT=2400.22	? (TO) TT=2400.29	? (TO) TT=2403.69	SAT TT=1.225	SAT TT=0.874	SAT TT=50.311	No data	? (TO) TT=2400.07	No data	? (TO) TT=2400.23	? (TO) TT=2520.18
CarSequencing/ CarSequencing-m1-jcr/ CarSequencing-80-02.xml	SAT TT=20.809	? (TO) TT=2520.05	? (NS) TT=0.016	? (NS) TT=0.016	? (TO) TT=20097.1	SAT TT=93.861	? (TO) TT=2520.03	SAT TT=1332.13	? (TO) TT=2520.06	SAT TT=322.518	? (TO) TT=2521.13	? (TO) TT=2519.67	SAT TT=40.196	SAT TT=158.333	No data	? (TO) TT=2520.07	No data	SAT (TO) TT=18271.1	SAT TT=20.809	? (TO) TT=2400.05	? (NS) TT=0.03	? (TO) TT=2400.13	? (TO) TT=2400.27	? (TO) TT=2402.14	? (TO) TT=2400.02	SAT TT=39.811	SAT TT=53.602	No data	? (TO) TT=2400.07	No data	? (TO) TT=2400.19	? (TO) TT=2520.14
CarSequencing/ CarSequencing-m1-jcr/ CarSequencing-85-05.xml	SAT TT=25.192	? (TO) TT=2520.06	? (NS) TT=0.017	? (NS) TT=0.016	? (TO) TT=20089	SAT TT=25.192	? (TO) TT=2520.1	? (TO) TT=2520.06	? (TO) TT=2520.06	? (TO) TT=2520.08	? (TO) TT=2521	? (TO) TT=2519.5	? (TO) TT=2520.1	? (TO) TT=2519.71	No data	SAT TT=31.3	No data	SAT (TO) TT=18268.1	SAT TT=44.001	? (TO) TT=2400.05	? (NS) TT=0.022	? (TO) TT=2400.14	? (TO) TT=2400.74	? (TO) TT=2401.9	? (TO) TT=2400.07	? (TO) TT=2400.03	? (TO) TT=2400.08	No data	SAT TT=32.727	No data	? (TO) TT=2400.2	? (TO) TT=2520.19
ChessboardColoration/ ChessboardColoration-int-s1/ ChessboardColoration-int-05-05.xml	OPT f=2 TT=0.121 T1=0.18	OPT f=2 TT=1.572 T1=0.8	No data	No data	? TT=1789.62	? TT=9700.89	OPT f=2 TT=40.999 T1=28.32	OPT f=2 TT=41.261 T1=28.53	OPT f=2 TT=40.602 T1=28.38	OPT f=2 TT=39.483 T1=27.95	OPT f=2 TT=11.256 T1=4.87	OPT f=2 TT=0.121 T1=0.18	OPT f=2 TT=0.124 T1=0.18	OPT f=2 TT=0.262 T1=0.32	SAT (TO) f=2 TT=2520.08 T1=50.88	OPT f=2 TT=82.924 T1=46.72	OPT f=2 TT=90.862 T1=49.07	? TT=2316.07	? TT=1513.27	OPT f=2 TT=1.587 T1=0.8	No data	? TT=288.209	? TT=1632.64	OPT f=2 TT=11.83 T1=4.93	OPT f=2 TT=0.122 T1=0.22	OPT f=2 TT=0.122 T1=0.18	OPT f=2 TT=0.254 T1=0.33	SAT (TO) f=2 TT=2400.1 T1=49.71	OPT f=2 TT=84.041 T1=47.21	OPT f=2 TT=87.267 T1=47.83	OPT f=2 TT=4.478 T1=2.29	OPT f=2 TT=4.577 T1=2.32
ChessboardColoration/ ChessboardColoration-int-s1/ ChessboardColoration-int-11-11.xml	SAT TO f=3 TT=2400.01 T1=3.61	SAT (TO) f=3 TT=2520.05 T1=3.61	No data	No data	SAT (TO) f=3 TT=19657.699 T1=200.44	SAT (TO) f=3 TT=19704 T1=185.38	SAT (TO) f=3 TT=2520.04 T1=1304.14	SAT (TO) f=3 TT=2520.08 T1=1394.48	SAT (TO) f=3 TT=2520.08 T1=168.35	SAT (TO) f=3 TT=2520.05 T1=171.36	SAT (TO) f=4 TT=2520.06 T1=403.58	SAT (TO) f=3 TT=2520.02 T1=4.98	SAT (TO) f=3 TT=2519.84 T1=3.98	SAT (TO) f=3 TT=2519.84 T1=84.98	SAT (TO) f=3 TT=2520.09 T1=534.68	SAT (TO) f=3 TT=2520.09 T1=7.09	SAT (TO) f=3 TT=2520.1 T1=7	SAT (TO) f=3 TT=5224.35 T1=12.07	SAT (TO) f=3 TT=5244.84 T1=149.05	SAT (TO) f=3 TT=2400.05 T1=3.62	No data	SAT (TO) f=3 TT=2400.06 T1=521.08	SAT (TO) f=3 TT=2400.03 T1=487.98	SAT (TO) f=4 TT=2400.11 T1=396.16	? (TO) TT=2400.1	? (TO) TT=2400.1	SAT (TO) f=3 TT=2400.01 T1=87.48	SAT (TO) f=3 TT=2400.06 T1=349.93	SAT (TO) f=3 TT=2400.06 T1=6.86	SAT (TO) f=3 TT=2400.04 T1=6.99	? TT=1217.87	? TT=698.265
ChessboardColoration/ ChessboardColoration-int-s1/ ChessboardColoration-int-12-12.xml	SAT TO f=3 TT=2400.09 T1=9.6	SAT (TO) f=3 TT=2520.08 T1=9.6	No data	No data	SAT (TO) f=3 TT=19381.801 T1=587.17	SAT (TO) f=3 TT=19460.1 T1=1066.83	SAT (TO) f=4 TT=2520.13 T1=466.94	SAT (TO) f=4 TT=2520.12 T1=464.78	SAT (TO) f=3 TT=2520.05 T1=198.69	SAT (TO) f=3 TT=2520.12 T1=198.84	SAT (TO) f=4 TT=2520.14 T1=1048.06	SAT (TO) f=3 TT=2520.09 T1=10.2	SAT (TO) f=3 TT=2519.92 T1=10.57	SAT (TO) f=3 TT=2519.78 T1=105.91	SAT (TO) f=3 TT=2520.11 T1=662.63	SAT (TO) f=4 TT=2520.1 T1=12	SAT (TO) f=4 TT=2520.08 T1=12.05	SAT (TO) f=3 TT=5301.2 T1=53.45	SAT (TO) f=4 TT=7741.95 T1=126.95	SAT (TO) f=3 TT=2400.09 T1=9.63	No data	SAT (TO) f=4 TT=2400.13 T1=302.13	SAT (TO) f=4 TT=2400.37 T1=314.25	SAT (TO) f=4 TT=2400.13 T1=1030.22	? (TO) TT=2400.07	? (TO) TT=2400.04	SAT (TO) f=3 TT=2400.09 T1=108.05	SAT (TO) f=3 TT=2400.12 T1=282.97	SAT (TO) f=4 TT=2400.06 T1=12.3	SAT (TO) f=4 TT=2400.1 T1=12.22	? (problem) TT=1432.23	? (problem) TT=1432.16
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
ChessboardColoration/ ChessboardColoration-int-s1/ ChessboardColoration-int-13-13.xml	SAT TO f=3 TT=2400.12 T1=15.86	SAT (TO) f=3 TT=2520.03 T1=15.86	No data	No data	SAT (TO) f=4 TT=17622.301 T1=624.42	SAT (TO) f=4 TT=19010.699 T1=410.23	SAT (TO) f=168 TT=2520.13 T1=1374.57	SAT (TO) f=168 TT=2520.11 T1=1378.73	SAT (TO) f=4 TT=2520.05 T1=2127.59	SAT (TO) f=4 TT=2520.13 T1=2095.8	SAT (TO) f=160 TT=2520.08 T1=896.76	SAT (TO) f=4 TT=2520.1 T1=9.03	SAT (TO) f=4 TT=2520.03 T1=9.28	SAT (TO) f=4 TT=2519.65 T1=109.22	SAT (TO) f=4 TT=2520.15 T1=253.65	SAT (TO) f=4 TT=2520.08 T1=22.53	SAT (TO) f=4 TT=2520.09 T1=22.94	SAT (TO) f=4 TT=7845.82 T1=32.04	SAT (TO) f=4 TT=7751.32 T1=224.9	SAT (TO) f=3 TT=2400.12 T1=15.96	No data	Wrong Opt. f=5 TT=1745.01 T1=611.23	SAT (TO) f=5 TT=2400.3 T1=668.82	SAT (TO) f=160 TT=2400.11 T1=878.65	? (TO) TT=2400.04	? (TO) TT=2400.09	SAT (TO) f=4 TT=2400.08 T1=104.27	SAT (TO) f=4 TT=2400.06 T1=725.92	SAT (TO) f=4 TT=2400.08 T1=22.52	SAT (TO) f=4 TT=2400.04 T1=22.7	? (problem) TT=1350.56	? (problem) TT=1380.07
ChessboardColoration/ ChessboardColoration-int-s1/ ChessboardColoration-int-15-15.xml	SAT TO f=4 TT=2400.05 T1=15.43	SAT (TO) f=4 TT=2520.07 T1=34.35	No data	No data	SAT (TO) f=6 TT=8960.1 T1=2087.26	SAT (TO) f=6 TT=9318.15 T1=2117.89	SAT (TO) f=205 TT=2520.11 T1=2508.91	SAT (TO) f=203 TT=2520.04 T1=2476.02	SAT (TO) f=219 TT=2520.08 T1=1969.24	SAT (TO) f=219 TT=2520.11 T1=1984.01	SAT (TO) f=219 TT=2520.15 T1=2151.38	SAT (TO) f=4 TT=2520.04 T1=15.43	SAT (TO) f=4 TT=2519.48 T1=24.06	SAT (TO) f=4 TT=2519.77 T1=1436.32	SAT (TO) f=4 TT=2520.15 T1=1501.04	SAT (TO) f=4 TT=2520.12 T1=66.53	SAT (TO) f=4 TT=2520.13 T1=66.24	SAT (TO) f=4 TT=9466.9 T1=804.14	SAT (TO) f=4 TT=8248.47 T1=743.84	SAT (TO) f=4 TT=2400.09 T1=33.56	No data	SAT (TO) f=9 TT=2400.1 T1=838.95	SAT (TO) f=9 TT=2400.17 T1=821.57	SAT (TO) f=219 TT=2400.12 T1=2012.29	? (TO) TT=2400.09	? (TO) TT=2400.07	SAT (TO) f=4 TT=2400.08 T1=1426.25	SAT (TO) f=4 TT=2400.08 T1=472.52	SAT (TO) f=4 TT=2400.08 T1=65.8	SAT (TO) f=4 TT=2400.05 T1=65.51	? (problem) TT=1397.95	? TT=1485.36
ChessboardColoration/ ChessboardColoration-int-s1/ ChessboardColoration-int-20-20.xml	SAT TO f=5 TT=2400.12 T1=99.94	SAT (TO) f=5 TT=2520.09 T1=387.28	No data	No data	SAT (TO) f=17 TT=2580.27 T1=27.81	SAT (TO) f=17 TT=2584.62 T1=28.93	? (TO) TT=2520.1	? (TO) TT=2520.12	? (TO) TT=2520.12	? (TO) TT=2520.09	SAT (TO) f=399 TT=2520.09 T1=372.9	SAT (TO) f=5 TT=2520.1 T1=540.22	SAT (TO) f=5 TT=2519.65 T1=99.94	SAT (TO) f=8 TT=2520.07 T1=1904.07	SAT (TO) f=5 TT=2520.11 T1=1492.45	SAT (TO) f=6 TT=2520.08 T1=767.78	SAT (TO) f=6 TT=2520.09 T1=1055	SAT (TO) f=6 TT=19602.1 T1=2401.63	SAT (TO) f=6 TT=17204.1 T1=11663.98	SAT (TO) f=5 TT=2400.12 T1=388.87	No data	SAT (TO) f=17 TT=2400.04 T1=19.73	SAT (TO) f=17 TT=2400.05 T1=19.43	SAT (TO) f=399 TT=2400.06 T1=366.01	No Cert. TT=2400.18	No Cert. TT=2400.19	SAT (TO) f=8 TT=2400.04 T1=1899.04	SAT (TO) f=7 TT=2400.08 T1=1009.89	SAT (TO) f=6 TT=2400.13 T1=762.6	SAT (TO) f=5 TT=2402.08 T1=1520.62	? TT=1340.15	? TT=1345.07
ChessboardColoration/ ChessboardColoration-int-s1/ ChessboardColoration-int-25-25.xml	SAT TO f=6 TT=2520.25 T1=1722.17	? (problem) TT=782.459	No data	No data	SAT (TO) f=22 TT=2659.91 T1=78.49	SAT (TO) f=22 TT=2665.99 T1=80.11	? (TO) TT=2520.08	? (TO) TT=2520.06	? (TO) TT=2520.13	? (TO) TT=2520.08	? (TO) TT=2528	SAT (TO) f=6 TT=2520.25 T1=1722.17	SAT (TO) f=7 TT=2520.37 T1=278.44	? (TO) TT=2519.91	SAT (TO) f=624 TT=2520.15 T1=31.27	SAT (TO) f=500 TT=2520.14 T1=1899.92	? (TO) TT=2528.25	SAT (TO) f=608 TT=19616.5 T1=2468.13	SAT (TO) f=600 TT=19674.4 T1=19509.711	? (problem) TT=766.163	No data	SAT (TO) f=22 TT=2400 T1=61.31	SAT (TO) f=22 TT=2400 T1=59.56	? (TO) TT=2407.97	No Cert. TT=2400.16	No Cert. TT=2400.43	? (TO) TT=2400.07	SAT (TO) f=624 TT=2401.06 T1=31.12	SAT (TO) f=515 TT=2400.88 T1=1698.64	SAT (TO) f=9 TT=2400.07 T1=841.73	? TT=1368.72	? TT=1284.48
ChessboardColoration/ ChessboardColoration-int-s1/ ChessboardColoration-int-35-35.xml	SAT TO f=33 TT=3312.91 T1=485.02	? (problem) TT=715.411	No data	No data	SAT (TO) f=32 TT=3233.97 T1=460.14	SAT (TO) f=33 TT=3312.91 T1=485.02	? (TO) TT=2520.03	? (TO) TT=2520.12	? (TO) TT=2520.12	? (TO) TT=2520.09	? (TO) TT=2522.28	? (MO) TT=210.92	? (MO) TT=224.316	? (TO) TT=2520.05	SAT (TO) f=1224 TT=2520.86 T1=379.55	SAT (TO) f=1219 TT=2521.82 T1=1080.59	SAT (TO) f=1224 TT=2522.24 T1=314.83	? (exit code) TT=8132.94	? (TO) TT=18728.699	? (problem) TT=897.42	No data	SAT (TO) f=32 TT=2400.02 T1=427.21	SAT (TO) f=32 TT=2400.08 T1=439.67	? (TO) TT=2402.36	? (MO) TT=213.129	? (MO) TT=240.957	? (TO) TT=2400.11	SAT (TO) f=1224 TT=2400.14 T1=417.5	SAT (TO) f=1220 TT=2400.13 T1=938.67	SAT (TO) f=1224 TT=2404.23 T1=326.98	? TT=1350.85	? TT=1374.69
ChessboardColoration/ ChessboardColoration-int-s1/ ChessboardColoration-int-40-40.xml		? (problem) TT=713.955	No data	No data	? TT=5619.21	? TT=5611.49	? (TO) TT=2520.05	? (TO) TT=2520.12	? (TO) TT=2520.15	? (TO) TT=2520.14	? (TO) TT=2528.22	? (MO) TT=174.339	? (MO) TT=173.915	? (TO) TT=2519.99	? (TO) TT=2520.13	? (TO) TT=2520.11	? (TO) TT=2522.28	? (TO) TT=18328.5	? (TO) TT=17193.6	? (problem) TT=744.125	No data	? TT=1831.39	? TT=1644.21	? (TO) TT=2408.1	? (MO) TT=176.403	? (MO) TT=177.6	? (TO) TT=2400.11	? (TO) TT=2408.42	? (TO) TT=2401.8	? (TO) TT=2400.11	? TT=1494.98	? TT=1370.19
ChessboardColoration/ ChessboardColoration-int-s2/ ChessboardColoration-int-04-06.xml	OPT f=1 TT=0.11 T1=0.11	OPT f=1 TT=1.501 T1=0.81	No data	No data	OPT f=1 TT=805.306 T1=233.75	OPT f=1 TT=720.571 T1=226.12	OPT f=1 TT=25.783 T1=19.62	OPT f=1 TT=26.562 T1=19.89	OPT f=1 TT=26.612 T1=19.99	OPT f=1 TT=25.867 T1=19.63	OPT f=1 TT=11.606 T1=5	OPT f=1 TT=0.11 T1=0.18	OPT f=1 TT=0.112 T1=0.11	OPT f=1 TT=0.221 T1=0.3	SAT (TO) f=1 TT=2520.07 T1=41.08	OPT f=1 TT=63.134 T1=35.47	OPT f=1 TT=59.219 T1=34.03	? TT=1581.96	OPT f=1 TT=744.634 T1=743.77	OPT f=1 TT=1.495 T1=0.78	No data	OPT f=1 TT=145.451 T1=88.58	OPT f=1 TT=138.494 T1=86.2	OPT f=1 TT=11.287 T1=4.98	OPT f=1 TT=0.108 T1=0.17	OPT f=1 TT=0.11 T1=0.17	OPT f=1 TT=0.205 T1=0.27	SAT (TO) f=1 TT=2400.1 T1=41.84	OPT f=1 TT=60.715 T1=34.35	OPT f=1 TT=73.141 T1=40.3	OPT f=1 TT=4.176 T1=2.05	OPT f=1 TT=3.751 T1=1.81
ChessboardColoration/ ChessboardColoration-int-s2/ ChessboardColoration-int-07-09.xml	OPT f=2 TT=0.922 T1=0.98	OPT f=2 TT=3.25 T1=1.81	No data	No data	OPT f=2 TT=24.082 T1=4.92	OPT f=2 TT=25.407 T1=6.46	OPT f=2 TT=22.509 T1=15.71	OPT f=2 TT=20.764 T1=15.24	OPT f=2 TT=24.587 T1=14.83	OPT f=2 TT=24.983 T1=14.26	OPT f=2 TT=40.669 T1=25.05	OPT f=2 TT=0.922 T1=0.99	OPT f=2 TT=0.994 T1=0.98	OPT f=2 TT=4.095 T1=4.08	SAT (TO) f=2 TT=2520.1 T1=39.72	OPT f=2 TT=5.873 T1=2.06	OPT f=2 TT=5.539 T1=1.99	OPT f=2 TT=19.389 T1=3.86	OPT f=2 TT=21.433 T1=20.61	OPT f=2 TT=3.232 T1=1.31	No data	OPT f=2 TT=60.501 T1=17.38	OPT f=2 TT=58.037 T1=16.34	OPT f=2 TT=40.205 T1=25.63	OPT f=2 TT=0.939 T1=1.01	OPT f=2 TT=0.969 T1=1.03	OPT f=2 TT=3.879 T1=3.87	SAT (TO) f=2 TT=2400.1 T1=57.61	OPT f=2 TT=5.577 T1=2.57	OPT f=2 TT=5.43 T1=2.01	OPT f=2 TT=204.928 T1=176.93	OPT f=2 TT=204.857 T1=177.69
ChessboardColoration/ ChessboardColoration-int-s2/ ChessboardColoration-int-09-11.xml	SAT TO f=3 TT=2400.03 T1=2.08	SAT (TO) f=3 TT=2520.02 T1=2.09	No data	No data	SAT (TO) f=3 TT=19966.199 T1=42.09	SAT (TO) f=3 TT=20078.301 T1=20.79	SAT (TO) f=3 TT=2520.09 T1=91.1	SAT (TO) f=3 TT=2520.05 T1=87.55	SAT (TO) f=3 TT=2520.1 T1=108.83	SAT (TO) f=3 TT=2520.03 T1=107.12	SAT (TO) f=3 TT=2520.05 T1=332.87	SAT (TO) f=3 TT=2520.01 T1=2.61	SAT (TO) f=3 TT=2520.02 T1=2.73	SAT (TO) f=3 TT=2520.03 T1=8.44	SAT (TO) f=3 TT=2520.05 T1=75.83	SAT (TO) f=3 TT=2520.04 T1=4.18	SAT (TO) f=3 TT=2520.05 T1=4.16	SAT (TO) f=3 TT=5582.77 T1=7.37	SAT (TO) f=3 TT=5636.1 T1=40.5	SAT (TO) f=3 TT=2400.09 T1=2.08	No data	SAT (TO) f=3 TT=2400.15 T1=87.45	SAT (TO) f=3 TT=2400.28 T1=90.47	SAT (TO) f=3 TT=2400.14 T1=324.13	? (TO) TT=2400.1	? (TO) TT=2400.11	SAT (TO) f=3 TT=2400.08 T1=8.14	SAT (TO) f=3 TT=2400.03 T1=67.1	SAT (TO) f=3 TT=2400.07 T1=4.15	SAT (TO) f=3 TT=2400.09 T1=4.36	? (problem) TT=1403.15	? (problem) TT=1453.7
ChessboardColoration/ ChessboardColoration-int-s2/ ChessboardColoration-int-15-17.xml	SAT TO f=4 TT=2400.1 T1=23.56	SAT (TO) f=4 TT=2520.03 T1=90.36	No data	No data	SAT (TO) f=8 TT=4980.59 T1=2231.23	SAT (TO) f=8 TT=10125.7 T1=1490.83	? (TO) TT=2520.1	? (TO) TT=2520.12	? (TO) TT=2520.07	? (TO) TT=2520.05	SAT (TO) f=252 TT=2520.15 T1=2234.59	SAT (TO) f=4 TT=2520.06 T1=23.56	SAT (TO) f=4 TT=2519.88 T1=78.34	SAT (TO) f=5 TT=2519.78 T1=323.88	SAT (TO) f=5 TT=2520.13 T1=813.15	SAT (TO) f=5 TT=2520.05 T1=109.49	SAT (TO) f=4 TT=2520.1 T1=254.73	SAT (TO) f=5 TT=11183.8 T1=199.03	SAT (TO) f=5 TT=11402.4 T1=1525.58	SAT (TO) f=4 TT=2400.1 T1=88.02	No data	SAT (TO) f=11 TT=2400.39 T1=54.04	SAT (TO) f=11 TT=2400.1 T1=1484.51	SAT (TO) f=253 TT=2400.21 T1=2316.19	? (TO) TT=2400.11	? (TO) TT=2400.05	SAT (TO) f=5 TT=2400.09 T1=324.1	SAT (TO) f=4 TT=2400.14 T1=1372.02	SAT (TO) f=5 TT=2400.06 T1=108.36	SAT (TO) f=4 TT=2400.12 T1=328.14	? TT=1295.59	? TT=1305.72
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
ChessboardColoration/ ChessboardColoration-int-s2/ ChessboardColoration-int-16-18.xml	SAT TO f=4 TT=2400.06 T1=154.09	SAT (TO) f=4 TT=2520.05 T1=154.09	No data	No data	SAT (TO) f=10 TT=2926.81 T1=2480.64	SAT (TO) f=11 TT=2671.43 T1=1319.71	? (TO) TT=2520.06	? (TO) TT=2520.06	? (TO) TT=2520.04	? (TO) TT=2520.12	SAT (TO) f=283 TT=2520.08 T1=1722.78	SAT (TO) f=5 TT=2520.08 T1=28.93	SAT (TO) f=5 TT=2520.08 T1=31.05	SAT (TO) f=5 TT=2519.7 T1=1995.09	SAT (TO) f=5 TT=2520.11 T1=642.23	SAT (TO) f=5 TT=2520.13 T1=185.52	SAT (TO) f=5 TT=2520.07 T1=185.72	SAT (TO) f=5 TT=12569.7 T1=388.7	SAT (TO) f=5 TT=11348.5 T1=2265.62	SAT (TO) f=4 TT=2400.06 T1=155.19	No data	SAT (TO) f=13 TT=2400.01 T1=1265.39	SAT (TO) f=13 TT=2400.06 T1=1212	SAT (TO) f=283 TT=2400.13 T1=1803.35	? (TO) TT=2400.05	? (TO) TT=2400.04	SAT (TO) f=5 TT=2400.02 T1=1992.31	SAT (TO) f=5 TT=2400.11 T1=638.64	SAT (TO) f=5 TT=2400.08 T1=183.2	SAT (TO) f=5 TT=2400.07 T1=182.76	? TT=1375.92	? TT=1313.57
ChessboardColoration/ ChessboardColoration-int-s2/ ChessboardColoration-int-17-19.xml	SAT TO f=4 TT=2400.06 T1=538.57	SAT (TO) f=4 TT=2520.05 T1=539.01	No data	No data	SAT (TO) f=12 TT=2711.06 T1=1982.45	SAT (TO) f=12 TT=2688.76 T1=2057.02	? (TO) TT=2520.12	? (TO) TT=2520.07	? (TO) TT=2520.1	? (TO) TT=2520.1	SAT (TO) f=322 TT=2520.09 T1=180.83	SAT (TO) f=5 TT=2520.1 T1=46.68	SAT (TO) f=5 TT=2519.95 T1=36.77	SAT (TO) f=5 TT=2520.03 T1=1947.46	SAT (TO) f=5 TT=2520.11 T1=760.27	SAT (TO) f=5 TT=2520.12 T1=524.55	SAT (TO) f=5 TT=2520.13 T1=1187.57	SAT (TO) f=5 TT=12722.3 T1=620.05	SAT (TO) f=5 TT=12513.7 T1=4158.64	SAT (TO) f=4 TT=2400.06 T1=538.57	No data	SAT (TO) f=13 TT=2400.18 T1=2012.35	SAT (TO) f=14 TT=2400.05 T1=1970.13	SAT (TO) f=322 TT=2400.07 T1=180.44	SAT (TO) f=5 TT=2400.05 T1=46.46	SAT (TO) f=5 TT=2400.07 T1=36.92	SAT (TO) f=5 TT=2400.02 T1=1937.77	SAT (TO) f=5 TT=2400.06 T1=1694.69	SAT (TO) f=5 TT=2400.09 T1=519.42	SAT (TO) f=6 TT=2400.06 T1=577.01	? TT=1299.17	? TT=1255.1
ChessboardColoration/ ChessboardColoration-int-s2/ ChessboardColoration-int-23-25.xml	SAT TO f=6 TT=2519.94 T1=136.98	? (problem) TT=803.052	No data	No data	SAT (TO) f=20 TT=2657.58 T1=64.35	SAT (TO) f=21 TT=2654.94 T1=70.1	? (TO) TT=2520.09	? (TO) TT=2520.07	? (TO) TT=2520.1	? (TO) TT=2520.12	? (TO) TT=2527.86	SAT (TO) f=6 TT=2519.94 T1=136.98	SAT (TO) f=6 TT=2520.17 T1=907.56	? (TO) TT=2519.95	SAT (TO) f=574 TT=2520.12 T1=28.93	SAT (TO) f=347 TT=2520.09 T1=2154.93	SAT (TO) f=553 TT=2520.14 T1=253.99	SAT (TO) f=531 TT=19730.4 T1=2503.43	SAT (TO) f=514 TT=19725.5 T1=19420.68	? (problem) TT=714.533	No data	SAT (TO) f=21 TT=2400.03 T1=45.11	SAT (TO) f=21 TT=2400.07 T1=47.44	? (TO) TT=2407.87	No Cert. TT=2400.1	No Cert. TT=2400.27	? (TO) TT=2400.06	SAT (TO) f=574 TT=2400.09 T1=29.56	SAT (TO) f=366 TT=2400.21 T1=2018.06	SAT (TO) f=554 TT=2400.79 T1=239.23	? TT=1348.72	? TT=1334.77
ChessboardColoration/ ChessboardColoration-int-s2/ ChessboardColoration-int-28-30.xml	SAT TO f=8 TT=2520.9 T1=321.65	? (problem) TT=768.753	No data	No data	SAT (TO) f=26 TT=2804.4 T1=165.84	SAT (TO) f=26 TT=2795.61 T1=172.9	? (TO) TT=2520.11	? (TO) TT=2520.12	? (TO) TT=2520.08	? (TO) TT=2520.05	? (TO) TT=2522.16	SAT (TO) f=8 TT=2520.9 T1=321.65	? (MO) TT=203.754	? (TO) TT=2519.92	SAT (TO) f=839 TT=2520.17 T1=89.84	SAT (TO) f=797 TT=2520.14 T1=1808.52	SAT (TO) f=833 TT=2520.1 T1=845.69	? (TO) TT=19419.1	? (TO) TT=19482	? (problem) TT=774.199	No data	SAT (TO) f=26 TT=2400.07 T1=134.55	SAT (TO) f=26 TT=2400.04 T1=134.67	? (TO) TT=2402.11	No Cert. TT=2400.87	? (MO) TT=206.167	? (TO) TT=2400.06	SAT (TO) f=839 TT=2405.42 T1=88.01	SAT (TO) f=799 TT=2400.09 T1=1707.25	SAT (TO) f=835 TT=2401.61 T1=200.91	? TT=1305.32	? TT=1404.07
ColouredQueens/ ColouredQueens-m1-s1/ ColouredQueens-03.xml	UNSAT TT=0.001	UNSAT TT=0.904	UNSAT TT=0.001	UNSAT TT=0.001	UNSAT TT=1	UNSAT TT=0.968	UNSAT TT=0.753	UNSAT TT=0.747	UNSAT TT=0.842	UNSAT TT=0.827	UNSAT TT=5.207	UNSAT TT=0.004	UNSAT TT=0.005	UNSAT TT=0.004	No data	UNSAT TT=1.007	No data	UNSAT TT=1.04	UNSAT TT=1.053	UNSAT TT=1.072	UNSAT TT=0.002	UNSAT TT=1.245	UNSAT TT=1.072	UNSAT TT=6.123	UNSAT TT=0.006	UNSAT TT=0.006	UNSAT TT=0.006	No data	UNSAT TT=1.131	No data	UNSAT TT=0.638	UNSAT TT=0.549
ColouredQueens/ ColouredQueens-m1-s1/ ColouredQueens-10.xml		? (TO) TT=2520.08	? (TO) TT=2519.98	? (TO) TT=2519.82	? (TO) TT=20070.5	? (TO) TT=20064.699	? (TO) TT=2520.11	? (TO) TT=2520.1	? (TO) TT=2520.12	? (TO) TT=2520.06	? (TO) TT=2520.43	? (TO) TT=2519.99	? (TO) TT=2519.8	? (TO) TT=2519.7	No data	? (TO) TT=2520.07	No data	? (TO) TT=19873	? (TO) TT=19865.1	? (TO) TT=2400.06	? TT=2400	? (TO) TT=2400.3	? (TO) TT=2400.5	? (TO) TT=2401.05	? (TO) TT=2400.01	? (TO) TT=2400.02	? (TO) TT=2400.03	No data	? (TO) TT=2400.04	No data	? (TO) TT=2400.61	? (TO) TT=2520.28
ColouredQueens/ ColouredQueens-m1-s1/ ColouredQueens-11.xml		? (TO) TT=2520.06	? (TO) TT=2519.75	? (TO) TT=2519.7	? (TO) TT=20072.699	? (TO) TT=20069.9	? (TO) TT=2520.03	? (TO) TT=2520.14	? (TO) TT=2520.06	? (TO) TT=2520.28	? (TO) TT=2520.47	? (TO) TT=2519.79	? (TO) TT=2519.7	? (TO) TT=2520.03	No data	? (TO) TT=2520.05	No data	? (TO) TT=19870.9	? (TO) TT=19866.4	? (TO) TT=2400.03	? TT=2400	? (TO) TT=2400.3	? (TO) TT=2400.56	? (TO) TT=2401.09	? (TO) TT=2400.05	? (TO) TT=2400.05	? (TO) TT=2400.02	No data	? (TO) TT=2400.05	No data	? (TO) TT=2400.07	? (TO) TT=2520.17
ColouredQueens/ ColouredQueens-m1-s1/ ColouredQueens-12.xml		? (TO) TT=2520.12	? (TO) TT=2519.82	? (TO) TT=2519.84	? (TO) TT=20067.9	? (TO) TT=20063.199	? (TO) TT=2520.09	? (TO) TT=2520.11	? (TO) TT=2520.09	? (TO) TT=2520.12	? (TO) TT=2520.52	? (TO) TT=2520.06	? (TO) TT=2519.88	? (TO) TT=2519.86	No data	? (TO) TT=2520.05	No data	? (TO) TT=19884.9	? (TO) TT=19881.4	? (TO) TT=2400.12	? TT=2400	? (TO) TT=2400.15	? (TO) TT=2400	? (TO) TT=2401.06	? (TO) TT=2400.06	? (TO) TT=2400.01	? (TO) TT=2400.04	No data	? (TO) TT=2400.11	No data	? (TO) TT=2400.2	? (TO) TT=2520.12
ColouredQueens/ ColouredQueens-m1-s1/ ColouredQueens-14.xml		? (TO) TT=2520.1	? TT=2520	? (TO) TT=2519.8	? (TO) TT=20074.6	? (TO) TT=20061.301	? (TO) TT=2520.13	? (TO) TT=2520.12	? (TO) TT=2520.11	? (TO) TT=2520.05	? (TO) TT=2520.56	? (TO) TT=2520.04	? (TO) TT=2519.65	? (TO) TT=2519.95	No data	? (TO) TT=2520.11	No data	? (TO) TT=19881.9	? (TO) TT=19859.1	? (TO) TT=2400.04	? TT=2400	? (TO) TT=2400.73	? (TO) TT=2400.7	? (TO) TT=2401.18	? (TO) TT=2400.08	? (TO) TT=2400.05	? (TO) TT=2400.1	No data	? (TO) TT=2400.1	No data	? (TO) TT=2400.1	? (TO) TT=2520.16
ColouredQueens/ ColouredQueens-m1-s1/ ColouredQueens-19.xml		? (TO) TT=2520.03	? (TO) TT=2519.98	? (TO) TT=2519.7	? (TO) TT=20070.1	? (TO) TT=20050.5	? (TO) TT=2520.02	? (TO) TT=2520.06	? (TO) TT=2520.11	? (TO) TT=2520.09	? (TO) TT=2520.52	? (TO) TT=2519.97	? (TO) TT=2519.99	? (TO) TT=2519.61	No data	? (TO) TT=2520.09	No data	? (TO) TT=19898.9	? (TO) TT=19881.801	? (TO) TT=2400.02	? TT=2400	? (TO) TT=2400.52	? (TO) TT=2400.21	? (TO) TT=2401.09	? (TO) TT=2400.09	? (TO) TT=2400.07	? (TO) TT=2400.1	No data	? (TO) TT=2400.11	No data	? (TO) TT=2400.39	? (TO) TT=2520.15
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
CostasArray/ CostasArray-m1-s1/ CostasArray-10.xml	SAT TT=0.035	SAT TT=1.23	SAT TT=0.035	SAT TT=0.035	SAT TT=1.898	SAT TT=1.922	SAT TT=1.139	SAT TT=1.137	SAT TT=1.334	SAT TT=1.316	SAT TT=7.529	SAT TT=0.065	SAT TT=0.062	SAT TT=0.088	No data	SAT TT=1.528	No data	SAT TT=14.562	SAT TT=5.503	SAT TT=1.454	SAT TT=0.045	SAT TT=2.246	SAT TT=2.199	SAT TT=8.478	SAT TT=0.108	SAT TT=0.097	SAT TT=0.122	No data	SAT TT=1.678	No data	SAT TT=1.569	SAT TT=1.234
CostasArray/ CostasArray-m1-s1/ CostasArray-11.xml	SAT TT=0.128	SAT TT=1.732	SAT TT=0.157	SAT TT=0.157	SAT TT=2.425	SAT TT=2.396	SAT TT=1.21	SAT TT=1.199	SAT TT=1.802	SAT TT=1.797	SAT TT=7.787	SAT TT=0.167	SAT TT=0.079	SAT TT=0.128	No data	SAT TT=2.293	No data	SAT TT=47.312	SAT TT=5.897	SAT TT=2.184	SAT TT=0.215	SAT TT=2.716	SAT TT=2.684	SAT TT=8.503	SAT TT=0.202	SAT TT=0.107	SAT TT=0.155	No data	SAT TT=2.743	No data	SAT TT=1.977	SAT TT=1.557
CostasArray/ CostasArray-m1-s1/ CostasArray-13.xml	SAT TT=0.194	SAT TT=3.99	SAT TT=0.399	SAT TT=0.398	SAT TT=3.183	SAT TT=3.813	SAT TT=1.543	SAT TT=1.549	SAT TT=3.315	SAT TT=3.363	SAT TT=7.851	SAT TT=0.194	SAT TT=1.537	SAT TT=0.218	No data	SAT TT=3.526	No data	SAT TT=1910.9	SAT TT=7.967	SAT TT=4.471	SAT TT=0.433	SAT TT=3.979	SAT TT=3.873	SAT TT=8.855	SAT TT=0.231	SAT TT=1.565	SAT TT=0.201	No data	SAT TT=3.787	No data	SAT TT=5.101	SAT TT=5.716
CostasArray/ CostasArray-m1-s1/ CostasArray-15.xml	SAT TT=0.311	SAT TT=16.106	SAT TT=11.711	SAT TT=11.707	SAT TT=8.141	SAT TT=10.373	SAT TT=3.458	SAT TT=3.484	SAT TT=12.069	SAT TT=11.38	SAT TT=12.538	SAT TT=8.75	SAT TT=11.061	SAT TT=0.311	No data	SAT TT=66.769	No data	SAT (TO) TT=19873.9	SAT TT=38.104	SAT TT=16.654	SAT TT=11.742	SAT TT=8.634	SAT TT=10.245	SAT TT=13.338	SAT TT=8.697	SAT TT=11.057	SAT TT=1.171	No data	SAT TT=69.633	No data	SAT TT=29.157	SAT TT=28.178
CostasArray/ CostasArray-m1-s1/ CostasArray-16.xml	SAT TT=1.912	SAT TT=81.719	SAT TT=152.626	SAT TT=153.509	SAT TT=49.458	SAT TT=38.611	SAT TT=18.414	SAT TT=18.027	SAT TT=61.036	SAT TT=59.149	SAT TT=18.154	SAT TT=79.869	SAT TT=147.558	SAT TT=1.912	No data	SAT TT=75.088	No data	SAT (TO) TT=19887.1	SAT TT=43.493	SAT TT=85.944	SAT TT=154.733	SAT TT=56.952	SAT TT=58.95	SAT TT=19.875	SAT TT=81.752	SAT TT=150.121	SAT TT=2.154	No data	SAT TT=77.538	No data	SAT TT=70.401	SAT TT=69.905
CostasArray/ CostasArray-m1-s1/ CostasArray-18.xml	SAT TT=28.235	SAT TT=327.127	SAT TT=2304.06	SAT TT=2293.88	SAT TT=220.407	SAT TT=225.241	SAT TT=28.42	SAT TT=28.235	SAT TT=815.828	SAT TT=830.449	SAT TT=1793.9	? (TO) TT=2519.8	SAT TT=2492.07	SAT TT=146.817	No data	SAT TT=1457.55	No data	SAT (TO) TT=19882.6	SAT TT=2717.43	SAT TT=322.623	SAT TT=2295.64	SAT TT=352.134	SAT TT=349.573	SAT TT=1877.32	? (TO) TT=2400.04	? (TO) TT=2400.1	SAT TT=378.733	No data	SAT TT=1481.77	No data	SAT TT=2077.35	SAT TT=2045.7
CoveringArray/ CoveringArray-elt-s1/ CoveringArray-elt-3-04-2-08.xml	SAT TT=0.004	SAT TT=1.069	Wrong UNSAT TT=0.002	SAT TT=0.004	SAT TT=1.369	SAT TT=1.301	SAT TT=0.851	SAT TT=0.86	SAT TT=0.938	SAT TT=0.93	SAT TT=7.067	SAT TT=0.005	SAT TT=0.005	SAT TT=0.008	No data	SAT TT=1.211	No data	SAT TT=24.151	SAT TT=4.881	SAT TT=1.062	Wrong UNSAT TT=0.002	SAT TT=1.082	SAT TT=1.064	SAT TT=7.244	SAT TT=0.005	SAT TT=0.007	SAT TT=0.007	No data	SAT TT=1.208	No data	SAT TT=2.094	SAT TT=2.159
CoveringArray/ CoveringArray-elt-s1/ CoveringArray-elt-3-04-2-09.xml	SAT TT=0.004	SAT TT=1.097	SAT TT=0.004	SAT TT=0.004	SAT TT=1.345	SAT TT=1.286	SAT TT=0.867	SAT TT=0.862	SAT TT=0.935	SAT TT=0.924	SAT TT=7.178	SAT TT=0.005	SAT TT=0.006	SAT TT=0.007	No data	SAT TT=1.209	No data	SAT (TO) TT=8702.91	SAT TT=4.651	SAT TT=1.073	SAT TT=0.004	SAT TT=1.082	SAT TT=1.088	SAT TT=6.723	SAT TT=0.005	SAT TT=0.006	SAT TT=0.007	No data	SAT TT=1.221	No data	SAT TT=2.345	SAT TT=2.3
CoveringArray/ CoveringArray-elt-s1/ CoveringArray-elt-3-06-2-12.xml	SAT TT=0.864	? (TO) TT=2520.06	? (TO) TT=2519.84	? (TO) TT=2519.7	SAT TT=13.489	SAT TT=15.123	? (TO) TT=2520.05	? (TO) TT=2520.1	? (TO) TT=2520.13	? (TO) TT=2520.05	? (TO) TT=2520.55	? (TO) TT=2520.03	? (TO) TT=2520.02	SAT TT=0.864	No data	? (TO) TT=2520.07	No data	? (TO) TT=19857.199	? (TO) TT=19875.1	? (TO) TT=2400.08	? TT=2400	SAT TT=22.822	SAT TT=21.358	? (TO) TT=2400.62	? (TO) TT=2400.01	? (TO) TT=2400.03	SAT TT=0.283	No data	? (TO) TT=2400.11	No data	SAT TT=469.323	SAT TT=470.936
CoveringArray/ CoveringArray-elt-s1/ CoveringArray-elt-3-07-2-12.xml	SAT TT=4.74	? (TO) TT=2520.09	? TT=2520.01	? (TO) TT=2519.82	SAT TT=13.88	SAT TT=12.394	? (TO) TT=2520.12	? (TO) TT=2520.11	? (TO) TT=2520.05	? (TO) TT=2520.09	? (TO) TT=2520.68	? (TO) TT=2520.01	? (TO) TT=2520.05	SAT TT=4.74	No data	? (TO) TT=2520.08	No data	? (TO) TT=19882.699	? (TO) TT=19919.199	? (TO) TT=2400.03	? TT=2400.01	SAT TT=26.179	SAT TT=28.171	? (TO) TT=2400.65	? (TO) TT=2400.03	? (TO) TT=2400.05	SAT TT=1.059	No data	? (TO) TT=2400.08	No data	? (TO) TT=2400.2	? (TO) TT=2520.13
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
CoveringArray/ CoveringArray-elt-s1/ CoveringArray-elt-3-09-2-12.xml	SAT TT=228.916	? (TO) TT=2520.05	? (TO) TT=2519.82	? (TO) TT=2519.69	SAT TT=245.75	SAT TT=236.189	? (TO) TT=2520.11	? (TO) TT=2520.09	? (TO) TT=2520.04	? (TO) TT=2520.04	? (TO) TT=2521.17	? (TO) TT=2520.04	? (TO) TT=2519.91	SAT TT=228.916	No data	? (TO) TT=2520.02	No data	? (TO) TT=19941.4	? (TO) TT=19955.301	? (TO) TT=2400.1	? TT=2400.02	SAT TT=176.226	SAT TT=178.056	? (TO) TT=2401.24	? (TO) TT=2400.05	? (TO) TT=2400.07	SAT TT=405.733	No data	? (TO) TT=2400.06	No data	? (TO) TT=2400.24	? (TO) TT=2520.19
CoveringArray/ CoveringArray-elt-s1/ CoveringArray-elt-3-10-2-12.xml	SAT TT=255.478	? (TO) TT=2520.03	? (TO) TT=2519.81	? (TO) TT=2519.79	SAT TT=218.767	SAT TT=259.246	? (TO) TT=2520.03	? (TO) TT=2520.08	? (TO) TT=2520.12	? (TO) TT=2520.07	? (TO) TT=2521.23	? (TO) TT=2520.09	? (TO) TT=2519.9	SAT TT=255.478	No data	? (TO) TT=2520.08	No data	? (TO) TT=19973.199	? (TO) TT=19979	? (TO) TT=2400.09	? (TO) TT=2400.04	SAT TT=104.525	SAT TT=107.685	? (TO) TT=2401.68	? (TO) TT=2400.04	? (TO) TT=2400.03	SAT TT=120.055	No data	? (TO) TT=2400.04	No data	? (TO) TT=2400.17	? (TO) TT=2520.29
Crossword/ Crossword-m1c-lex-herald/ Crossword-m1c-lex-h1501.xml	SAT TT=0.297	SAT TT=2.503	SAT TT=0.574	SAT TT=0.567	SAT TT=6.466	SAT TT=6.687	SAT TT=2.204	SAT TT=2.229	SAT TT=2.169	SAT TT=2.242	SAT TT=16.791	SAT TT=0.297	SAT TT=2.588	SAT TT=0.487	No data	SAT TT=2.541	No data	SAT (TO) TT=19872.6	SAT (TO) TT=2537.53	SAT TT=2.543	SAT TT=0.54	SAT TT=3.945	SAT TT=3.814	SAT TT=17.976	SAT TT=0.295	SAT TT=2.569	SAT TT=0.239	No data	SAT TT=2.618	No data	? (TO) TT=2400.11	? (TO) TT=2520.17
Crossword/Crossword-m1c-ogd2008-vg/ Crossword-m1c-ogd2008-vg-11-12.xml		? (TO) TT=2520.1	? (TO) TT=2520.08	? (TO) TT=2519.78	? (TO) TT=19671.699	? (TO) TT=19662.6	? (TO) TT=2520.08	? (TO) TT=2520.07	? (TO) TT=2520.1	? (TO) TT=2520.04	? (TO) TT=2525.25	? (TO) TT=2520.03	? (TO) TT=2519.67	? (TO) TT=2520.09	No data	? (TO) TT=2520.09	No data	? (TO) TT=20026.801	? (TO) TT=20025.4	? (TO) TT=2400.06	? (TO) TT=2400.08	? (TO) TT=2400.11	? (TO) TT=2400.38	? (TO) TT=2405.65	? (TO) TT=2400.05	? (TO) TT=2400.09	? (TO) TT=2400.07	No data	? (TO) TT=2400.07	No data	? TT=1335.8	? TT=1515.06
Crossword/Crossword-m1c-ogd2008-vg/ Crossword-m1c-ogd2008-vg-13-13.xml		? (TO) TT=2520.09	? (TO) TT=2519.79	? (TO) TT=2519.81	? (TO) TT=19813.301	? (TO) TT=19802	? (TO) TT=2520.05	? (TO) TT=2520.05	? (TO) TT=2520.12	? (TO) TT=2520.07	? (TO) TT=2525.89	? (TO) TT=2520.05	? (TO) TT=2519.9	? (TO) TT=2519.82	No data	? (TO) TT=2520.08	No data	? (TO) TT=20024	? (TO) TT=20024.699	? (TO) TT=2400.1	? (TO) TT=2400.1	? (TO) TT=2400.15	? (TO) TT=2400.33	? (TO) TT=2405.95	? (TO) TT=2400.03	? (TO) TT=2400.02	? (TO) TT=2400.08	No data	? (TO) TT=2400.09	No data	? TT=2131.25	? TT=2300.82
Crossword/ Crossword-m1c-ogd-herald/ Crossword-m1c-ogd-h2310.xml	SAT TT=2.872	SAT TT=5.111	SAT TT=47.236	SAT TT=47.91	SAT TT=62.63	SAT TT=63.902	SAT TT=8.474	SAT TT=8.07	SAT TT=9.266	SAT TT=9.117	SAT TT=281.142	SAT TT=2.872	SAT TT=85.476	SAT TT=7.776	No data	SAT TT=7.097	No data	SAT (TO) TT=9694.69	SAT (TO) TT=2603.67	SAT TT=5.155	SAT TT=46.894	SAT TT=28.863	SAT TT=29.149	SAT TT=293.032	SAT TT=2.83	SAT TT=83.526	SAT TT=3.136	No data	SAT TT=6.872	No data	? TT=2109.17	? TT=2245.98
Crossword/Crossword-m1c-uk-vg/ Crossword-m1c-uk-vg-4-8.xml	SAT TT=0.338	SAT TT=2.25	SAT TT=2.255	SAT TT=2.338	SAT TT=5.732	SAT TT=5.62	SAT TT=2.195	SAT TT=2.236	SAT TT=2.596	SAT TT=2.602	SAT TT=14.856	SAT TT=0.338	SAT TT=0.324	SAT TT=0.346	No data	SAT TT=2.47	No data	SAT (TO) TT=19860.1	SAT TT=45.664	SAT TT=2.197	SAT TT=2.266	SAT TT=3.969	SAT TT=4.05	SAT TT=16.287	SAT TT=0.338	SAT TT=0.318	SAT TT=0.532	No data	SAT TT=2.446	No data	? (TO) TT=2400.24	? (TO) TT=2520.11
Crossword/ Crossword-m1c-words-puzzle/ Crossword-m1c-words-p20.xml	SAT TT=0.102	SAT TT=1.762	SAT TT=0.103	SAT TT=0.102	SAT TT=3.286	SAT TT=3.21	SAT TT=1.587	SAT TT=1.574	SAT TT=1.749	SAT TT=1.74	SAT TT=13.882	SAT TT=0.102	SAT TT=0.104	SAT TT=0.111	No data	SAT TT=2.059	No data	SAT (TO) TT=8311.1	SAT TT=6.81	SAT TT=1.751	SAT TT=0.101	SAT TT=2.376	SAT TT=2.434	SAT TT=12.302	SAT TT=0.1	SAT TT=0.103	SAT TT=0.11	No data	SAT TT=2.094	No data	? (TO) TT=2400.13	? (TO) TT=2520.18
CryptoPuzzle/CryptoPuzzle-m1-s1/ CryptoPuzzle-black-green-orange.xml	SAT TT=0.014	SAT TT=1.16	SAT TT=0.013	SAT TT=0.014	SAT TT=1.923	SAT TT=1.868	SAT TT=1.113	SAT TT=1.101	SAT TT=1.283	SAT TT=1.281	SAT TT=7.332	SAT TT=0.033	SAT TT=0.025	SAT TT=0.033	No data	SAT TT=1.439	No data	SAT TT=3.05	SAT TT=2.93	SAT TT=1.388	SAT TT=0.024	SAT TT=1.99	SAT TT=1.999	SAT TT=8.99	SAT TT=0.057	SAT TT=0.045	SAT TT=0.055	No data	SAT TT=1.563	No data	SAT TT=1.184	SAT TT=0.957
CryptoPuzzle/CryptoPuzzle-m1-s1/ CryptoPuzzle-cross-roads-danger.xml	SAT TT=0.011	SAT TT=1.097	SAT TT=0.011	SAT TT=0.011	SAT TT=1.692	SAT TT=1.711	SAT TT=1.028	SAT TT=1.018	SAT TT=1.061	SAT TT=1.037	SAT TT=6.472	SAT TT=0.021	SAT TT=0.022	SAT TT=0.031	No data	SAT TT=1.217	No data	SAT TT=2.108	SAT TT=2.102	SAT TT=1.338	SAT TT=0.02	SAT TT=1.728	SAT TT=1.821	SAT TT=8	SAT TT=0.027	SAT TT=0.036	SAT TT=0.052	No data	SAT TT=1.275	No data	SAT TT=0.743	SAT TT=0.658
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
CryptoPuzzle/CryptoPuzzle-m1-s1/ CryptoPuzzle-kyoto-osaka-tokyo.xml	SAT TT=0.012	SAT TT=1.093	SAT TT=0.011	SAT TT=0.012	SAT TT=1.559	SAT TT=1.6	SAT TT=1.002	SAT TT=0.996	SAT TT=1.071	SAT TT=1.019	SAT TT=6.464	SAT TT=0.022	SAT TT=0.021	SAT TT=0.032	No data	SAT TT=1.239	No data	SAT TT=2.316	SAT TT=2.295	SAT TT=1.219	SAT TT=0.019	SAT TT=1.75	SAT TT=1.742	SAT TT=7.484	SAT TT=0.038	SAT TT=0.038	SAT TT=0.049	No data	SAT TT=1.418	No data	SAT TT=0.807	SAT TT=0.741
CryptoPuzzle/CryptoPuzzle-m1-s1/ CryptoPuzzle-monitor-network-internet.xml	SAT TT=0.015	SAT TT=1.134	SAT TT=0.014	SAT TT=0.015	SAT TT=1.818	SAT TT=1.801	SAT TT=1.101	SAT TT=1.104	SAT TT=1.219	SAT TT=1.214	SAT TT=6.499	SAT TT=0.027	SAT TT=0.026	SAT TT=0.04	No data	SAT TT=1.245	No data	SAT TT=2.355	SAT TT=2.337	SAT TT=1.327	SAT TT=0.027	SAT TT=2.009	SAT TT=1.923	SAT TT=8.587	SAT TT=0.037	SAT TT=0.048	SAT TT=0.069	No data	SAT TT=1.475	No data	SAT TT=0.981	SAT TT=0.769
CryptoPuzzle/ CryptoPuzzle-m1-s1/ CryptoPuzzle-no-no-yes.xml	SAT TT=0.007	SAT TT=1.053	SAT TT=0.006	SAT TT=0.007	SAT TT=1.119	SAT TT=1.125	SAT TT=0.895	SAT TT=0.887	SAT TT=0.923	SAT TT=0.911	SAT TT=6	SAT TT=0.014	SAT TT=0.014	SAT TT=0.02	No data	SAT TT=1.106	No data	SAT TT=1.915	SAT TT=1.912	SAT TT=1.275	SAT TT=0.009	SAT TT=1.261	SAT TT=1.23	SAT TT=7.444	SAT TT=0.025	SAT TT=0.025	SAT TT=0.034	No data	SAT TT=1.159	No data	SAT TT=0.609	SAT TT=0.581
CryptoPuzzle/CryptoPuzzle-m1-s1/ CryptoPuzzle-summer-school-coolest.xml	SAT TT=0.013	SAT TT=1.122	SAT TT=0.013	SAT TT=0.013	SAT TT=1.816	SAT TT=1.756	SAT TT=1.07	SAT TT=1.044	SAT TT=1.193	SAT TT=1.148	SAT TT=6.931	SAT TT=0.027	SAT TT=0.023	SAT TT=0.037	No data	SAT TT=1.255	No data	SAT TT=2.306	SAT TT=2.392	SAT TT=1.393	SAT TT=0.021	SAT TT=1.848	SAT TT=1.908	SAT TT=8.389	SAT TT=0.031	SAT TT=0.042	SAT TT=0.059	No data	SAT TT=1.377	No data	SAT TT=0.934	SAT TT=0.743
Cutstock/ Cutstock-zinc-s1/ Cutstock-t02-3.xml	SAT TO f=158 TT=2400.04 T1=3.88	? (TO) TT=2520.09	No data	No data	SAT (TO) f=158 TT=20110 T1=3.52	SAT (TO) f=158 TT=20103.5 T1=3.88	SAT (TO) f=173 TT=2520.02 T1=2218.69	SAT (TO) f=173 TT=2520.03 T1=2217.15	? (TO) TT=2520.11	? (TO) TT=2520.08	SAT (TO) f=161 TT=2520.09 T1=10.76	? (TO) TT=2519.97	? (TO) TT=2520.1	SAT (TO) f=159 TT=2519.98 T1=45.81	SAT (TO) f=158 TT=2520.04 T1=570.88	SAT (TO) f=167 TT=2520.05 T1=31	SAT (TO) f=158 TT=2520.12 T1=623.34	SAT (TO) f=160 TT=19863.1 T1=6.84	SAT (TO) f=162 TT=19865.6 T1=22.84	? (TO) TT=2400.1	No data	SAT (TO) f=158 TT=2400.38 T1=6.71	SAT (TO) f=158 TT=2400.11 T1=5.65	SAT (TO) f=161 TT=2400.09 T1=11.34	? (TO) TT=2400.03	? (TO) TT=2400.05	SAT (TO) f=159 TT=2400.1 T1=45.3	SAT (TO) f=158 TT=2400.18 T1=613.31	SAT (TO) f=167 TT=2400.07 T1=30.35	SAT (TO) f=158 TT=2400.04 T1=685.81	? (TO) TT=2416.21	? (problem) TT=1664.78
Cutstock/ Cutstock-zinc-s1/ Cutstock-t02-6.xml	SAT TO f=118 TT=2400.05 T1=1150.55	? (TO) TT=2520.12	No data	No data	SAT (TO) f=119 TT=20107.4 T1=1.93	SAT (TO) f=119 TT=20100.301 T1=2.09	SAT (TO) f=124 TT=2520.1 T1=1455.99	SAT (TO) f=124 TT=2520.1 T1=1455.36	SAT (TO) f=126 TT=2520.06 T1=1049.92	SAT (TO) f=126 TT=2520.12 T1=1041.52	SAT (TO) f=121 TT=2520.05 T1=674.77	? (TO) TT=2519.68	? (TO) TT=2519.92	SAT (TO) f=119 TT=2519.77 T1=6.93	SAT (TO) f=118 TT=2520.12 T1=1150.55	SAT (TO) f=126 TT=2520.1 T1=1.34	SAT (TO) f=119 TT=2520.09 T1=458.57	SAT (TO) f=119 TT=19854.801 T1=5.56	SAT (TO) f=120 TT=19849.4 T1=100.2	? (TO) TT=2400.04	No data	SAT (TO) f=119 TT=2400.1 T1=8.1	SAT (TO) f=119 TT=2400.38 T1=8.75	SAT (TO) f=121 TT=2400.09 T1=679.5	? (TO) TT=2400.02	? (TO) TT=2400.03	SAT (TO) f=119 TT=2400.02 T1=6.93	SAT (TO) f=118 TT=2400.05 T1=1839.14	SAT (TO) f=126 TT=2400.13 T1=1.3	SAT (TO) f=119 TT=2400.18 T1=415.33	? (TO) TT=2416.38	? TT=1629.42
Cutstock/ Cutstock-zinc-s1/ Cutstock-t04-1.xml	SAT TO f=217 TT=20087.1 T1=25.34	? (TO) TT=2520.09	No data	No data	SAT (TO) f=217 TT=20085.301 T1=25.82	SAT (TO) f=217 TT=20087.1 T1=25.34	? (TO) TT=2520.09	? (TO) TT=2520.05	? (TO) TT=2520.09	? (TO) TT=2520.08	? (TO) TT=2521.3	? (TO) TT=2519.73	? (TO) TT=2519.89	? (TO) TT=2519.8	SAT (TO) f=240 TT=2520.1 T1=3.68	SAT (TO) f=226 TT=2520.09 T1=132.86	SAT (TO) f=227 TT=2520.13 T1=15.17	SAT (TO) f=218 TT=19860.699 T1=10	SAT (TO) f=218 TT=19858.1 T1=32.54	? (TO) TT=2400.1	No data	SAT (TO) f=217 TT=2400.13 T1=207.7	SAT (TO) f=217 TT=2400.52 T1=191.59	? (TO) TT=2403.06	? (TO) TT=2400.02	? (TO) TT=2400.05	? (TO) TT=2400.1	SAT (TO) f=240 TT=2400.24 T1=3.32	SAT (TO) f=226 TT=2400.07 T1=131.25	SAT (TO) f=227 TT=2400.12 T1=14.23	? (TO) TT=2415.82	? (TO) TT=2528.05
Cutstock/ Cutstock-zinc-s1/ Cutstock-t04-6.xml	SAT TO f=199 TT=2400.06 T1=18.49	SAT (TO) f=224 TT=2520.11 T1=701.21	No data	No data	SAT (TO) f=199 TT=20090 T1=18.57	SAT (TO) f=199 TT=20090.199 T1=18.49	? (TO) TT=2520.08	? (TO) TT=2520.05	? (TO) TT=2520.08	? (TO) TT=2520.04	? (TO) TT=2521.15	? (TO) TT=2519.8	? (TO) TT=2519.72	SAT (TO) f=199 TT=2519.82 T1=213.96	SAT (TO) f=222 TT=2520.11 T1=638.29	SAT (TO) f=200 TT=2520.13 T1=6.11	SAT (TO) f=200 TT=2520.15 T1=6.2	SAT (TO) f=199 TT=19847.301 T1=21.78	SAT (TO) f=200 TT=19840.1 T1=99.68	SAT (TO) f=224 TT=2400.03 T1=705.12	No data	SAT (TO) f=199 TT=2400.43 T1=191.77	SAT (TO) f=199 TT=2400.05 T1=193.6	? (TO) TT=2402.54	? (TO) TT=2400.06	? (TO) TT=2400.02	SAT (TO) f=199 TT=2400.06 T1=193.76	SAT (TO) f=213 TT=2400.16 T1=2239.12	SAT (TO) f=200 TT=2400.16 T1=5.82	SAT (TO) f=200 TT=2400.24 T1=6.08	? (TO) TT=2415.74	? TT=1686.3
Cutstock/ Cutstock-zinc-s1/ Cutstock-t07-8.xml	OPT f=43 TT=0.29 T1=0.33	OPT f=43 TT=3.103 T1=1.39	No data	No data	OPT f=43 TT=5.742 T1=1.13	OPT f=43 TT=5.443 T1=1.12	OPT f=43 TT=64.588 T1=57.2	OPT f=43 TT=64.613 T1=57.91	OPT f=43 TT=682.632 T1=641.66	OPT f=43 TT=685.493 T1=644.66	OPT f=43 TT=67.26 T1=12.36	OPT f=43 TT=318.327 T1=318.41	OPT f=43 TT=1.283 T1=1.28	OPT f=43 TT=0.29 T1=0.38	SAT (TO) f=43 TT=2520.09 T1=187.75	OPT f=43 TT=2.308 T1=1.19	OPT f=43 TT=2.272 T1=1.19	OPT f=43 TT=13.11 T1=4.23	OPT f=43 TT=13.578 T1=13.11	OPT f=43 TT=3.091 T1=1.12	No data	OPT f=43 TT=7.347 T1=1.31	OPT f=43 TT=7.686 T1=1.29	OPT f=43 TT=74.624 T1=12.41	OPT f=43 TT=309.995 T1=307.89	OPT f=43 TT=1.315 T1=1.08	OPT f=43 TT=0.344 T1=0.33	SAT (TO) f=43 TT=2400.14 T1=216.85	OPT f=43 TT=2.71 T1=1.12	OPT f=43 TT=2.622 T1=1.07	? (TO) TT=2415.31	? (TO) TT=2528.26
Cutstock/ Cutstock-zinc-s1/ Cutstock-t08-5.xml	SAT TO f=533 TT=2400.02 T1=232.37	? (TO) TT=2520.07	No data	No data	SAT (TO) f=531 TT=20037.5 T1=959.73	SAT (TO) f=533 TT=20050.801 T1=232.37	SAT (TO) f=561 TT=2520.07 T1=2242.53	SAT (TO) f=561 TT=2520.06 T1=2268.27	? (TO) TT=2520.02	? (TO) TT=2520.06	? (TO) TT=2521.34	? (TO) TT=2520.09	? (TO) TT=2519.99	SAT (TO) f=533 TT=2519.96 T1=808.62	SAT (TO) f=639 TT=2520.1 T1=2266.49	SAT (TO) f=550 TT=2520.06 T1=8.7	SAT (TO) f=550 TT=2520.25 T1=8.61	SAT (TO) f=544 TT=7625.73 T1=24.16	SAT (TO) f=536 TT=2651.54 T1=80.51	? (TO) TT=2400.11	No data	SAT (TO) f=604 TT=2400.2 T1=265.57	SAT (TO) f=604 TT=2400.38 T1=264.38	? (TO) TT=2403.96	? (TO) TT=2400.06	? (TO) TT=2400.18	SAT (TO) f=533 TT=2400.02 T1=766.16	SAT (TO) f=613 TT=2400.1 T1=2159.37	SAT (TO) f=550 TT=2400.11 T1=8.18	SAT (TO) f=550 TT=2400.16 T1=8.41	? (TO) TT=2416.22	? (TO) TT=2528.1
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
Cutstock/ Cutstock-zinc-s1/ Cutstock-t08-9.xml	OPT f=476 TT=13.114 T1=7	SAT (TO) f=637 TT=2520.03 T1=5.2	No data	No data	OPT f=476 TT=2491.96 T1=313.33	OPT f=476 TT=1942.65 T1=240.78	OPT f=476 TT=439.241 T1=364.85	OPT f=476 TT=434.086 T1=359.33	SAT (TO) f=597 TT=2520.06 T1=499.18	SAT (TO) f=597 TT=2520.14 T1=511.43	SAT (TO) f=511 TT=2520.13 T1=2418.31	? (TO) TT=2520.03	? (TO) TT=2519.99	OPT f=476 TT=339.348 T1=332.12	SAT (TO) f=526 TT=2520.11 T1=1098.3	OPT f=476 TT=13.846 T1=7.23	OPT f=476 TT=13.114 T1=7	OPT f=476 TT=49.83 T1=17.82	OPT f=476 TT=51.839 T1=51.04	SAT (TO) f=637 TT=2400.05 T1=4.82	No data	SAT (TO) f=527 TT=2400.19 T1=299.91	SAT (TO) f=489 TT=2400.49 T1=305	SAT (TO) f=513 TT=2400.2 T1=2134.5	? (TO) TT=2400.03	? (TO) TT=2400.11	OPT f=476 TT=313.831 T1=306.57	SAT (TO) f=553 TT=2400.22 T1=1445.41	OPT f=476 TT=16.06 T1=7.05	OPT f=476 TT=15.263 T1=7.07	? (TO) TT=2416.02	? (TO) TT=2528.13
Cutstock/ Cutstock-zinc-s1/ Cutstock-t13-1.xml	OPT f=63 TT=0.608 T1=0.56	OPT f=63 TT=3.077 T1=1.29	No data	No data	OPT f=63 TT=11.237 T1=1.41	OPT f=63 TT=8.721 T1=1.23	OPT f=63 TT=16.939 T1=9.45	OPT f=63 TT=16.998 T1=9.42	OPT f=63 TT=546.591 T1=398.88	OPT f=63 TT=548.587 T1=400.42	OPT f=63 TT=234.579 T1=5.3	OPT f=63 TT=2.767 T1=2.88	OPT f=63 TT=4.016 T1=4.01	OPT f=63 TT=0.608 T1=0.62	SAT (TO) f=63 TT=2520.07 T1=318.93	OPT f=63 TT=2.628 T1=1.36	OPT f=63 TT=2.518 T1=1.24	OPT f=63 TT=17.982 T1=6.72	OPT f=63 TT=17.438 T1=17.22	OPT f=63 TT=3.57 T1=1.21	No data	OPT f=63 TT=15.073 T1=1.25	OPT f=63 TT=12.239 T1=1.32	OPT f=63 TT=233.066 T1=5.99	OPT f=63 TT=2.82 T1=2.82	OPT f=63 TT=4.066 T1=3.04	OPT f=63 TT=0.654 T1=0.56	SAT (TO) f=63 TT=2400.12 T1=253.34	OPT f=63 TT=3.356 T1=1.23	OPT f=63 TT=3.354 T1=1.56	? (TO) TT=2416.46	? TT=1598.96
Cutstock/ Cutstock-zinc-s1/ Cutstock-t15-1.xml	OPT f=123 TT=7.496 T1=2.78	OPT f=123 TT=23.046 T1=17.93	No data	No data	OPT f=123 TT=71.193 T1=5.61	OPT f=123 TT=63.651 T1=5.67	SAT (TO) f=142 TT=2520.04 T1=780.72	SAT (TO) f=142 TT=2520.11 T1=793.34	SAT (TO) f=152 TT=2520.1 T1=348.45	SAT (TO) f=152 TT=2520.04 T1=353.59	? (TO) TT=2521.17	SAT (TO) f=167 TT=2520.1 T1=2520	SAT (TO) f=132 TT=2520.04 T1=2519.9	OPT f=123 TT=40.107 T1=37.64	SAT (TO) f=123 TT=2520.06 T1=1402.63	OPT f=123 TT=7.496 T1=2.78	OPT f=123 TT=7.833 T1=2.83	OPT f=123 TT=39.445 T1=10.88	OPT f=123 TT=38.072 T1=37.81	OPT f=123 TT=24.34 T1=18.21	No data	OPT f=123 TT=259.365 T1=15.43	OPT f=123 TT=204.359 T1=12.72	? (TO) TT=2402.5	No Cert. TT=2400.04	No Cert. TT=2400.06	OPT f=123 TT=39.637 T1=37.14	SAT (TO) f=123 TT=2400.14 T1=869.83	OPT f=123 TT=9.3 T1=2.97	OPT f=123 TT=9.492 T1=2.94	? (TO) TT=2416.2	? (problem) TT=1520.04
Cutstock/ Cutstock-zinc-s1/ Cutstock-t15-2.xml	OPT f=122 TT=340.917 T1=5.26	OPT f=122 TT=340.917 T1=5.31	No data	No data	OPT f=122 TT=16185.5 T1=6.87	OPT f=122 TT=4053.07 T1=6.52	SAT (TO) f=147 TT=2520.08 T1=99.58	SAT (TO) f=147 TT=2520.05 T1=100.52	SAT (TO) f=145 TT=2520.06 T1=596.07	SAT (TO) f=145 TT=2520.08 T1=584.68	SAT (TO) f=122 TT=2520.09 T1=1328.08	? (TO) TT=2519.85	? (TO) TT=2519.95	OPT f=122 TT=875.38 T1=12.77	SAT (TO) f=122 TT=2520.09 T1=1173.51	SAT (TO) f=122 TT=2520.13 T1=2267.67	SAT (TO) f=122 TT=2520.07 T1=825.62	SAT (TO) f=126 TT=2600.13 T1=12.33	SAT (TO) f=130 TT=2602.5 T1=2527.99	OPT f=122 TT=344.973 T1=5.26	No data	SAT (TO) f=122 TT=2400.38 T1=26.93	SAT (TO) f=122 TT=2400.38 T1=30.19	SAT (TO) f=122 TT=2400.13 T1=1319.75	? (TO) TT=2400.01	? (TO) TT=2400.04	OPT f=122 TT=844.437 T1=12.29	SAT (TO) f=122 TT=2400.06 T1=983.37	SAT (TO) f=122 TT=2400.07 T1=2311.79	SAT (TO) f=122 TT=2400.16 T1=721.06	? (TO) TT=2416.45	? TT=1421.23
Cutstock/ Cutstock-zinc-s1/ Cutstock-t15-3.xml	SAT TO f=102 TT=2400.12 T1=5.8	SAT (TO) f=103 TT=2520.03 T1=253.28	No data	No data	SAT (TO) f=102 TT=20106.301 T1=5.06	SAT (TO) f=102 TT=20106.1 T1=5.8	SAT (TO) f=126 TT=2520.04 T1=532.36	SAT (TO) f=126 TT=2520.04 T1=521.13	? (TO) TT=2520.04	? (TO) TT=2520.07	SAT (TO) f=106 TT=2520.05 T1=76	? (TO) TT=2519.7	? (TO) TT=2520.01	SAT (TO) f=104 TT=2520.01 T1=2386.02	SAT (TO) f=102 TT=2520.13 T1=1505.54	SAT (TO) f=112 TT=2520.11 T1=5.36	SAT (TO) f=102 TT=2520.11 T1=592.65	SAT (TO) f=112 TT=19853.6 T1=10.28	SAT (TO) f=108 TT=17611.5 T1=46.34	SAT (TO) f=103 TT=2400.08 T1=256.67	No data	SAT (TO) f=102 TT=2400.6 T1=14.01	SAT (TO) f=102 TT=2400.56 T1=13.85	SAT (TO) f=106 TT=2400.09 T1=76.43	? (TO) TT=2400.04	? (TO) TT=2400	SAT (TO) f=104 TT=2400.06 T1=2342.29	SAT (TO) f=102 TT=2400.12 T1=1268.69	SAT (TO) f=112 TT=2400.11 T1=5.2	SAT (TO) f=102 TT=2400.13 T1=766.12	? (TO) TT=2416.44	? (TO) TT=2528.04
Cutstock/ Cutstock-zinc-s1/ Cutstock-t15-7.xml	OPT f=171 TT=8.361 T1=2.78	OPT f=171 TT=8.361 T1=2.83	No data	No data	OPT f=171 TT=47.238 T1=4.15	OPT f=171 TT=43.695 T1=3.9	OPT f=171 TT=29.874 T1=25.64	OPT f=171 TT=28.993 T1=25.01	? (TO) TT=2520.09	? (TO) TT=2520.03	SAT (TO) f=171 TT=2520.09 T1=34.9	OPT f=171 TT=833.852 T1=833.87	OPT f=171 TT=193.594 T1=193.7	OPT f=171 TT=19.664 T1=18.2	SAT (TO) f=171 TT=2520.11 T1=1056.32	OPT f=171 TT=9.792 T1=4.56	OPT f=171 TT=9.578 T1=4.32	OPT f=171 TT=57.425 T1=11.31	OPT f=171 TT=56.247 T1=55.95	OPT f=171 TT=9.286 T1=2.78	No data	OPT f=171 TT=119.87 T1=8.89	OPT f=171 TT=106.18 T1=7.78	SAT (TO) f=171 TT=2400.15 T1=33.93	OPT f=171 TT=855.075 T1=817.75	OPT f=171 TT=188.907 T1=160.4	OPT f=171 TT=18.193 T1=16.77	SAT (TO) f=171 TT=2400.16 T1=921.88	OPT f=171 TT=10.174 T1=4.25	OPT f=171 TT=9.563 T1=4.16	? (TO) TT=2416.27	? TT=1292.99
Cutstock/ Cutstock-zinc-s1/ Cutstock-t16-0.xml	OPT f=1305 TT=569.11 T1=529	? (TO) TT=2520.04	No data	No data	SAT (TO) f=1568 TT=19789.6 T1=2497.16	SAT (TO) f=1569 TT=19808.5 T1=2478.21	? (TO) TT=2520.11	? (TO) TT=2520.04	? (TO) TT=2520.09	? (TO) TT=2520.07	? (TO) TT=2522.93	? (TO) TT=2520.11	? (TO) TT=2520.1	? (TO) TT=2519.62	SAT (TO) f=1614 TT=2520.36 T1=283.77	OPT f=1305 TT=591.573 T1=554.24	SAT (TO) f=1345 TT=2520.2 T1=545.75	SAT (TO) f=1568 TT=5290.69 T1=461	OPT f=1305 TT=3454.99 T1=3451.14	? (TO) TT=2400.05	No data	SAT (TO) f=1613 TT=2400.46 T1=287.05	SAT (TO) f=1614 TT=2400.32 T1=112.17	? (TO) TT=2406.02	? (TO) TT=2400.05	? (TO) TT=2400.41	? (TO) TT=2400.09	SAT (TO) f=1614 TT=2400.19 T1=289.61	OPT f=1305 TT=569.11 T1=529	SAT (TO) f=1345 TT=2400.14 T1=528.8	? TT=254.284	? TT=194.855
Cutstock/ Cutstock-zinc-s1/ Cutstock-t16-1.xml	OPT f=1216 TT=3375.2 T1=538.04	? (TO) TT=2520.06	No data	No data	SAT (TO) f=1472 TT=19753.9 T1=2471.7	SAT (TO) f=1470 TT=19749.801 T1=2499.65	? (TO) TT=2520.11	? (TO) TT=2520.06	? (TO) TT=2520.1	? (TO) TT=2520.1	? (TO) TT=2522.53	? (TO) TT=2519.94	? (TO) TT=2520.21	? (TO) TT=2520.09	SAT (TO) f=1513 TT=2520.16 T1=279.3	? (TO) TT=2520.13	? (TO) TT=2520.06	OPT f=1216 TT=3375.2 T1=538.04	? (TO) TT=8633.46	? (TO) TT=2400.06	No data	SAT (TO) f=1512 TT=2400.68 T1=304.84	SAT (TO) f=1513 TT=2400.12 T1=103.96	? (TO) TT=2404.99	? (TO) TT=2400.06	? (TO) TT=2400.29	? (TO) TT=2400.06	SAT (TO) f=1513 TT=2400.14 T1=293.71	? (TO) TT=2400.12	? (TO) TT=2400.07	? TT=232.664	? TT=174.201
Cutstock/ Cutstock-zinc-s1/ Cutstock-t16-5.xml	SAT TO f=983 TT=19781.199 T1=885.19	? (TO) TT=2520.05	No data	No data	SAT (TO) f=1193 TT=19131.199 T1=2519.91	SAT (TO) f=1187 TT=19006.301 T1=2487.97	? (TO) TT=2520.03	? (TO) TT=2520.06	? (TO) TT=2520.11	? (TO) TT=2520.1	? (TO) TT=2522.48	? (TO) TT=2519.8	? (TO) TT=2520.29	? (TO) TT=2519.95	? (TO) TT=2520.12	? (TO) TT=2520.11	? (TO) TT=2520.04	SAT (TO) f=983 TT=19781.199 T1=885.19	SAT (TO) f=1231 TT=19787.4 T1=1209.95	? (TO) TT=2400.09	No data	SAT (TO) f=1243 TT=2400.07 T1=145.43	SAT (TO) f=1243 TT=2400.45 T1=148	? (TO) TT=2405.73	? (TO) TT=2400.11	? (TO) TT=2400.22	? (TO) TT=2400.11	? (TO) TT=2400.04	? (TO) TT=2400.08	? (TO) TT=2400.07	? TT=171.151	? TT=126.246
Cutstock/ Cutstock-zinc-s1/ Cutstock-t16-6.xml	SAT TO f=1094 TT=3537.1 T1=1523.37	? (TO) TT=2520.11	No data	No data	SAT (TO) f=1328 TT=19773.6 T1=2486.21	SAT (TO) f=1328 TT=19778.199 T1=2505.54	? (TO) TT=2520.08	? (TO) TT=2520.12	? (TO) TT=2520.06	? (TO) TT=2520.04	? (TO) TT=2522.35	? (TO) TT=2520.08	? (TO) TT=2520.29	? (TO) TT=2520.07	? (TO) TT=2520.13	SAT (TO) f=1164 TT=2520.2 T1=432.68	SAT (TO) f=1369 TT=2520.14 T1=319.79	SAT (TO) f=1113 TT=3373.82 T1=194.33	SAT (TO) f=1094 TT=3537.1 T1=1523.37	? (TO) TT=2400.1	No data	SAT (TO) f=1369 TT=2400.26 T1=220.98	SAT (TO) f=1369 TT=2400.29 T1=256.49	? (TO) TT=2407.36	? (TO) TT=2400.06	? (TO) TT=2400.5	? (TO) TT=2400.05	? (TO) TT=2400.04	SAT (TO) f=1164 TT=2400.12 T1=400.35	SAT (TO) f=1369 TT=2400.2 T1=330.07	? TT=199.621	? TT=150.606
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
Cutstock/ Cutstock-zinc-s1/ Cutstock-t16-7.xml	OPT f=1705 TT=392.939 T1=378.99	? (TO) TT=2520.1	No data	No data	SAT (TO) f=1781 TT=19750.6 T1=2455.4	SAT (TO) f=1774 TT=19686.4 T1=2472.01	? (TO) TT=2520.03	? (TO) TT=2520.08	? (TO) TT=2520.1	? (TO) TT=2520.1	? (TO) TT=2523.1	? (TO) TT=2519.84	? (MO) TT=337.139	? (TO) TT=2519.91	SAT (TO) f=1810 TT=2520.54 T1=102.36	OPT f=1705 TT=392.939 T1=378.99	SAT (TO) f=1806 TT=2520.22 T1=373.75	OPT f=1705 TT=4504.82 T1=829.77	OPT f=1705 TT=5251.06 T1=5246.38	? (TO) TT=2400.03	No data	SAT (TO) f=1810 TT=2400.49 T1=138.2	SAT (TO) f=1810 TT=2400.52 T1=133.56	? (TO) TT=2409.12	? (TO) TT=2400.05	? (MO) TT=351.781	? (TO) TT=2400.08	SAT (TO) f=1810 TT=2400.24 T1=102.14	OPT f=1705 TT=397.798 T1=381.01	SAT (TO) f=1806 TT=2401.51 T1=371.87	? TT=247.802	? TT=209.084
DeBruijnSequence/ DeBruijnSequence-m1-s1/ DeBruijnSequence-02-02.xml	SAT TT=0.008	SAT TT=1.07	? (NS) TT=0.007	? (NS) TT=0.007	SAT TT=1.06	SAT TT=1.073	SAT TT=0.861	SAT TT=0.86	SAT TT=0.904	SAT TT=0.903	SAT TT=5.929	SAT TT=0.009	SAT TT=0.01	SAT TT=0.008	No data	SAT TT=1.07	No data	SAT TT=1.73	SAT TT=1.746	SAT TT=1.273	? (NS) TT=0.011	SAT TT=1.337	SAT TT=1.214	SAT TT=7.512	SAT TT=0.014	SAT TT=0.014	SAT TT=0.011	No data	SAT TT=1.138	No data	SAT TT=0.663	SAT TT=0.6
DeBruijnSequence/ DeBruijnSequence-m1-s1/ DeBruijnSequence-02-09.xml	SAT TT=3.178	SAT TT=9.296	? (NS) TT=2.658	? (NS) TT=2.318	SAT TT=67.44	SAT TT=67.58	SAT TT=24.204	SAT TT=22.861	SAT TT=220.701	SAT TT=227.691	SAT TT=85.615	SAT TT=5.357	SAT TT=10.212	SAT TT=3.178	No data	? (TO) TT=2520.07	No data	SAT (TO) TT=19906.5	SAT TT=11787.5	SAT TT=10.552	? (NS) TT=2.347	SAT TT=67.256	SAT TT=69.233	SAT TT=89.25	SAT TT=5.354	SAT TT=10.571	SAT TT=3.102	No data	? (TO) TT=2400.07	No data	? TT=769.845	? TT=506.931
DeBruijnSequence/ DeBruijnSequence-m1-s1/ DeBruijnSequence-03-04.xml	SAT TT=0.188	SAT TT=2.069	? (NS) TT=0.079	? (NS) TT=0.08	SAT TT=5.156	SAT TT=4.424	SAT TT=1.631	SAT TT=1.635	SAT TT=1.945	SAT TT=1.931	SAT TT=9.82	SAT TT=0.277	SAT TT=0.295	SAT TT=0.188	No data	SAT TT=2.051	No data	SAT (TO) TT=19788.801	SAT (TO) TT=5063.92	SAT TT=2.469	? (NS) TT=0.127	SAT TT=4.788	SAT TT=5.232	SAT TT=11.485	SAT TT=0.321	SAT TT=0.349	SAT TT=0.206	No data	SAT TT=2.172	No data	SAT TT=56.314	SAT TT=56.503
DeBruijnSequence/ DeBruijnSequence-m1-s1/ DeBruijnSequence-03-05.xml	SAT TT=0.769	SAT TT=4.245	? (NS) TT=0.381	? (NS) TT=0.381	SAT TT=17.64	SAT TT=17.313	SAT TT=7.103	SAT TT=7.292	SAT TT=15.421	SAT TT=15.594	SAT TT=15.418	SAT TT=1.118	SAT TT=1.667	SAT TT=0.769	No data	SAT TT=6.199	No data	SAT (TO) TT=19887.4	SAT (TO) TT=12568	SAT TT=4.847	? (NS) TT=0.441	SAT TT=21.182	SAT TT=21.985	SAT TT=19.757	SAT TT=1.198	SAT TT=1.742	SAT TT=0.774	No data	SAT TT=8.428	No data	? (TO) TT=2400.14	? (TO) TT=2520.2
DeBruijnSequence/ DeBruijnSequence-m1-s1/ DeBruijnSequence-03-06.xml	SAT TT=3.152	SAT TT=20.406	? (NS) TT=2.882	? (NS) TT=2.649	SAT TT=123.5	SAT TT=127.372	SAT TT=37.725	SAT TT=38.361	SAT TT=250.59	SAT TT=252.817	? (TO) TT=2521.05	SAT TT=4.658	SAT TT=19.746	SAT TT=3.152	No data	? (TO) TT=2520.12	No data	SAT (TO) TT=19914.699	SAT TT=98.424	SAT TT=22.353	? (NS) TT=2.714	SAT TT=161.522	SAT TT=171.184	? (TO) TT=2402.17	SAT TT=4.711	SAT TT=19.279	SAT TT=2.948	No data	? (TO) TT=2400.12	No data	? (TO) TT=2416.24	? TT=2065.37
DeBruijnSequence/ DeBruijnSequence-m1-s1/ DeBruijnSequence-04-05.xml	SAT TT=4.492	SAT TT=56.49	? (NS) TT=4.254	? (NS) TT=4.201	SAT TT=297.414	SAT TT=296.769	SAT TT=120.05	SAT TT=120.026	SAT TT=1542.74	SAT TT=1524.74	? (TO) TT=2521.78	SAT TT=5.763	? (MO) TT=32.013	SAT TT=4.492	No data	SAT TT=193.271	No data	SAT (TO) TT=19766.199	SAT TT=124.386	SAT TT=58.417	? (NS) TT=4.218	SAT TT=407.036	SAT TT=415.497	? (TO) TT=2403.53	SAT TT=5.689	? (MO) TT=32.452	SAT TT=3.993	No data	SAT TT=200.376	No data	? (TO) TT=2416.15	? TT=2269.27
DiamondFree/ DiamondFree-m1-s1/ DiamondFree-013.xml	SAT TT=0.204	SAT TT=2.115	? (NS) TT=0.069	? (NS) TT=0.07	SAT TT=3.83	SAT TT=3.893	SAT TT=1.649	SAT TT=1.627	SAT TT=2.06	SAT TT=2.06	SAT TT=15.748	SAT TT=0.217	SAT TT=0.215	SAT TT=0.204	No data	SAT TT=2.889	No data	SAT TT=15.835	SAT TT=12.001	SAT TT=2.569	? (NS) TT=0.114	SAT TT=4.245	SAT TT=4.538	SAT TT=18.775	SAT TT=0.254	SAT TT=0.239	SAT TT=0.21	No data	SAT TT=3.498	No data	SAT TT=8.556	SAT TT=7.914
DiamondFree/ DiamondFree-m1-s1/ DiamondFree-016.xml	SAT TT=0.356	SAT TT=2.991	? (NS) TT=0.149	? (NS) TT=0.149	SAT TT=5.517	SAT TT=5.211	SAT TT=2.069	SAT TT=2.205	SAT TT=2.315	SAT TT=2.331	SAT TT=17.982	SAT TT=0.356	SAT TT=0.371	SAT TT=0.403	No data	SAT TT=4.376	No data	SAT (TO) TT=19080.301	SAT TT=17.926	SAT TT=3.707	? (NS) TT=0.206	SAT TT=5.905	SAT TT=5.839	SAT TT=23.302	SAT TT=0.401	SAT TT=0.393	SAT TT=0.407	No data	SAT TT=5.08	No data	SAT TT=15.9	SAT TT=14.451
DiamondFree/ DiamondFree-m1-s1/ DiamondFree-025.xml	SAT TT=1.293	SAT TT=6.266	? (NS) TT=1.892	? (NS) TT=1.734	SAT TT=10.855	SAT TT=10.798	SAT TT=5.519	SAT TT=6.473	SAT TT=11.656	SAT TT=16.798	SAT TT=116.557	SAT TT=1.293	SAT TT=1.617	SAT TT=2.214	No data	SAT TT=10.215	No data	SAT (TO) TT=20030.699	SAT TT=51.03	SAT TT=8.476	? (NS) TT=1.744	SAT TT=11.796	SAT TT=12.575	SAT TT=125.568	SAT TT=1.359	SAT TT=1.568	SAT TT=2.17	No data	SAT TT=11.741	No data	SAT TT=210.851	SAT TT=209.044
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
DiamondFree/ DiamondFree-m1-s1/ DiamondFree-027.xml	SAT TT=1.682	SAT TT=8.191	? (NS) TT=2.863	? (NS) TT=2.948	SAT TT=13.805	SAT TT=14.212	SAT TT=4.971	SAT TT=4.908	SAT TT=5.563	SAT TT=5.592	? (TO) TT=2522.34	SAT TT=1.682	SAT TT=1.652	SAT TT=2.782	No data	SAT TT=8.617	No data	SAT (TO) TT=20033	SAT TT=227.838	SAT TT=10.084	? (NS) TT=2.917	SAT TT=14.002	SAT TT=15.223	? (TO) TT=2405.53	SAT TT=1.689	SAT TT=1.701	SAT TT=3.09	No data	SAT TT=9.945	No data	SAT TT=295.272	SAT TT=277.528
DiamondFree/ DiamondFree-m1-s1/ DiamondFree-039.xml	SAT TT=6.321	SAT TT=21.263	? (NS) TT=104.95	? (NS) TT=102.858	SAT TT=35.515	SAT TT=37.689	SAT TT=9.154	SAT TT=9.213	SAT TT=10.07	SAT TT=10.333	? (TO) TT=2527.13	SAT TT=6.321	SAT TT=27.296	SAT TT=20.236	No data	SAT TT=181.356	No data	SAT (TO) TT=20013.5	SAT TT=205.842	SAT TT=25.556	? (NS) TT=99.599	SAT TT=43.883	SAT TT=43.47	? (TO) TT=2412.47	SAT TT=6.357	SAT TT=28.207	SAT TT=19.287	No data	SAT TT=186.386	No data	? (TO) TT=2400.28	? (TO) TT=2520.15
DiamondFree/ DiamondFree-m1-s1/ DiamondFree-055.xml	SAT TT=24.04	SAT TT=68.471	? (NS) TT=1767.95	? (NS) TT=1746.56	SAT TT=199.183	SAT TT=195.734	SAT TT=427.124	SAT TT=411.096	SAT TT=1216.03	SAT TT=1213.49	? (TO) TT=2527.53	SAT TT=24.04	? (TO) TT=2519.77	SAT TT=184.776	No data	SAT TT=136.706	No data	SAT (TO) TT=19873.1	SAT TT=938.986	SAT TT=125.923	? (NS) TT=1756.2	SAT TT=316.59	SAT TT=338.772	? (TO) TT=2415.28	SAT TT=24.367	? (TO) TT=2400.1	SAT TT=216.066	No data	SAT TT=205.494	No data	? (TO) TT=2400.31	? (TO) TT=2520.2
Domino/ Domino-m1-s1/ Domino-100-300.xml	SAT TT=0.01	SAT TT=1.32	SAT TT=2.566	SAT TT=2.584	SAT TT=4.773	SAT TT=5.16	SAT TT=1.595	SAT TT=1.639	SAT TT=1.727	SAT TT=1.73	SAT TT=6.645	SAT TT=0.019	SAT TT=0.353	SAT TT=0.01	No data	SAT TT=1.442	No data	SAT TT=2.828	SAT TT=2.815	SAT TT=1.496	SAT TT=2.711	SAT TT=6.204	SAT TT=6.331	SAT TT=7.857	SAT TT=0.033	SAT TT=0.406	SAT TT=0.014	No data	SAT TT=1.651	No data	SAT TT=23.19	SAT TT=14.999
Domino/ Domino-m1-s1/ Domino-100-500.xml	SAT TT=0.007	SAT TT=1.516	SAT TT=11.005	SAT TT=11.022	SAT TT=7.94	SAT TT=7.519	SAT TT=2.102	SAT TT=2.054	SAT TT=2.231	SAT TT=2.121	SAT TT=6.456	SAT TT=0.038	SAT TT=0.911	SAT TT=0.007	No data	SAT TT=1.541	No data	SAT TT=2.99	SAT TT=3.133	SAT TT=1.74	SAT TT=11.187	SAT TT=10.663	SAT TT=11.231	SAT TT=7.58	SAT TT=0.068	SAT TT=0.939	SAT TT=0.016	No data	SAT TT=1.778	No data	SAT TT=87.98	SAT TT=42.748
Domino/ Domino-m1-s1/ Domino-200-100.xml	SAT TT=0.009	SAT TT=1.322	SAT TT=1.492	SAT TT=1.496	SAT TT=3.369	SAT TT=3.399	SAT TT=1.217	SAT TT=1.263	SAT TT=1.297	SAT TT=1.317	SAT TT=6.549	SAT TT=0.01	SAT TT=0.093	SAT TT=0.009	No data	SAT TT=1.557	No data	SAT TT=2.852	SAT TT=2.845	SAT TT=1.582	SAT TT=1.538	SAT TT=4.248	SAT TT=5.081	SAT TT=7.559	SAT TT=0.014	SAT TT=0.136	SAT TT=0.011	No data	SAT TT=1.629	No data	SAT TT=3.917	SAT TT=2.859
Domino/ Domino-m1-s1/ Domino-200-200.xml	SAT TT=0.011	SAT TT=1.348	SAT TT=6.525	SAT TT=6.563	SAT TT=5.128	SAT TT=4.698	SAT TT=1.564	SAT TT=1.625	SAT TT=1.594	SAT TT=1.603	SAT TT=6.393	SAT TT=0.014	SAT TT=0.324	SAT TT=0.011	No data	SAT TT=1.52	No data	SAT TT=3.045	SAT TT=3.126	SAT TT=1.641	SAT TT=6.625	SAT TT=5.562	SAT TT=6.061	SAT TT=7.499	SAT TT=0.024	SAT TT=0.336	SAT TT=0.013	No data	SAT TT=1.675	No data	SAT TT=25.064	SAT TT=13.669
Domino/ Domino-m1-s1/ Domino-300-300.xml	SAT TT=0.01	SAT TT=1.544	SAT TT=31.921	SAT TT=52.624	SAT TT=9.348	SAT TT=9.653	SAT TT=2.051	SAT TT=2.091	SAT TT=2.159	SAT TT=2.202	SAT TT=6.85	SAT TT=0.026	SAT TT=1.005	SAT TT=0.01	No data	SAT TT=1.692	No data	SAT TT=4.035	SAT TT=3.848	SAT TT=1.847	SAT TT=31.822	SAT TT=12.355	SAT TT=12.559	SAT TT=7.949	SAT TT=0.046	SAT TT=1.013	SAT TT=0.012	No data	SAT TT=1.855	No data	SAT TT=65.212	SAT TT=39.598
Domino/ Domino-m1-s1/ Domino-700-100.xml	SAT TT=0.013	SAT TT=1.437	SAT TT=27.736	SAT TT=28.306	SAT TT=5.908	SAT TT=6.557	SAT TT=1.538	SAT TT=1.633	SAT TT=1.697	SAT TT=1.616	SAT TT=6.879	SAT TT=0.022	SAT TT=0.309	SAT TT=0.013	No data	SAT TT=1.989	No data	SAT TT=4.563	SAT TT=4.699	SAT TT=1.72	SAT TT=27.68	SAT TT=7.21	SAT TT=7.664	SAT TT=8.422	SAT TT=0.037	SAT TT=0.355	SAT TT=0.028	No data	SAT TT=2.058	No data	SAT TT=19.171	SAT TT=9.949
Driver/ Driver-m1-s1/ driverlogw-01c.xml	SAT TT=0.004	SAT TT=1.178	SAT TT=0.004	SAT TT=0.004	SAT TT=1.721	SAT TT=1.75	SAT TT=0.885	SAT TT=0.897	SAT TT=0.988	SAT TT=1.006	SAT TT=7.438	SAT TT=0.008	SAT TT=0.008	SAT TT=0.017	No data	SAT TT=1.28	No data	SAT TT=60.069	SAT TT=5.363	SAT TT=1.358	SAT TT=0.005	SAT TT=2.216	SAT TT=2.005	SAT TT=8.503	SAT TT=0.01	SAT TT=0.014	SAT TT=0.023	No data	SAT TT=1.363	No data	SAT TT=0.994	SAT TT=0.88
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
Driver/ Driver-m1-s1/ driverlogw-02c.xml	SAT TT=0.084	SAT TT=3.468	SAT TT=0.391	SAT TT=0.386	SAT TT=6.888	SAT TT=7.317	SAT TT=2.92	SAT TT=2.854	SAT TT=3.063	SAT TT=3.007	SAT TT=16.228	SAT TT=0.084	SAT TT=0.097	SAT TT=0.304	No data	SAT TT=4.904	No data	SAT (TO) TT=4443.03	SAT TT=14.614	SAT TT=3.929	SAT TT=0.436	SAT TT=7.513	SAT TT=7.61	SAT TT=20.181	SAT TT=0.106	SAT TT=0.151	SAT TT=0.331	No data	SAT TT=5.582	No data	SAT TT=5.247	SAT TT=3.761
Driver/ Driver-m1-s1/ driverlogw-04c.xml	SAT TT=0.093	SAT TT=3.656	SAT TT=0.173	SAT TT=0.171	SAT TT=7.265	SAT TT=8.196	SAT TT=2.797	SAT TT=2.697	SAT TT=2.788	SAT TT=2.917	SAT TT=15.794	SAT TT=0.093	SAT TT=0.104	SAT TT=0.281	No data	SAT TT=4.009	No data	SAT TT=1613.89	SAT TT=22.998	SAT TT=4.261	SAT TT=0.225	SAT TT=7.626	SAT TT=7.321	SAT TT=20.172	SAT TT=0.143	SAT TT=0.156	SAT TT=0.297	No data	SAT TT=5.19	No data	SAT TT=5.012	SAT TT=3.923
Driver/Driver-m1-s1/ driverlogw-08cc.xml	SAT TT=0.209	SAT TT=4.706	SAT TT=2.859	SAT TT=2.774	SAT TT=11.236	SAT TT=13.496	SAT TT=4.078	SAT TT=4.166	SAT TT=4.778	SAT TT=4.871	SAT TT=21.313	SAT TT=0.209	SAT TT=0.213	SAT TT=0.861	No data	SAT TT=4.618	No data	SAT TT=259.275	SAT TT=33.113	SAT TT=6.222	SAT TT=2.766	SAT TT=11.596	SAT TT=12.628	SAT TT=24.565	SAT TT=0.227	SAT TT=0.269	SAT TT=0.956	No data	SAT TT=6.267	No data	SAT TT=7.785	SAT TT=5.631
Driver/ Driver-m1-s1/ driverlogw-08c.xml	SAT TT=0.204	SAT TT=4.627	SAT TT=3.101	SAT TT=2.965	SAT TT=11.742	SAT TT=12.094	SAT TT=4.354	SAT TT=4.42	SAT TT=4.99	SAT TT=5.026	SAT TT=19.206	SAT TT=0.204	SAT TT=0.197	SAT TT=0.841	No data	SAT TT=4.419	No data	SAT TT=251.352	SAT TT=34.674	SAT TT=6.014	SAT TT=2.985	SAT TT=11.423	SAT TT=11.674	SAT TT=28.507	SAT TT=0.22	SAT TT=0.262	SAT TT=0.908	No data	SAT TT=6.079	No data	SAT TT=6.744	SAT TT=5.554
Driver/ Driver-m1-s1/ driverlogw-09.xml	SAT TT=0.607	SAT TT=9.45	SAT TT=14.013	SAT TT=12.461	SAT TT=32.091	SAT TT=35.204	SAT TT=5.858	SAT TT=6.633	SAT TT=7.681	SAT TT=10.43	SAT TT=31.715	SAT TT=0.607	SAT TT=1.22	SAT TT=16.584	No data	SAT TT=12.793	No data	SAT TT=403.268	SAT TT=153.62	SAT TT=11.637	SAT TT=11.9	SAT TT=44.559	SAT TT=44.166	SAT TT=39.342	SAT TT=0.625	SAT TT=1.311	SAT TT=7.681	No data	SAT TT=15.176	No data	SAT TT=12.506	SAT TT=9.815
Dubois/ Dubois-m1-s1/ Dubois-021.xml	UNSAT TT=0.003	UNSAT TT=29.17	UNSAT TT=0.003	UNSAT TT=0.003	UNSAT TT=117.162	UNSAT TT=91.144	UNSAT TT=45.658	UNSAT TT=45.425	UNSAT TT=1.921	UNSAT TT=1.89	UNSAT TT=380.62	UNSAT TT=167.638	UNSAT TT=63.879	UNSAT TT=111.283	No data	UNSAT TT=32.527	No data	UNSAT TT=50.198	UNSAT TT=51.334	UNSAT TT=29.941	UNSAT TT=0.006	UNSAT TT=255.852	UNSAT TT=267.398	UNSAT TT=401.14	UNSAT TT=169.213	UNSAT TT=64.116	UNSAT TT=130.806	No data	UNSAT TT=30.157	No data	UNSAT TT=1.281	UNSAT TT=1.152
Dubois/ Dubois-m1-s1/ Dubois-022.xml	UNSAT TT=0.004	UNSAT TT=77.924	UNSAT TT=0.004	UNSAT TT=0.004	UNSAT TT=179.758	UNSAT TT=71.763	UNSAT TT=98.874	UNSAT TT=102.03	UNSAT TT=4.706	UNSAT TT=4.695	UNSAT TT=746.203	UNSAT TT=368.443	UNSAT TT=144.823	UNSAT TT=130.951	No data	UNSAT TT=60.589	No data	UNSAT TT=84.769	UNSAT TT=89.852	UNSAT TT=80.852	UNSAT TT=0.004	UNSAT TT=119.949	UNSAT TT=131.018	UNSAT TT=820.795	UNSAT TT=365.748	UNSAT TT=146.666	UNSAT TT=137.042	No data	UNSAT TT=65.261	No data	UNSAT TT=1.3	UNSAT TT=1.14
Dubois/ Dubois-m1-s1/ Dubois-025.xml	UNSAT TT=0.004	UNSAT TT=551.144	UNSAT TT=0.004	UNSAT TT=0.004	UNSAT TT=293.528	UNSAT TT=531.128	UNSAT TT=848.17	UNSAT TT=847.81	UNSAT TT=3.172	UNSAT TT=3.155	? (TO) TT=2520.5	? (TO) TT=2520.09	UNSAT TT=943.674	UNSAT TT=1859.58	No data	UNSAT TT=523.737	No data	UNSAT TT=681.374	UNSAT TT=638.957	UNSAT TT=603.085	UNSAT TT=0.007	UNSAT TT=1739.02	UNSAT TT=1741.03	? (TO) TT=2401.15	? (TO) TT=2400.08	UNSAT TT=963.739	UNSAT TT=1806.62	No data	UNSAT TT=513.642	No data	UNSAT TT=1.423	UNSAT TT=1.307
Dubois/ Dubois-m1-s1/ Dubois-050.xml	UNSAT TT=0.007	? (TO) TT=2520.07	UNSAT TT=0.007	UNSAT TT=0.007	? (TO) TT=19806.199	? (TO) TT=19875.5	? (TO) TT=2520.05	? (TO) TT=2520.07	? (TO) TT=2520.06	? (TO) TT=2520.07	? (TO) TT=2520.42	? (TO) TT=2519.71	? (TO) TT=2520.09	? (TO) TT=2519.45	No data	? (TO) TT=2520.12	No data	? (TO) TT=19851.301	? (TO) TT=19854.801	? (TO) TT=2400.06	UNSAT TT=0.013	? (TO) TT=2400.69	? (TO) TT=2400.33	? (TO) TT=2401.08	? (TO) TT=2400.03	? (TO) TT=2400.03	? (TO) TT=2400.07	No data	? (TO) TT=2400.1	No data	UNSAT TT=1.645	UNSAT TT=1.8
Dubois/ Dubois-m1-s1/ Dubois-080.xml	UNSAT TT=0.013	? (TO) TT=2520.08	UNSAT TT=0.013	UNSAT TT=0.013	? (TO) TT=19996.199	? (TO) TT=20033.1	? (TO) TT=2520.25	? (TO) TT=2520.11	? (TO) TT=2520.05	? (TO) TT=2520.06	? (TO) TT=2520.5	? (TO) TT=2520	? (TO) TT=2519.94	? (TO) TT=2519.88	No data	? (TO) TT=2520.11	No data	? (TO) TT=19822.5	? (TO) TT=19841.5	? (TO) TT=2400.09	UNSAT TT=0.02	? (TO) TT=2400.22	? (TO) TT=2400.59	? (TO) TT=2401.1	? (TO) TT=2400.09	? (TO) TT=2400.03	? (TO) TT=2400.05	No data	? (TO) TT=2400.11	No data	UNSAT TT=2.903	UNSAT TT=2.251
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
Dubois/ Dubois-m1-s1/ Dubois-090.xml	UNSAT TT=0.015	? (TO) TT=2520.11	UNSAT TT=0.015	UNSAT TT=0.015	? (TO) TT=19982.199	? (TO) TT=20022.4	? (TO) TT=2520.07	? (TO) TT=2520.1	? (TO) TT=2520.11	? (TO) TT=2520.09	? (TO) TT=2520.51	? (TO) TT=2520	? (TO) TT=2520.01	? (TO) TT=2519.81	No data	? (TO) TT=2520.05	No data	? (TO) TT=19856.301	? (TO) TT=19851.301	? (TO) TT=2400.1	UNSAT TT=0.021	? (TO) TT=2400.4	? (TO) TT=2400	? (TO) TT=2401.08	? (TO) TT=2400.01	? (TO) TT=2400.11	? (TO) TT=2400.02	No data	? (TO) TT=2400.11	No data	UNSAT TT=2.917	UNSAT TT=2.805
Fastfood/ Fastfood-m1-s1/ Fastfood-ff06.xml	OPT f=2 TT=0.191 T1=0.2	OPT f=2 TT=3.442 T1=1.34	No data	No data	OPT f=2 TT=19.107 T1=3.33	OPT f=2 TT=19.235 T1=3.26	OPT f=2 TT=2.509 T1=0.9	OPT f=2 TT=2.556 T1=1.06	OPT f=2 TT=4.133 T1=1.29	OPT f=2 TT=4.176 T1=1.28	OPT f=2 TT=15.939 T1=6.24	OPT f=2 TT=0.231 T1=0.28	OPT f=2 TT=0.289 T1=0.33	OPT f=2 TT=0.191 T1=0.24	SAT (TO) f=2 TT=2520.11 T1=22.65	OPT f=2 TT=3.599 T1=1.53	OPT f=2 TT=3.598 T1=2.06	OPT f=2 TT=13.293 T1=3.39	OPT f=2 TT=13.88 T1=11.3	OPT f=2 TT=3.881 T1=1.2	No data	OPT f=2 TT=24.831 T1=3.96	OPT f=2 TT=26.287 T1=4.16	OPT f=2 TT=22.832 T1=6.65	OPT f=2 TT=0.269 T1=0.25	OPT f=2 TT=0.313 T1=0.29	OPT f=2 TT=0.239 T1=0.2	SAT (TO) f=2 TT=2400.12 T1=20.94	OPT f=2 TT=4.358 T1=1.45	OPT f=2 TT=4.309 T1=1.42	OPT f=2 TT=472.512 T1=391.12	OPT f=2 TT=466.794 T1=388.39
Fastfood/ Fastfood-m1-s1/ Fastfood-ff15.xml	OPT f=1 TT=0.224 T1=0.22	OPT f=1 TT=3.19 T1=1.23	No data	No data	OPT f=1 TT=28.482 T1=4.53	OPT f=1 TT=30.6 T1=4.6	OPT f=1 TT=3.106 T1=1.22	OPT f=1 TT=3.135 T1=1.29	OPT f=1 TT=4.036 T1=1.29	OPT f=1 TT=3.983 T1=1.27	OPT f=1 TT=16.819 T1=6.57	OPT f=1 TT=0.224 T1=0.3	OPT f=1 TT=0.311 T1=0.36	OPT f=1 TT=0.234 T1=0.25	SAT (TO) f=1 TT=2520.09 T1=2.8	OPT f=1 TT=3.515 T1=1.51	OPT f=1 TT=3.414 T1=2.14	OPT f=1 TT=10.483 T1=2.39	OPT f=1 TT=10.473 T1=9.47	OPT f=1 TT=3.964 T1=1.18	No data	OPT f=1 TT=37.049 T1=5.65	OPT f=1 TT=40.827 T1=6.31	OPT f=1 TT=22.939 T1=6.78	OPT f=1 TT=0.275 T1=0.26	OPT f=1 TT=0.358 T1=0.34	OPT f=1 TT=0.269 T1=0.22	SAT (TO) f=1 TT=2400.12 T1=2.37	OPT f=1 TT=4.057 T1=1.39	OPT f=1 TT=4.259 T1=1.44	OPT f=1 TT=527.246 T1=351.01	OPT f=1 TT=533.889 T1=361.17
Fastfood/ Fastfood-m1-s1/ Fastfood-ff16.xml	OPT f=1916 TT=0.319 T1=0.21	OPT f=1916 TT=4.087 T1=1.55	No data	No data	OPT f=1916 TT=10.763 T1=1.85	OPT f=1916 TT=10.995 T1=1.94	OPT f=1916 TT=34.496 T1=6.6	OPT f=1916 TT=33.705 T1=6.6	OPT f=1916 TT=61.245 T1=49.42	OPT f=1916 TT=60.208 T1=48.3	OPT f=1916 TT=18.977 T1=6.04	OPT f=1916 TT=1.552 T1=1.6	OPT f=1916 TT=1.029 T1=1.09	OPT f=1916 TT=0.319 T1=0.28	SAT (TO) f=1916 TT=2520.08 T1=38.95	OPT f=1916 TT=3.35 T1=1.41	OPT f=1916 TT=3.235 T1=1.37	OPT f=1916 TT=22.98 T1=9.66	OPT f=1916 TT=22.906 T1=22.01	OPT f=1916 TT=4.28 T1=1.49	No data	OPT f=1916 TT=12.755 T1=2.18	OPT f=1916 TT=12.724 T1=2.28	OPT f=1916 TT=21.845 T1=6.15	OPT f=1916 TT=1.588 T1=1.56	OPT f=1916 TT=1.039 T1=0.88	OPT f=1916 TT=0.351 T1=0.21	SAT (TO) f=1916 TT=2400.08 T1=34.18	OPT f=1916 TT=4.288 T1=1.43	OPT f=1916 TT=4.006 T1=1.37	OPT f=1916 TT=230.082 T1=184.12	OPT f=1916 TT=272.484 T1=222.02
Fastfood/ Fastfood-m1-s1/ Fastfood-ff18.xml	OPT f=1143 TT=6.268 T1=0.61	OPT f=1143 TT=30.045 T1=8.86	No data	No data	OPT f=1143 TT=31.295 T1=4.91	OPT f=1143 TT=28.675 T1=4.27	OPT f=1143 TT=875.858 T1=506.05	OPT f=1143 TT=862.271 T1=497.27	OPT f=1143 TT=1915.55 T1=239.57	OPT f=1143 TT=1908.61 T1=237.99	OPT f=1143 TT=125.389 T1=6.49	OPT f=1143 TT=36.33 T1=36.34	OPT f=1143 TT=18.043 T1=18.11	OPT f=1143 TT=6.418 T1=0.68	SAT (TO) f=1143 TT=2520.1 T1=170.47	OPT f=1143 TT=7.219 T1=2.92	OPT f=1143 TT=6.954 T1=2.84	OPT f=1143 TT=66.511 T1=23.21	OPT f=1143 TT=67.586 T1=63.92	OPT f=1143 TT=28.424 T1=8.48	No data	OPT f=1143 TT=47.525 T1=6.18	OPT f=1143 TT=49.549 T1=6.32	OPT f=1143 TT=129.089 T1=7.4	OPT f=1143 TT=36.618 T1=35.34	OPT f=1143 TT=18.218 T1=11.51	OPT f=1143 TT=6.268 T1=0.61	SAT (TO) f=1143 TT=2400.05 T1=115.6	OPT f=1143 TT=8.528 T1=2.81	OPT f=1143 TT=7.927 T1=2.78	SAT (TO) f=1143 TT=2400.19 T1=1730.98	SAT (TO) f=1143 TT=2520.24 T1=1933.13
Fastfood/ Fastfood-m1-s1/ Fastfood-ff32.xml	OPT f=5708 TT=0.039 T1=0.05	OPT f=5708 TT=1.421 T1=0.74	No data	No data	OPT f=5708 TT=2.819 T1=0.82	OPT f=5708 TT=2.942 T1=0.84	OPT f=5708 TT=1.408 T1=0.66	OPT f=5708 TT=1.424 T1=0.69	OPT f=5708 TT=1.742 T1=0.78	OPT f=5708 TT=1.8 T1=0.72	? TT=6.233	OPT f=5708 TT=0.043 T1=0.12	OPT f=5708 TT=0.047 T1=0.14	OPT f=5708 TT=0.039 T1=0.13	SAT (TO) f=5708 TT=2520.05 T1=1.29	OPT f=5708 TT=1.646 T1=0.93	OPT f=5708 TT=1.621 T1=0.98	OPT f=5708 TT=3.441 T1=1.32	OPT f=5708 TT=3.553 T1=3.02	OPT f=5708 TT=1.646 T1=0.72	No data	OPT f=5708 TT=3.327 T1=0.93	OPT f=5708 TT=3.391 T1=0.95	? TT=6.685	OPT f=5708 TT=0.073 T1=0.07	OPT f=5708 TT=0.066 T1=0.06	OPT f=5708 TT=0.059 T1=0.05	SAT (TO) f=5708 TT=2400.04 T1=1.34	OPT f=5708 TT=2.081 T1=1.04	OPT f=5708 TT=1.828 T1=0.89	OPT f=5708 TT=5.084 T1=1.92	OPT f=5708 TT=4.838 T1=2.04
Fastfood/ Fastfood-m1-s1/ Fastfood-ff37.xml	OPT f=644 TT=1.335 T1=1.16	OPT f=644 TT=9.379 T1=3.17	No data	No data	OPT f=644 TT=17.014 T1=2.65	OPT f=644 TT=16.324 T1=2.55	OPT f=644 TT=51.631 T1=40.78	OPT f=644 TT=51.384 T1=40.18	OPT f=644 TT=158.442 T1=84.16	OPT f=644 TT=162.013 T1=85.98	OPT f=644 TT=25.907 T1=4.98	OPT f=644 TT=6.049 T1=6.14	OPT f=644 TT=4.105 T1=4.15	OPT f=644 TT=1.335 T1=1.26	SAT (TO) f=644 TT=2520.09 T1=71.16	OPT f=644 TT=5.612 T1=2.15	OPT f=644 TT=4.826 T1=1.95	OPT f=644 TT=14.745 T1=4.8	OPT f=644 TT=14.818 T1=12.49	OPT f=644 TT=10.193 T1=3.2	No data	OPT f=644 TT=22.796 T1=3.24	OPT f=644 TT=22.623 T1=3.18	OPT f=644 TT=28.017 T1=5.16	OPT f=644 TT=6.003 T1=3.83	OPT f=644 TT=4.137 T1=3.76	OPT f=644 TT=1.338 T1=1.16	SAT (TO) f=644 TT=2400.05 T1=88.04	OPT f=644 TT=5.475 T1=1.91	OPT f=644 TT=5.077 T1=1.89	OPT f=644 TT=494.485 T1=256.21	OPT f=644 TT=504.145 T1=264.98
Fastfood/ Fastfood-m1-s1/ Fastfood-ff41.xml	OPT f=14 TT=0.39 T1=0.18	OPT f=14 TT=3.961 T1=1.72	No data	No data	OPT f=14 TT=32.451 T1=4.51	OPT f=14 TT=28.978 T1=4.26	OPT f=14 TT=3.613 T1=1.13	OPT f=14 TT=3.923 T1=1.28	OPT f=14 TT=9.071 T1=2.51	OPT f=14 TT=8.502 T1=2.3	OPT f=14 TT=20.679 T1=6.23	OPT f=14 TT=1.795 T1=1.85	OPT f=14 TT=1.665 T1=1.73	OPT f=14 TT=0.39 T1=0.25	SAT (TO) f=14 TT=2520.12 T1=99.32	OPT f=14 TT=5.689 T1=2.34	OPT f=14 TT=6.117 T1=2.42	OPT f=14 TT=23.524 T1=6.89	OPT f=14 TT=24.48 T1=20.31	OPT f=14 TT=5.684 T1=1.84	No data	OPT f=14 TT=39.416 T1=5.66	OPT f=14 TT=38.334 T1=5.48	OPT f=14 TT=25.009 T1=6.42	OPT f=14 TT=1.814 T1=1.12	OPT f=14 TT=1.683 T1=1	OPT f=14 TT=0.404 T1=0.18	SAT (TO) f=14 TT=2400.11 T1=96.06	OPT f=14 TT=7.381 T1=2.3	OPT f=14 TT=6.477 T1=2.53	OPT f=14 TT=850.329 T1=784.7	OPT f=14 TT=851.595 T1=787.37
Fastfood/ Fastfood-m1-s1/ Fastfood-ff44.xml	OPT f=3 TT=0.135 T1=0.17	OPT f=3 TT=2.951 T1=1.19	No data	No data	OPT f=3 TT=27.678 T1=4.4	OPT f=3 TT=24.944 T1=4	OPT f=3 TT=3.005 T1=1.18	OPT f=3 TT=2.877 T1=1.14	OPT f=3 TT=5.218 T1=1.64	OPT f=3 TT=4.998 T1=1.73	OPT f=3 TT=15.241 T1=5.97	OPT f=3 TT=0.135 T1=0.2	OPT f=3 TT=0.174 T1=0.23	OPT f=3 TT=0.198 T1=0.24	SAT (TO) f=3 TT=2520.12 T1=32.93	OPT f=3 TT=3.806 T1=1.45	OPT f=3 TT=3.872 T1=1.34	OPT f=3 TT=20.469 T1=6.31	OPT f=3 TT=21.145 T1=19.08	OPT f=3 TT=3.978 T1=1.31	No data	OPT f=3 TT=35.643 T1=5.45	OPT f=3 TT=37.091 T1=5.64	OPT f=3 TT=21.431 T1=6.3	OPT f=3 TT=0.146 T1=0.12	OPT f=3 TT=0.21 T1=0.18	OPT f=3 TT=0.205 T1=0.17	SAT (TO) f=3 TT=2400.08 T1=37.61	OPT f=3 TT=4.599 T1=1.38	OPT f=3 TT=5.077 T1=1.52	OPT f=3 TT=405.001 T1=395.7	OPT f=3 TT=398.26 T1=390.41
Fastfood/ Fastfood-m1-s1/ Fastfood-ff46.xml	OPT f=1 TT=0.087 T1=0.15	OPT f=1 TT=2.451 T1=1.06	No data	No data	OPT f=1 TT=26.711 T1=4.29	OPT f=1 TT=26.694 T1=4.29	OPT f=1 TT=2.388 T1=0.88	OPT f=1 TT=2.408 T1=1.05	OPT f=1 TT=3.206 T1=1.04	OPT f=1 TT=3.22 T1=0.92	OPT f=1 TT=14.829 T1=5.87	OPT f=1 TT=0.087 T1=0.15	OPT f=1 TT=0.128 T1=0.19	OPT f=1 TT=0.166 T1=0.22	SAT (TO) f=1 TT=2520.05 T1=1.66	OPT f=1 TT=3.271 T1=1.42	OPT f=1 TT=3.197 T1=1.4	OPT f=1 TT=8.793 T1=2.09	OPT f=1 TT=9.014 T1=7.66	OPT f=1 TT=2.945 T1=1.05	No data	OPT f=1 TT=37.13 T1=5.7	OPT f=1 TT=36.864 T1=5.61	OPT f=1 TT=20.719 T1=6.2	OPT f=1 TT=0.13 T1=0.12	OPT f=1 TT=0.183 T1=0.17	OPT f=1 TT=0.214 T1=0.18	SAT (TO) f=1 TT=2400.05 T1=1.41	OPT f=1 TT=3.594 T1=1.31	OPT f=1 TT=3.681 T1=1.32	OPT f=1 TT=148.137 T1=116.3	OPT f=1 TT=146.693 T1=115.9
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
Fastfood/ Fastfood-m1-s1/ Fastfood-ff54.xml	OPT f=3420 TT=0.416 T1=0.26	OPT f=3420 TT=5.312 T1=2.44	No data	No data	OPT f=3420 TT=15.053 T1=2.52	OPT f=3420 TT=16.823 T1=2.37	OPT f=3420 TT=62.376 T1=48.95	OPT f=3420 TT=63.522 T1=49.65	OPT f=3420 TT=79.578 T1=50.73	OPT f=3420 TT=80.315 T1=51.26	OPT f=3420 TT=27.667 T1=7.94	OPT f=3420 TT=2.601 T1=2.7	OPT f=3420 TT=1.888 T1=1.98	OPT f=3420 TT=0.416 T1=0.33	SAT (TO) f=3420 TT=2520.09 T1=34.53	OPT f=3420 TT=4.09 T1=1.64	OPT f=3420 TT=3.701 T1=1.4	OPT f=3420 TT=30.563 T1=13.99	OPT f=3420 TT=29.014 T1=27.92	OPT f=3420 TT=6.365 T1=2.45	No data	Wrong Opt. f=3914 TT=8.273 T1=1.7	Wrong Opt. f=3732 TT=9.339 T1=1.84	OPT f=3420 TT=30.976 T1=7.57	OPT f=3420 TT=2.64 T1=2.58	OPT f=3420 TT=1.935 T1=1.47	OPT f=3420 TT=0.448 T1=0.26	SAT (TO) f=3420 TT=2400.08 T1=22.83	OPT f=3420 TT=4.694 T1=1.56	OPT f=3420 TT=4.794 T1=1.55	OPT f=3420 TT=539.634 T1=475.84	OPT f=3420 TT=535.597 T1=473.58
Fastfood/ Fastfood-m1-s1/ Fastfood-ff57.xml	OPT f=1334 TT=19.431 T1=7.18	OPT f=1334 TT=822.013 T1=422.21	No data	No data	OPT f=1334 TT=84.298 T1=10.72	OPT f=1334 TT=93.539 T1=10.64	SAT (TO) f=1486 TT=2520.05 T1=1397.81	SAT (TO) f=1486 TT=2520.06 T1=1397.8	SAT (TO) f=1474 TT=2520.1 T1=1458.62	SAT (TO) f=1474 TT=2520.04 T1=1467.44	OPT f=1334 TT=980.827 T1=7.89	OPT f=1334 TT=250.278 T1=250.29	OPT f=1334 TT=130.922 T1=130.98	OPT f=1334 TT=42.373 T1=20.52	SAT (TO) f=1334 TT=2520.03 T1=204.49	OPT f=1334 TT=19.431 T1=7.5	SAT (TO) f=1334 TT=2520.07 T1=15.16	OPT f=1334 TT=156.159 T1=31.59	OPT f=1334 TT=146.909 T1=142.49	OPT f=1334 TT=839.955 T1=430.68	No data	OPT f=1334 TT=154.424 T1=19.02	OPT f=1334 TT=164.71 T1=19.41	OPT f=1334 TT=938.084 T1=7.88	OPT f=1334 TT=254.27 T1=249.34	OPT f=1334 TT=130.42 T1=95.36	OPT f=1334 TT=42.233 T1=20.37	SAT (TO) f=1334 TT=2400.08 T1=207.08	OPT f=1334 TT=21.202 T1=7.18	OPT f=1334 TT=1976.55 T1=9.94	SAT (TO) f=1378 TT=2400.31 T1=2106.88	SAT (TO) f=1378 TT=2520.19 T1=2266.67
Fastfood/ Fastfood-m1-s1/ Fastfood-ff65.xml	OPT f=63 TT=6.278 T1=1.43	OPT f=63 TT=6.707 T1=2.19	No data	No data	OPT f=63 TT=42.992 T1=5.19	OPT f=63 TT=38.753 T1=4.41	OPT f=63 TT=11.312 T1=4.07	OPT f=63 TT=10.658 T1=4.04	OPT f=63 TT=35.764 T1=18.1	OPT f=63 TT=36.217 T1=18.35	OPT f=63 TT=36.029 T1=6.44	OPT f=63 TT=8.992 T1=9.05	OPT f=63 TT=6.278 T1=6.33	OPT f=63 TT=7.181 T1=1.59	SAT (TO) f=63 TT=2520.04 T1=227.8	OPT f=63 TT=6.974 T1=2.99	OPT f=63 TT=6.547 T1=2.83	OPT f=63 TT=36.121 T1=8.35	OPT f=63 TT=34.033 T1=33.54	OPT f=63 TT=7.459 T1=2.17	No data	OPT f=63 TT=60.115 T1=6.88	OPT f=63 TT=64.753 T1=6.46	OPT f=63 TT=40.76 T1=6.62	OPT f=63 TT=9.093 T1=4.17	OPT f=63 TT=6.297 T1=4.4	OPT f=63 TT=7.109 T1=1.43	SAT (TO) f=63 TT=2400.04 T1=162.78	OPT f=63 TT=7.765 T1=3.07	OPT f=63 TT=9.16 T1=3.21	SAT (TO) f=63 TT=2400.18 T1=1805.31	SAT (TO) f=63 TT=2520.15 T1=1823.74
Fastfood/ Fastfood-m1-s1/ Fastfood-ff69.xml	OPT f=6119 TT=0.041 T1=0.05	OPT f=6119 TT=1.476 T1=0.8	No data	No data	OPT f=6119 TT=3.309 T1=0.82	OPT f=6119 TT=3.183 T1=0.81	OPT f=6119 TT=1.482 T1=0.66	OPT f=6119 TT=1.455 T1=0.73	OPT f=6119 TT=1.976 T1=0.71	OPT f=6119 TT=2.002 T1=0.74	? TT=6.302	OPT f=6119 TT=0.047 T1=0.12	OPT f=6119 TT=0.052 T1=0.09	OPT f=6119 TT=0.041 T1=0.12	SAT (TO) f=6119 TT=2520.05 T1=1.32	OPT f=6119 TT=1.733 T1=0.98	OPT f=6119 TT=1.706 T1=0.97	OPT f=6119 TT=3.778 T1=1.32	OPT f=6119 TT=3.685 T1=2.95	OPT f=6119 TT=1.927 T1=0.81	No data	OPT f=6119 TT=3.843 T1=0.99	OPT f=6119 TT=3.464 T1=0.95	? TT=7.302	OPT f=6119 TT=0.08 T1=0.07	OPT f=6119 TT=0.074 T1=0.07	OPT f=6119 TT=0.057 T1=0.05	SAT (TO) f=6119 TT=2400.05 T1=1.28	OPT f=6119 TT=1.926 T1=0.87	OPT f=6119 TT=2.257 T1=1.05	OPT f=6119 TT=7.959 T1=1.71	OPT f=6119 TT=7.126 T1=1.74
Fastfood/ Fastfood-m1-s1/ Fastfood-ff71.xml	OPT f=16 TT=0.35 T1=0.19	OPT f=16 TT=3.519 T1=1.35	No data	No data	OPT f=16 TT=20.66 T1=3.22	OPT f=16 TT=23.794 T1=3.46	OPT f=16 TT=3.39 T1=1.14	OPT f=16 TT=3.262 T1=1.23	OPT f=16 TT=8.172 T1=2.45	OPT f=16 TT=8.199 T1=2.32	OPT f=16 TT=18.048 T1=6.24	OPT f=16 TT=0.873 T1=0.94	OPT f=16 TT=0.794 T1=0.83	OPT f=16 TT=0.35 T1=0.27	SAT (TO) f=16 TT=2520.12 T1=98.93	OPT f=16 TT=4.3 T1=1.68	OPT f=16 TT=4.147 T1=1.69	OPT f=16 TT=19.399 T1=5.7	OPT f=16 TT=19.691 T1=18.69	OPT f=16 TT=4.628 T1=1.38	No data	OPT f=16 TT=29.213 T1=4.29	OPT f=16 TT=28.044 T1=4.16	OPT f=16 TT=22.417 T1=6.18	OPT f=16 TT=0.924 T1=0.55	OPT f=16 TT=0.783 T1=0.62	OPT f=16 TT=0.377 T1=0.19	SAT (TO) f=16 TT=2400.07 T1=83.11	OPT f=16 TT=5.414 T1=1.63	OPT f=16 TT=5.361 T1=1.66	OPT f=16 TT=511.418 T1=487.76	OPT f=16 TT=518.931 T1=496.73
Fastfood/ Fastfood-m1-s1/ Fastfood-ff76.xml	OPT f=310 TT=9.224 T1=1.15	OPT f=310 TT=22.934 T1=16	No data	No data	OPT f=310 TT=98.544 T1=9.65	OPT f=310 TT=70.655 T1=5.9	OPT f=310 TT=119.835 T1=109.47	OPT f=310 TT=119.725 T1=109.25	OPT f=310 TT=326.695 T1=260.75	OPT f=310 TT=324.986 T1=259.4	OPT f=310 TT=95.546 T1=9.08	OPT f=310 TT=21.458 T1=21.46	OPT f=310 TT=27.768 T1=27.83	OPT f=310 TT=28.929 T1=1.22	SAT (TO) f=310 TT=2520.13 T1=249.79	OPT f=310 TT=9.925 T1=5.62	OPT f=310 TT=9.224 T1=5.65	OPT f=310 TT=53.973 T1=11.55	OPT f=310 TT=54.274 T1=42.8	OPT f=310 TT=23.236 T1=15.8	No data	OPT f=310 TT=108.599 T1=8.83	OPT f=310 TT=109.737 T1=7.65	OPT f=310 TT=100.279 T1=8.73	OPT f=310 TT=21.553 T1=18.83	OPT f=310 TT=27.735 T1=27.13	OPT f=310 TT=29.69 T1=1.15	SAT (TO) f=310 TT=2400.08 T1=141.77	OPT f=310 TT=10.358 T1=5.36	OPT f=310 TT=10.234 T1=5.36	SAT (TO) f=310 TT=2400.22 T1=2278.3	SAT (TO) f=313 TT=2520.13 T1=1472.72
Fastfood/ Fastfood-m1-s1/ Fastfood-ff77.xml	OPT f=125 TT=1.302 T1=0.92	OPT f=125 TT=4.801 T1=2.21	No data	No data	OPT f=125 TT=17.172 T1=2.78	OPT f=125 TT=15.381 T1=2.72	OPT f=125 TT=8.504 T1=3.53	OPT f=125 TT=8.817 T1=3.7	OPT f=125 TT=17.98 T1=6.56	OPT f=125 TT=19.018 T1=6.68	OPT f=125 TT=16.589 T1=5.19	OPT f=125 TT=2.41 T1=2.44	OPT f=125 TT=2.099 T1=2.14	OPT f=125 TT=1.302 T1=0.92	SAT (TO) f=125 TT=2520.1 T1=35.14	OPT f=125 TT=4.884 T1=1.94	OPT f=125 TT=4.549 T1=1.89	OPT f=125 TT=16.674 T1=5.28	OPT f=125 TT=15.222 T1=14.35	OPT f=125 TT=6.202 T1=2.09	No data	OPT f=125 TT=18.02 T1=2.95	OPT f=125 TT=19.918 T1=2.7	OPT f=125 TT=21.5 T1=5.88	OPT f=125 TT=2.472 T1=2.44	OPT f=125 TT=2.148 T1=1.65	OPT f=125 TT=1.349 T1=0.92	SAT (TO) f=125 TT=2400.09 T1=37.07	OPT f=125 TT=5.806 T1=1.89	OPT f=125 TT=5.531 T1=1.85	OPT f=125 TT=215.233 T1=199.65	OPT f=125 TT=216.931 T1=202.47
Fastfood/ Fastfood-m1-s1/ Fastfood-ff84.xml	OPT f=770 TT=0.129 T1=0.07	OPT f=770 TT=2.732 T1=1.13	No data	No data	OPT f=770 TT=5.98 T1=1.11	OPT f=770 TT=6.146 T1=1.23	OPT f=770 TT=9.297 T1=3.3	OPT f=770 TT=9.263 T1=3.45	OPT f=770 TT=23.596 T1=9.58	OPT f=770 TT=23.588 T1=9.58	OPT f=770 TT=13.251 T1=5.18	OPT f=770 TT=0.585 T1=0.65	OPT f=770 TT=0.324 T1=0.36	OPT f=770 TT=0.129 T1=0.15	SAT (TO) f=770 TT=2520.53 T1=20.7	OPT f=770 TT=2.894 T1=1.19	OPT f=770 TT=2.861 T1=1.17	OPT f=770 TT=14.872 T1=6.29	OPT f=770 TT=14.295 T1=12.74	OPT f=770 TT=3.296 T1=1.07	No data	Wrong Opt. f=776 TT=4.97 T1=1.18	Wrong Opt. f=808 TT=4.615 T1=1.13	OPT f=770 TT=15.725 T1=5.05	OPT f=770 TT=0.643 T1=0.62	OPT f=770 TT=0.329 T1=0.27	OPT f=770 TT=0.171 T1=0.07	SAT (TO) f=770 TT=2400.06 T1=27.09	OPT f=770 TT=3.649 T1=1.19	OPT f=770 TT=3.112 T1=1.05	OPT f=770 TT=35.125 T1=24.76	OPT f=770 TT=40.907 T1=29.99
Fischer/Fischer-m1-s1/ Fischer-04-04-fair.xml	UNSAT TT=7.315	UNSAT TT=89.871	? (TO) TT=2519.61	? (TO) TT=2519.98	UNSAT TT=47.514	UNSAT TT=43.649	UNSAT TT=7.914	UNSAT TT=7.718	UNSAT TT=9.241	UNSAT TT=9.125	UNSAT TT=25.594	? (TO) TT=2520.26	Signal TT=38.81	UNSAT TT=7.315	No data	UNSAT TT=25.249	No data	UNSAT TT=237.356	UNSAT TT=250.884	UNSAT TT=97.51	? (TO) TT=2400.23	UNSAT TT=56.248	UNSAT TT=63.538	UNSAT TT=31.641	? (TO) TT=2400.06	Signal TT=43.652	UNSAT TT=6.741	No data	UNSAT TT=30.365	No data	? (TO) TT=2415.79	? (TO) TT=2528.12
Fischer/Fischer-m1-s1/ Fischer-05-03-fair.xml	UNSAT TT=5.392	UNSAT TT=92.304	? (TO) TT=2520.38	? (TO) TT=2519.98	UNSAT TT=37.08	UNSAT TT=68.116	UNSAT TT=5.207	UNSAT TT=5.392	UNSAT TT=8.392	UNSAT TT=7.282	UNSAT TT=23.554	? (TO) TT=2520.07	Signal TT=38.251	UNSAT TT=7.169	No data	UNSAT TT=21.078	No data	UNSAT TT=215.555	UNSAT TT=219.036	UNSAT TT=105.543	? (TO) TT=2400.26	UNSAT TT=85.191	UNSAT TT=61.662	UNSAT TT=30.064	? (TO) TT=2400.04	Signal TT=42.818	UNSAT TT=6.396	No data	UNSAT TT=25.935	No data	? (TO) TT=2401.2	? (TO) TT=2521.95
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
Fischer/Fischer-m1-s1/ Fischer-06-09-fair.xml		? (problem) TT=66.97	? (TO) TT=2519.68	? (TO) TT=2519.96	? (TO) TT=20024.801	? (TO) TT=20032.1	? (TO) TT=2520.06	? (TO) TT=2520.11	? (TO) TT=2520.07	? (TO) TT=2520.08	? (TO) TT=2521.85	? (TO) TT=2520.42	? (MO) TT=30.524	? (TO) TT=2519.7	No data	? (TO) TT=2520.07	No data	? (TO) TT=19332.5	? (TO) TT=19336.4	? (problem) TT=152.07	? (TO) TT=2400.38	? (TO) TT=2400.56	? (TO) TT=2400.61	? (TO) TT=2404.07	? (TO) TT=2400.49	? (MO) TT=30.353	? (TO) TT=2400.07	No data	? (TO) TT=2400.13	No data	? (TO) TT=2415.93	? (TO) TT=2527.98
Fischer/Fischer-m1-s1/ Fischer-08-07-fair.xml	UNSAT TT=824.701	? (problem) TT=78.584	? (TO) TT=2520.26	? (TO) TT=2519.91	? (TO) TT=20031.699	? (TO) TT=20027.801	? (TO) TT=2520.08	? (TO) TT=2520.04	? (TO) TT=2520.07	? (TO) TT=2520.13	? (TO) TT=2521.78	? (TO) TT=2520.48	Signal TT=40.145	UNSAT TT=824.701	No data	? (TO) TT=2520.11	No data	? (TO) TT=19194.699	? (TO) TT=19212.4	? (problem) TT=188.706	? (TO) TT=2400.32	? (TO) TT=2400.05	? (TO) TT=2400	? (TO) TT=2404.34	? (TO) TT=2400.69	Signal TT=40.469	UNSAT TT=736.889	No data	? (TO) TT=2400.05	No data	? (TO) TT=2413.84	? (TO) TT=2528.09
Fischer/Fischer-m1-s1/ Fischer-11-12-fair.xml		? (exit code) TT=52.284	? (TO) TT=2519.82	? (TO) TT=2519.94	? (TO) TT=19940.5	? (TO) TT=19938.4	? (TO) TT=2520.07	? (TO) TT=2520.12	? (TO) TT=2520.14	? (TO) TT=2520.05	? (TO) TT=2523.43	? (MO) TT=28.569	? (MO) TT=28.471	? (TO) TT=2519.99	No data	? (TO) TT=2520.09	No data	? TT=2124.69	? (TO) TT=17056.4	? (exit code) TT=131.357	? (TO) TT=2400.41	? (TO) TT=2400.63	? (TO) TT=2400.1	? (TO) TT=2409.13	? (MO) TT=29.214	? (MO) TT=28.566	? (TO) TT=2400.06	No data	? (TO) TT=2400.07	No data	? (TO) TT=2416.05	? (TO) TT=2527.6
Fischer/Fischer-m1-s1/ Fischer-11-14-fair.xml		? (exit code) TT=50.996	? (TO) TT=2519.8	? (TO) TT=2519.64	? (TO) TT=19890.4	? (TO) TT=19880.199	? (TO) TT=2520.1	? (TO) TT=2520.08	? (TO) TT=2520.11	? (TO) TT=2520.08	? (TO) TT=2524.12	? (MO) TT=27.448	? (MO) TT=26.904	? (TO) TT=2519.93	No data	? (TO) TT=2520.09	No data	? TT=10143.4	? TT=1853.17	? (exit code) TT=108.429	? (TO) TT=2400.45	? (TO) TT=2400.31	? (TO) TT=2400.51	? (TO) TT=2409.49	? (MO) TT=27.261	? (MO) TT=27.115	? (TO) TT=2400.05	No data	? (TO) TT=2400.13	No data	? (TO) TT=2416.37	? (TO) TT=2528.16
GolombRuler/ GolombRuler-a3-s1/ GolombRuler-05-a3.xml	OPT f=11 TT=0.024 T1=0.03	OPT f=11 TT=3.096 T1=1.17	No data	No data	OPT f=11 TT=1.43 T1=0.57	OPT f=11 TT=1.362 T1=0.67	OPT f=11 TT=1.473 T1=0.77	OPT f=11 TT=1.467 T1=0.8	OPT f=11 TT=2.071 T1=0.94	OPT f=11 TT=2.063 T1=1.03	OPT f=11 TT=8.82 T1=4.13	OPT f=11 TT=0.035 T1=0.14	OPT f=11 TT=0.296 T1=0.28	OPT f=11 TT=0.024 T1=0.09	SAT (TO) f=11 TT=2520.04 T1=1.1	OPT f=11 TT=1.803 T1=1.03	OPT f=11 TT=1.829 T1=1.01	OPT f=11 TT=10.803 T1=3.19	OPT f=11 TT=9.646 T1=8.55	OPT f=11 TT=3.446 T1=1.08	No data	OPT f=11 TT=1.532 T1=0.62	OPT f=11 TT=1.515 T1=0.62	OPT f=11 TT=10.576 T1=4.18	OPT f=11 TT=0.05 T1=0.05	OPT f=11 TT=0.352 T1=6.17	OPT f=11 TT=0.039 T1=0.03	SAT (TO) f=11 TT=2400.07 T1=1	OPT f=11 TT=2.012 T1=0.92	OPT f=11 TT=2.049 T1=0.94	OPT f=11 TT=31.95 T1=7.22	OPT f=11 TT=16.039 T1=6.24
GolombRuler/ GolombRuler-a3-s1/ GolombRuler-06-a3.xml	OPT f=17 TT=0.038 T1=0.06	OPT f=17 TT=9.165 T1=2.17	No data	No data	OPT f=17 TT=1.53 T1=0.6	OPT f=17 TT=1.808 T1=0.64	OPT f=17 TT=1.111 T1=0.63	OPT f=17 TT=1.126 T1=0.65	OPT f=17 TT=1.558 T1=0.75	OPT f=17 TT=1.569 T1=0.78	OPT f=17 TT=9.329 T1=4.75	OPT f=17 TT=0.306 T1=0.29	OPT f=17 TT=0.594 T1=0.53	OPT f=17 TT=0.038 T1=0.13	SAT (TO) f=17 TT=2520.06 T1=1.22	OPT f=17 TT=2.033 T1=1.07	OPT f=17 TT=2.101 T1=1.12	OPT f=17 TT=10.537 T1=4.01	OPT f=17 TT=10.964 T1=10.14	OPT f=17 TT=9.514 T1=2.18	No data	OPT f=17 TT=1.985 T1=0.7	OPT f=17 TT=1.838 T1=0.66	OPT f=17 TT=11.403 T1=4.37	OPT f=17 TT=0.363 T1=0.24	OPT f=17 TT=0.643 T1=6.35	OPT f=17 TT=0.061 T1=0.06	SAT (TO) f=17 TT=2400.07 T1=1.29	OPT f=17 TT=2.435 T1=0.98	OPT f=17 TT=2.634 T1=1.03	OPT f=17 TT=43.98 T1=11.24	OPT f=17 TT=24.409 T1=10.38
GolombRuler/ GolombRuler-a3-s1/ GolombRuler-07-a3.xml	OPT f=25 TT=0.089 T1=0.12	OPT f=25 TT=127.095 T1=4.51	No data	No data	OPT f=25 TT=2.955 T1=0.7	OPT f=25 TT=3.163 T1=0.69	OPT f=25 TT=2.223 T1=0.81	OPT f=25 TT=2.209 T1=0.82	OPT f=25 TT=5.893 T1=1.35	OPT f=25 TT=5.824 T1=1.34	OPT f=25 TT=10.32 T1=4.52	OPT f=25 TT=2.205 T1=1.23	OPT f=25 TT=2.104 T1=0.85	OPT f=25 TT=0.089 T1=0.12	SAT (TO) f=25 TT=2520.06 T1=1.6	OPT f=25 TT=2.163 T1=1.09	OPT f=25 TT=2.206 T1=0.97	OPT f=25 TT=11.663 T1=3.71	OPT f=25 TT=14.616 T1=13.01	OPT f=25 TT=126.859 T1=4.42	No data	OPT f=25 TT=2.822 T1=0.71	OPT f=25 TT=2.98 T1=0.9	OPT f=25 TT=11.734 T1=4.38	OPT f=25 TT=2.252 T1=1.17	OPT f=25 TT=2.18 T1=0.84	OPT f=25 TT=0.136 T1=0.12	SAT (TO) f=25 TT=2400.1 T1=1.18	OPT f=25 TT=2.62 T1=0.97	OPT f=25 TT=2.727 T1=1.02	OPT f=25 TT=97.983 T1=35.08	OPT f=25 TT=59.639 T1=33.53
GolombRuler/ GolombRuler-a3-s1/ GolombRuler-08-a3.xml	OPT f=34 TT=0.338 T1=0.11	OPT f=34 TT=1566.53 T1=44.96	No data	No data	OPT f=34 TT=9.474 T1=0.8	OPT f=34 TT=5.887 T1=0.82	OPT f=34 TT=6.702 T1=2.98	OPT f=34 TT=6.559 T1=2.92	OPT f=34 TT=38.618 T1=24.82	OPT f=34 TT=38.264 T1=24.58	OPT f=34 TT=11.676 T1=5.07	OPT f=34 TT=23.02 T1=8.27	OPT f=34 TT=18.738 T1=16.4	OPT f=34 TT=0.338 T1=0.18	SAT (TO) f=34 TT=2520.08 T1=11.3	OPT f=34 TT=2.948 T1=1.21	OPT f=34 TT=2.926 T1=1.2	OPT f=34 TT=16.097 T1=4.65	OPT f=34 TT=17.715 T1=17.48	OPT f=34 TT=1565.43 T1=44.77	No data	OPT f=34 TT=6.963 T1=0.83	OPT f=34 TT=6.305 T1=0.85	OPT f=34 TT=12.948 T1=4.87	OPT f=34 TT=22.847 T1=8.15	OPT f=34 TT=18.792 T1=16.47	OPT f=34 TT=0.378 T1=0.11	SAT (TO) f=34 TT=2400.07 T1=13.28	OPT f=34 TT=3.252 T1=1.12	OPT f=34 TT=3.419 T1=1.08	OPT f=34 TT=235.599 T1=96.21	OPT f=34 TT=200.712 T1=97.92
GolombRuler/ GolombRuler-a3-s1/ GolombRuler-09-a3.xml	OPT f=44 TT=4.947 T1=1.07	SAT (TO) f=47 TT=2520.06 T1=579.93	No data	No data	OPT f=44 TT=11.41 T1=1.33	OPT f=44 TT=14.825 T1=1.39	OPT f=44 TT=65.066 T1=46.32	OPT f=44 TT=64.492 T1=46.22	OPT f=44 TT=382.219 T1=62.45	OPT f=44 TT=386.096 T1=62.7	OPT f=44 TT=15.503 T1=7.06	OPT f=44 TT=256.513 T1=166.41	OPT f=44 TT=110.372 T1=82.86	OPT f=44 TT=4.947 T1=1.08	SAT (TO) f=44 TT=2520.1 T1=27.49	OPT f=44 TT=5.16 T1=2.78	OPT f=44 TT=5.621 T1=2.87	OPT f=44 TT=47.715 T1=9.26	OPT f=44 TT=43.769 T1=43.13	SAT (TO) f=47 TT=2400.03 T1=624.23	No data	OPT f=44 TT=15.326 T1=1.26	OPT f=44 TT=16.689 T1=1.34	OPT f=44 TT=16.94 T1=6.61	OPT f=44 TT=256.32 T1=166.12	OPT f=44 TT=111.426 T1=83.73	OPT f=44 TT=5.004 T1=1.07	SAT (TO) f=44 TT=2400.08 T1=37.44	OPT f=44 TT=5.615 T1=2.78	OPT f=44 TT=5.873 T1=2.82	OPT f=44 TT=1497.85 T1=397.06	OPT f=44 TT=1449.91 T1=407.29
GolombRuler/ GolombRuler-a3-s1/ GolombRuler-10-a3.xml	OPT f=55 TT=11.943 T1=2.12	SAT (TO) f=61 TT=2520.08 T1=638.18	No data	No data	OPT f=55 TT=33.688 T1=2.6	OPT f=55 TT=28.783 T1=2.12	OPT f=55 TT=853.977 T1=529.04	OPT f=55 TT=848.922 T1=525.04	SAT (TO) f=60 TT=2520.11 T1=10.55	SAT (TO) f=60 TT=2520.03 T1=10.95	OPT f=55 TT=37.968 T1=20.59	OPT f=55 TT=1476.3 T1=1107.84	OPT f=55 TT=961.062 T1=928.37	OPT f=55 TT=26.805 T1=4.79	SAT (TO) f=55 TT=2520.07 T1=93.25	OPT f=55 TT=11.943 T1=6.94	OPT f=55 TT=12.219 T1=7.07	OPT f=55 TT=739.964 T1=95.93	OPT f=55 TT=767.921 T1=756.46	SAT (TO) f=61 TT=2400.09 T1=636.87	No data	OPT f=55 TT=50.856 T1=3.24	OPT f=55 TT=49.888 T1=2.66	OPT f=55 TT=40.57 T1=20.67	OPT f=55 TT=1473.47 T1=1107.38	OPT f=55 TT=967.773 T1=935.05	OPT f=55 TT=27.214 T1=4.84	SAT (TO) f=55 TT=2400.07 T1=47.72	OPT f=55 TT=12.376 T1=6.95	OPT f=55 TT=12.452 T1=6.89	SAT (TO) f=55 TT=2400.31 T1=699.49	SAT (TO) f=55 TT=2520.3 T1=712.38
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
GolombRuler/ GolombRuler-a3-s1/ GolombRuler-12-a3.xml	OPT f=85 TT=1775.33 T1=211.03	SAT (TO) f=103 TT=2520.03 T1=1246.58	No data	No data	OPT f=85 TT=4076.36 T1=254.54	OPT f=85 TT=3789.25 T1=211.03	SAT (TO) f=92 TT=2520.04 T1=449	SAT (TO) f=92 TT=2520.1 T1=457.54	SAT (TO) f=91 TT=2520.05 T1=1700.76	SAT (TO) f=91 TT=2520.02 T1=1738.41	SAT (TO) f=90 TT=2520.1 T1=1214.07	SAT (TO) f=107 TT=2519.98 T1=1757.66	SAT (TO) f=103 TT=2520 T1=2137.86	SAT (TO) f=91 TT=2520.05 T1=260.52	SAT (TO) f=94 TT=2520.04 T1=983.26	OPT f=85 TT=1775.33 T1=1416.72	SAT (TO) f=93 TT=2520.05 T1=325.74	SAT (TO) f=396 TT=19831.9 T1=2493.55	SAT (TO) f=428 TT=19854.6 T1=19218.311	SAT (TO) f=103 TT=2400.09 T1=1254.98	No data	SAT (TO) f=91 TT=2400.54 T1=7.71	SAT (TO) f=91 TT=2400.14 T1=68	SAT (TO) f=90 TT=2400.11 T1=1253.31	? (TO) TT=2400.07	? (TO) TT=2400.1	SAT (TO) f=91 TT=2400.09 T1=260.33	SAT (TO) f=91 TT=2400.09 T1=1515.94	OPT f=85 TT=1884.09 T1=1493.62	SAT (TO) f=93 TT=2400.03 T1=27.34	SAT (TO) f=102 TT=2400.31 T1=1615.03	SAT (TO) f=99 TT=2520.34 T1=2258.09
GolombRuler/ GolombRuler-a3-s1/ GolombRuler-14-a3.xml	SAT TO f=129 TT=20028.4 T1=2155.69	SAT (TO) f=160 TT=2520.09 T1=2104.88	No data	No data	SAT (TO) f=129 TT=20068.1 T1=2227.93	SAT (TO) f=129 TT=20028.4 T1=2155.69	SAT (TO) f=151 TT=2520.11 T1=1430.52	SAT (TO) f=151 TT=2520.05 T1=1404.6	SAT (TO) f=155 TT=2520.08 T1=2328.26	SAT (TO) f=155 TT=2520.08 T1=2347.41	SAT (TO) f=135 TT=2520.08 T1=1006.48	SAT (TO) f=165 TT=2520.08 T1=1723.14	SAT (TO) f=170 TT=2519.99 T1=892.46	SAT (TO) f=140 TT=2520.08 T1=1013.41	? (TO) TT=2520.03	SAT (TO) f=136 TT=2520.05 T1=654.33	SAT (TO) f=140 TT=2520.04 T1=1931.97	? (TO) TT=19836.1	? (TO) TT=19816.4	SAT (TO) f=160 TT=2400.03 T1=1918.23	No data	SAT (TO) f=136 TT=2400.43 T1=202.06	SAT (TO) f=135 TT=2400.35 T1=247.54	SAT (TO) f=135 TT=2400.16 T1=1030.57	? (TO) TT=2400.04	? (TO) TT=2400.09	SAT (TO) f=140 TT=2400.06 T1=996.97	? (TO) TT=2400.1	SAT (TO) f=136 TT=2400.1 T1=659.09	SAT (TO) f=135 TT=2400.08 T1=2315.94	SAT (TO) f=192 TT=2400.26 T1=1179.01	SAT (TO) f=174 TT=2520.31 T1=1914.01
GolombRuler/ GolombRuler-a3-s1/ GolombRuler-15-a3.xml	SAT TO f=161 TT=20019.5 T1=370.89	SAT (TO) f=195 TT=2520.1 T1=1375.59	No data	No data	SAT (TO) f=161 TT=20070 T1=382.74	SAT (TO) f=161 TT=20019.5 T1=370.89	SAT (TO) f=180 TT=2520.04 T1=440.25	SAT (TO) f=180 TT=2520.07 T1=434.39	SAT (TO) f=185 TT=2520.11 T1=1741.31	SAT (TO) f=185 TT=2520.08 T1=1767.91	? (TO) TT=2520.46	SAT (TO) f=200 TT=2520.09 T1=1840.27	SAT (TO) f=206 TT=2519.88 T1=1179.29	SAT (TO) f=164 TT=2519.9 T1=1059.48	? (TO) TT=2520.05	? (TO) TT=2520.02	? (TO) TT=2520.04	? (TO) TT=19825.5	? (TO) TT=19815.1	SAT (TO) f=195 TT=2400.07 T1=1364.33	No data	SAT (TO) f=166 TT=2400.57 T1=196.1	SAT (TO) f=166 TT=2400.42 T1=200.56	? (TO) TT=2401	? (TO) TT=2400.03	? (TO) TT=2400.16	SAT (TO) f=164 TT=2400.03 T1=1036.41	? (TO) TT=2400.07	? (TO) TT=2400.05	? (TO) TT=2400.09	? (TO) TT=2416.38	? TT=1440.12
GolombRuler/ GolombRuler-a3-s1/ GolombRuler-16-a3.xml	SAT TO f=190 TT=20036 T1=1689.45	SAT (TO) f=237 TT=2520.03 T1=1963.4	No data	No data	SAT (TO) f=190 TT=20068.5 T1=1684.8	SAT (TO) f=190 TT=20036 T1=1689.45	SAT (TO) f=225 TT=2520.06 T1=2381.73	SAT (TO) f=225 TT=2520.02 T1=2184.96	SAT (TO) f=221 TT=2520.14 T1=2109.12	SAT (TO) f=221 TT=2520.02 T1=2123.24	? (TO) TT=2520.54	SAT (TO) f=232 TT=2520.03 T1=2084.14	SAT (TO) f=235 TT=2520.09 T1=2176.59	SAT (TO) f=202 TT=2520.02 T1=1000.41	? (TO) TT=2520.07	? (TO) TT=2520.03	? (TO) TT=2520.11	? (TO) TT=19800.1	? (TO) TT=19836.4	SAT (TO) f=237 TT=2400.09 T1=1965.81	No data	SAT (TO) f=200 TT=2400.38 T1=279.69	SAT (TO) f=200 TT=2400.3 T1=272.22	? (TO) TT=2401.07	? (TO) TT=2400.03	? (TO) TT=2400.06	SAT (TO) f=202 TT=2400.06 T1=1006.8	? (TO) TT=2400.05	? (TO) TT=2400.11	? (TO) TT=2400.13	? (TO) TT=2416.26	? TT=1711.41
GolombRuler/ GolombRuler-a3-s1/ GolombRuler-17-a3.xml	SAT TO f=223 TT=20031.1 T1=1700.96	SAT (TO) f=276 TT=2520.11 T1=1079.09	No data	No data	SAT (TO) f=223 TT=20052.301 T1=1762.6	SAT (TO) f=223 TT=20031.1 T1=1700.96	SAT (TO) f=257 TT=2520.04 T1=1695.1	SAT (TO) f=257 TT=2520.07 T1=1706.91	SAT (TO) f=284 TT=2520.11 T1=1369.82	SAT (TO) f=283 TT=2520.04 T1=2467.16	? (TO) TT=2520.57	SAT (TO) f=278 TT=2519.68 T1=894.38	SAT (TO) f=279 TT=2519.82 T1=2066.06	SAT (TO) f=236 TT=2519.79 T1=173.37	? (TO) TT=2520.07	? (TO) TT=2520.12	? (TO) TT=2520.12	? (TO) TT=19805.699	? (TO) TT=19803.6	SAT (TO) f=276 TT=2400.04 T1=1103.41	No data	SAT (TO) f=239 TT=2400.21 T1=158.15	SAT (TO) f=239 TT=2400.07 T1=158.04	? (TO) TT=2401.04	? (TO) TT=2400.03	SAT (TO) f=279 TT=2400.08 T1=2058.88	SAT (TO) f=236 TT=2400.1 T1=174.45	? (TO) TT=2400.08	? (TO) TT=2400.09	? (TO) TT=2400.04	? (TO) TT=2416.01	? TT=1686.79
GolombRuler/ GolombRuler-a3-s1/ GolombRuler-19-a3.xml	SAT TO f=298 TT=20014.301 T1=1052.97	SAT (TO) f=381 TT=2520.07 T1=2143.43	No data	No data	SAT (TO) f=298 TT=20071.1 T1=1046.57	SAT (TO) f=298 TT=20014.301 T1=1052.97	SAT (TO) f=414 TT=2520.03 T1=2084.18	SAT (TO) f=414 TT=2520.06 T1=2097.09	SAT (TO) f=381 TT=2520.12 T1=2267.15	SAT (TO) f=381 TT=2520.03 T1=2250.19	? (TO) TT=2520.54	? (TO) TT=2520	? (TO) TT=2520	SAT (TO) f=335 TT=2519.82 T1=1849.66	? (TO) TT=2520.05	? (TO) TT=2520.09	? (TO) TT=2520.1	? (TO) TT=19773.699	? (TO) TT=19782.4	SAT (TO) f=381 TT=2400.03 T1=2154.6	No data	SAT (TO) f=322 TT=2400.54 T1=237.42	SAT (TO) f=322 TT=2400.61 T1=230.54	? (TO) TT=2401.13	? (TO) TT=2400.06	? (TO) TT=2400.1	SAT (TO) f=335 TT=2400.08 T1=1875.85	? (TO) TT=2400.1	? (TO) TT=2400.08	? (TO) TT=2400.06	? (TO) TT=2416.04	? (exit code) TT=1560.71
GolombRuler/ GolombRuler-a3-s1/ GolombRuler-21-a3.xml	SAT TO f=409 TT=20039.199 T1=507.13	SAT (TO) f=553 TT=2520.04 T1=1150.17	No data	No data	SAT (TO) f=406 TT=20069.1 T1=1918.28	SAT (TO) f=409 TT=20039.199 T1=507.13	? (TO) TT=2520.08	? (TO) TT=2520.04	? (TO) TT=2520.02	? (TO) TT=2520.03	? (TO) TT=2520.54	? (TO) TT=2519.75	? (TO) TT=2520.2	SAT (TO) f=422 TT=2520.02 T1=1641.02	? (TO) TT=2520.04	? (TO) TT=2520.05	? (TO) TT=2520.07	? (TO) TT=19683.199	? (TO) TT=19647.1	SAT (TO) f=553 TT=2400.11 T1=1159.16	No data	SAT (TO) f=416 TT=2400.27 T1=231.72	SAT (TO) f=416 TT=2400.05 T1=233.58	? (TO) TT=2401.17	? (TO) TT=2400.08	? (TO) TT=2400.32	SAT (TO) f=422 TT=2400.07 T1=1615.37	? (TO) TT=2400.1	? (TO) TT=2400.06	? (TO) TT=2400.09	? (TO) TT=2416.28	? (problem) TT=1489.74
GolombRuler/ GolombRuler-a3-s1/ GolombRuler-25-a3.xml	SAT TO f=643 TT=19979.6 T1=868.69	SAT (TO) f=821 TT=2520.05 T1=2365.15	No data	No data	SAT (TO) f=643 TT=20081.5 T1=856.85	SAT (TO) f=643 TT=19979.6 T1=868.69	? (TO) TT=2520.1	? (TO) TT=2520.12	? (TO) TT=2520.11	? (TO) TT=2520.04	? (TO) TT=2520.58	? (TO) TT=2520.01	? (TO) TT=2520.34	SAT (TO) f=692 TT=2519.93 T1=1678.6	? (TO) TT=2520.12	? (TO) TT=2520.05	? (TO) TT=2520.06	? (TO) TT=19531.301	? (TO) TT=19534.301	SAT (TO) f=821 TT=2400.07 T1=1987.71	No data	SAT (TO) f=672 TT=2400.43 T1=241.02	SAT (TO) f=672 TT=2400.8 T1=244.49	? (TO) TT=2401.17	? (TO) TT=2400.03	? (TO) TT=2400.59	SAT (TO) f=692 TT=2400.01 T1=1656.16	? (TO) TT=2400.05	? (TO) TT=2400.02	? (TO) TT=2400.04	? (TO) TT=2416.64	? TT=1553.97
GolombRuler/ GolombRuler-a3-s1/ GolombRuler-26-a3.xml	SAT TO f=719 TT=19901.699 T1=848.21	? (TO) TT=2520.08	No data	No data	SAT (TO) f=719 TT=20066.6 T1=827.37	SAT (TO) f=719 TT=19901.699 T1=848.21	? (TO) TT=2520.04	? (TO) TT=2520.05	? (TO) TT=2520.15	? (TO) TT=2520.12	? (TO) TT=2520.55	? (TO) TT=2519.96	? (MO) TT=27.895	SAT (TO) f=766 TT=2519.96 T1=1051.24	? (TO) TT=2520.11	? (TO) TT=2520.07	? (TO) TT=2520.05	? (TO) TT=19463.199	? (TO) TT=19516.801	? (TO) TT=2400.06	No data	SAT (TO) f=730 TT=2400.05 T1=98.45	SAT (TO) f=730 TT=2400.68 T1=92.78	? (TO) TT=2401.21	? (TO) TT=2400.09	? (MO) TT=27.683	SAT (TO) f=766 TT=2400.09 T1=1007.76	? (TO) TT=2400.09	? (TO) TT=2400.04	? (TO) TT=2400.1	? (TO) TT=2415.75	? TT=1509.91
GolombRuler/ GolombRuler-a3-s1/ GolombRuler-27-a3.xml	SAT TO f=788 TT=19974.699 T1=1718.92	? (TO) TT=2520.05	No data	No data	SAT (TO) f=788 TT=20059.5 T1=1687.06	SAT (TO) f=788 TT=19974.699 T1=1718.92	? (TO) TT=2520.04	? (TO) TT=2520.03	? (TO) TT=2520.09	? (TO) TT=2520.1	? (TO) TT=2520.55	? (TO) TT=2519.68	? (MO) TT=27.706	SAT (TO) f=862 TT=2519.71 T1=1593.89	? (TO) TT=2520.05	? (TO) TT=2520.07	? (TO) TT=2520.09	? (TO) TT=19445.5	? (TO) TT=19439.5	? (TO) TT=2400.03	No data	SAT (TO) f=817 TT=2400.21 T1=135.95	SAT (TO) f=817 TT=2400.33 T1=132.13	? (TO) TT=2401.14	? (TO) TT=2400.07	? (MO) TT=28.065	SAT (TO) f=862 TT=2400.1 T1=1553.4	? (TO) TT=2400.03	? (TO) TT=2400.04	? (TO) TT=2400.03	? (TO) TT=2416.22	? (problem) TT=1373.22
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
GolombRuler/ GolombRuler-a3-s1/ GolombRuler-28-a3.xml	SAT TO f=866 TT=20000.6 T1=279.54	? (TO) TT=2520.05	No data	No data	SAT (TO) f=866 TT=20072.699 T1=285.7	SAT (TO) f=866 TT=20000.6 T1=279.54	? (TO) TT=2520.11	? (TO) TT=2520.09	? (TO) TT=2520.07	? (TO) TT=2520.08	? (TO) TT=2520.53	? (TO) TT=2519.98	? (MO) TT=27.594	SAT (TO) f=925 TT=2519.96 T1=131.5	? (TO) TT=2520.08	? (TO) TT=2520.02	? (TO) TT=2520.09	? (TO) TT=19400.6	? (TO) TT=19388.801	? (TO) TT=2400.03	No data	SAT (TO) f=894 TT=2400.26 T1=194.76	SAT (TO) f=894 TT=2400.71 T1=188.33	? (TO) TT=2401.25	? (TO) TT=2400.01	? (MO) TT=27.985	SAT (TO) f=925 TT=2400.02 T1=128.95	? (TO) TT=2400.02	? (TO) TT=2400.03	? (TO) TT=2400.09	? (TO) TT=2416.05	? TT=1330.28
GolombRuler/ GolombRuler-a4-s1/ GolombRuler-05-a4.xml	OPT f=11 TT=0.069 T1=0.11	OPT f=11 TT=1.283 T1=0.75	No data	No data	OPT f=11 TT=2.791 T1=0.73	OPT f=11 TT=2.858 T1=0.7	OPT f=11 TT=1.16 T1=0.69	OPT f=11 TT=1.162 T1=0.66	OPT f=11 TT=1.422 T1=0.72	OPT f=11 TT=1.488 T1=0.75	OPT f=11 TT=10.132 T1=4.48	OPT f=11 TT=0.069 T1=0.14	OPT f=11 TT=0.117 T1=0.16	OPT f=11 TT=0.076 T1=0.18	SAT (TO) f=11 TT=2520.07 T1=0.95	OPT f=11 TT=1.772 T1=0.96	OPT f=11 TT=1.76 T1=0.83	OPT f=11 TT=7.349 T1=2.38	OPT f=11 TT=7.819 T1=7.15	OPT f=11 TT=1.571 T1=0.73	No data	OPT f=11 TT=2.439 T1=0.79	OPT f=11 TT=2.307 T1=0.74	OPT f=11 TT=12.413 T1=4.63	OPT f=11 TT=0.117 T1=0.11	OPT f=11 TT=0.167 T1=0.16	OPT f=11 TT=0.114 T1=0.11	SAT (TO) f=11 TT=2400.02 T1=0.88	OPT f=11 TT=2.058 T1=0.86	OPT f=11 TT=2.169 T1=0.89	OPT f=11 TT=78.644 T1=16.85	OPT f=11 TT=71.192 T1=25.78
GolombRuler/ GolombRuler-a4-s1/ GolombRuler-06-a4.xml	OPT f=17 TT=0.214 T1=0.24	OPT f=17 TT=1.619 T1=0.91	No data	No data	OPT f=17 TT=9.367 T1=1.02	OPT f=17 TT=11.772 T1=0.99	OPT f=17 TT=2.059 T1=0.74	OPT f=17 TT=2.053 T1=0.75	OPT f=17 TT=5.725 T1=1.8	OPT f=17 TT=5.219 T1=1.63	OPT f=17 TT=12.499 T1=5.14	OPT f=17 TT=0.294 T1=0.32	OPT f=17 TT=0.287 T1=0.31	OPT f=17 TT=0.214 T1=0.25	SAT (TO) f=17 TT=2520.08 T1=1.12	OPT f=17 TT=2.007 T1=1.06	OPT f=17 TT=1.979 T1=0.9	OPT f=17 TT=8.069 T1=2.21	OPT f=17 TT=6.97 T1=6.66	OPT f=17 TT=1.882 T1=0.85	No data	OPT f=17 TT=6.494 T1=0.99	OPT f=17 TT=5.88 T1=1.05	OPT f=17 TT=15.72 T1=5.18	OPT f=17 TT=0.345 T1=0.29	OPT f=17 TT=0.346 T1=0.33	OPT f=17 TT=0.264 T1=0.24	SAT (TO) f=17 TT=2400.03 T1=1.14	OPT f=17 TT=2.362 T1=0.96	OPT f=17 TT=2.333 T1=0.95	OPT f=17 TT=383.952 T1=71.85	OPT f=17 TT=225.057 T1=57.91
GolombRuler/ GolombRuler-a4-s1/ GolombRuler-09-a4.xml	OPT f=44 TT=6.618 T1=2.42	OPT f=44 TT=33.776 T1=20.47	No data	No data	OPT f=44 TT=1473.12 T1=15.47	OPT f=44 TT=1120.74 T1=17.64	OPT f=44 TT=333.571 T1=114.3	OPT f=44 TT=361.175 T1=111.04	OPT f=44 TT=863.197 T1=246.42	OPT f=44 TT=537.052 T1=199.27	OPT f=44 TT=48.649 T1=20.6	OPT f=44 TT=61.863 T1=33.1	OPT f=44 TT=46.901 T1=45.48	OPT f=44 TT=1222.22 T1=649.71	SAT (TO) f=44 TT=2520.1 T1=11.28	OPT f=44 TT=6.618 T1=5.22	OPT f=44 TT=6.66 T1=2.52	OPT f=44 TT=16.202 T1=4.3	OPT f=44 TT=16.45 T1=13.14	OPT f=44 TT=34.197 T1=20.51	No data	Wrong Opt. f=46 TT=138.622 T1=18.18	Wrong Opt. f=48 TT=45.857 T1=6.2	OPT f=44 TT=53.64 T1=20.91	OPT f=44 TT=65.921 T1=34.69	OPT f=44 TT=45.456 T1=44.1	OPT f=44 TT=1256.46 T1=667.07	SAT (TO) f=44 TT=2400.12 T1=20.08	OPT f=44 TT=7.553 T1=2.47	OPT f=44 TT=7.337 T1=2.42	? (TO) TT=2416.36	? (exit code) TT=1917.29
GolombRuler/ GolombRuler-a4-s1/ GolombRuler-10-a4.xml	OPT f=55 TT=36.934 T1=9.98	OPT f=55 TT=316.524 T1=202.25	No data	No data	OPT f=55 TT=19809.699 T1=257.35	OPT f=55 TT=13365.2 T1=288.62	SAT (TO) f=60 TT=2520.11 T1=800.98	SAT (TO) f=60 TT=2520.06 T1=800.96	SAT (TO) f=60 TT=2520.09 T1=1600.36	SAT (TO) f=55 TT=2520.16 T1=1692.32	OPT f=55 TT=189.539 T1=43.64	OPT f=55 TT=714.897 T1=379.89	OPT f=55 TT=330.63 T1=171.88	SAT (TO) f=60 TT=2520.07 T1=1492.42	SAT (TO) f=55 TT=2520.11 T1=29.11	OPT f=55 TT=36.934 T1=16.87	OPT f=55 TT=1878.94 T1=9.98	OPT f=55 TT=54.104 T1=19.49	OPT f=55 TT=54.341 T1=30.96	OPT f=55 TT=308.557 T1=196.92	No data	Wrong Opt. f=62 TT=458.604 T1=18.79	Wrong Opt. f=61 TT=600.424 T1=41.7	OPT f=55 TT=197.163 T1=43.97	OPT f=55 TT=630.35 T1=337.29	OPT f=55 TT=329.112 T1=170.88	SAT (TO) f=60 TT=2400.01 T1=1516.28	SAT (TO) f=55 TT=2400.11 T1=40.13	OPT f=55 TT=38.328 T1=16.79	OPT f=55 TT=1788.31 T1=10.84	? (TO) TT=2416.25	? (problem) TT=1348.08
GolombRuler/ GolombRuler-a4-s1/ GolombRuler-12-a4.xml	SAT TO f=90 TT=2400.12 T1=739.85	SAT (TO) f=94 TT=2520.09 T1=1925.88	No data	No data	SAT (TO) f=93 TT=19580.199 T1=2329.78	SAT (TO) f=94 TT=19463.4 T1=1030.03	SAT (TO) f=105 TT=2520.1 T1=235.47	SAT (TO) f=104 TT=2520.06 T1=1239.75	SAT (TO) f=108 TT=2520.04 T1=216.2	SAT (TO) f=107 TT=2520.05 T1=602.95	SAT (TO) f=91 TT=2520.11 T1=2404.82	SAT (TO) f=95 TT=2519.83 T1=164.47	SAT (TO) f=95 TT=2519.74 T1=49.62	SAT (TO) f=98 TT=2519.7 T1=2114.11	SAT (TO) f=92 TT=2520.05 T1=1407.25	SAT (TO) f=90 TT=2520.05 T1=739.85	SAT (TO) f=91 TT=2520.11 T1=1334.19	SAT (TO) f=91 TT=2559.28 T1=304.17	SAT (TO) f=90 TT=2568.45 T1=2558.38	SAT (TO) f=94 TT=2400.04 T1=1940.26	No data	Wrong Opt. f=104 TT=944.581 T1=151.33	Wrong Opt. f=115 TT=130.736 T1=32.08	SAT (TO) f=92 TT=2400.09 T1=1641.11	? (TO) TT=2400.09	? (TO) TT=2400.1	SAT (TO) f=98 TT=2400.07 T1=2172.56	SAT (TO) f=93 TT=2400.09 T1=387.57	SAT (TO) f=90 TT=2400.12 T1=765.25	SAT (TO) f=91 TT=2400.12 T1=1757.32	? (TO) TT=2416.05	? TT=1383.96
GolombRuler/ GolombRuler-a4-s1/ GolombRuler-13-a4.xml	SAT TO f=109 TT=2520.07 T1=1028.24	SAT (TO) f=123 TT=2520.09 T1=2408.42	No data	No data	SAT (TO) f=121 TT=20048.699 T1=1755.15	SAT (TO) f=119 TT=20066.9 T1=2061.5	SAT (TO) f=123 TT=2520.03 T1=1503.74	SAT (TO) f=123 TT=2520.05 T1=1492.87	SAT (TO) f=124 TT=2520.11 T1=399.55	SAT (TO) f=133 TT=2520.08 T1=244.56	SAT (TO) f=114 TT=2520.06 T1=245.65	SAT (TO) f=129 TT=2519.97 T1=586.98	SAT (TO) f=130 TT=2519.8 T1=1320.22	SAT (TO) f=122 TT=2519.96 T1=1359.92	SAT (TO) f=114 TT=2520.07 T1=575.81	SAT (TO) f=115 TT=2520.11 T1=2376.49	SAT (TO) f=109 TT=2520.07 T1=1028.24	SAT (TO) f=110 TT=2582.6 T1=1541.51	SAT (TO) f=111 TT=2567.01 T1=2298.15	SAT (TO) f=124 TT=2400.08 T1=2008.48	No data	SAT (TO) f=128 TT=2400.36 T1=295.61	SAT (TO) f=129 TT=2400.59 T1=303.77	SAT (TO) f=114 TT=2400.09 T1=241.53	? (TO) TT=2400.07	? (TO) TT=2400.05	SAT (TO) f=122 TT=2400.04 T1=1405.88	SAT (TO) f=114 TT=2400.08 T1=802.73	SAT (TO) f=117 TT=2400.05 T1=1899.69	SAT (TO) f=111 TT=2400.03 T1=1986.41	? (TO) TT=2416.11	? TT=1487.15
GolombRuler/ GolombRuler-a4-s1/ GolombRuler-14-a4.xml	SAT TO f=136 TT=2400.1 T1=935.99	SAT (TO) f=152 TT=2520.05 T1=2281.74	No data	No data	SAT (TO) f=146 TT=15751.6 T1=2286.12	SAT (TO) f=144 TT=15534.9 T1=2325.89	SAT (TO) f=156 TT=2520.04 T1=1369.74	SAT (TO) f=151 TT=2520.05 T1=1202.37	SAT (TO) f=155 TT=2520.07 T1=2430.33	SAT (TO) f=157 TT=2520.32 T1=803.4	SAT (TO) f=141 TT=2520.13 T1=1704.1	SAT (TO) f=155 TT=2519.77 T1=997.27	SAT (TO) f=161 TT=2519.79 T1=326.76	SAT (TO) f=156 TT=2519.77 T1=1900.68	SAT (TO) f=140 TT=2520.12 T1=1286.51	SAT (TO) f=158 TT=2520.06 T1=1828.34	SAT (TO) f=137 TT=2520.06 T1=959.17	SAT (TO) f=141 TT=2582.48 T1=1363.7	SAT (TO) f=141 TT=2604.53 T1=1855.03	SAT (TO) f=152 TT=2400.09 T1=2296.32	No data	SAT (TO) f=148 TT=2400.56 T1=737.78	SAT (TO) f=148 TT=2400.62 T1=212.76	SAT (TO) f=141 TT=2400.07 T1=1857.95	? (TO) TT=2400.09	? (TO) TT=2400.04	SAT (TO) f=156 TT=2400.01 T1=2054.53	SAT (TO) f=139 TT=2400.08 T1=2232	SAT (TO) f=158 TT=2400.02 T1=1929	SAT (TO) f=136 TT=2400.1 T1=935.99	? (TO) TT=2414.55	? TT=1311.85
GolombRuler/ GolombRuler-a4-s1/ GolombRuler-15-a4.xml	SAT TO f=163 TT=2400.05 T1=1298.89	SAT (TO) f=188 TT=2520.04 T1=1129.12	No data	No data	SAT (TO) f=175 TT=14605.8 T1=2194.7	SAT (TO) f=175 TT=18155.199 T1=1696.42	SAT (TO) f=183 TT=2520.13 T1=2139.44	SAT (TO) f=183 TT=2520.04 T1=2200.15	SAT (TO) f=191 TT=2520.11 T1=1270.41	SAT (TO) f=185 TT=2520.03 T1=2344.1	SAT (TO) f=170 TT=2520.11 T1=2453.41	SAT (TO) f=195 TT=2519.93 T1=313.62	SAT (TO) f=197 TT=2519.85 T1=703.52	SAT (TO) f=191 TT=2519.88 T1=1424.58	SAT (TO) f=169 TT=2520.12 T1=1825.29	SAT (TO) f=200 TT=2520.09 T1=1687.62	SAT (TO) f=164 TT=2520.12 T1=1369.83	SAT (TO) f=176 TT=2600.3 T1=1838.82	SAT (TO) f=190 TT=2560.86 T1=2240.6	SAT (TO) f=188 TT=2400.02 T1=1161.4	No data	SAT (TO) f=190 TT=2400 T1=490.8	SAT (TO) f=190 TT=2400.07 T1=162.21	SAT (TO) f=171 TT=2400.13 T1=2287.09	? (TO) TT=2400.01	? (TO) TT=2400.1	SAT (TO) f=191 TT=2400.03 T1=1331.98	SAT (TO) f=166 TT=2400.09 T1=2282.39	SAT (TO) f=200 TT=2400.1 T1=1671.77	SAT (TO) f=163 TT=2400.05 T1=1298.89	? TT=2267.33	? TT=840.776
GolombRuler/ GolombRuler-a4-s1/ GolombRuler-17-a4.xml	SAT TO f=230 TT=2400.04 T1=1741.95	SAT (TO) f=272 TT=2520.04 T1=1447.67	No data	No data	? (TO) TT=19933.699	SAT (TO) f=255 TT=19960.5 T1=440.05	SAT (TO) f=263 TT=2520.06 T1=1278.88	SAT (TO) f=263 TT=2520.1 T1=1274.24	SAT (TO) f=274 TT=2520.09 T1=2416.59	SAT (TO) f=264 TT=2520.07 T1=1085.17	SAT (TO) f=247 TT=2520.15 T1=1884.04	SAT (TO) f=262 TT=2520.07 T1=2043.54	SAT (TO) f=265 TT=2520.1 T1=1164.36	SAT (TO) f=267 TT=2519.86 T1=993.72	SAT (TO) f=240 TT=2520.04 T1=2159.76	SAT (TO) f=491 TT=2520.02 T1=877.91	SAT (TO) f=230 TT=2520.12 T1=1741.95	SAT (TO) f=259 TT=2594.59 T1=458.64	SAT (TO) f=267 TT=2573.68 T1=2572.69	SAT (TO) f=272 TT=2400.09 T1=1447.88	No data	SAT (TO) f=276 TT=2400.52 T1=26.84	SAT (TO) f=276 TT=2400.6 T1=24.09	SAT (TO) f=247 TT=2400.16 T1=1900.41	? (TO) TT=2400.03	? (TO) TT=2400.1	SAT (TO) f=267 TT=2400.01 T1=1037.37	SAT (TO) f=230 TT=2400.04 T1=2260.59	SAT (TO) f=491 TT=2400.09 T1=862	SAT (TO) f=231 TT=2400.1 T1=1588.55	? (TO) TT=2416.08	? TT=1229.55
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
GolombRuler/ GolombRuler-a4-s1/ GolombRuler-18-a4.xml	SAT TO f=271 TT=2520.08 T1=1550.36	SAT (TO) f=312 TT=2520.08 T1=2378.58	No data	No data	SAT (TO) f=301 TT=19884 T1=1780	SAT (TO) f=309 TT=7445.34 T1=2236.75	SAT (TO) f=311 TT=2520.13 T1=1640.34	SAT (TO) f=311 TT=2520.03 T1=131.33	SAT (TO) f=325 TT=2520.09 T1=2170.54	SAT (TO) f=327 TT=2521.35 T1=2293.17	SAT (TO) f=289 TT=2520.09 T1=1924.46	SAT (TO) f=313 TT=2519.84 T1=2499.81	SAT (TO) f=314 TT=2519.91 T1=2426.97	SAT (TO) f=311 TT=2519.99 T1=2037.26	SAT (TO) f=282 TT=2520.11 T1=1348.84	SAT (TO) f=489 TT=2520.09 T1=244.41	SAT (TO) f=271 TT=2520.08 T1=1550.36	SAT (TO) f=288 TT=2596.3 T1=2480.8	SAT (TO) f=316 TT=2606.39 T1=73.76	SAT (TO) f=315 TT=2400.13 T1=1948.54	No data	SAT (TO) f=308 TT=2400.51 T1=296.25	SAT (TO) f=308 TT=2400.47 T1=286.46	SAT (TO) f=289 TT=2400.09 T1=1960.5	? (TO) TT=2400.01	? (TO) TT=2400.02	SAT (TO) f=311 TT=2400.05 T1=1929.28	SAT (TO) f=279 TT=2400.07 T1=2150.11	SAT (TO) f=489 TT=2400.05 T1=238.44	SAT (TO) f=279 TT=2400.03 T1=1415.51	? (TO) TT=2416.15	? (problem) TT=1302.31
GolombRuler/ GolombRuler-a4-s1/ GolombRuler-19-a4.xml	SAT TO f=313 TT=2400.11 T1=809.47	SAT (TO) f=351 TT=2520.05 T1=2318.88	No data	No data	SAT (TO) f=349 TT=11233.5 T1=2010.32	SAT (TO) f=349 TT=11197.3 T1=2118.52	SAT (TO) f=351 TT=2520.02 T1=1618.64	SAT (TO) f=351 TT=2520.06 T1=1619.62	SAT (TO) f=351 TT=2520.04 T1=2253.69	SAT (TO) f=364 TT=2520.04 T1=1373.52	SAT (TO) f=335 TT=2520.1 T1=1815.1	SAT (TO) f=367 TT=2520.01 T1=966.48	SAT (TO) f=359 TT=2519.9 T1=503.7	SAT (TO) f=351 TT=2519.69 T1=128.29	SAT (TO) f=318 TT=2520.04 T1=2327.93	SAT (TO) f=491 TT=2520.1 T1=1023.41	SAT (TO) f=317 TT=2520.04 T1=848.54	SAT (TO) f=329 TT=19886.1 T1=2422.75	SAT (TO) f=332 TT=19982.9 T1=12765.71	SAT (TO) f=369 TT=2400.07 T1=1608.14	No data	SAT (TO) f=350 TT=2400.55 T1=1764.39	SAT (TO) f=350 TT=2400.02 T1=138.1	SAT (TO) f=335 TT=2400.1 T1=1865.36	? (TO) TT=2400.06	? (TO) TT=2400.07	SAT (TO) f=351 TT=2400.04 T1=131.22	SAT (TO) f=319 TT=2400.04 T1=2111.82	SAT (TO) f=491 TT=2400.07 T1=1057.21	SAT (TO) f=313 TT=2400.11 T1=809.47	? (TO) TT=2416.22	? TT=1295.29
GolombRuler/ GolombRuler-a4-s1/ GolombRuler-21-a4.xml	SAT TO f=416 TT=2520.03 T1=2170.61	? (TO) TT=2520.09	No data	No data	SAT (TO) f=552 TT=2761.66 T1=149.12	SAT (TO) f=552 TT=2768.79 T1=158.93	SAT (TO) f=492 TT=2520.05 T1=599.18	SAT (TO) f=492 TT=2520.1 T1=592.64	SAT (TO) f=492 TT=2520.08 T1=992.12	SAT (TO) f=491 TT=2520.15 T1=1007.04	SAT (TO) f=455 TT=2520.08 T1=2025.7	SAT (TO) f=460 TT=2520.14 T1=900.06	SAT (TO) f=478 TT=2520.09 T1=816.22	SAT (TO) f=465 TT=2519.96 T1=234.52	SAT (TO) f=416 TT=2520.03 T1=2170.61	SAT (TO) f=991 TT=2520.07 T1=1127.98	SAT (TO) f=430 TT=2520.11 T1=1103.41	SAT (TO) f=463 TT=2596.03 T1=1308.87	SAT (TO) f=441 TT=2595.97 T1=1442.94	? (TO) TT=2415.83	No data	SAT (TO) f=465 TT=2400 T1=271.98	SAT (TO) f=552 TT=2400.01 T1=100.41	SAT (TO) f=455 TT=2400.14 T1=2047.52	? (TO) TT=2400.11	? (TO) TT=2400.08	SAT (TO) f=465 TT=2400.09 T1=233.14	SAT (TO) f=429 TT=2400.08 T1=2259.16	SAT (TO) f=991 TT=2400.06 T1=1088.68	SAT (TO) f=433 TT=2400.12 T1=1610.8	? (TO) TT=2415.98	? TT=1383.32
GolombRuler/ GolombRuler-a4-s1/ GolombRuler-23-a4.xml	SAT TO f=532 TT=2520.12 T1=1735.49	? (TO) TT=2520.11	No data	No data	SAT (TO) f=568 TT=6477.68 T1=464.48	SAT (TO) f=656 TT=3096.92 T1=370.67	SAT (TO) f=614 TT=2520.06 T1=1777.46	SAT (TO) f=614 TT=2520.11 T1=1771.73	SAT (TO) f=615 TT=2520.06 T1=2020.75	SAT (TO) f=615 TT=2520.08 T1=2062.85	SAT (TO) f=585 TT=2520.07 T1=2462.64	SAT (TO) f=614 TT=2519.85 T1=2220.05	SAT (TO) f=584 TT=2520.13 T1=1723.81	SAT (TO) f=628 TT=2519.58 T1=689.07	SAT (TO) f=544 TT=2520.05 T1=2352.61	SAT (TO) f=1000 TT=2520.05 T1=3.35	SAT (TO) f=532 TT=2520.12 T1=1735.49	SAT (TO) f=576 TT=2587.53 T1=269.86	SAT (TO) f=569 TT=2595.06 T1=442.19	? (TO) TT=2400.12	No data	SAT (TO) f=656 TT=2400.05 T1=215.76	SAT (TO) f=656 TT=2400.06 T1=214.83	SAT (TO) f=588 TT=2400.06 T1=2313.92	? (TO) TT=2400.12	? (TO) TT=2400.15	SAT (TO) f=628 TT=2400.06 T1=696.62	SAT (TO) f=554 TT=2400.12 T1=2304.31	SAT (TO) f=1000 TT=2400.07 T1=2.45	SAT (TO) f=559 TT=2400.11 T1=1467.13	? (TO) TT=2416.32	? TT=1218.67
GolombRuler/ GolombRuler-a4-s1/ GolombRuler-24-a4.xml	SAT TO f=599 TT=2520.11 T1=1741.88	? (TO) TT=2520.11	No data	No data	SAT (TO) f=715 TT=3237.63 T1=95.7	SAT (TO) f=652 TT=19906.1 T1=1453.12	SAT (TO) f=691 TT=2520.06 T1=873.88	SAT (TO) f=674 TT=2520.04 T1=844.41	? (TO) TT=2527.93	? (TO) TT=2528.12	SAT (TO) f=662 TT=2520.07 T1=2455.81	SAT (TO) f=737 TT=2519.63 T1=2383.79	SAT (TO) f=697 TT=2519.64 T1=2110.68	SAT (TO) f=715 TT=2519.93 T1=177.54	SAT (TO) f=611 TT=2520.04 T1=2184.04	SAT (TO) f=1000 TT=2520.06 T1=2.68	SAT (TO) f=599 TT=2520.11 T1=1741.88	SAT (TO) f=626 TT=2656.95 T1=2245.55	SAT (TO) f=626 TT=2621.35 T1=2464.35	? (TO) TT=2400.07	No data	SAT (TO) f=734 TT=2400.05 T1=273.76	SAT (TO) f=734 TT=2400 T1=274.41	SAT (TO) f=667 TT=2400.13 T1=2285.06	? (TO) TT=2400.18	? (TO) TT=2400.27	SAT (TO) f=715 TT=2400.04 T1=186.44	SAT (TO) f=628 TT=2400.09 T1=2029.29	SAT (TO) f=1000 TT=2400.05 T1=2.67	SAT (TO) f=601 TT=2400.09 T1=1217.62	? (TO) TT=2416.21	? TT=1295.03
GolombRuler/ GolombRuler-a4-s1/ GolombRuler-25-a4.xml	SAT TO f=661 TT=2400.06 T1=1644.9	? (TO) TT=2520.09	No data	No data	SAT (TO) f=742 TT=7952.87 T1=1188.71	SAT (TO) f=779 TT=3498.88 T1=654.61	SAT (TO) f=729 TT=2520.08 T1=2301.53	SAT (TO) f=729 TT=2520.1 T1=1685.52	? (TO) TT=2528	? (TO) TT=2527.91	SAT (TO) f=741 TT=2520.11 T1=2467.15	? (TO) TT=2519.86	? (TO) TT=2519.77	SAT (TO) f=799 TT=2519.95 T1=511.43	SAT (TO) f=665 TT=2520.09 T1=2441.28	SAT (TO) f=1000 TT=2520.06 T1=7.52	SAT (TO) f=702 TT=2520.09 T1=1227.07	SAT (TO) f=718 TT=3196.59 T1=206.38	SAT (TO) f=705 TT=3325.85 T1=3309.7	? (TO) TT=2400.15	No data	SAT (TO) f=819 TT=2400.03 T1=341.69	SAT (TO) f=819 TT=2400.08 T1=340.71	SAT (TO) f=741 TT=2400.13 T1=2078.24	? (TO) TT=2400.28	? (TO) TT=2400.44	SAT (TO) f=799 TT=2400.04 T1=518	SAT (TO) f=661 TT=2400.06 T1=1644.9	SAT (TO) f=1000 TT=2400.05 T1=2.89	SAT (TO) f=686 TT=2400.11 T1=1657.03	? (TO) TT=2416.46	? TT=1296.64
GolombRuler/ GolombRuler-a4-s1/ GolombRuler-27-a4.xml	SAT TO f=818 TT=2520.12 T1=1761.69	? (problem) TT=715.8	No data	No data	SAT (TO) f=937 TT=3660.35 T1=804.62	SAT (TO) f=937 TT=3702.02 T1=795.64	SAT (TO) f=967 TT=2520.08 T1=2050.03	? (TO) TT=2526.42	SAT f=968 TT=2085.28 T1=1623.75	SAT f=968 TT=1977.03 T1=1550.8	SAT (TO) f=916 TT=2520.14 T1=2392.86	? (TO) TT=2519.93	? (TO) TT=2520.05	SAT (TO) f=969 TT=2519.69 T1=825.03	SAT (TO) f=840 TT=2520.07 T1=2265.3	SAT (TO) f=1000 TT=2520.12 T1=3.42	SAT (TO) f=818 TT=2520.12 T1=1761.69	SAT (TO) f=846 TT=20002.5 T1=744.32	SAT (TO) f=847 TT=20007.4 T1=10964.75	? (problem) TT=1335.06	No data	SAT (TO) f=937 TT=2400.07 T1=386.09	SAT (TO) f=969 TT=2400.09 T1=335.34	SAT (TO) f=928 TT=2400.11 T1=2241.25	? (TO) TT=2400.37	? (TO) TT=2400.37	SAT (TO) f=969 TT=2400.11 T1=826.13	SAT (TO) f=826 TT=2400.1 T1=2222.19	SAT (TO) f=1000 TT=2400.04 T1=3.24	SAT (TO) f=844 TT=2400.05 T1=1435.21	? (TO) TT=2416.26	? TT=1349.16
GolombRuler/ GolombRuler-a4-s1/ GolombRuler-28-a4.xml	SAT TO f=920 TT=2520.1 T1=1723.08	? (problem) TT=705.725	No data	No data	SAT (TO) f=946 TT=19841.301 T1=1773.55	SAT (TO) f=946 TT=19715.4 T1=1896.11	? (TO) TT=2520.09	SAT (TO) f=993 TT=2520.08 T1=1295.59	? (TO) TT=2527.94	? (TO) TT=2527.85	SAT (TO) f=989 TT=2520.11 T1=1966.22	? (TO) TT=2519.58	? (TO) TT=2519.56	? (TO) TT=2519.63	SAT (TO) f=927 TT=2520.06 T1=2033.76	SAT (TO) f=1000 TT=2520.05 T1=58.32	SAT (TO) f=920 TT=2520.1 T1=1723.08	SAT (TO) f=950 TT=19988.801 T1=1441.02	SAT (TO) f=941 TT=20003.9 T1=16959.301	? (problem) TT=1322.16	No data	? (TO) TT=2400.12	? (TO) TT=2400.02	SAT (TO) f=989 TT=2400.13 T1=1964.63	? (TO) TT=2400.39	? (TO) TT=2400.51	? (TO) TT=2400.08	SAT (TO) f=934 TT=2400.1 T1=2103.77	SAT (TO) f=1000 TT=2400.08 T1=57.92	SAT (TO) f=929 TT=2400.12 T1=1624.22	? (TO) TT=2416.18	? TT=1199.47
GracefulGraph/ GracefulGraph-m1-s1/ GracefulGraph-K03-P04.xml	SAT TT=0.053	SAT TT=3.092	SAT TT=10.155	SAT TT=10.152	SAT TT=1.726	SAT TT=1.756	SAT TT=2.247	SAT TT=2.25	SAT TT=2.967	SAT TT=8.114	SAT TT=7.451	SAT TT=51.875	SAT TT=0.061	SAT TT=0.053	No data	SAT TT=1.341	No data	SAT (TO) TT=19854.9	SAT TT=5.504	SAT TT=3.232	SAT TT=10.124	SAT TT=2.175	SAT TT=1.835	SAT TT=9.133	SAT TT=51.572	SAT TT=0.097	SAT TT=0.093	No data	SAT TT=1.473	No data	SAT TT=5.125	SAT TT=4.679
GracefulGraph/ GracefulGraph-m1-s1/ GracefulGraph-K10-P04.xml		? (TO) TT=2520.02	? (TO) TT=2520.01	? (TO) TT=2519.73	? (TO) TT=19598.5	? (TO) TT=19398.4	? (TO) TT=2520.08	? (TO) TT=2520.07	? (TO) TT=2520.1	? (TO) TT=2520.11	? (TO) TT=2520.59	? (TO) TT=2520.02	? (TO) TT=2519.87	? (TO) TT=2519.73	No data	? (TO) TT=2520.04	No data	? (TO) TT=19978.1	? (TO) TT=19987.199	? (TO) TT=2400.06	? (TO) TT=2400.08	? (TO) TT=2400.39	? (TO) TT=2400.79	? (TO) TT=2401.34	? (TO) TT=2400.07	? (TO) TT=2400.07	? (TO) TT=2400.1	No data	? (TO) TT=2400.06	No data	? (TO) TT=2400.22	? (TO) TT=2520.2
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
GracefulGraph/ GracefulGraph-m1-s1/ GracefulGraph-K10-P09.xml		? (TO) TT=2520.04	? (TO) TT=2519.76	? (TO) TT=2519.83	? (TO) TT=19941.699	? (TO) TT=19795.9	? (TO) TT=2520.19	? (TO) TT=2520.11	? (TO) TT=2520.06	? (TO) TT=2520.02	? (TO) TT=2520.65	? (TO) TT=2520.06	? (TO) TT=2520.19	? (TO) TT=2519.93	No data	? (TO) TT=2520.08	No data	? (TO) TT=19967	? (TO) TT=19957.5	? (TO) TT=2400.1	? (TO) TT=2400.04	? (TO) TT=2400.42	? (TO) TT=2400.17	? (TO) TT=2401.3	? (TO) TT=2400.07	? (TO) TT=2400.18	? (TO) TT=2400.1	No data	? (TO) TT=2400.08	No data	? (TO) TT=2416.14	? (problem) TT=1619.61
GracefulGraph/ GracefulGraph-m1-s1/ GracefulGraph-K11-P04.xml		? (TO) TT=2520.04	? (TO) TT=2519.81	? (TO) TT=2519.82	? (TO) TT=19670.4	? (TO) TT=19471	? (TO) TT=2520.13	? (TO) TT=2520.15	? (TO) TT=2520.04	? (TO) TT=2520.1	? (TO) TT=2520.71	? (TO) TT=2519.76	? (TO) TT=2519.94	? (TO) TT=2519.79	No data	? (TO) TT=2520.07	No data	? (TO) TT=19977.6	? (TO) TT=19990.1	? (TO) TT=2400.08	? (TO) TT=2400.05	? (TO) TT=2400.01	? (TO) TT=2400.46	? (TO) TT=2401.55	? (TO) TT=2400.02	? (TO) TT=2400.06	? (TO) TT=2400.05	No data	? (TO) TT=2400.12	No data	? (TO) TT=2400.16	? (TO) TT=2520.17
GracefulGraph/ GracefulGraph-m1-s1/ GracefulGraph-K12-P09.xml		? (TO) TT=2520.11	? (TO) TT=2519.87	? (TO) TT=2519.82	? (TO) TT=20037.6	? (TO) TT=19978.9	? (TO) TT=2520.03	? (TO) TT=2520.06	? (TO) TT=2520.02	? (TO) TT=2520.08	? (TO) TT=2520.78	? (TO) TT=2519.7	? (TO) TT=2520.34	? (TO) TT=2520.01	No data	? (TO) TT=2520.13	No data	? (TO) TT=19856.1	? (TO) TT=19860.9	? (TO) TT=2400.1	? (TO) TT=2400.06	? (TO) TT=2400.2	? (TO) TT=2400.14	? (TO) TT=2401.19	? (TO) TT=2400.03	? (TO) TT=2400.76	? (TO) TT=2400.11	No data	? (TO) TT=2400.08	No data	? (TO) TT=2415.97	? TT=1596.28
GracefulGraph/ GracefulGraph-m1-s1/ GracefulGraph-K14-P07.xml		? (TO) TT=2520.08	? (TO) TT=2519.68	? (TO) TT=2519.81	? (TO) TT=20035.6	? (TO) TT=19984.1	? (TO) TT=2520.11	? (TO) TT=2520.03	? (TO) TT=2520.06	? (TO) TT=2520.12	? (TO) TT=2520.9	? (TO) TT=2520.05	? (MO) TT=29.289	? (TO) TT=2519.93	No data	? (TO) TT=2520.11	No data	? (TO) TT=19834.801	? (TO) TT=19844.199	? (TO) TT=2400.07	? (TO) TT=2400.09	? (TO) TT=2400.79	? (TO) TT=2400.67	? (TO) TT=2401.42	? (TO) TT=2400.04	? (MO) TT=29.176	? (TO) TT=2400.07	No data	? (TO) TT=2400.09	No data	? (TO) TT=2415.98	? (problem) TT=1797.55
GraphColoring/GraphColoring-m1-fixed/ GraphColoring-qwhdec-o50-h825-bal-1.xml		? (TO) TT=2520.05	No data	No data	? (TO) TT=20033.6	? (TO) TT=20030	? (TO) TT=2520.08	? (TO) TT=2520.12	? (TO) TT=2520.07	? (TO) TT=2520.05	? (TO) TT=2520.72	? (TO) TT=2519.5	? (MO) TT=137.722	? (TO) TT=2519.95	? (TO) TT=2520.07	? (TO) TT=2520.07	? (TO) TT=2520.09	? (TO) TT=20035.801	? (TO) TT=20035.6	? (TO) TT=2400.02	No data	? (TO) TT=2400.3	? (TO) TT=2400.07	? (TO) TT=2401.47	? (TO) TT=2400.08	? (MO) TT=137.916	? (TO) TT=2400.05	? (TO) TT=2400.07	? (TO) TT=2400.07	? (TO) TT=2400.11	? (TO) TT=2412.95	? (TO) TT=2528.14
GraphColoring/ GraphColoring-m1-fixed/ GraphColoring-qwhopt-o5-h10-1.xml	OPT f=4 TT=0.074 T1=0.09	OPT f=4 TT=1.13 T1=0.67	No data	No data	OPT f=4 TT=1.458 T1=0.64	OPT f=4 TT=1.472 T1=0.64	OPT f=4 TT=0.957 T1=0.59	OPT f=4 TT=0.963 T1=0.71	OPT f=4 TT=1.033 T1=0.63	OPT f=4 TT=1.012 T1=0.63	OPT f=4 TT=7.323 T1=3.76	OPT f=4 TT=0.093 T1=0.18	OPT f=4 TT=0.095 T1=0.1	OPT f=4 TT=0.074 T1=0.16	SAT (TO) f=4 TT=2520.03 T1=1.14	OPT f=4 TT=1.289 T1=0.91	OPT f=4 TT=1.298 T1=0.89	OPT f=4 TT=5.957 T1=1.77	OPT f=4 TT=6.144 T1=5.49	OPT f=4 TT=1.269 T1=0.61	No data	OPT f=4 TT=1.643 T1=0.73	OPT f=4 TT=1.742 T1=0.77	OPT f=4 TT=8.647 T1=3.7	OPT f=4 TT=0.142 T1=0.14	OPT f=4 TT=0.14 T1=0.14	OPT f=4 TT=0.099 T1=0.09	SAT (TO) f=4 TT=2400.06 T1=1.18	OPT f=4 TT=1.309 T1=0.78	OPT f=4 TT=1.357 T1=0.78	OPT f=4 TT=1.797 T1=0.57	OPT f=4 TT=1.439 T1=0.68
GraphColoring/ GraphColoring-m1-mono/ GraphColoring-2-fullins-3.xml	OPT f=4 TT=0.149 T1=0.18	OPT f=4 TT=1.166 T1=0.75	No data	No data	OPT f=4 TT=2.288 T1=0.71	OPT f=4 TT=2.352 T1=0.75	OPT f=4 TT=1.225 T1=0.69	OPT f=4 TT=1.242 T1=0.69	OPT f=4 TT=1.673 T1=0.72	OPT f=4 TT=1.655 T1=0.71	OPT f=4 TT=9.038 T1=4.42	OPT f=4 TT=0.183 T1=0.26	OPT f=4 TT=0.188 T1=0.18	OPT f=4 TT=0.149 T1=0.23	SAT (TO) f=4 TT=2520.08 T1=1.01	OPT f=4 TT=1.663 T1=1	OPT f=4 TT=1.636 T1=0.98	OPT f=4 TT=9.974 T1=2.15	OPT f=4 TT=9.641 T1=8.72	OPT f=4 TT=1.423 T1=0.7	No data	OPT f=4 TT=2.667 T1=0.82	OPT f=4 TT=2.838 T1=0.86	OPT f=4 TT=11.32 T1=4.37	OPT f=4 TT=0.237 T1=0.23	OPT f=4 TT=0.239 T1=0.23	OPT f=4 TT=0.198 T1=0.19	SAT (TO) f=4 TT=2400.12 T1=1.13	OPT f=4 TT=1.78 T1=0.88	OPT f=4 TT=1.859 T1=1.12	OPT f=4 TT=8.531 T1=4.41	OPT f=4 TT=7.093 T1=4.08
GraphColoring/ GraphColoring-m1-mono/ GraphColoring-3-fullins-3.xml	OPT f=5 TT=0.253 T1=0.27	OPT f=5 TT=1.389 T1=0.76	No data	No data	OPT f=5 TT=3.175 T1=0.89	OPT f=5 TT=3.975 T1=0.88	OPT f=5 TT=1.651 T1=0.8	OPT f=5 TT=1.642 T1=0.81	OPT f=5 TT=3.065 T1=0.81	OPT f=5 TT=2.959 T1=0.83	OPT f=5 TT=11.71 T1=5	OPT f=5 TT=0.318 T1=0.4	OPT f=5 TT=0.338 T1=0.33	OPT f=5 TT=0.253 T1=0.33	SAT (TO) f=5 TT=2520.06 T1=1.06	OPT f=5 TT=3.1 T1=1.18	OPT f=5 TT=3.044 T1=1.16	OPT f=5 TT=11.512 T1=2.44	OPT f=5 TT=10.101 T1=8.18	OPT f=5 TT=1.669 T1=0.72	No data	OPT f=5 TT=4.311 T1=0.94	OPT f=5 TT=3.722 T1=0.97	OPT f=5 TT=13.959 T1=4.91	OPT f=5 TT=0.369 T1=0.36	OPT f=5 TT=0.395 T1=0.39	OPT f=5 TT=0.281 T1=0.27	SAT (TO) f=5 TT=2400.03 T1=1	OPT f=5 TT=3.315 T1=1.05	OPT f=5 TT=3.469 T1=1.07	OPT f=5 TT=36.76 T1=26.87	OPT f=5 TT=32.993 T1=26.75
GraphColoring/ GraphColoring-m1-mono/ GraphColoring-3-fullins-5.xml	OPT f=7 TT=1504.59 T1=2.61	OPT f=7 TT=1538.13 T1=2.8	No data	No data	OPT f=7 TT=9412.5 T1=9.43	OPT f=7 TT=7861.36 T1=5.89	SAT (TO) f=7 TT=2520.11 T1=2.92	SAT (TO) f=7 TT=2520.06 T1=3.21	SAT (TO) f=7 TT=2520.04 T1=3.01	SAT (TO) f=7 TT=2520.1 T1=3.1	SAT (TO) f=7 TT=2520.12 T1=1739.62	SAT (TO) f=7 TT=2519.91 T1=30.93	Signal TT=73.234	SAT (TO) f=7 TT=2519.91 T1=24.99	? (exit code) TT=-1	SAT (TO) f=7 TT=2520.13 T1=728.47	SAT (TO) f=7 TT=2520.1 T1=497.09	? (TO) TT=15941.6	SAT (TO) f=1989 TT=19304.199 T1=19179	OPT f=7 TT=1504.59 T1=2.61	No data	SAT (TO) f=7 TT=2400.04 T1=11.12	SAT (TO) f=7 TT=2400.69 T1=8.26	SAT (TO) f=7 TT=2400.13 T1=1825.58	No Cert. TT=2400.05	Signal TT=78.748	SAT (TO) f=7 TT=2400.05 T1=23.85	SAT (TO) f=7 TT=2400.13 T1=235.03	SAT (TO) f=7 TT=2400.1 T1=777.82	SAT (TO) f=7 TT=2400.08 T1=476.29	? (TO) TT=2415.78	? TT=1550.87
GraphColoring/ GraphColoring-m1-mono/ GraphColoring-4-insertions-3.xml	OPT f=3 TT=34.03 T1=0.63	OPT f=3 TT=499.07 T1=0.69	No data	No data	OPT f=3 TT=368.322 T1=0.7	OPT f=3 TT=416.733 T1=0.71	SAT (TO) f=3 TT=2520.04 T1=0.72	SAT (TO) f=3 TT=2520.07 T1=0.72	OPT f=3 TT=1719.73 T1=0.73	OPT f=3 TT=1720.43 T1=0.74	SAT (TO) f=3 TT=2520.05 T1=4.52	SAT (TO) f=3 TT=2520.07 T1=0.2	SAT (TO) f=3 TT=2520.02 T1=0.23	SAT (TO) f=3 TT=2519.72 T1=0.2	SAT (TO) f=3 TT=2520.11 T1=1.07	OPT f=3 TT=34.03 T1=1.03	SAT (TO) f=3 TT=2520.02 T1=1.05	OPT f=3 TT=76.215 T1=2.63	OPT f=3 TT=92.785 T1=10.68	OPT f=3 TT=493.148 T1=0.63	No data	OPT f=3 TT=1108.67 T1=0.78	OPT f=3 TT=700.231 T1=0.77	SAT (TO) f=3 TT=2400.08 T1=4.34	? (TO) TT=2400.11	? (TO) TT=2400.09	SAT (TO) f=3 TT=2400.03 T1=0.13	SAT (TO) f=3 TT=2400.12 T1=0.95	OPT f=3 TT=35.059 T1=0.94	SAT (TO) f=3 TT=2400.12 T1=0.92	OPT f=3 TT=59.696 T1=22.33	OPT f=3 TT=56.908 T1=22.06
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
GraphColoring/ GraphColoring-m1-mono/ GraphColoring-ash331GPIA.xml	OPT f=3 TT=3 T1=1.24	OPT f=3 TT=3.725 T1=1.4	No data	No data	OPT f=3 TT=8.517 T1=1.99	OPT f=3 TT=9.343 T1=1.97	OPT f=3 TT=3.149 T1=1.24	OPT f=3 TT=3.215 T1=1.24	OPT f=3 TT=6.03 T1=1.33	OPT f=3 TT=6.079 T1=1.37	OPT f=3 TT=72.313 T1=56.4	OPT f=3 TT=3.825 T1=3.89	OPT f=3 TT=14.943 T1=14.62	OPT f=3 TT=3 T1=3.07	SAT (TO) f=3 TT=2520.13 T1=48.92	OPT f=3 TT=23.45 T1=18.18	OPT f=3 TT=23.466 T1=17.91	OPT f=3 TT=2744.59 T1=355.49	OPT f=3 TT=2681.34 T1=2680.51	OPT f=3 TT=4.561 T1=1.35	No data	OPT f=3 TT=8.832 T1=1.95	OPT f=3 TT=8.778 T1=1.94	OPT f=3 TT=77.078 T1=57.51	OPT f=3 TT=3.897 T1=3.89	OPT f=3 TT=14.865 T1=14.55	OPT f=3 TT=3.15 T1=3.14	SAT (TO) f=3 TT=2400.17 T1=48.18	OPT f=3 TT=26.683 T1=18.31	OPT f=3 TT=27.772 T1=18.87	? (TO) TT=2416.09	? TT=1375.04
GraphColoring/ GraphColoring-m1-mono/ GraphColoring-dsjc-250-1.xml	SAT TO f=8 TT=2400.05 T1=1.14	SAT (TO) f=8 TT=2520.1 T1=1.21	No data	No data	SAT (TO) f=8 TT=20084.301 T1=1.69	SAT (TO) f=8 TT=20042.9 T1=2.37	SAT (TO) f=8 TT=2520.07 T1=1.09	SAT (TO) f=8 TT=2520.1 T1=1.14	SAT (TO) f=8 TT=2520.03 T1=1.71	SAT (TO) f=8 TT=2520.05 T1=1.62	SAT (TO) f=8 TT=2520.16 T1=13.33	SAT (TO) f=8 TT=2520 T1=3.01	SAT (TO) f=8 TT=2519.61 T1=3.58	SAT (TO) f=8 TT=2519.75 T1=2.51	SAT (TO) f=8 TT=2520.12 T1=272.89	SAT (TO) f=8 TT=2520.05 T1=11.9	SAT (TO) f=8 TT=2520.03 T1=17.24	SAT (TO) f=8 TT=19998.801 T1=890.83	SAT (TO) f=8 TT=19940 T1=4066.98	SAT (TO) f=8 TT=2400.05 T1=1.22	No data	SAT (TO) f=8 TT=2400.71 T1=2.74	SAT (TO) f=8 TT=2400 T1=2.03	SAT (TO) f=8 TT=2400.12 T1=13.62	? (TO) TT=2400.06	? (TO) TT=2400.05	SAT (TO) f=8 TT=2400.05 T1=2.24	SAT (TO) f=8 TT=2400.05 T1=76.1	SAT (TO) f=8 TT=2400.06 T1=12	SAT (TO) f=8 TT=2400.12 T1=42.8	? (TO) TT=2415.64	? TT=1223.97
GraphColoring/ GraphColoring-m1-mono/ GraphColoring-dsjc-250-9.xml	SAT TO f=78 TT=2400.1 T1=22.27	SAT (TO) f=85 TT=2520.09 T1=3.02	No data	No data	SAT (TO) f=85 TT=19987.1 T1=63	SAT (TO) f=85 TT=19989.9 T1=449.5	SAT (TO) f=84 TT=2520.07 T1=1691.98	SAT (TO) f=84 TT=2520.12 T1=1725.22	SAT (TO) f=84 TT=2520.1 T1=221.06	SAT (TO) f=84 TT=2520.04 T1=222.32	SAT (TO) f=80 TT=2520.05 T1=104.24	SAT (TO) f=87 TT=2519.84 T1=26.41	SAT (TO) f=86 TT=2520.01 T1=47.68	SAT (TO) f=78 TT=2519.98 T1=22.27	SAT (TO) f=84 TT=2520.14 T1=1363	SAT (TO) f=86 TT=2520.08 T1=82.6	SAT (TO) f=86 TT=2520.1 T1=88.32	SAT (TO) f=89 TT=20001.1 T1=204.31	SAT (TO) f=88 TT=19993.699 T1=1170.57	SAT (TO) f=85 TT=2400.09 T1=2.99	No data	SAT (TO) f=84 TT=2400.2 T1=20.56	SAT (TO) f=84 TT=2400.31 T1=9.85	SAT (TO) f=80 TT=2400.1 T1=110.97	? (TO) TT=2400.09	? (TO) TT=2400.03	SAT (TO) f=78 TT=2400.1 T1=23.16	SAT (TO) f=82 TT=2400.11 T1=2100.1	SAT (TO) f=86 TT=2400.08 T1=80.96	SAT (TO) f=84 TT=2400.1 T1=1131.24	? (TO) TT=2416.66	? TT=1336.21
GraphColoring/ GraphColoring-m1-mono/ GraphColoring-dsjc-500-5.xml	SAT TO f=57 TT=2400.05 T1=1876.9	SAT (TO) f=62 TT=2520.08 T1=6.18	No data	No data	SAT (TO) f=61 TT=20044.6 T1=1392.12	SAT (TO) f=62 TT=20027.199 T1=399.6	SAT (TO) f=62 TT=2520.13 T1=753.96	SAT (TO) f=62 TT=2520.12 T1=756.07	SAT (TO) f=62 TT=2520.14 T1=4.07	SAT (TO) f=62 TT=2520.08 T1=3.98	SAT (TO) f=59 TT=2520.12 T1=788.75	SAT (TO) f=63 TT=2519.82 T1=140.45	SAT (TO) f=62 TT=2520.08 T1=120.31	SAT (TO) f=57 TT=2520.09 T1=1877.38	SAT (TO) f=65 TT=2520.12 T1=492.51	SAT (TO) f=66 TT=2520.07 T1=206.63	SAT (TO) f=65 TT=2520.06 T1=407.82	SAT (TO) f=65 TT=19850.199 T1=854.71	SAT (TO) f=64 TT=19844.801 T1=15446.61	SAT (TO) f=62 TT=2400.12 T1=5.86	No data	SAT (TO) f=61 TT=2400.76 T1=89.53	SAT (TO) f=62 TT=2400.11 T1=31.81	SAT (TO) f=59 TT=2400.12 T1=747.38	No Cert. TT=2400.11	No Cert. TT=2400.07	SAT (TO) f=57 TT=2400.05 T1=1876.9	SAT (TO) f=65 TT=2400.06 T1=1996.18	SAT (TO) f=66 TT=2400.14 T1=211.23	SAT (TO) f=64 TT=2400.14 T1=1033.01	? (TO) TT=2416.4	? TT=1295.26
GraphColoring/ GraphColoring-m1-mono/ GraphColoring-games120.xml	OPT f=8 TT=0.905 T1=0.49	OPT f=8 TT=2.609 T1=0.82	No data	No data	OPT f=8 TT=21.441 T1=0.92	OPT f=8 TT=14.559 T1=0.96	OPT f=8 TT=6.766 T1=0.81	OPT f=8 TT=4.967 T1=0.78	OPT f=8 TT=18.684 T1=0.74	OPT f=8 TT=18.471 T1=0.78	OPT f=8 TT=13.187 T1=5.58	OPT f=8 TT=0.962 T1=0.68	OPT f=8 TT=0.905 T1=0.69	OPT f=8 TT=1.471 T1=0.53	SAT (TO) f=8 TT=2520.08 T1=1.69	OPT f=8 TT=8.905 T1=1.59	OPT f=8 TT=2360.52 T1=1.42	OPT f=8 TT=72.923 T1=3.03	OPT f=8 TT=53.842 T1=14.45	OPT f=8 TT=2.929 T1=0.78	No data	OPT f=8 TT=19.225 T1=0.99	OPT f=8 TT=18.771 T1=1.05	OPT f=8 TT=17.204 T1=6.17	OPT f=8 TT=1.025 T1=0.65	OPT f=8 TT=0.958 T1=0.69	OPT f=8 TT=1.55 T1=0.49	SAT (TO) f=8 TT=2400.09 T1=1.47	OPT f=8 TT=9.073 T1=1.44	OPT f=8 TT=2313.23 T1=1.45	OPT f=8 TT=282.321 T1=229.95	OPT f=8 TT=255.524 T1=223.06
GraphColoring/ GraphColoring-m1-mono/ GraphColoring-lei450-25d.xml	SAT TO f=25 TT=2400.04 T1=1130.33	SAT (TO) f=25 TT=2520.09 T1=1576.14	No data	No data	SAT (TO) f=26 TT=20041 T1=4.32	SAT (TO) f=26 TT=20026 T1=5.75	SAT (TO) f=26 TT=2520.1 T1=5.86	SAT (TO) f=26 TT=2520.06 T1=5.92	SAT (TO) f=25 TT=2520.05 T1=1137.45	SAT (TO) f=25 TT=2520.07 T1=1130.33	SAT (TO) f=26 TT=2520.13 T1=52.1	SAT (TO) f=26 TT=2520.02 T1=17.02	SAT (TO) f=26 TT=2520.14 T1=19.56	SAT (TO) f=26 TT=2520.02 T1=13.48	SAT (TO) f=27 TT=2520.04 T1=334.44	SAT (TO) f=26 TT=2520.05 T1=321.13	SAT (TO) f=28 TT=2520.07 T1=38.75	SAT (TO) f=30 TT=19995.4 T1=176.99	SAT (TO) f=29 TT=19997.6 T1=765.8	SAT (TO) f=25 TT=2400.04 T1=1581.2	No data	SAT (TO) f=26 TT=2400.42 T1=5.56	SAT (TO) f=26 TT=2400.22 T1=4.03	SAT (TO) f=26 TT=2400.14 T1=49.23	No Cert. TT=2400.06	No Cert. TT=2400.03	SAT (TO) f=26 TT=2400.09 T1=12.26	SAT (TO) f=26 TT=2400.08 T1=906.87	SAT (TO) f=26 TT=2400.07 T1=321.78	SAT (TO) f=27 TT=2400.08 T1=97.4	? (TO) TT=2416.39	? TT=1410.68
GraphColoring/ GraphColoring-m1-mono/ GraphColoring-mug100-25.xml	OPT f=3 TT=6.599 T1=0.75	SAT (TO) f=3 TT=2520.07 T1=0.85	No data	No data	OPT f=3 TT=4580.19 T1=0.72	OPT f=3 TT=4201.87 T1=0.75	SAT (TO) f=3 TT=2520.02 T1=0.79	SAT (TO) f=3 TT=2520.08 T1=0.79	OPT f=3 TT=7.757 T1=0.86	OPT f=3 TT=6.599 T1=0.78	SAT (TO) f=3 TT=2520.15 T1=4.75	SAT (TO) f=3 TT=2519.94 T1=0.25	SAT (TO) f=3 TT=2520.01 T1=0.25	SAT (TO) f=3 TT=2520.08 T1=0.22	SAT (TO) f=3 TT=2520.03 T1=0.96	SAT (TO) f=3 TT=2520.05 T1=1.07	SAT (TO) f=3 TT=2520.1 T1=1.11	SAT (TO) f=3 TT=5495.68 T1=2.49	SAT (TO) f=3 TT=5013.24 T1=10.76	SAT (TO) f=3 TT=2400.04 T1=0.69	No data	SAT (TO) f=3 TT=2400.08 T1=0.8	SAT (TO) f=3 TT=2400.22 T1=0.86	SAT (TO) f=3 TT=2400.07 T1=4.72	? (TO) TT=2400.09	? (TO) TT=2400.08	SAT (TO) f=3 TT=2400.08 T1=0.14	SAT (TO) f=3 TT=2400.05 T1=0.93	SAT (TO) f=3 TT=2400.08 T1=1.01	SAT (TO) f=3 TT=2400.09 T1=1.02	OPT f=3 TT=63.85 T1=51.72	OPT f=3 TT=58.884 T1=51.58
GraphColoring/ GraphColoring-m1-mono/ GraphColoring-queen8-8.xml	SAT TO f=8 TT=2400.03 T1=0.81	SAT (TO) f=8 TT=2520.06 T1=1.94	No data	No data	SAT (TO) f=8 TT=20053.801 T1=1.61	SAT (TO) f=8 TT=20069.699 T1=1.78	SAT (TO) f=8 TT=2520.13 T1=5.64	SAT (TO) f=8 TT=2520.09 T1=5.85	SAT (TO) f=8 TT=2520.05 T1=10.11	SAT (TO) f=8 TT=2520.03 T1=10.16	SAT (TO) f=8 TT=2520.11 T1=11.38	SAT (TO) f=8 TT=2520.04 T1=3.6	SAT (TO) f=8 TT=2519.99 T1=0.81	SAT (TO) f=8 TT=2520 T1=1	SAT (TO) f=8 TT=2520.13 T1=37.93	SAT (TO) f=8 TT=2520.1 T1=30.64	SAT (TO) f=8 TT=2520.09 T1=13.5	SAT (TO) f=8 TT=19883.5 T1=106.36	SAT (TO) f=8 TT=19850.9 T1=279.51	SAT (TO) f=8 TT=2400.1 T1=0.91	No data	SAT (TO) f=8 TT=2400.18 T1=1.63	SAT (TO) f=8 TT=2400.04 T1=1.67	SAT (TO) f=8 TT=2400.12 T1=11.37	? (TO) TT=2400.09	? (TO) TT=2400.08	SAT (TO) f=8 TT=2400.09 T1=0.93	SAT (TO) f=8 TT=2400.03 T1=261.23	SAT (TO) f=8 TT=2400.08 T1=30.61	SAT (TO) f=8 TT=2400.07 T1=7.12	? (TO) TT=2400.42	SAT (TO) f=8 TT=2520.34 T1=86.28
GraphColoring/ GraphColoring-m1-mono/ GraphColoring-wap01a.xml	SAT TO f=41 TT=2401.06 T1=594.2	SAT (TO) f=41 TT=2520.12 T1=594.2	No data	No data	SAT (TO) f=41 TT=19979.801 T1=1861.21	SAT (TO) f=41 TT=19990 T1=1651.65	SAT (TO) f=41 TT=2520.08 T1=2227.59	SAT (TO) f=41 TT=2520.11 T1=2190.28	SAT (TO) f=41 TT=2520.13 T1=905.55	SAT (TO) f=41 TT=2520.09 T1=907.92	SAT (TO) f=288 TT=2520.14 T1=2457.56	SAT (TO) f=42 TT=2519.47 T1=162.28	? (MO) TT=129.622	SAT (TO) f=42 TT=2520.03 T1=261.1	SAT (TO) f=50 TT=2520.12 T1=393.24	SAT (TO) f=1158 TT=2520.15 T1=2412.28	SAT (TO) f=51 TT=2520.11 T1=620.65	? (TO) TT=16236.5	? TT=2036.59	SAT (TO) f=41 TT=2401.06 T1=606.69	No data	SAT (TO) f=44 TT=2400.21 T1=280.01	SAT (TO) f=44 TT=2400.71 T1=237.33	SAT (TO) f=513 TT=2400.43 T1=2277.57	SAT (TO) f=42 TT=2400.09 T1=159.03	? (MO) TT=129.953	SAT (TO) f=42 TT=2400.02 T1=245.29	SAT (TO) f=52 TT=2400.09 T1=854.91	SAT (TO) f=1327 TT=2400.15 T1=2073.1	SAT (TO) f=50 TT=2400.66 T1=699	? (TO) TT=2416.21	? TT=1498.05
GraphColoring/ GraphColoring-m1-mono/ GraphColoring-wap06a.xml	SAT TO f=40 TT=2400.07 T1=38.29	SAT (TO) f=40 TT=2520.08 T1=227.31	No data	No data	SAT (TO) f=40 TT=20062.5 T1=639.75	SAT (TO) f=40 TT=20050.801 T1=120.73	SAT (TO) f=40 TT=2520.1 T1=136.28	SAT (TO) f=40 TT=2520.1 T1=137.56	SAT (TO) f=40 TT=2520.05 T1=76.35	SAT (TO) f=40 TT=2520.11 T1=76.27	SAT (TO) f=42 TT=2520.13 T1=193.01	SAT (TO) f=40 TT=2519.89 T1=84.67	? (MO) TT=64.528	SAT (TO) f=40 TT=2519.98 T1=40.15	SAT (TO) f=46 TT=2520.14 T1=323.02	SAT (TO) f=43 TT=2520.13 T1=1068.89	SAT (TO) f=45 TT=2520.07 T1=2148.19	SAT (TO) f=430 TT=19758 T1=2519.48	SAT (TO) f=349 TT=19819.4 T1=19810.52	SAT (TO) f=40 TT=2400.07 T1=226.3	No data	SAT (TO) f=41 TT=2400.1 T1=96.14	SAT (TO) f=41 TT=2400.22 T1=97.87	SAT (TO) f=42 TT=2400.07 T1=193.16	No Cert. TT=2400.04	? (MO) TT=65.093	SAT (TO) f=40 TT=2400.08 T1=38.29	SAT (TO) f=45 TT=2400.12 T1=655.85	SAT (TO) f=43 TT=2400.09 T1=1072.03	SAT (TO) f=45 TT=2400.08 T1=2051.93	? (TO) TT=2416.24	? TT=1314.43
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete)	R1: OscaR - Hybrid 2017-06-30 (complete)	R1: sat4j-CSP 2017-07-05 (complete)	sat4j-CSP 2017-07-05 (complete)
GraphColoring/ GraphColoring-m1-mono/ GraphColoring-zeroin-i-3.xml	OPT f=29 TT=24.402 T1=11.42	SAT (TO) f=29 TT=2520.1 T1=1.18	No data	No data	SAT (TO) f=29 TT=20082.801 T1=1.49	SAT (TO) f=29 TT=20023.801 T1=1.55	SAT (TO) f=29 TT=2520.06 T1=1.06	SAT (TO) f=29 TT=2520.12 T1=1.01	SAT (TO) f=29 TT=2520.18 T1=1.06	SAT (TO) f=29 TT=2520.08 T1=1.07	OPT f=29 TT=24.402 T1=11.43	SAT (TO) f=29 TT=2520.01 T1=3.23	SAT (TO) f=29 TT=2519.88 T1=3.53	SAT (TO) f=29 TT=2520 T1=2.61	SAT (TO) f=29 TT=2520.14 T1=2.58	SAT (TO) f=30 TT=2520.06 T1=4.14	SAT (TO) f=29 TT=2520.06 T1=7.95	SAT (TO) f=29 TT=19998.5 T1=12.06	SAT (TO) f=29 TT=20022.199 T1=82.8	SAT (TO) f=29 TT=2400.04 T1=1.07	No data	SAT (TO) f=29 TT=2400.63 T1=1.61	SAT (TO) f=29 TT=2400.34 T1=1.64	OPT f=29 TT=29.027 T1=11.42	? (TO) TT=2400.06	? (TO) TT=2400.09	SAT (TO) f=29 TT=2400.06 T1=2.47	SAT (TO) f=29 TT=2400.06 T1=1.67	SAT (TO) f=30 TT=2400.06 T1=4.03	SAT (TO) f=29 TT=2400.14 T1=8.36	? (TO) TT=2415.35	? TT=1226.04
Hanoi/ Hanoi-m1-s1/ Hanoi-03.xml	SAT TT=0.002	SAT TT=1.013	SAT TT=0.002	SAT TT=0.002	SAT TT=1.092	SAT TT=1.061	SAT TT=0.756	SAT TT=0.769	SAT TT=0.821	SAT TT=0.807	SAT TT=6.241	SAT TT=0.006	SAT TT=0.006	SAT TT=0.007	No data	SAT TT=1.086	No data	SAT TT=3.421	SAT TT=2.764	SAT TT=1.174	SAT TT=0.002	SAT TT=1.174	SAT TT=1.204	SAT TT=7.439	SAT TT=0.009	SAT TT=0.009	SAT TT=0.01	No data	SAT TT=1.09	No data	SAT TT=1.947	SAT TT=1.461
Hanoi/ Hanoi-m1-s1/ Hanoi-04.xml	SAT TT=0.005	SAT TT=1.164	SAT TT=0.005	SAT TT=0.005	SAT TT=1.572	SAT TT=1.579	SAT TT=0.888	SAT TT=0.917	SAT TT=0.96	SAT TT=0.979	SAT TT=6.584	SAT TT=0.006	SAT TT=0.01	SAT TT=0.009	No data	SAT TT=1.272	No data	SAT TT=65.369	SAT TT=4.639	SAT TT=1.415	SAT TT=0.007	SAT TT=1.874	SAT TT=1.638	SAT TT=7.846	SAT TT=0.01	SAT TT=0.014	SAT TT=0.014	No data	SAT TT=1.33	No data	SAT TT=5.991	SAT TT=5.364
Hanoi/ Hanoi-m1-s1/ Hanoi-06.xml	SAT TT=0.037	SAT TT=1.678	SAT TT=0.608	SAT TT=0.607	SAT TT=6.268	SAT TT=5.586	SAT TT=2.161	SAT TT=2.188	SAT TT=2.297	SAT TT=2.33	SAT TT=11.62	SAT TT=0.037	SAT TT=1.195	SAT TT=0.081	No data	SAT TT=2.274	No data	SAT (TO) TT=8178.29	SAT TT=13.841	SAT TT=2.017	SAT TT=0.642	SAT TT=7.386	SAT TT=7.442	SAT TT=15.064	SAT TT=0.064	SAT TT=1.256	SAT TT=0.116	No data	SAT TT=2.557	No data	? (TO) TT=2416.19	? TT=1645.34
Hanoi/ Hanoi-m1-s1/ Hanoi-07.xml	SAT TT=0.616	SAT TT=2.294	SAT TT=10.738	SAT TT=10.844	SAT TT=53.14	SAT TT=52.192	SAT TT=17.088	SAT TT=17.247	SAT TT=17.401	SAT TT=17.873	SAT TT=29.239	SAT TT=0.78	SAT TT=25.273	SAT TT=0.616	No data	SAT TT=5.822	No data	SAT (TO) TT=6761.66	SAT TT=145.597	SAT TT=3.138	SAT TT=10.761	SAT TT=74.447	SAT TT=78.757	SAT TT=34.556	SAT TT=0.827	SAT TT=26.239	SAT TT=0.669	No data	SAT TT=10.271	No data	? (TO) TT=2416.62	? (TO) TT=2527.89
Hanoi/ Hanoi-m1-s1/ Hanoi-08.xml	SAT TT=4.462	SAT TT=4.462	SAT TT=204.022	SAT TT=203.845	? TT=587.51	? TT=496.591	SAT TT=459.86	SAT TT=448.292	SAT TT=463.693	SAT TT=441.738	SAT TT=292.787	SAT TT=36.351	Signal TT=43.401	SAT TT=5.98	No data	SAT TT=60.446	No data	? TT=969.429	? TT=1114.61	SAT TT=4.779	SAT TT=203.522	? TT=295.129	? (exit code) TT=357.795	SAT TT=326.12	SAT TT=36.737	Signal TT=50.32	SAT TT=5.984	No data	? TT=193.719	No data	? (TO) TT=2411.13	? (TO) TT=2525.74
Hanoi/ Hanoi-m1-s1/ Hanoi-09.xml	SAT TT=19.367	SAT TT=19.367	? (MO) TT=361.054	? (MO) TT=362.927	? TT=315.536	? TT=332.392	? TT=86.261	? TT=85.142	? TT=78.463	? TT=71.21	? TT=545.001	SAT TT=853.452	? (MO) TT=34.451	SAT TT=60.506	No data	? TT=69.508	No data	? TT=102.243	? TT=208.36	SAT TT=22.71	? (MO) TT=365.259	? TT=169.801	? TT=159.414	? TT=355.048	SAT TT=623.324	? (MO) TT=35.243	SAT TT=60.657	No data	? TT=137.406	No data	? (TO) TT=2416.22	? TT=2015.61
Haystacks/ Haystacks-m1-s1/ Haystacks-32.xml	UNSAT TT=11.286	? (TO) TT=2520.11	? (TO) TT=2520.04	? (TO) TT=2519.79	UNSAT TT=58.44	UNSAT TT=57.172	UNSAT TT=12.083	UNSAT TT=11.286	UNSAT TT=11.115	UNSAT TT=11.614	? (TO) TT=2522.87	? (TO) TT=2519.82	? (TO) TT=2519.89	? (TO) TT=2520.05	No data	? (TO) TT=2520.07	No data	? (TO) TT=19993.4	? (TO) TT=20013.9	? (TO) TT=2400.03	? TT=2400.04	UNSAT TT=64.335	UNSAT TT=64.462	? (TO) TT=2405.04	? (TO) TT=2400.05	? (TO) TT=2400.05	? (TO) TT=2400.09	No data	? (TO) TT=2400.03	No data	? (TO) TT=2416.04	? TT=2002.87
Haystacks/ Haystacks-m1-s1/ Haystacks-42.xml	UNSAT TT=26.209	? (TO) TT=2520.1	? (TO) TT=2519.67	? (TO) TT=2519.69	UNSAT TT=208.855	UNSAT TT=196.621	UNSAT TT=25.772	UNSAT TT=26.209	UNSAT TT=26.022	UNSAT TT=28.541	? (TO) TT=2526.8	? (TO) TT=2520.04	? (TO) TT=2520.06	? (TO) TT=2520.01	No data	? (TO) TT=2520.05	No data	? TT=2740.9	? (TO) TT=19588.301	? (TO) TT=2400.08	? (TO) TT=2400.03	UNSAT TT=217.377	UNSAT TT=219.451	? (TO) TT=2415.25	? (TO) TT=2400.05	? (TO) TT=2400.1	? (TO) TT=2400.1	No data	? (TO) TT=2400.12	No data	? TT=889.595	? TT=430.193
Haystacks/ Haystacks-m1-s1/ Haystacks-44.xml	UNSAT TT=29.971	? (TO) TT=2520.04	? (TO) TT=2519.93	? (TO) TT=2519.79	UNSAT TT=218.405	UNSAT TT=224.22	UNSAT TT=32.619	UNSAT TT=30.7	UNSAT TT=31.407	UNSAT TT=29.971	? (TO) TT=2527.76	? (TO) TT=2519.37	? (TO) TT=2519.99	? (TO) TT=2520.06	No data	? (TO) TT=2520.18	No data	? (TO) TT=19398.301	? (TO) TT=19522.801	? (TO) TT=2400.07	? (TO) TT=2400.02	UNSAT TT=251.971	UNSAT TT=247.571	? (TO) TT=2415.62	? (TO) TT=2400.02	? (TO) TT=2400.09	? (TO) TT=2400.08	No data	? (TO) TT=2400.24	No data	? (TO) TT=2415.91	? TT=1604.79
Bench name	Best results	AbsCon-basic 2017-06-11 (complete)	BTD 2017-07-25 (complete)	BTD 2017-08-10 (complete)	choco-solver 4.0.5 par (2017-08-09) (complete)	choco-solver 4.0.5 par (2017-08-18) (complete)	choco-solver 4.0.5 seq (2017-08-09) (complete)	choco-solver 4.0.5 seq (2017-08-18) (complete)	choco-solver 5a (2017-07-26) (complete)	choco-solver 5a (2017-08-18) (complete)	Concrete 3.4 (complete)	cosoco 1.12 (complete)	cosoco-sat 1.12 (complete)	Mistral-2.0 2017-07-28 (complete)	OscaR - ALNS 2017-07-26 (complete)	OscaR - Conflict Ordering 2017-07-26 (complete)	OscaR - Hybrid 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-07-26 (complete)	OscaR - Parallel with EPS 2017-08-22 (complete)	R1: AbsCon-basic 2017-06-11 (complete)	R1: BTD 2017-06-30 (complete)	R1: choco-solver 4.0.5 (2017-07-05) (complete)	R1: choco-solver 5a (2017-07-05) (complete)	R1: Concrete 3.4 (complete)	R1: cosoco 1.1 (complete)	R1: cosoco-sat 1.1 (complete)	R1: Mistral-2.0 2017-06-28 (complete)	R1: OscaR - ALNS 2017-06-30 (complete)	R1: OscaR - Conflict Ordering 2017-06-30 (complete