PB'12 competition: satisfaction and optimization track: results by benchmark

Results by benchmark for category optimisation, small integers, linear constraints (OPT-SMALLINT-LIN), subcategory Handmade, subsubcategory Minimum-Size Prime Implicant

This page displays the results of the different solvers for each benchmark for category optimisation, small integers, linear constraints (OPT-SMALLINT-LIN), subcategory Handmade, subsubcategory Minimum-Size Prime Implicant

REMINDER

Keep in mind that the 'Best result' columns only provide the best result given by one of the solvers. This 'Best result' may be wrong in case of an UNSATISFIABLE or OPTIMUM FOUND answer (because there's no efficient way to check these answers).

Description of a cell contents:

Cell exampleMeaning
AnswerSolver result
f=...value of the objective function for the model reported by the solver
TT=...Total Time (TT): this is the CPU time (in seconds) used by the solver until termination. This time is only meaningful for complete solvers because incomplete solvers will always run until they time out
Remember that CPU time and wall clock time are two very different notions. The CPU time represents the time during which the instructions of the solver were executed by the processor. The wall clock time represents how much time ellapsed on the clock. For a same event, the CPU time may be either smaller or greater than the wall clock time depending on the number of threads of execution and the number of processors.

Meaning of some abbreviations:

AbbreviationMeaning
f=...Value of the objective function
TOTime Out
MOMem. Out (out of memory)

Meaning of the different colors:

ColorMeaning
textthe solver cannot handle this instance
textthe solver gave no answer
textthe solver could give an answer (SAT)
textthe solver gave a definitive answer (OPTIMUM FOUND or UNSAT)
textthe solver performed better than the other ones on that instance (complete solvers point of view)
textthe solver performed better than the other ones on that instance (incomplete solvers point of view)
textthe solver was ended by a signal or other problem
textthe solver gave an incomplete answer
textthe solver gave a wrong answer

For better readability, you may choose to hide some solvers:
bsolo 3.2 (complete)
clasp 2.0.6-R5325 (opt) (complete)
npSolver 1.0 (complete)
npSolver 1.0 (fixed) (complete)
npSolver inc (complete)
npSolver inc (fixed) (complete)
npSolver inc-topDown (complete)
npSolver inc-topDown (fixed) (complete)
npSolver inc-topdown-quickBound (complete)
npSolver inc-topdown-quickBound (fixed) (complete)
PB07: bsolo 3.0.17 (complete)
PB07: minisat+ 1.14 (complete)
PB07: PB-clasp 2007-04-10 (complete)
PB07: Pueblo 1.4 (incomplete)
PB07: SAT4JPseudoResolution 2007-03-23 (complete)
PB09: bsolo 3.1 (complete)
PB09: SAT4J Pseudo Resolution 2.1.1 (complete)
PB09: SCIPspx SCIP 1.1.0.7 with SoPLEX 1.4.1(24.4.2009) (complete)
PB10: pb_cplex 2010-06-29 (complete)
PB10: SAT4J PB RES // CP 2.2.0 2010-05-31 (complete)
PB10: SCIPspx SCIP 1.2.1.3 with SoPlex 1.4.2 (CVS Version 30.5.2010) as LP solver (complete)
PB11: Sat4j Res//CP 2.3.0 (complete)
PB11: SCIP spx E_2 2011-06-10 (fixed) (complete)
PB12: minisatp 1.0-2-g022594c (complete)
pb2sat 2012-05-19 (complete)
pb2satCp2 2012-05-19 (complete)
pwbo 2.0 (complete)
pwbo 2.02 (complete)
SAT 4j PB RES // CP 2.3.2 Snapshot (complete)
Sat 4j PB Resolution 2.3.2 Snapshot (complete)
SAT4J PB specific settings 2.3.2 snapshot (complete)
SCIP spx SCIP 2.1.1.4. with SoPlex 1.6.0.3 fixed (complete)
SCIP spx E SCIP 2.1.1.4. Exp with SoPlex 1.6.0.3 fixed (complete)
SCIP spx standard SCIP 2.1.1.4. with SoPlex 1.6.0.3 standard fixed (complete)
toysat 2012-05-17 (complete)
toysat 2012-06-01 (complete)
wbo 1.7 (complete)
wbo 1.72 (complete)

Bench nameBest results
on this
instance		bsolo
3.2
(complete)		clasp
2.0.6-R5325 (opt)
(complete)		npSolver
1.0
(complete)		npSolver
1.0 (fixed)
(complete)		npSolver
inc
(complete)		npSolver
inc (fixed)
(complete)		npSolver
inc-topDown
(complete)		npSolver
inc-topDown (fixed)
(complete)		npSolver
inc-topdown-quickBound
(complete)		npSolver
inc-topdown-quickBound (fixed)
(complete)		PB07: bsolo
3.0.17
(complete)		PB07: minisat+
1.14
(complete)		PB07: PB-clasp
2007-04-10
(complete)		PB07: Pueblo
1.4
(incomplete)		PB07: SAT4JPseudoResolution
2007-03-23
(complete)		PB09: bsolo
3.1
(complete)		PB09: SAT4J Pseudo Resolution
2.1.1
(complete)		PB09: SCIPspx
SCIP 1.1.0.7 with SoPLEX 1.4.1(24.4.2009)
(complete)		PB10: pb_cplex
2010-06-29
(complete)		PB10: SAT4J PB RES // CP
2.2.0 2010-05-31
(complete)		PB10: SCIPspx
SCIP 1.2.1.3 with SoPlex 1.4.2 (CVS Version 30.5.2010) as LP solver
(complete)		PB11: Sat4j Res//CP
2.3.0
(complete)		PB11: SCIP spx E_2
2011-06-10 (fixed)
(complete)		PB12: minisatp
1.0-2-g022594c
(complete)		pb2sat
2012-05-19
(complete)		pb2satCp2
2012-05-19
(complete)		pwbo
2.0
(complete)		pwbo
2.02
(complete)		SAT 4j PB RES // CP
2.3.2 Snapshot
(complete)		Sat 4j PB Resolution
2.3.2 Snapshot
(complete)		SAT4J PB specific settings
2.3.2 snapshot
(complete)		SCIP spx
SCIP 2.1.1.4. with SoPlex 1.6.0.3 fixed
(complete)		SCIP spx E
SCIP 2.1.1.4. Exp with SoPlex 1.6.0.3 fixed
(complete)		SCIP spx standard
SCIP 2.1.1.4. with SoPlex 1.6.0.3 standard fixed
(complete)		toysat
2012-05-17
(complete)		toysat
2012-06-01
(complete)		wbo
1.7
(complete)		wbo
1.72
(complete)
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/primes-dimacs-cnf/
normalized-aim-100-2_0-yes1-2.opb 		OPT
f=100
TT=0.003
T1=0
 OPT
f=100
TT=0.005
T1=0
 OPT
f=100
TT=0.003
T1=0
 OPT
f=100
TT=0.153
T1=0.02
 OPT
f=100
TT=0.141
T1=0.03
 OPT
f=100
TT=0.089
T1=0.01
 OPT
f=100
TT=0.089
T1=0.02
 OPT
f=100
TT=0.028
T1=0.01
 OPT
f=100
TT=0.032
T1=0.02
 OPT
f=100
TT=0.03
T1=0.01
 OPT
f=100
TT=0.033
T1=0.02
 OPT
f=100
TT=0.006
T1=0
 OPT
f=100
TT=0.021
T1=0
 OPT
f=100
TT=0.042
T1=0.03
 OPT
f=100
TT=0.005
T1=0
 OPT
f=100
TT=0.245
T1=0.17
 OPT
f=100
TT=0.005
T1=0
 OPT
f=100
TT=0.273
T1=0.18
 OPT
f=100
TT=7.379
T1=7.37
 OPT
f=100
TT=3.288
T1=1.86
 OPT
f=100
TT=0.384
T1=1.15
 OPT
f=100
TT=0.156
T1=0.14
 OPT
f=100
TT=0.403
T1=0.69
 OPT
f=100
TT=0.225
T1=0.2
 OPT
f=100
TT=0.01
T1=0.01
 OPT
f=100
TT=0.096
T1=0.01
 OPT
f=100
TT=0.022
T1=0
 OPT
f=100
TT=0.003
T1=0
 OPT
f=100
TT=0.003
T1=0
 OPT
f=100
TT=0.342
T1=0.66
 OPT
f=100
TT=0.253
T1=0.17
 OPT
f=100
TT=0.284
T1=0.19
 OPT
f=100
TT=0.197
T1=0.17
 OPT
f=100
TT=0.19
T1=0.16
 OPT
f=100
TT=1.798
T1=1.79
 OPT
f=100
TT=0.018
T1=0.02
 OPT
f=100
TT=0.014
T1=0.01
 ?

TT=1799.57

 ?

TT=1799.8
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/primes-dimacs-cnf/
normalized-aim-100-2_0-yes1-3.opb 		OPT
f=100
TT=0.002
T1=0
 OPT
f=100
TT=0.005
T1=0
 OPT
f=100
TT=0.004
T1=0
 OPT
f=100
TT=0.127
T1=0.02
 OPT
f=100
TT=0.139
T1=0.03
 OPT
f=100
TT=0.075
T1=0.01
 OPT
f=100
TT=0.082
T1=0.02
 OPT
f=100
TT=0.03
T1=0.01
 OPT
f=100
TT=0.035
T1=0.02
 OPT
f=100
TT=0.027
T1=0.01
 OPT
f=100
TT=0.034
T1=0.03
 OPT
f=100
TT=0.007
T1=0.01
 OPT
f=100
TT=0.005
T1=0
 OPT
f=100
TT=0.043
T1=0.03
 OPT
f=100
TT=0.004
T1=0
 OPT
f=100
TT=0.274
T1=0.18
 OPT
f=100
TT=0.006
T1=0
 OPT
f=100
TT=0.325
T1=0.19
 OPT
f=100
TT=3.392
T1=3.39
 OPT
f=100
TT=1.961
T1=1.09
 OPT
f=100
TT=0.374
T1=1.16
 OPT
f=100
TT=0.176
T1=0.16
 OPT
f=100
TT=0.453
T1=0.68
 OPT
f=100
TT=0.208
T1=0.18
 OPT
f=100
TT=0.004
T1=0
 OPT
f=100
TT=0.095
T1=0
 OPT
f=100
TT=0.023
T1=0
 OPT
f=100
TT=0.003
T1=0
 OPT
f=100
TT=0.002
T1=0
 OPT
f=100
TT=0.404
T1=0.67
 OPT
f=100
TT=0.263
T1=0.18
 OPT
f=100
TT=0.263
T1=0.19
 OPT
f=100
TT=0.205
T1=0.18
 OPT
f=100
TT=0.223
T1=0.19
 OPT
f=100
TT=5.833
T1=5.71
 OPT
f=100
TT=0.021
T1=0.01
 OPT
f=100
TT=0.024
T1=0.02
 ?

TT=1799.98

 ?

TT=1799.65
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/primes-dimacs-cnf/
normalized-aim-100-2_0-yes1-4.opb 		OPT
f=100
TT=0.002
T1=0
 OPT
f=100
TT=0.004
T1=0
 OPT
f=100
TT=0.002
T1=0
 OPT
f=100
TT=0.136
T1=0.02
 OPT
f=100
TT=0.148
T1=0.03
 OPT
f=100
TT=0.073
T1=0.01
 OPT
f=100
TT=0.085
T1=0.02
 OPT
f=100
TT=0.029
T1=0.01
 OPT
f=100
TT=0.034
T1=0.02
 OPT
f=100
TT=0.028
T1=0.01
 OPT
f=100
TT=0.037
T1=0.02
 OPT
f=100
TT=0.004
T1=0
 OPT
f=100
TT=0.024
T1=0
 OPT
f=100
TT=0.044
T1=0.03
 OPT
f=100
TT=0.005
T1=0
 OPT
f=100
TT=0.244
T1=0.18
 OPT
f=100
TT=0.004
T1=0
 OPT
f=100
TT=0.264
T1=0.18
 OPT
f=100
TT=11.361
T1=11.35
 OPT
f=100
TT=1.633
T1=0.67
 OPT
f=100
TT=0.383
T1=1.16
 OPT
f=100
TT=0.155
T1=0.14
 OPT
f=100
TT=0.374
T1=0.68
 OPT
f=100
TT=0.204
T1=0.18
 OPT
f=100
TT=0.011
T1=0
 OPT
f=100
TT=0.088
T1=0.01
 OPT
f=100
TT=0.025
T1=0
 OPT
f=100
TT=0.004
T1=0
 OPT
f=100
TT=0.003
T1=0.01
 OPT
f=100
TT=0.363
T1=0.68
 OPT
f=100
TT=0.264
T1=0.18
 OPT
f=100
TT=0.294
T1=0.22
 OPT
f=100
TT=0.195
T1=0.17
 OPT
f=100
TT=0.191
T1=0.16
 OPT
f=100
TT=6.331
T1=6.3
 OPT
f=100
TT=0.014
T1=0.01
 OPT
f=100
TT=0.017
T1=0.01
 ?

TT=1799.97

 ?

TT=1799.99
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/primes-dimacs-cnf/
normalized-aim-100-6_0-yes1-1.opb 		OPT
f=100
TT=0.003
T1=0
 OPT
f=100
TT=0.007
T1=0
 OPT
f=100
TT=0.004
T1=0
 OPT
f=100
TT=0.124
T1=0.02
 OPT
f=100
TT=0.139
T1=0.03
 OPT
f=100
TT=0.076
T1=0.01
 OPT
f=100
TT=0.083
T1=0.02
 OPT
f=100
TT=0.027
T1=0.01
 OPT
f=100
TT=0.036
T1=0.02
 OPT
f=100
TT=0.032
T1=0.02
 OPT
f=100
TT=0.036
T1=0.02
 OPT
f=100
TT=0.008
T1=0
 OPT
f=100
TT=0.026
T1=0.01
 OPT
f=100
TT=0.059
T1=0.04
 OPT
f=100
TT=0.009
T1=0.01
 OPT
f=100
TT=0.304
T1=0.19
 OPT
f=100
TT=0.005
T1=0
 OPT
f=100
TT=0.323
T1=0.23
 OPT
f=100
TT=30.931
T1=23.84
 OPT
f=100
TT=1.269
T1=1.27
 OPT
f=100
TT=0.373
T1=1.19
 OPT
f=100
TT=0.511
T1=0.42
 OPT
f=100
TT=0.363
T1=0.72
 OPT
f=100
TT=0.354
T1=0.25
 OPT
f=100
TT=0.011
T1=0.01
 OPT
f=100
TT=0.099
T1=0.01
 OPT
f=100
TT=0.029
T1=0.01
 OPT
f=100
TT=0.004
T1=0.01
 OPT
f=100
TT=0.003
T1=0.01
 OPT
f=100
TT=0.373
T1=0.7
 OPT
f=100
TT=0.334
T1=0.19
 OPT
f=100
TT=0.303
T1=0.2
 OPT
f=100
TT=0.425
T1=0.31
 OPT
f=100
TT=0.399
T1=0.28
 OPT
f=100
TT=17.374
T1=0.29
 OPT
f=100
TT=0.026
T1=0.02
 OPT
f=100
TT=0.021
T1=0.02
 ?

TT=1799.55

 ?

TT=1799.96
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/primes-dimacs-cnf/
normalized-aim-200-2_0-yes1-3.opb 		OPT
f=200
TT=0.004
T1=0
 OPT
f=200
TT=0.012
T1=0.01
 OPT
f=200
TT=0.004
T1=0
 OPT
f=200
TT=0.25
T1=0.02
 OPT
f=200
TT=0.275
T1=0.03
 OPT
f=200
TT=0.169
T1=0.01
 OPT
f=200
TT=0.202
T1=0.02
 OPT
f=200
TT=0.045
T1=0.02
 OPT
f=200
TT=0.051
T1=0.02
 OPT
f=200
TT=0.044
T1=0.02
 OPT
f=200
TT=0.055
T1=0.03
 OPT
f=200
TT=0.007
T1=0
 OPT
f=200
TT=0.011
T1=0.01
 OPT
f=200
TT=0.061
T1=0.04
 OPT
f=200
TT=0.01
T1=0
 OPT
f=200
TT=0.333
T1=0.22
 OPT
f=200
TT=0.01
T1=0
 OPT
f=200
TT=0.415
T1=0.25
 OPT
f=200
TT=23.863
T1=23.86
 OPT
f=200
TT=1.223
T1=1.22
 OPT
f=200
TT=0.634
T1=1.19
 OPT
f=200
TT=0.621
T1=0.58
 OPT
f=200
TT=0.634
T1=0.72
 OPT
f=200
TT=0.842
T1=0.77
 OPT
f=200
TT=0.005
T1=0
 OPT
f=200
TT=0.244
T1=0.01
 OPT
f=200
TT=0.048
T1=0.01
 OPT
f=200
TT=0.043
T1=0.01
 OPT
f=200
TT=0.023
T1=0.01
 OPT
f=200
TT=0.514
T1=0.7
 OPT
f=200
TT=0.405
T1=0.24
 OPT
f=200
TT=0.413
T1=0.26
 OPT
f=200
TT=0.783
T1=0.7
 OPT
f=200
TT=0.803
T1=0.72
 OPT
f=200
TT=21.897
T1=21.72
 OPT
f=200
TT=0.036
T1=0.03
 OPT
f=200
TT=0.036
T1=0.03
 ?

TT=1799.61

 ?

TT=1799.61
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/primes-dimacs-cnf/
normalized-aim-200-3_4-yes1-2.opb 		OPT
f=200
TT=0.004
T1=0
 OPT
f=200
TT=0.029
T1=0.02
 OPT
f=200
TT=0.004
T1=0
 OPT
f=200
TT=0.254
T1=0.03
 OPT
f=200
TT=0.268
T1=0.03
 OPT
f=200
TT=0.187
T1=0.02
 OPT
f=200
TT=0.195
T1=0.04
 OPT
f=200
TT=0.053
T1=0.03
 OPT
f=200
TT=0.055
T1=0.03
 OPT
f=200
TT=0.051
T1=0.02
 OPT
f=200
TT=0.058
T1=0.03
 OPT
f=200
TT=0.009
T1=0.01
 OPT
f=200
TT=0.058
T1=0.01
 OPT
f=200
TT=0.07
T1=0.05
 OPT
f=200
TT=0.014
T1=0.01
 OPT
f=200
TT=0.585
T1=0.29
 OPT
f=200
TT=0.023
T1=0.02
 OPT
f=200
TT=0.496
T1=0.26
 OPT
f=200
TT=133.26
T1=130.71
 OPT
f=200
TT=1613.89
T1=446.1
 OPT
f=200
TT=0.683
T1=1.21
 OPT
f=200
TT=1.581
T1=1.54
 OPT
f=200
TT=0.663
T1=0.75
 OPT
f=200
TT=1.484
T1=1.28
 OPT
f=200
TT=0.018
T1=0.01
 OPT
f=200
TT=0.25
T1=0.01
 OPT
f=200
TT=0.046
T1=0.01
 OPT
f=200
TT=0.064
T1=0.02
 OPT
f=200
TT=0.064
T1=0.02
 OPT
f=200
TT=0.683
T1=0.72
 OPT
f=200
TT=0.496
T1=0.27
 OPT
f=200
TT=0.424
T1=0.25
 OPT
f=200
TT=1.378
T1=1.25
 OPT
f=200
TT=1.338
T1=1.22
 OPT
f=200
TT=54.582
T1=53.91
 OPT
f=200
TT=0.052
T1=0.04
 OPT
f=200
TT=0.052
T1=0.04
 ?

TT=1799.64

 ?

TT=1799.9
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/primes-dimacs-cnf/
normalized-aim-200-6_0-yes1-1.opb 		OPT
f=200
TT=0.007
T1=0
 OPT
f=200
TT=0.036
T1=0.03
 OPT
f=200
TT=0.007
T1=0
 OPT
f=200
TT=0.251
T1=0.03
 OPT
f=200
TT=0.281
T1=0.04
 OPT
f=200
TT=0.159
T1=0.02
 OPT
f=200
TT=0.205
T1=0.03
 OPT
f=200
TT=0.047
T1=0.02
 OPT
f=200
TT=0.063
T1=0.03
 OPT
f=200
TT=0.049
T1=0.02
 OPT
f=200
TT=0.06
T1=0.03
 OPT
f=200
TT=0.038
T1=0.04
 OPT
f=200
TT=0.029
T1=0.02
 OPT
f=200
TT=0.101
T1=0.07
 OPT
f=200
TT=0.02
T1=0.02
 OPT
f=200
TT=0.685
T1=0.33
 OPT
f=200
TT=0.04
T1=0.03
 OPT
f=200
TT=0.674
T1=0.31
 OPT
f=200
TT=73.374
T1=73.38
 OPT
f=200
TT=833.8
T1=234.7
 OPT
f=200
TT=0.913
T1=1.24
 OPT
f=200
TT=2.28
T1=2.23
 OPT
f=200
TT=0.803
T1=0.77
 OPT
f=200
TT=1.081
T1=0.94
 OPT
f=200
TT=0.011
T1=0.01
 OPT
f=200
TT=0.219
T1=0.02
 OPT
f=200
TT=0.043
T1=0.01
 OPT
f=200
TT=0.066
T1=0.04
 OPT
f=200
TT=0.066
T1=0.03
 OPT
f=200
TT=0.933
T1=0.76
 OPT
f=200
TT=0.512
T1=0.28
 OPT
f=200
TT=0.553
T1=0.32
 OPT
f=200
TT=1.5
T1=1.3
 OPT
f=200
TT=1.59
T1=1.39
 OPT
f=200
TT=44.573
T1=35.54
 OPT
f=200
TT=0.05
T1=0.04
 OPT
f=200
TT=0.051
T1=0.04
 ?

TT=1799.86

 ?

TT=1799.59
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/primes-dimacs-cnf/
normalized-aim-200-6_0-yes1-4.opb 		OPT
f=200
TT=0.004
T1=0
 OPT
f=200
TT=0.067
T1=0.06
 OPT
f=200
TT=0.004
T1=0
 OPT
f=200
TT=0.258
T1=0.03
 OPT
f=200
TT=0.257
T1=0.04
 OPT
f=200
TT=0.19
T1=0.02
 OPT
f=200
TT=0.177
T1=0.03
 OPT
f=200
TT=0.052
T1=0.02
 OPT
f=200
TT=0.054
T1=0.03
 OPT
f=200
TT=0.054
T1=0.03
 OPT
f=200
TT=0.057
T1=0.03
 OPT
f=200
TT=0.014
T1=0.01
 OPT
f=200
TT=0.072
T1=0.02
 OPT
f=200
TT=0.098
T1=0.08
 OPT
f=200
TT=0.012
T1=0.01
 OPT
f=200
TT=0.605
T1=0.3
 OPT
f=200
TT=0.031
T1=0.03
 OPT
f=200
TT=0.605
T1=0.32
 OPT
f=200
TT=106.178
T1=96.42
 OPT
f=200
TT=46.314
T1=15.22
 OPT
f=200
TT=0.993
T1=1.25
 OPT
f=200
TT=2.509
T1=2.32
 OPT
f=200
TT=0.983
T1=0.8
 OPT
f=200
TT=1.597
T1=1.4
 OPT
f=200
TT=0.023
T1=0.02
 OPT
f=200
TT=0.217
T1=0.01
 OPT
f=200
TT=0.051
T1=0.02
 OPT
f=200
TT=0.047
T1=0.02
 OPT
f=200
TT=0.046
T1=0.02
 OPT
f=200
TT=0.933
T1=0.76
 OPT
f=200
TT=0.614
T1=0.31
 OPT
f=200
TT=0.546
T1=0.32
 OPT
f=200
TT=1.444
T1=1.25
 OPT
f=200
TT=1.438
T1=1.24
 OPT
f=200
TT=113.864
T1=113.88
 OPT
f=200
TT=0.077
T1=0.06
 OPT
f=200
TT=0.076
T1=0.06
 ?

TT=1799.59

 ?

TT=1799.56
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/primes-dimacs-cnf/
normalized-aim-50-1_6-yes1-1.opb 		OPT
f=50
TT=0.002
T1=0
 OPT
f=50
TT=0.002
T1=0
 OPT
f=50
TT=0.003
T1=0
 OPT
f=50
TT=0.083
T1=0.02
 OPT
f=50
TT=0.09
T1=0.03
 OPT
f=50
TT=0.036
T1=0.01
 OPT
f=50
TT=0.047
T1=0.02
 OPT
f=50
TT=0.018
T1=0.01
 OPT
f=50
TT=0.023
T1=0.02
 OPT
f=50
TT=0.018
T1=0.01
 OPT
f=50
TT=0.029
T1=0.02
 OPT
f=50
TT=0.005
T1=0
 OPT
f=50
TT=0.005
T1=0
 OPT
f=50
TT=0.028
T1=0.02
 OPT
f=50
TT=0.003
T1=0
 OPT
f=50
TT=0.183
T1=0.13
 OPT
f=50
TT=0.001
T1=0
 OPT
f=50
TT=0.184
T1=0.14
 OPT
f=50
TT=0.563
T1=0.55
 OPT
f=50
TT=0.052
T1=0.05
 OPT
f=50
TT=0.224
T1=1.16
 OPT
f=50
TT=0.049
T1=0.04
 OPT
f=50
TT=0.223
T1=0.68
 OPT
f=50
TT=0.053
T1=0.04
 OPT
f=50
TT=0.006
T1=0
 OPT
f=50
TT=0.044
T1=0
 OPT
f=50
TT=0.016
T1=0
 OPT
f=50
TT=0.002
T1=0
 OPT
f=50
TT=0.002
T1=0
 OPT
f=50
TT=0.184
T1=0.63
 OPT
f=50
TT=0.174
T1=0.15
 OPT
f=50
TT=0.214
T1=0.16
 OPT
f=50
TT=0.064
T1=0.05
 OPT
f=50
TT=0.061
T1=0.05
 OPT
f=50
TT=0.465
T1=0.45
 OPT
f=50
TT=0.007
T1=0.01
 OPT
f=50
TT=0.007
T1=0
 ?

TT=1799.56

 ?

TT=1799.84
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
primes-dimacs-cnf/normalized-hanoi5.opb 		OPT
f=1931
TT=1.109
T1=0.86
 OPT
f=1931
TT=739.449
T1=552.53
 OPT
f=1931
TT=1.109
T1=1.09
 ? (TO)

TT=1800.43

 ? (TO)

TT=1800.11

 ? (problem)

TT=1.31

 ? (TO)

TT=1800.09

 ? (problem)

TT=1.32

 OPT
f=1931
TT=3.628
T1=1.01
 ? (problem)

TT=1.33

 OPT
f=1931
TT=3.716
T1=1.07
 OPT
f=1931
TT=343.863
T1=300.86
 OPT
f=1931
TT=5.841
T1=4.61
 OPT
f=1931
TT=88.299
T1=39.41
 OPT
f=1931
TT=1485.61
T1=19.31
 OPT
f=1931
TT=409.423
T1=313.11
 OPT
f=1931
TT=469.43
T1=450.3
 OPT
f=1931
TT=19.944
T1=14.2
 ?

TT=1795.15

 ? (TO)

TT=1800.17

 OPT
f=1931
TT=12.972
T1=5.46
 ?

TT=1789.76

 OPT
f=1931
TT=12.103
T1=4.5
 ?

TT=1796.76

 OPT
f=1931
TT=3.087
T1=3.08
 ? (TO)

TT=1800.13

 OPT
f=1931
TT=3.788
T1=0.86
 OPT
f=1931
TT=11.582
T1=5.8
 OPT
f=1931
TT=11.076
T1=5.55
 OPT
f=1931
TT=8.904
T1=3.52
 OPT
f=1931
TT=9.293
T1=7.03
 OPT
f=1931
TT=6.403
T1=4.97
 ?

TT=1796.76

 ?

TT=1796.77

 ?

TT=1796.77

 OPT
f=1931
TT=133.327
T1=121
 OPT
f=1931
TT=132.624
T1=120.24
 ?

TT=1799.97

 ?

TT=1799.95
Bench nameBest resultsbsolo
3.2
(complete)		clasp
2.0.6-R5325 (opt)
(complete)		npSolver
1.0
(complete)		npSolver
1.0 (fixed)
(complete)		npSolver
inc
(complete)		npSolver
inc (fixed)
(complete)		npSolver
inc-topDown
(complete)		npSolver
inc-topDown (fixed)
(complete)		npSolver
inc-topdown-quickBound
(complete)		npSolver
inc-topdown-quickBound (fixed)
(complete)		PB07: bsolo
3.0.17
(complete)		PB07: minisat+
1.14
(complete)		PB07: PB-clasp
2007-04-10
(complete)		PB07: Pueblo
1.4
(incomplete)		PB07: SAT4JPseudoResolution
2007-03-23
(complete)		PB09: bsolo
3.1
(complete)		PB09: SAT4J Pseudo Resolution
2.1.1
(complete)		PB09: SCIPspx
SCIP 1.1.0.7 with SoPLEX 1.4.1(24.4.2009)
(complete)		PB10: pb_cplex
2010-06-29
(complete)		PB10: SAT4J PB RES // CP
2.2.0 2010-05-31
(complete)		PB10: SCIPspx
SCIP 1.2.1.3 with SoPlex 1.4.2 (CVS Version 30.5.2010) as LP solver
(complete)		PB11: Sat4j Res//CP
2.3.0
(complete)		PB11: SCIP spx E_2
2011-06-10 (fixed)
(complete)		PB12: minisatp
1.0-2-g022594c
(complete)		pb2sat
2012-05-19
(complete)		pb2satCp2
2012-05-19
(complete)		pwbo
2.0
(complete)		pwbo
2.02
(complete)		SAT 4j PB RES // CP
2.3.2 Snapshot
(complete)		Sat 4j PB Resolution
2.3.2 Snapshot
(complete)		SAT4J PB specific settings
2.3.2 snapshot
(complete)		SCIP spx
SCIP 2.1.1.4. with SoPlex 1.6.0.3 fixed
(complete)		SCIP spx E
SCIP 2.1.1.4. Exp with SoPlex 1.6.0.3 fixed
(complete)		SCIP spx standard
SCIP 2.1.1.4. with SoPlex 1.6.0.3 standard fixed
(complete)		toysat
2012-05-17
(complete)		toysat
2012-06-01
(complete)		wbo
1.7
(complete)		wbo
1.72
(complete)
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
primes-dimacs-cnf/normalized-ii16c1.opb 		SAT
f=1284
TT=1800.17
T1=900.41
 SAT
f=1369
TT=1797.89
T1=72.7
 SAT (TO)
f=1356
TT=1800.12
T1=677.85
 ? (TO)

TT=1800.13

 ? (TO)

TT=1800.09

 ? (TO)

TT=1800.12

 ? (TO)

TT=1800.12

 ? (TO)

TT=1800.09

 ? (TO)

TT=1800.08

 ? (TO)

TT=1800.04

 ? (TO)

TT=1800.08

 SAT (TO)
f=1386
TT=1800.03
T1=40.31
 SAT (TO)
f=1422
TT=1800.02
T1=0.3
 SAT (TO)
f=1457
TT=1801.94
T1=1729.84
 SAT
f=1377
TT=1783.01
T1=848.11
 No Cert.

TT=97.26

 SAT
f=1369
TT=1798
T1=69.71
 SAT (TO)
f=1323
TT=1800.08
T1=30.05
 SAT
f=1235
TT=1796.59
T1=667.2
 ? (TO)

TT=1800.24

 SAT (TO)
f=1377
TT=1800.19
T1=88.65
 SAT
f=1339
TT=1789.86
T1=1082.74
 SAT (TO)
f=1381
TT=1800.21
T1=52.76
 SAT
f=1331
TT=1796.79
T1=637.11
 SAT (TO)
f=1422
TT=1800.1
T1=1800.5
 ? (TO)

TT=1800.07

 ? (TO)

TT=1800.07

 SAT (TO)
f=1298
TT=1800.19
T1=900.41
 SAT (TO)
f=1284
TT=1800.17
T1=900.41
 SAT (TO)
f=1425
TT=1800.19
T1=1
 SAT (TO)
f=1424
TT=1800.05
T1=557.26
 SAT (TO)
f=1423
TT=1800.02
T1=1092.53
 SAT
f=1300
TT=1796.8
T1=751.02
 SAT
f=1300
TT=1796.82
T1=719.95
 SAT
f=1300
TT=1796.8
T1=761.03
 ? (TO)

TT=1800.04

 ? (TO)

TT=1800.04

 ?

TT=1799.57

 ?

TT=1799.88
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
primes-dimacs-cnf/normalized-ii32b1.opb 		OPT
f=191
TT=9.328
T1=0.32
 OPT
f=191
TT=1506.39
T1=12.02
 SAT (TO)
f=191
TT=1800.03
T1=1.75
 OPT
f=191
TT=18.899
T1=12.48
 OPT
f=191
TT=14.379
T1=14.48
 OPT
f=191
TT=18.811
T1=12.47
 OPT
f=191
TT=14.255
T1=14.25
 OPT
f=191
TT=10.774
T1=4.33
 OPT
f=191
TT=9.328
T1=2.54
 OPT
f=191
TT=10.737
T1=4.07
 OPT
f=191
TT=9.383
T1=2.58
 SAT (TO)
f=191
TT=1800.02
T1=286.21
 OPT
f=191
TT=14.803
T1=8.78
 SAT (TO)
f=191
TT=1802.08
T1=2.89
 OPT
f=191
TT=923.99
T1=0.32
 SAT (TO)
f=191
TT=1800.03
T1=76.02
 SAT
f=191
TT=1798.04
T1=82.22
 SAT (TO)
f=191
TT=1800.29
T1=6.57
 OPT
f=191
TT=36.909
T1=26.18
 OPT
f=191
TT=9.804
T1=5.69
 SAT (TO)
f=191
TT=1800.26
T1=15.31
 OPT
f=191
TT=37.845
T1=21.61
 SAT (TO)
f=191
TT=1800.02
T1=5.82
 OPT
f=191
TT=30.733
T1=22.21
 OPT
f=191
TT=11.067
T1=11.06
 OPT
f=191
TT=18.932
T1=12.49
 OPT
f=191
TT=10.57
T1=4.14
 OPT
f=191
TT=113.92
T1=57.02
 OPT
f=191
TT=100.293
T1=50.17
 SAT (TO)
f=192
TT=1800.07
T1=126.15
 SAT (TO)
f=194
TT=1800.05
T1=1599.94
 SAT (TO)
f=191
TT=1800.1
T1=9.12
 OPT
f=191
TT=24.244
T1=14.53
 OPT
f=191
TT=24.101
T1=14.44
 OPT
f=191
TT=29.034
T1=21.23
 ? (TO)

TT=1800.01

 ? (TO)

TT=1800.02

 ?

TT=1799.34

 ?

TT=1799.83
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
primes-dimacs-cnf/normalized-ii32d2.opb 		OPT
f=372
TT=439.002
T1=0.2
 SAT
f=372
TT=1798
T1=218.04
 SAT (TO)
f=372
TT=1800.02
T1=0.2
 OPT
f=372
TT=1229.14
T1=488.46
 OPT
f=372
TT=1771.63
T1=732.43
 OPT
f=372
TT=1238.34
T1=498.19
 ? (TO)

TT=1800.03

 OPT
f=372
TT=439.002
T1=18.66
 OPT
f=372
TT=587.854
T1=18.6
 OPT
f=372
TT=445.049
T1=19.78
 OPT
f=372
TT=572.393
T1=18.94
 SAT (TO)
f=372
TT=1800.11
T1=490.35
 SAT (TO)
f=372
TT=1800.08
T1=54
 SAT (TO)
f=372
TT=1802.06
T1=8.54
 SAT
f=372
TT=1783.02
T1=46.22
 ? (exit code)

TT=860.69

 SAT
f=372
TT=1798
T1=42.55
 SAT (TO)
f=372
TT=1800.07
T1=10.25
 SAT
f=372
TT=1799.68
T1=372.83
 ? (TO)

TT=1800

 SAT (TO)
f=372
TT=1800.04
T1=19.39
 SAT
f=372
TT=1789.78
T1=492.08
 SAT (TO)
f=372
TT=1800.6
T1=5.93
 SAT
f=372
TT=1796.79
T1=272.59
 SAT (TO)
f=372
TT=1800.08
T1=1800.4
 OPT
f=372
TT=1341.64
T1=542.92
 OPT
f=372
TT=461.608
T1=19.39
 SAT (TO)
f=372
TT=1800.45
T1=900.31
 SAT (TO)
f=372
TT=1800.51
T1=900.31
 SAT (TO)
f=372
TT=1800.62
T1=28
 SAT (TO)
f=372
TT=1800.02
T1=8.19
 SAT (TO)
f=372
TT=1800.04
T1=5.01
 SAT
f=372
TT=1796.8
T1=610.25
 SAT
f=372
TT=1796.79
T1=488.46
 SAT
f=372
TT=1796.78
T1=127.92
 ? (TO)

TT=1800.08

 ? (TO)

TT=1800.11

 ?

TT=1799.45

 ?

TT=1799.52
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
primes-dimacs-cnf/normalized-ii32e1.opb 		OPT
f=162
TT=7.736
T1=1.45
 SAT
f=162
TT=1798.02
T1=33.61
 SAT (TO)
f=162
TT=1800.03
T1=11.41
 OPT
f=162
TT=10.805
T1=5.64
 OPT
f=162
TT=11.926
T1=6.87
 OPT
f=162
TT=10.839
T1=5.68
 OPT
f=162
TT=11.513
T1=6.56
 OPT
f=162
TT=8.089
T1=2.67
 OPT
f=162
TT=7.955
T1=2.91
 OPT
f=162
TT=8.152
T1=2.71
 OPT
f=162
TT=8.349
T1=3.08
 OPT
f=162
TT=187.048
T1=14.63
 OPT
f=162
TT=10.458
T1=3.7
 SAT (TO)
f=175
TT=1802.13
T1=86.39
 SAT
f=162
TT=1783
T1=6.11
 No Cert.

TT=1207.61

 SAT
f=162
TT=1798
T1=24.09
 SAT (TO)
f=163
TT=1800.06
T1=84.71
 OPT
f=162
TT=40.709
T1=8.31
 OPT
f=162
TT=17.659
T1=9.13
 SAT (TO)
f=162
TT=1800.08
T1=14.27
 OPT
f=162
TT=33.626
T1=1.45
 SAT (TO)
f=162
TT=1800.06
T1=7.32
 OPT
f=162
TT=30.569
T1=11.05
 OPT
f=162
TT=7.736
T1=7.73
 OPT
f=162
TT=11.058
T1=5.98
 OPT
f=162
TT=7.856
T1=2.66
 OPT
f=162
TT=85.553
T1=42.78
 OPT
f=162
TT=101.052
T1=50.52
 SAT (TO)
f=167
TT=1800.04
T1=649.39
 SAT (TO)
f=169
TT=1800.08
T1=985.1
 SAT (TO)
f=162
TT=1800.03
T1=224.1
 OPT
f=162
TT=26.047
T1=5.56
 OPT
f=162
TT=27.414
T1=5.85
 OPT
f=162
TT=31.996
T1=4.06
 ? (TO)

TT=1800.11

 ? (TO)

TT=1800.1

 ?

TT=1799.44

 ?

TT=1799.33
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
primes-dimacs-cnf/normalized-ii8a2.opb 		OPT
f=139
TT=5.854
T1=0.78
 SAT
f=141
TT=1798
T1=673.79
 SAT (TO)
f=142
TT=1800.03
T1=473.09
 ? (TO)

TT=1800.1

 ? (TO)

TT=1800.13

 ? (TO)

TT=1800.11

 ? (TO)

TT=1800.11

 ? (TO)

TT=1800.11

 ? (TO)

TT=1800.12

 ? (TO)

TT=1800.09

 ? (TO)

TT=1800.06

 SAT (TO)
f=146
TT=1800.02
T1=0.58
 SAT (TO)
f=139
TT=1800.02
T1=57.46
 SAT (TO)
f=149
TT=1802.07
T1=150.98
 SAT
f=139
TT=1783.01
T1=0.78
 SAT (TO)
f=141
TT=1800.02
T1=0.43
 SAT
f=139
TT=1798
T1=1678.25
 SAT (TO)
f=146
TT=1800.83
T1=1.99
 OPT
f=139
TT=39.177
T1=13.4
 OPT
f=139
TT=5.854
T1=2.98
 SAT (TO)
f=141
TT=1800.4
T1=4.23
 OPT
f=139
TT=46.189
T1=11.26
 SAT (TO)
f=144
TT=1800.06
T1=43.01
 OPT
f=139
TT=32.61
T1=10.72
 SAT (TO)
f=139
TT=1800.11
T1=1800.4
 ? (TO)

TT=1800.09

 ? (TO)

TT=1800.13

 SAT (TO)
f=139
TT=1800.45
T1=900.31
 SAT (TO)
f=139
TT=1800.32
T1=900.31
 SAT (TO)
f=142
TT=1800.09
T1=566.37
 SAT (TO)
f=143
TT=1800.06
T1=44.82
 SAT (TO)
f=147
TT=1800.06
T1=142.12
 OPT
f=139
TT=72.147
T1=10.79
 OPT
f=139
TT=71.591
T1=10.78
 OPT
f=139
TT=31.346
T1=10.37
 ? (TO)

TT=1800.09

 ? (TO)

TT=1800.11

 ?

TT=1799.48

 ?

TT=1799.8
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
primes-dimacs-cnf/normalized-ii8a4.opb 		OPT
f=283
TT=1.595
T1=1.36
 SAT
f=289
TT=1798
T1=1652.82
 SAT (TO)
f=294
TT=1800.12
T1=1696.72
 ? (TO)

TT=1800.12

 ? (TO)

TT=1800.12

 ? (TO)

TT=1800.1

 ? (TO)

TT=1800.13

 ? (TO)

TT=1800.06

 ? (TO)

TT=1800.14

 ? (TO)

TT=1800.09

 ? (TO)

TT=1800.12

 SAT (TO)
f=328
TT=1800.11
T1=0.09
 SAT (TO)
f=283
TT=1800.11
T1=1.36
 SAT (TO)
f=364
TT=1800.15
T1=1458.45
 SAT
f=288
TT=1783.01
T1=1.14
 ? (exit code)

TT=698.738

 SAT
f=307
TT=1798
T1=470.37
 SAT (TO)
f=318
TT=1800.73
T1=0.8
 OPT
f=283
TT=428.553
T1=58.81
 OPT
f=283
TT=1.595
T1=1.59
 SAT (TO)
f=310
TT=1800.52
T1=8.31
 OPT
f=283
TT=470.056
T1=47.14
 SAT (TO)
f=321
TT=1800.18
T1=95.31
 OPT
f=283
TT=316.376
T1=111.89
 SAT (TO)
f=283
TT=1800.1
T1=1800.4
 ? (TO)

TT=1800.06

 ? (TO)

TT=1800.14

 SAT (TO)
f=283
TT=1800.18
T1=900.41
 SAT (TO)
f=283
TT=1800.46
T1=900.31
 SAT (TO)
f=312
TT=1800.65
T1=139.48
 SAT (TO)
f=312
TT=1800.06
T1=674.73
 SAT (TO)
f=333
TT=1800.63
T1=40.35
 OPT
f=283
TT=13.534
T1=13.52
 OPT
f=283
TT=13.029
T1=13.01
 OPT
f=283
TT=10.431
T1=10.28
 ? (TO)

TT=1800.09

 ? (TO)

TT=1800.1

 ?

TT=1799.5

 ?

TT=1799.39
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
primes-dimacs-cnf/normalized-ii8e1.opb 		OPT
f=343
TT=18.676
T1=8.48
 SAT
f=383
TT=1798
T1=0.12
 SAT (TO)
f=379
TT=1800.02
T1=716.13
 ? (TO)

TT=1800.12

 ? (TO)

TT=1800.12

 ? (TO)

TT=1800.11

 ? (TO)

TT=1800.12

 ? (TO)

TT=1800.06

 ? (TO)

TT=1800.11

 ? (TO)

TT=1800.07

 ? (TO)

TT=1800.08

 SAT (TO)
f=409
TT=1800.1
T1=0.1
 SAT (TO)
f=357
TT=1800.09
T1=36.38
 SAT (TO)
f=464
TT=1802.08
T1=1431.43
 SAT
f=343
TT=1783.01
T1=33.13
 ? (exit code)

TT=693.298

 SAT
f=381
TT=1798
T1=19.45
 SAT (TO)
f=424
TT=1801.16
T1=99.2
 SAT
f=343
TT=1798.24
T1=1158.26
 OPT
f=343
TT=18.676
T1=12.22
 SAT (TO)
f=394
TT=1800.16
T1=13.37
 SAT
f=343
TT=1789.79
T1=134.7
 SAT (TO)
f=405
TT=1800.08
T1=113.25
 SAT
f=343
TT=1796.78
T1=108.48
 SAT (TO)
f=343
TT=1800.03
T1=1800.4
 ? (TO)

TT=1800.05

 ? (TO)

TT=1800.08

 SAT (TO)
f=343
TT=1800.03
T1=900.41
 SAT (TO)
f=343
TT=1800.08
T1=900.41
 SAT (TO)
f=418
TT=1800.54
T1=282.82
 SAT (TO)
f=419
TT=1800.49
T1=221.36
 SAT (TO)
f=414
TT=1800.03
T1=0.63
 SAT
f=343
TT=1796.77
T1=74.64
 SAT
f=343
TT=1796.81
T1=74.24
 SAT
f=343
TT=1796.75
T1=8.48
 ? (TO)

TT=1800.09

 ? (TO)

TT=1800.08

 ?

TT=1799.8

 ?

TT=1799.41
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
primes-dimacs-cnf/normalized-jnh12.opb 		OPT
f=94
TT=0.003
T1=0
 OPT
f=94
TT=0.005
T1=0
 OPT
f=94
TT=0.003
T1=0
 OPT
f=94
TT=0.218
T1=0.22
 OPT
f=94
TT=0.191
T1=0.19
 OPT
f=94
TT=0.125
T1=0.12
 OPT
f=94
TT=0.103
T1=0.1
 OPT
f=94
TT=0.089
T1=0.07
 OPT
f=94
TT=0.069
T1=0.06
 OPT
f=94
TT=0.085
T1=0.07
 OPT
f=94
TT=0.074
T1=0.06
 OPT
f=94
TT=0.009
T1=0.01
 OPT
f=94
TT=0.049
T1=0.03
 OPT
f=94
TT=0.161
T1=0.14
 OPT
f=94
TT=0.014
T1=0.01
 OPT
f=94
TT=0.414
T1=0.26
 OPT
f=94
TT=0.006
T1=0
 OPT
f=94
TT=0.435
T1=0.26
 OPT
f=94
TT=0.056
T1=0.05
 OPT
f=94
TT=0.105
T1=0.1
 OPT
f=94
TT=0.514
T1=1.24
 OPT
f=94
TT=0.052
T1=0.04
 OPT
f=94
TT=0.524
T1=0.76
 OPT
f=94
TT=0.049
T1=0.04
 OPT
f=94
TT=0.012
T1=0.01
 OPT
f=94
TT=0.12
T1=0.12
 OPT
f=94
TT=0.078
T1=0.06
 OPT
f=94
TT=0.004
T1=0.01
 OPT
f=94
TT=0.005
T1=0.01
 OPT
f=94
TT=0.524
T1=1.75
 OPT
f=94
TT=0.413
T1=0.27
 OPT
f=94
TT=0.435
T1=0.26
 OPT
f=94
TT=0.059
T1=0.05
 OPT
f=94
TT=0.072
T1=0.06
 OPT
f=94
TT=0.071
T1=0.06
 OPT
f=94
TT=0.038
T1=0.03
 OPT
f=94
TT=0.042
T1=0.03
 ?

TT=1799.63

 ?

TT=1800
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
primes-dimacs-cnf/normalized-jnh17.opb 		OPT
f=95
TT=0.005
T1=0
 OPT
f=95
TT=0.406
T1=0.13
 OPT
f=95
TT=0.005
T1=0
 OPT
f=95
TT=0.258
T1=0.25
 OPT
f=95
TT=0.205
T1=0.18
 OPT
f=95
TT=0.147
T1=0.15
 OPT
f=95
TT=0.129
T1=0.11
 OPT
f=95
TT=0.139
T1=0.12
 OPT
f=95
TT=0.094
T1=0.08
 OPT
f=95
TT=0.135
T1=0.11
 OPT
f=95
TT=0.095
T1=0.08
 OPT
f=95
TT=2.049
T1=0.55
 OPT
f=95
TT=0.076
T1=0.05
 OPT
f=95
TT=0.113
T1=0.1
 OPT
f=95
TT=0.017
T1=0.01
 OPT
f=95
TT=0.595
T1=0.3
 OPT
f=95
TT=0.409
T1=0.13
 OPT
f=95
TT=0.626
T1=0.32
 OPT
f=95
TT=5.207
T1=0.96
 OPT
f=95
TT=0.727
T1=0.64
 OPT
f=95
TT=0.944
T1=4.24
 OPT
f=95
TT=0.247
T1=0.23
 OPT
f=95
TT=0.744
T1=2.26
 OPT
f=95
TT=2.387
T1=0.21
 OPT
f=95
TT=0.023
T1=0.02
 OPT
f=95
TT=0.158
T1=0.16
 OPT
f=95
TT=0.151
T1=0.13
 OPT
f=95
TT=0.045
T1=0.02
 OPT
f=95
TT=0.045
T1=0.02
 OPT
f=95
TT=0.674
T1=2.75
 OPT
f=95
TT=0.565
T1=0.29
 OPT
f=95
TT=0.603
T1=0.27
 OPT
f=95
TT=0.258
T1=0.24
 OPT
f=95
TT=0.226
T1=0.2
 OPT
f=95
TT=4.362
T1=2.62
 OPT
f=95
TT=0.054
T1=0.03
 OPT
f=95
TT=0.055
T1=0.03
 ?

TT=1799.58

 ?

TT=1799.57
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
primes-dimacs-cnf/normalized-jnh1.opb 		OPT
f=92
TT=0.018
T1=0
 OPT
f=92
TT=5.867
T1=1.35
 OPT
f=92
TT=0.018
T1=0
 OPT
f=92
TT=0.383
T1=0.38
 OPT
f=92
TT=0.323
T1=0.27
 OPT
f=92
TT=0.287
T1=0.29
 OPT
f=92
TT=0.243
T1=0.19
 OPT
f=92
TT=0.295
T1=0.24
 OPT
f=92
TT=0.224
T1=0.17
 OPT
f=92
TT=0.307
T1=0.24
 OPT
f=92
TT=0.234
T1=0.18
 OPT
f=92
TT=43.499
T1=3.72
 OPT
f=92
TT=0.153
T1=0.09
 OPT
f=92
TT=0.252
T1=0.22
 OPT
f=92
TT=0.183
T1=0.01
 OPT
f=92
TT=0.685
T1=0.34
 OPT
f=92
TT=5.564
T1=1.28
 OPT
f=92
TT=0.735
T1=0.36
 OPT
f=92
TT=18.711
T1=18.16
 OPT
f=92
TT=3.111
T1=1.71
 OPT
f=92
TT=1.154
T1=5.24
 OPT
f=92
TT=0.656
T1=0.63
 OPT
f=92
TT=1.023
T1=2.78
 OPT
f=92
TT=12.282
T1=0.62
 OPT
f=92
TT=0.07
T1=0.07
 OPT
f=92
TT=0.296
T1=0.29
 OPT
f=92
TT=0.262
T1=0.19
 OPT
f=92
TT=0.186
T1=0.09
 OPT
f=92
TT=0.205
T1=0.09
 OPT
f=92
TT=1.275
T1=3.75
 OPT
f=92
TT=0.883
T1=0.38
 OPT
f=92
TT=0.856
T1=0.4
 OPT
f=92
TT=0.816
T1=0.79
 OPT
f=92
TT=0.703
T1=0.67
 OPT
f=92
TT=11.924
T1=7.6
 OPT
f=92
TT=0.217
T1=0.1
 OPT
f=92
TT=0.216
T1=0.1
 ?

TT=1799.88

 ?

TT=1799.72
Bench nameBest resultsbsolo
3.2
(complete)		clasp
2.0.6-R5325 (opt)
(complete)		npSolver
1.0
(complete)		npSolver
1.0 (fixed)
(complete)		npSolver
inc
(complete)		npSolver
inc (fixed)
(complete)		npSolver
inc-topDown
(complete)		npSolver
inc-topDown (fixed)
(complete)		npSolver
inc-topdown-quickBound
(complete)		npSolver
inc-topdown-quickBound (fixed)
(complete)		PB07: bsolo
3.0.17
(complete)		PB07: minisat+
1.14
(complete)		PB07: PB-clasp
2007-04-10
(complete)		PB07: Pueblo
1.4
(incomplete)		PB07: SAT4JPseudoResolution
2007-03-23
(complete)		PB09: bsolo
3.1
(complete)		PB09: SAT4J Pseudo Resolution
2.1.1
(complete)		PB09: SCIPspx
SCIP 1.1.0.7 with SoPLEX 1.4.1(24.4.2009)
(complete)		PB10: pb_cplex
2010-06-29
(complete)		PB10: SAT4J PB RES // CP
2.2.0 2010-05-31
(complete)		PB10: SCIPspx
SCIP 1.2.1.3 with SoPlex 1.4.2 (CVS Version 30.5.2010) as LP solver
(complete)		PB11: Sat4j Res//CP
2.3.0
(complete)		PB11: SCIP spx E_2
2011-06-10 (fixed)
(complete)		PB12: minisatp
1.0-2-g022594c
(complete)		pb2sat
2012-05-19
(complete)		pb2satCp2
2012-05-19
(complete)		pwbo
2.0
(complete)		pwbo
2.02
(complete)		SAT 4j PB RES // CP
2.3.2 Snapshot
(complete)		Sat 4j PB Resolution
2.3.2 Snapshot
(complete)		SAT4J PB specific settings
2.3.2 snapshot
(complete)		SCIP spx
SCIP 2.1.1.4. with SoPlex 1.6.0.3 fixed
(complete)		SCIP spx E
SCIP 2.1.1.4. Exp with SoPlex 1.6.0.3 fixed
(complete)		SCIP spx standard
SCIP 2.1.1.4. with SoPlex 1.6.0.3 standard fixed
(complete)		toysat
2012-05-17
(complete)		toysat
2012-06-01
(complete)		wbo
1.7
(complete)		wbo
1.72
(complete)
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
primes-dimacs-cnf/normalized-jnh217.opb 		OPT
f=89
TT=0.08
T1=0.07
 OPT
f=89
TT=48.34
T1=25.06
 OPT
f=89
TT=0.08
T1=0.07
 OPT
f=89
TT=1.009
T1=1.01
 OPT
f=89
TT=0.845
T1=0.83
 OPT
f=89
TT=0.888
T1=0.89
 OPT
f=89
TT=0.739
T1=0.74
 OPT
f=89
TT=0.842
T1=0.57
 OPT
f=89
TT=0.584
T1=0.33
 OPT
f=89
TT=0.839
T1=0.56
 OPT
f=89
TT=0.584
T1=0.34
 OPT
f=89
TT=414.576
T1=341.85
 OPT
f=89
TT=0.73
T1=0.37
 OPT
f=89
TT=0.617
T1=0.41
 OPT
f=89
TT=1.369
T1=0.51
 OPT
f=89
TT=1.014
T1=0.49
 OPT
f=89
TT=60.613
T1=54.26
 OPT
f=89
TT=1.136
T1=0.55
 OPT
f=89
TT=34.913
T1=30.55
 OPT
f=89
TT=88.999
T1=31.56
 OPT
f=89
TT=2.017
T1=5.24
 OPT
f=89
TT=40.295
T1=19.71
 OPT
f=89
TT=2.004
T1=3.77
 OPT
f=89
TT=24.014
T1=15.53
 OPT
f=89
TT=0.428
T1=0.42
 OPT
f=89
TT=0.903
T1=0.9
 OPT
f=89
TT=0.935
T1=0.77
 OPT
f=89
TT=0.926
T1=0.46
 OPT
f=89
TT=0.985
T1=0.49
 OPT
f=89
TT=2.474
T1=4.74
 OPT
f=89
TT=1.064
T1=0.5
 OPT
f=89
TT=1.055
T1=0.5
 OPT
f=89
TT=21.691
T1=18.21
 OPT
f=89
TT=21.807
T1=18.34
 OPT
f=89
TT=21.995
T1=20.03
 OPT
f=89
TT=1.933
T1=0.78
 OPT
f=89
TT=2.04
T1=0.83
 ?

TT=1799.58

 ?

TT=1799.53
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
primes-dimacs-cnf/normalized-jnh301.opb 		OPT
f=95
TT=0.007
T1=0
 OPT
f=95
TT=0.914
T1=0.07
 OPT
f=95
TT=0.007
T1=0
 OPT
f=95
TT=0.294
T1=0.28
 OPT
f=95
TT=0.242
T1=0.23
 OPT
f=95
TT=0.182
T1=0.18
 OPT
f=95
TT=0.141
T1=0.14
 OPT
f=95
TT=0.184
T1=0.16
 OPT
f=95
TT=0.126
T1=0.1
 OPT
f=95
TT=0.182
T1=0.16
 OPT
f=95
TT=0.123
T1=0.1
 OPT
f=95
TT=10.768
T1=0.08
 OPT
f=95
TT=0.054
T1=0.04
 OPT
f=95
TT=0.164
T1=0.15
 OPT
f=95
TT=0.02
T1=0.02
 OPT
f=95
TT=0.577
T1=0.31
 OPT
f=95
TT=0.919
T1=0.07
 OPT
f=95
TT=0.603
T1=0.3
 OPT
f=95
TT=18.035
T1=6.68
 OPT
f=95
TT=2.05
T1=1.45
 OPT
f=95
TT=0.945
T1=1.23
 OPT
f=95
TT=0.464
T1=0.42
 OPT
f=95
TT=0.905
T1=0.77
 OPT
f=95
TT=0.609
T1=0.58
 OPT
f=95
TT=0.019
T1=0.01
 OPT
f=95
TT=0.185
T1=0.18
 OPT
f=95
TT=0.17
T1=0.14
 OPT
f=95
TT=0.045
T1=0.01
 OPT
f=95
TT=0.045
T1=0.01
 OPT
f=95
TT=0.865
T1=2.26
 OPT
f=95
TT=0.625
T1=0.28
 OPT
f=95
TT=0.644
T1=0.33
 OPT
f=95
TT=0.583
T1=0.56
 OPT
f=95
TT=0.586
T1=0.56
 OPT
f=95
TT=12.024
T1=11.76
 OPT
f=95
TT=0.07
T1=0.04
 OPT
f=95
TT=0.069
T1=0.05
 ?

TT=1799.63

 ?

TT=1799.6
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/primes-dimacs-cnf/
normalized-par16-1-c.opb 		OPT
f=317
TT=0.197
T1=0.12
 OPT
f=317
TT=3.58
T1=0.27
 OPT
f=317
TT=0.197
T1=0.12
 OPT
f=317
TT=7.298
T1=0.18
 OPT
f=317
TT=7.324
T1=0.19
 OPT
f=317
TT=7.293
T1=0.18
 OPT
f=317
TT=7.351
T1=0.18
 OPT
f=317
TT=1.253
T1=0.18
 OPT
f=317
TT=1.245
T1=0.18
 OPT
f=317
TT=1.325
T1=0.18
 OPT
f=317
TT=1.248
T1=0.18
 OPT
f=317
TT=2.59
T1=0.23
 OPT
f=317
TT=0.612
T1=0.16
 OPT
f=317
TT=0.911
T1=0.41
 OPT
f=317
TT=1.126
T1=0.52
 OPT
f=317
TT=1.142
T1=0.56
 OPT
f=317
TT=3.246
T1=0.23
 OPT
f=317
TT=1.512
T1=0.49
 OPT
f=317
TT=505.537
T1=485.52
 OPT
f=317
TT=98.906
T1=31.98
 OPT
f=317
TT=3.235
T1=1.26
 OPT
f=317
TT=222.349
T1=124.16
 OPT
f=317
TT=2.752
T1=1.29
 OPT
f=317
TT=211.308
T1=203.82
 OPT
f=317
TT=0.407
T1=0.4
 OPT
f=317
TT=6.66
T1=0.14
 OPT
f=317
TT=0.95
T1=0.15
 OPT
f=317
TT=1.706
T1=0.85
 OPT
f=317
TT=1.687
T1=0.84
 OPT
f=317
TT=2.704
T1=0.75
 OPT
f=317
TT=1.404
T1=0.81
 OPT
f=317
TT=1.304
T1=0.63
 OPT
f=317
TT=78.021
T1=54.24
 OPT
f=317
TT=77.658
T1=53.84
 OPT
f=317
TT=95.234
T1=70.14
 OPT
f=317
TT=1.925
T1=1.8
 OPT
f=317
TT=1.924
T1=1.79
 ?

TT=1799.49

 ?

TT=1799.81
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
primes-dimacs-cnf/normalized-par16-3.opb 		OPT
f=1015
TT=0.41
T1=0.19
 OPT
f=1015
TT=4.656
T1=2.42
 OPT
f=1015
TT=0.443
T1=0.3
 OPT
f=1015
TT=24.2
T1=0.2
 OPT
f=1015
TT=24.053
T1=0.21
 OPT
f=1015
TT=23.672
T1=0.19
 OPT
f=1015
TT=25.829
T1=0.21
 OPT
f=1015
TT=3.575
T1=0.19
 OPT
f=1015
TT=3.397
T1=0.22
 OPT
f=1015
TT=3.6
T1=0.19
 OPT
f=1015
TT=3.548
T1=0.21
 OPT
f=1015
TT=4.449
T1=1.49
 OPT
f=1015
TT=0.805
T1=0.41
 OPT
f=1015
TT=1.385
T1=0.59
 OPT
f=1015
TT=10.385
T1=1.98
 OPT
f=1015
TT=1.574
T1=0.92
 OPT
f=1015
TT=4.067
T1=0.77
 OPT
f=1015
TT=2.094
T1=0.89
 OPT
f=1015
TT=1475.57
T1=1475.79
 OPT
f=1015
TT=117.922
T1=35.99
 OPT
f=1015
TT=3.573
T1=1.35
 OPT
f=1015
TT=591.857
T1=586.1
 OPT
f=1015
TT=3.806
T1=0.86
 OPT
f=1015
TT=167.197
T1=147.24
 OPT
f=1015
TT=0.41
T1=0.4
 OPT
f=1015
TT=25.737
T1=0.19
 OPT
f=1015
TT=3.586
T1=0.19
 Signal

TT=1.737

 OPT
f=1015
TT=1.698
T1=0.85
 OPT
f=1015
TT=3.804
T1=0.84
 OPT
f=1015
TT=2.043
T1=0.64
 OPT
f=1015
TT=1.945
T1=0.96
 OPT
f=1015
TT=202.714
T1=167.42
 OPT
f=1015
TT=217.48
T1=214.87
 OPT
f=1015
TT=266.653
T1=173.71
 OPT
f=1015
TT=7.289
T1=2.3
 OPT
f=1015
TT=7.078
T1=2.15
 OPT
f=1015
TT=3.451
T1=3.44
 OPT
f=1015
TT=3.441
T1=3.44
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
primes-dimacs-cnf/normalized-par16-5.opb 		OPT
f=1015
TT=0.337
T1=0.09
 OPT
f=1015
TT=1.718
T1=0.94
 OPT
f=1015
TT=0.337
T1=0.09
 OPT
f=1015
TT=27.914
T1=0.15
 OPT
f=1015
TT=27.378
T1=0.15
 OPT
f=1015
TT=27.32
T1=0.13
 OPT
f=1015
TT=26.86
T1=0.15
 OPT
f=1015
TT=3.953
T1=0.14
 OPT
f=1015
TT=4.03
T1=0.15
 OPT
f=1015
TT=4.041
T1=0.14
 OPT
f=1015
TT=3.94
T1=0.15
 OPT
f=1015
TT=3.82
T1=0.94
 OPT
f=1015
TT=0.742
T1=0.36
 OPT
f=1015
TT=1.091
T1=0.31
 OPT
f=1015
TT=2.676
T1=1.5
 OPT
f=1015
TT=1.743
T1=0.58
 OPT
f=1015
TT=2.025
T1=1.25
 OPT
f=1015
TT=2.284
T1=0.86
 OPT
f=1015
TT=432.501
T1=399.53
 OPT
f=1015
TT=122.617
T1=37.28
 OPT
f=1015
TT=4.023
T1=1.32
 OPT
f=1015
TT=880.11
T1=858.29
 OPT
f=1015
TT=4.472
T1=1.36
 OPT
f=1015
TT=240.173
T1=156.35
 OPT
f=1015
TT=0.373
T1=0.37
 OPT
f=1015
TT=26.46
T1=0.18
 OPT
f=1015
TT=3.886
T1=0.18
 OPT
f=1015
TT=1.876
T1=0.95
 OPT
f=1015
TT=2.293
T1=1.15
 OPT
f=1015
TT=3.953
T1=1.83
 OPT
f=1015
TT=2.105
T1=0.78
 OPT
f=1015
TT=2.075
T1=1.05
 OPT
f=1015
TT=82.67
T1=10.31
 OPT
f=1015
TT=83.22
T1=9.96
 OPT
f=1015
TT=114.83
T1=62.57
 OPT
f=1015
TT=3.866
T1=3.56
 OPT
f=1015
TT=3.793
T1=3.49
 OPT
f=1015
TT=0.962
T1=0.95
 OPT
f=1015
TT=0.952
T1=0.95
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
primes-dimacs-cnf/normalized-par32-1.opb



?

TT=1798

 ? (TO)

TT=1800.02

 ? (TO)

TT=1800.12

 ? (TO)

TT=1800.12

 ? (TO)

TT=1800.08

 ? (TO)

TT=1800.08

 ? (TO)

TT=1800.02

 ? (TO)

TT=1800.09

 ? (TO)

TT=1800.06

 ? (TO)

TT=1800.08

 ? (TO)

TT=1800.02

 ? (TO)

TT=1800.03

 ? (TO)

TT=1802.08

 ? (TO)

TT=1800.02

 ? (TO)

TT=1800.01

 ?

TT=1798

 ? (TO)

TT=1800.64

 ?

TT=1798.49

 ? (TO)

TT=1800.17

 ? (TO)

TT=1800.15

 ?

TT=1789.77

 ? (TO)

TT=1800.84

 ?

TT=1796.79

 ? (TO)

TT=1800.03

 ? (TO)

TT=1800.07

 ? (TO)

TT=1800.1

 ? (TO)

TT=1800.2

 ? (TO)

TT=1800.16

 ? (TO)

TT=1800.17

 ? (TO)

TT=1800

 ? (TO)

TT=1800.59

 ?

TT=1796.79

 ?

TT=1796.78

 ?

TT=1796.72

 ? (TO)

TT=1800.01

 ? (TO)

TT=1800.02

 ?

TT=1799.37

 ?

TT=1799.54
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
primes-dimacs-cnf/normalized-par32-3.opb



?

TT=1798

 ? (TO)

TT=1800.03

 ? (TO)

TT=1800.13

 ? (TO)

TT=1800.06

 ? (TO)

TT=1800.07

 ? (TO)

TT=1800.08

 ? (TO)

TT=1800.09

 ? (TO)

TT=1800.09

 ? (TO)

TT=1800.08

 ? (TO)

TT=1800.06

 ? (TO)

TT=1800.02

 ? (TO)

TT=1800.02

 ? (TO)

TT=1802.1

 ? (TO)

TT=1800.02

 ? (TO)

TT=1800.51

 ?

TT=1798

 ? (TO)

TT=1800.6

 ?

TT=1799.57

 ? (TO)

TT=1800.35

 ? (TO)

TT=1800.16

 ?

TT=1789.96

 ? (TO)

TT=1800.15

 ?

TT=1796.77

 ? (TO)

TT=1800.03

 ? (TO)

TT=1800.03

 ? (TO)

TT=1800.12

 ? (TO)

TT=1800.18

 ? (TO)

TT=1800.17

 ? (TO)

TT=1801.02

 ? (TO)

TT=1800.09

 ? (TO)

TT=1800.08

 ?

TT=1796.76

 ?

TT=1796.74

 ?

TT=1796.74

 ? (TO)

TT=1800.01

 ? (TO)

TT=1800.1

 ?

TT=1799.57

 ?

TT=1799.58
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
primes-dimacs-cnf/normalized-par32-5.opb



?

TT=1798

 ? (TO)

TT=1800.03

 ? (TO)

TT=1800.12

 ? (TO)

TT=1800.13

 ? (TO)

TT=1800.08

 ? (TO)

TT=1800.08

 ? (TO)

TT=1800.08

 ? (TO)

TT=1800.09

 ? (TO)

TT=1800.09

 ? (TO)

TT=1800.09

 ? (TO)

TT=1800.02

 ? (TO)

TT=1800.03

 ? (TO)

TT=1802.11

 ? (TO)

TT=1800.02

 ? (TO)

TT=1800.04

 ?

TT=1798

 ? (TO)

TT=1800.08

 ?

TT=1797.48

 ? (TO)

TT=1800.02

 ? (TO)

TT=1800.16

 ?

TT=1789.84

 ? (TO)

TT=1800.03

 ?

TT=1796.77

 ? (TO)

TT=1800.1

 ? (TO)

TT=1800.08

 ? (TO)

TT=1800.12

 ? (TO)

TT=1800.16

 ? (TO)

TT=1800.18

 ? (TO)

TT=1800.48

 ? (TO)

TT=1800.82

 ? (TO)

TT=1800.06

 ?

TT=1796.73

 ?

TT=1796.76

 ?

TT=1796.76

 ? (TO)

TT=1800.09

 ? (TO)

TT=1800.11

 ?

TT=1799.6

 ?

TT=1799.95
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/primes-dimacs-cnf/
normalized-par8-1-c.opb 		OPT
f=64
TT=0.002
T1=0
 OPT
f=64
TT=0.004
T1=0
 OPT
f=64
TT=0.003
T1=0
 OPT
f=64
TT=0.096
T1=0.02
 OPT
f=64
TT=0.11
T1=0.03
 OPT
f=64
TT=0.048
T1=0.01
 OPT
f=64
TT=0.054
T1=0.02
 OPT
f=64
TT=0.021
T1=0.01
 OPT
f=64
TT=0.029
T1=0.02
 OPT
f=64
TT=0.021
T1=0.01
 OPT
f=64
TT=0.027
T1=0.02
 OPT
f=64
TT=0.006
T1=0
 OPT
f=64
TT=0.012
T1=0
 OPT
f=64
TT=0.044
T1=0.03
 OPT
f=64
TT=0.003
T1=0
 OPT
f=64
TT=0.223
T1=0.16
 OPT
f=64
TT=0.004
T1=0
 OPT
f=64
TT=0.257
T1=0.16
 OPT
f=64
TT=0.556
T1=0.54
 OPT
f=64
TT=0.125
T1=0.13
 OPT
f=64
TT=0.323
T1=1.17
 OPT
f=64
TT=0.059
T1=0.05
 OPT
f=64
TT=0.343
T1=0.69
 OPT
f=64
TT=0.057
T1=0.04
 OPT
f=64
TT=0.007
T1=0
 OPT
f=64
TT=0.052
T1=0
 OPT
f=64
TT=0.02
T1=0
 OPT
f=64
TT=0.004
T1=0
 OPT
f=64
TT=0.002
T1=0
 OPT
f=64
TT=0.325
T1=0.66
 OPT
f=64
TT=0.264
T1=0.21
 OPT
f=64
TT=0.251
T1=0.46
 OPT
f=64
TT=0.069
T1=0.06
 OPT
f=64
TT=0.087
T1=0.07
 OPT
f=64
TT=0.309
T1=0.3
 OPT
f=64
TT=0.014
T1=0.01
 OPT
f=64
TT=0.014
T1=0.01
 OPT
f=64
TT=0.042
T1=0.03
 OPT
f=64
TT=0.042
T1=0.03
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
primes-dimacs-cnf/normalized-par8-2.opb 		OPT
f=350
TT=0.004
T1=0
 OPT
f=350
TT=0.01
T1=0
 OPT
f=350
TT=0.004
T1=0
 OPT
f=350
TT=0.493
T1=0.03
 OPT
f=350
TT=0.467
T1=0.04
 OPT
f=350
TT=0.384
T1=0.02
 OPT
f=350
TT=0.418
T1=0.03
 OPT
f=350
TT=0.079
T1=0.02
 OPT
f=350
TT=0.081
T1=0.03
 OPT
f=350
TT=0.075
T1=0.02
 OPT
f=350
TT=0.086
T1=0.03
 OPT
f=350
TT=0.012
T1=0.01
 OPT
f=350
TT=0.051
T1=0.02
 OPT
f=350
TT=0.106
T1=0.09
 OPT
f=350
TT=0.017
T1=0.01
 OPT
f=350
TT=0.485
T1=0.26
 OPT
f=350
TT=0.008
T1=0
 OPT
f=350
TT=0.505
T1=0.26
 OPT
f=350
TT=0.385
T1=0.37
 OPT
f=350
TT=0.326
T1=0.32
 OPT
f=350
TT=0.965
T1=1.25
 OPT
f=350
TT=0.082
T1=0.07
 OPT
f=350
TT=0.714
T1=0.76
 OPT
f=350
TT=0.092
T1=0.07
 OPT
f=350
TT=0.014
T1=0.02
 OPT
f=350
TT=0.485
T1=0.01
 OPT
f=350
TT=0.079
T1=0.01
 OPT
f=350
TT=0.066
T1=0.03
 OPT
f=350
TT=0.067
T1=0.03
 OPT
f=350
TT=0.685
T1=0.78
 OPT
f=350
TT=0.474
T1=0.24
 OPT
f=350
TT=0.462
T1=0.25
 OPT
f=350
TT=0.094
T1=0.08
 OPT
f=350
TT=0.09
T1=0.07
 OPT
f=350
TT=0.333
T1=0.32
 OPT
f=350
TT=0.091
T1=0.07
 OPT
f=350
TT=0.09
T1=0.07
 OPT
f=350
TT=0.035
T1=0.03
 OPT
f=350
TT=0.034
T1=0.03



Statisticsbsolo
3.2
(complete)		clasp
2.0.6-R5325 (opt)
(complete)		npSolver
1.0
(complete)		npSolver
1.0 (fixed)
(complete)		npSolver
inc
(complete)		npSolver
inc (fixed)
(complete)		npSolver
inc-topDown
(complete)		npSolver
inc-topDown (fixed)
(complete)		npSolver
inc-topdown-quickBound
(complete)		npSolver
inc-topdown-quickBound (fixed)
(complete)		PB07: bsolo
3.0.17
(complete)		PB07: minisat+
1.14
(complete)		PB07: PB-clasp
2007-04-10
(complete)		PB07: Pueblo
1.4
(incomplete)		PB07: SAT4JPseudoResolution
2007-03-23
(complete)		PB09: bsolo
3.1
(complete)		PB09: SAT4J Pseudo Resolution
2.1.1
(complete)		PB09: SCIPspx
SCIP 1.1.0.7 with SoPLEX 1.4.1(24.4.2009)
(complete)		PB10: pb_cplex
2010-06-29
(complete)		PB10: SAT4J PB RES // CP
2.2.0 2010-05-31
(complete)		PB10: SCIPspx
SCIP 1.2.1.3 with SoPlex 1.4.2 (CVS Version 30.5.2010) as LP solver
(complete)		PB11: Sat4j Res//CP
2.3.0
(complete)		PB11: SCIP spx E_2
2011-06-10 (fixed)
(complete)		PB12: minisatp
1.0-2-g022594c
(complete)		pb2sat
2012-05-19
(complete)		pb2satCp2
2012-05-19
(complete)		pwbo
2.0
(complete)		pwbo
2.02
(complete)		SAT 4j PB RES // CP
2.3.2 Snapshot
(complete)		Sat 4j PB Resolution
2.3.2 Snapshot
(complete)		SAT4J PB specific settings
2.3.2 snapshot
(complete)		SCIP spx
SCIP 2.1.1.4. with SoPlex 1.6.0.3 fixed
(complete)		SCIP spx E
SCIP 2.1.1.4. Exp with SoPlex 1.6.0.3 fixed
(complete)		SCIP spx standard
SCIP 2.1.1.4. with SoPlex 1.6.0.3 standard fixed
(complete)		toysat
2012-05-17
(complete)		toysat
2012-06-01
(complete)		wbo
1.7
(complete)		wbo
1.72
(complete)
Number of times the solver is able to give the best known answer212022222221222322230222021200200242023202322222302320200232323202004
Number of times the solver is the best solver from a complete solver point of view
(i.e. best known answer and best TT time)		115000011000000000030000200060000000000