PB'12 competition: satisfaction and optimization track: results by benchmark

Results by benchmark for category optimisation, small integers, linear constraints (OPT-SMALLINT-LIN), subcategory Industrial

This page displays the results of the different solvers for each benchmark for category optimisation, small integers, linear constraints (OPT-SMALLINT-LIN), subcategory Industrial

REMINDER

Keep in mind that the 'Best result' columns only provide the best result given by one of the solvers. This 'Best result' may be wrong in case of an UNSATISFIABLE or OPTIMUM FOUND answer (because there's no efficient way to check these answers).

Description of a cell contents:

Cell exampleMeaning
AnswerSolver result
f=...value of the objective function for the model reported by the solver
TT=...Total Time (TT): this is the CPU time (in seconds) used by the solver until termination. This time is only meaningful for complete solvers because incomplete solvers will always run until they time out
Remember that CPU time and wall clock time are two very different notions. The CPU time represents the time during which the instructions of the solver were executed by the processor. The wall clock time represents how much time ellapsed on the clock. For a same event, the CPU time may be either smaller or greater than the wall clock time depending on the number of threads of execution and the number of processors.

Meaning of some abbreviations:

AbbreviationMeaning
f=...Value of the objective function
TOTime Out
MOMem. Out (out of memory)

Meaning of the different colors:

ColorMeaning
textthe solver cannot handle this instance
textthe solver gave no answer
textthe solver could give an answer (SAT)
textthe solver gave a definitive answer (OPTIMUM FOUND or UNSAT)
textthe solver performed better than the other ones on that instance (complete solvers point of view)
textthe solver performed better than the other ones on that instance (incomplete solvers point of view)
textthe solver was ended by a signal or other problem
textthe solver gave an incomplete answer
textthe solver gave a wrong answer

For better readability, you may choose to hide some solvers:
bsolo 3.2 (complete)
clasp 2.0.6-R5325 (opt) (complete)
npSolver 1.0 (complete)
npSolver 1.0 (fixed) (complete)
npSolver inc (complete)
npSolver inc (fixed) (complete)
npSolver inc-topDown (complete)
npSolver inc-topDown (fixed) (complete)
npSolver inc-topdown-quickBound (complete)
npSolver inc-topdown-quickBound (fixed) (complete)
PB07: bsolo 3.0.17 (complete)
PB07: minisat+ 1.14 (complete)
PB07: PB-clasp 2007-04-10 (complete)
PB07: Pueblo 1.4 (incomplete)
PB07: SAT4JPseudoResolution 2007-03-23 (complete)
PB09: bsolo 3.1 (complete)
PB09: SAT4J Pseudo Resolution 2.1.1 (complete)
PB09: SCIPspx SCIP 1.1.0.7 with SoPLEX 1.4.1(24.4.2009) (complete)
PB10: pb_cplex 2010-06-29 (complete)
PB10: SAT4J PB RES // CP 2.2.0 2010-05-31 (complete)
PB10: SCIPspx SCIP 1.2.1.3 with SoPlex 1.4.2 (CVS Version 30.5.2010) as LP solver (complete)
PB11: Sat4j Res//CP 2.3.0 (complete)
PB11: SCIP spx E_2 2011-06-10 (fixed) (complete)
PB12: minisatp 1.0-2-g022594c (complete)
pb2sat 2012-05-19 (complete)
pb2satCp2 2012-05-19 (complete)
pwbo 2.0 (complete)
pwbo 2.02 (complete)
SAT 4j PB RES // CP 2.3.2 Snapshot (complete)
Sat 4j PB Resolution 2.3.2 Snapshot (complete)
SAT4J PB specific settings 2.3.2 snapshot (complete)
SCIP spx SCIP 2.1.1.4. with SoPlex 1.6.0.3 fixed (complete)
SCIP spx E SCIP 2.1.1.4. Exp with SoPlex 1.6.0.3 fixed (complete)
SCIP spx standard SCIP 2.1.1.4. with SoPlex 1.6.0.3 standard fixed (complete)
toysat 2012-05-17 (complete)
toysat 2012-06-01 (complete)
wbo 1.7 (complete)
wbo 1.72 (complete)

Bench nameBest results
on this
instance
bsolo
3.2
(complete)
clasp
2.0.6-R5325 (opt)
(complete)
npSolver
1.0
(complete)
npSolver
1.0 (fixed)
(complete)
npSolver
inc
(complete)
npSolver
inc (fixed)
(complete)
npSolver
inc-topDown
(complete)
npSolver
inc-topDown (fixed)
(complete)
npSolver
inc-topdown-quickBound
(complete)
npSolver
inc-topdown-quickBound (fixed)
(complete)
PB07: bsolo
3.0.17
(complete)
PB07: minisat+
1.14
(complete)
PB07: PB-clasp
2007-04-10
(complete)
PB07: Pueblo
1.4
(incomplete)
PB07: SAT4JPseudoResolution
2007-03-23
(complete)
PB09: bsolo
3.1
(complete)
PB09: SAT4J Pseudo Resolution
2.1.1
(complete)
PB09: SCIPspx
SCIP 1.1.0.7 with SoPLEX 1.4.1(24.4.2009)
(complete)
PB10: pb_cplex
2010-06-29
(complete)
PB10: SAT4J PB RES // CP
2.2.0 2010-05-31
(complete)
PB10: SCIPspx
SCIP 1.2.1.3 with SoPlex 1.4.2 (CVS Version 30.5.2010) as LP solver
(complete)
PB11: Sat4j Res//CP
2.3.0
(complete)
PB11: SCIP spx E_2
2011-06-10 (fixed)
(complete)
PB12: minisatp
1.0-2-g022594c
(complete)
pb2sat
2012-05-19
(complete)
pb2satCp2
2012-05-19
(complete)
pwbo
2.0
(complete)
pwbo
2.02
(complete)
SAT 4j PB RES // CP
2.3.2 Snapshot
(complete)
Sat 4j PB Resolution
2.3.2 Snapshot
(complete)
SAT4J PB specific settings
2.3.2 snapshot
(complete)
SCIP spx
SCIP 2.1.1.4. with SoPlex 1.6.0.3 fixed
(complete)
SCIP spx E
SCIP 2.1.1.4. Exp with SoPlex 1.6.0.3 fixed
(complete)
SCIP spx standard
SCIP 2.1.1.4. with SoPlex 1.6.0.3 standard fixed
(complete)
toysat
2012-05-17
(complete)
toysat
2012-06-01
(complete)
wbo
1.7
(complete)
wbo
1.72
(complete)
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
logic-synthesis/normalized-5xp1.b.opb
OPT
f=12
TT=0.397
T1=0.4
OPT
f=12
TT=14.257
T1=12.68
SAT (TO)
f=17
TT=1800.02
T1=377.31
OPT
f=12
TT=217.442
T1=172.07
OPT
f=12
TT=187.655
T1=160.85
OPT
f=12
TT=246.079
T1=225.92
OPT
f=12
TT=261.878
T1=252.3
OPT
f=12
TT=309.829
T1=290.41
OPT
f=12
TT=434.177
T1=413.33
OPT
f=12
TT=304.689
T1=286.05
OPT
f=12
TT=397.32
T1=378.17
OPT
f=12
TT=1.993
T1=1
OPT
f=12
TT=564.193
T1=493.57
SAT (TO)
f=13
TT=1802.08
T1=628.6
OPT
f=12
TT=80.404
T1=68.78
SAT (TO)
f=17
TT=1800.47
T1=0.43
OPT
f=12
TT=13.762
T1=12.18
SAT (TO)
f=17
TT=1800.86
T1=0.44
OPT
f=12
TT=14.186
T1=12.14
OPT
f=12
TT=0.397
T1=0.4
SAT (TO)
f=12
TT=1801.39
T1=55.61
OPT
f=12
TT=11.905
T1=11.37
SAT (TO)
f=12
TT=1801.06
T1=126.25
OPT
f=12
TT=10.874
T1=10.17
OPT
f=12
TT=338.185
T1=338.25
OPT
f=12
TT=155.218
T1=102.03
OPT
f=12
TT=189.751
T1=136.64
OPT
f=12
TT=307.593
T1=153.84
OPT
f=12
TT=297.85
T1=149.01
OPT
f=12
TT=1064.07
T1=203.59
SAT (TO)
f=16
TT=1800.01
T1=1.52
SAT (TO)
f=19
TT=1800
T1=0.36
OPT
f=12
TT=4.913
T1=4.83
OPT
f=12
TT=4.826
T1=4.75
OPT
f=12
TT=4.187
T1=4.17
? (TO)

TT=1800.01

? (TO)

TT=1800.11

?

TT=1799.46

?

TT=1799.38

normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
logic-synthesis/normalized-9sym.b.opb
OPT
f=5
TT=0.093
T1=0.09
OPT
f=5
TT=0.248
T1=0.23
OPT
f=5
TT=6.772
T1=3.28
OPT
f=5
TT=1.868
T1=1.86
OPT
f=5
TT=0.306
T1=0.3
OPT
f=5
TT=0.925
T1=0.92
OPT
f=5
TT=0.179
T1=0.18
OPT
f=5
TT=1.466
T1=1.29
OPT
f=5
TT=0.184
T1=0.16
OPT
f=5
TT=1.478
T1=1.29
OPT
f=5
TT=0.181
T1=0.15
OPT
f=5
TT=0.456
T1=0.44
OPT
f=5
TT=0.39
T1=0.33
OPT
f=5
TT=49.233
T1=38.31
OPT
f=5
TT=9.012
T1=8.94
OPT
f=5
TT=4.262
T1=1.66
OPT
f=5
TT=0.247
T1=0.23
OPT
f=5
TT=4.713
T1=1.98
OPT
f=5
TT=6.35
T1=6.34
OPT
f=5
TT=0.261
T1=0.26
OPT
f=5
TT=6.415
T1=4.32
OPT
f=5
TT=10.859
T1=10.85
OPT
f=5
TT=5.332
T1=2.37
OPT
f=5
TT=0.89
T1=0.93
OPT
f=5
TT=0.093
T1=0.09
OPT
f=5
TT=1.389
T1=1.59
OPT
f=5
TT=1.655
T1=1.3
OPT
f=5
TT=0.576
T1=0.28
OPT
f=5
TT=0.597
T1=0.3
OPT
f=5
TT=4.414
T1=2.36
OPT
f=5
TT=6.99
T1=3.86
OPT
f=5
TT=7.194
T1=4.08
OPT
f=5
TT=0.937
T1=0.92
OPT
f=5
TT=0.944
T1=0.92
OPT
f=5
TT=0.941
T1=0.92
OPT
f=5
TT=37.199
T1=28.41
OPT
f=5
TT=39.408
T1=30.21
OPT
f=5
TT=46.08
T1=46.17
OPT
f=5
TT=46.78
T1=46.85
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
logic-synthesis/normalized-alu4.b.opb
OPT
f=50
TT=1.469
T1=1.14
SAT
f=51
TT=1798.03
T1=936.39
SAT (TO)
f=56
TT=1800.06
T1=314.58
? (TO)

TT=1800.12

? (TO)

TT=1800.1

? (TO)

TT=1800.11

? (TO)

TT=1800.09

? (TO)

TT=1800.12

? (TO)

TT=1800.04

? (TO)

TT=1800.12

? (TO)

TT=1800.02

SAT (TO)
f=50
TT=1800.03
T1=91.95
SAT (TO)
f=51
TT=1800.1
T1=1433.52
SAT (TO)
f=57
TT=1802.09
T1=999.66
SAT
f=54
TT=1783.02
T1=321.41
SAT (TO)
f=68
TT=1800.49
T1=0.42
SAT
f=51
TT=1798.04
T1=937.29
SAT (TO)
f=68
TT=1800.3
T1=0.38
OPT
f=50
TT=17.879
T1=6.76
OPT
f=50
TT=1.469
T1=1.14
SAT (TO)
f=55
TT=1800.18
T1=280.19
OPT
f=50
TT=8.988
T1=8.8
SAT (TO)
f=54
TT=1800.66
T1=800.15
OPT
f=50
TT=24.558
T1=5.9
SAT (TO)
f=50
TT=1800.07
T1=1800.4
? (TO)

TT=1800.04

? (TO)

TT=1800.01

SAT (TO)
f=52
TT=1800.05
T1=900.31
SAT (TO)
f=52
TT=1800.45
T1=900.31
SAT (TO)
f=56
TT=1800.13
T1=243.59
SAT (TO)
f=60
TT=1800.92
T1=1007.71
SAT (TO)
f=68
TT=1800.05
T1=0.36
OPT
f=50
TT=12.368
T1=3.27
OPT
f=50
TT=12.849
T1=3.3
OPT
f=50
TT=5.599
T1=2.25
? (TO)

TT=1800.02

? (TO)

TT=1800.12

?

TT=1799.39

?

TT=1799.51

normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
logic-synthesis/normalized-apex4.a.opb
OPT
f=776
TT=2.161
T1=2.13
SAT
f=793
TT=1798.01
T1=150.81
SAT (TO)
f=799
TT=1800.01
T1=1.26
? (TO)

TT=1800.05

? (TO)

TT=1800.12

? (TO)

TT=1800.1

? (TO)

TT=1800.12

? (TO)

TT=1800.09

? (TO)

TT=1800.08

? (TO)

TT=1800.07

? (TO)

TT=1800.04

SAT (TO)
f=777
TT=1800.1
T1=476.2
SAT (TO)
f=848
TT=1800.06
T1=0.29
SAT (TO)
f=801
TT=1802.12
T1=0.95
SAT
f=797
TT=1783.01
T1=0.24
No Cert.

TT=482.42

SAT
f=793
TT=1798.01
T1=153.4
SAT (TO)
f=844
TT=1800.04
T1=0.69
OPT
f=776
TT=2.404
T1=2.37
OPT
f=776
TT=2.161
T1=2.13
SAT (TO)
f=818
TT=1800.81
T1=912.02
OPT
f=776
TT=3.816
T1=3.76
SAT (TO)
f=823
TT=1800.04
T1=648.51
OPT
f=776
TT=3.355
T1=3.3
SAT (TO)
f=848
TT=1800.12
T1=1800.61
? (TO)

TT=1800.13

? (TO)

TT=1800.06

SAT (TO)
f=803
TT=1800.11
T1=900.31
SAT (TO)
f=809
TT=1800.13
T1=900.41
SAT (TO)
f=822
TT=1800.42
T1=751.04
SAT (TO)
f=843
TT=1800.07
T1=168.32
SAT (TO)
f=848
TT=1800.04
T1=0.49
OPT
f=776
TT=4.735
T1=4.7
OPT
f=776
TT=4.356
T1=4.32
OPT
f=776
TT=2.249
T1=2.2
? (TO)

TT=1800.1

? (TO)

TT=1800.09

?

TT=1799.55

?

TT=1799.5

normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/logic-synthesis/
normalized-bench1.pi.opb
OPT
f=121
TT=1.093
T1=1.01
OPT
f=121
TT=426.045
T1=424.36
SAT (TO)
f=173
TT=1800.08
T1=0
? (TO)

TT=1800.12

? (TO)

TT=1800.12

? (TO)

TT=1800.14

? (TO)

TT=1800.12

? (TO)

TT=1800.1

? (TO)

TT=1800.1

? (TO)

TT=1800.08

? (TO)

TT=1800.08

OPT
f=121
TT=7.917
T1=6.36
SAT (TO)
f=173
TT=1800.09
T1=0.05
SAT (TO)
f=229
TT=1802.11
T1=2.24
SAT
f=207
TT=1783.01
T1=9.43
SAT (TO)
f=173
TT=1800.02
T1=0.42
OPT
f=121
TT=412.497
T1=410.74
SAT (TO)
f=173
TT=1800.07
T1=0.42
OPT
f=121
TT=6.481
T1=6.44
OPT
f=121
TT=4.02
T1=3.18
SAT (TO)
f=164
TT=1800.58
T1=892.32
OPT
f=121
TT=1.093
T1=1.01
SAT (TO)
f=165
TT=1800.17
T1=854.37
OPT
f=121
TT=5.214
T1=5.19
SAT (TO)
f=173
TT=1800.04
T1=1800.61
? (TO)

TT=1800.05

? (TO)

TT=1800.06

SAT (TO)
f=162
TT=1800.11
T1=900.31
SAT (TO)
f=161
TT=1800.49
T1=900.41
SAT (TO)
f=171
TT=1800.74
T1=9.85
SAT (TO)
f=172
TT=1800.01
T1=0.76
SAT (TO)
f=173
TT=1800.04
T1=0.35
OPT
f=121
TT=7.247
T1=7.22
OPT
f=121
TT=7.168
T1=7.15
OPT
f=121
TT=7.213
T1=7.19
? (TO)

TT=1800.09

? (TO)

TT=1800.11

?

TT=1799.41

?

TT=1799.43

normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
logic-synthesis/normalized-clip.b.opb
OPT
f=15
TT=0.156
T1=0.15
OPT
f=15
TT=0.943
T1=0.57
SAT (TO)
f=18
TT=1800.02
T1=105.93
OPT
f=15
TT=7.928
T1=7.93
OPT
f=15
TT=3.188
T1=2.21
OPT
f=15
TT=7.069
T1=7.07
OPT
f=15
TT=2.996
T1=1.96
OPT
f=15
TT=5.821
T1=4.68
OPT
f=15
TT=1.163
T1=0.62
OPT
f=15
TT=5.783
T1=4.66
OPT
f=15
TT=1.142
T1=0.61
OPT
f=15
TT=0.383
T1=0.06
OPT
f=15
TT=4.513
T1=0.88
SAT (TO)
f=16
TT=1800.15
T1=3.91
OPT
f=15
TT=17.065
T1=4.35
SAT (TO)
f=21
TT=1800.08
T1=0.34
OPT
f=15
TT=0.949
T1=0.57
SAT (TO)
f=20
TT=1800.45
T1=0.32
OPT
f=15
TT=2.025
T1=2.01
OPT
f=15
TT=0.156
T1=0.15
OPT
f=15
TT=69.694
T1=17.38
OPT
f=15
TT=1.599
T1=1.59
SAT (TO)
f=15
TT=1801.17
T1=14.86
OPT
f=15
TT=0.816
T1=0.8
OPT
f=15
TT=3.162
T1=3.16
OPT
f=15
TT=11.103
T1=11.1
OPT
f=15
TT=11.442
T1=9.46
OPT
f=15
TT=2.781
T1=1.39
OPT
f=15
TT=2.731
T1=1.37
OPT
f=15
TT=34.668
T1=7.34
SAT (TO)
f=17
TT=1800.87
T1=47.1
SAT (TO)
f=21
TT=1800.09
T1=0.31
OPT
f=15
TT=1.185
T1=1.17
OPT
f=15
TT=1.149
T1=1.14
OPT
f=15
TT=1.034
T1=1.02
? (TO)

TT=1800.09

? (TO)

TT=1800.02

OPT
f=15
TT=7.501
T1=7.51
OPT
f=15
TT=7.841
T1=7.85
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
logic-synthesis/normalized-count.b.opb
OPT
f=24
TT=0.16
T1=0.16
OPT
f=24
TT=0.528
T1=0.52
SAT (TO)
f=28
TT=1800.02
T1=47.35
OPT
f=24
TT=60.633
T1=4.27
OPT
f=24
TT=46.539
T1=46.54
OPT
f=24
TT=60.27
T1=4.21
OPT
f=24
TT=45.848
T1=45.87
OPT
f=24
TT=53.167
T1=13.36
OPT
f=24
TT=46.838
T1=3.16
OPT
f=24
TT=51.96
T1=13.47
OPT
f=24
TT=46.45
T1=3.16
OPT
f=24
TT=0.087
T1=0.08
OPT
f=24
TT=436.246
T1=52.74
SAT (TO)
f=26
TT=1802.07
T1=0.46
OPT
f=24
TT=43.324
T1=3.17
SAT (TO)
f=29
TT=1800.06
T1=0.38
OPT
f=24
TT=0.506
T1=0.5
SAT (TO)
f=29
TT=1801.36
T1=0.34
OPT
f=24
TT=0.535
T1=0.52
OPT
f=24
TT=0.16
T1=0.16
SAT (TO)
f=25
TT=1800.84
T1=771.64
OPT
f=24
TT=0.566
T1=0.55
SAT (TO)
f=24
TT=1800.46
T1=758.79
OPT
f=24
TT=0.606
T1=0.59
OPT
f=24
TT=275.05
T1=275.1
OPT
f=24
TT=71.097
T1=4.25
OPT
f=24
TT=63.588
T1=15.91
OPT
f=24
TT=8.832
T1=4.41
OPT
f=24
TT=9.193
T1=4.6
SAT (TO)
f=24
TT=1800.52
T1=64.61
SAT (TO)
f=27
TT=1800.1
T1=895.46
SAT (TO)
f=29
TT=1800.66
T1=0.33
OPT
f=24
TT=0.528
T1=0.51
OPT
f=24
TT=0.544
T1=0.52
OPT
f=24
TT=0.425
T1=0.41
? (TO)

TT=1800.08

? (TO)

TT=1800.07

OPT
f=24
TT=6.182
T1=6.19
OPT
f=24
TT=5.664
T1=5.68
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
logic-synthesis/normalized-e64.b.opb
OPT
f=47
TT=0.825
T1=0.6
SAT
f=60
TT=1798
T1=9.75
SAT (TO)
f=58
TT=1800.03
T1=980.88
? (TO)

TT=1800.12

? (TO)

TT=1800.11

? (TO)

TT=1800.12

? (TO)

TT=1800.12

? (TO)

TT=1800.12

? (TO)

TT=1800.1

? (TO)

TT=1800.11

? (TO)

TT=1800.08

SAT (TO)
f=53
TT=1800.02
T1=908.93
SAT (TO)
f=51
TT=1800.09
T1=171.61
SAT (TO)
f=61
TT=1800.13
T1=0.42
SAT
f=60
TT=1783.01
T1=237.73
SAT (TO)
f=82
TT=1800.08
T1=0.31
SAT
f=60
TT=1798.01
T1=9.31
SAT (TO)
f=72
TT=1800.77
T1=379.55
OPT
f=47
TT=107.437
T1=106.95
OPT
f=47
TT=0.825
T1=0.6
SAT (TO)
f=58
TT=1801.37
T1=627.02
SAT
f=53
TT=1789.73
T1=3.1
SAT (TO)
f=59
TT=1800.08
T1=189.93
OPT
f=47
TT=15.934
T1=15.92
SAT (TO)
f=53
TT=1800.09
T1=1800.4
? (TO)

TT=1800.04

? (TO)

TT=1800.03

SAT (TO)
f=55
TT=1800.15
T1=900.31
SAT (TO)
f=55
TT=1800.32
T1=900.31
SAT (TO)
f=62
TT=1800.48
T1=315.36
SAT (TO)
f=80
TT=1800.05
T1=296.48
SAT (TO)
f=74
TT=1800.02
T1=2.88
OPT
f=47
TT=90.452
T1=71.84
OPT
f=47
TT=89.654
T1=71.26
OPT
f=47
TT=244.368
T1=231.27
? (TO)

TT=1800.02

? (TO)

TT=1800.02

?

TT=1799.53

?

TT=1799.77

normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
logic-synthesis/normalized-ex5.pi.opb
OPT
f=65
TT=5.82
T1=3.12
OPT
f=65
TT=1276.39
T1=1269.68
SAT (TO)
f=99
TT=1800.11
T1=0.01
? (TO)

TT=1800.06

? (TO)

TT=1800.14

? (TO)

TT=1800.11

? (TO)

TT=1800.11

? (TO)

TT=1800.13

? (TO)

TT=1800.07

? (TO)

TT=1800.05

? (TO)

TT=1800.07

OPT
f=65
TT=42.605
T1=35.28
SAT (TO)
f=83
TT=1800.05
T1=637.55
SAT (TO)
f=100
TT=1800.15
T1=0.91
SAT
f=99
TT=1783.01
T1=0.08
SAT (TO)
f=83
TT=1800.52
T1=0.47
OPT
f=65
TT=1194.86
T1=1186.11
SAT (TO)
f=83
TT=1800.27
T1=0.5
OPT
f=65
TT=11.714
T1=10.74
OPT
f=65
TT=5.82
T1=3.12
SAT (TO)
f=79
TT=1800.09
T1=589.52
SAT
f=66
TT=1789.75
T1=1.3
SAT (TO)
f=78
TT=1800.03
T1=265.29
OPT
f=65
TT=8.66
T1=8.64
SAT (TO)
f=85
TT=1800.09
T1=1800.5
? (TO)

TT=1800.11

? (TO)

TT=1800.04

SAT (TO)
f=84
TT=1800.09
T1=900.31
SAT (TO)
f=84
TT=1800.12
T1=900.31
SAT (TO)
f=80
TT=1800.04
T1=138.91
SAT (TO)
f=83
TT=1800.72
T1=0.42
SAT (TO)
f=83
TT=1800.78
T1=0.39
OPT
f=65
TT=19.819
T1=19.79
OPT
f=65
TT=19.629
T1=19.6
OPT
f=65
TT=19.73
T1=19.7
? (TO)

TT=1800.02

? (TO)

TT=1800.01

?

TT=1799.47

?

TT=1799.81

normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
logic-synthesis/normalized-exam.pi.opb
OPT
f=63
TT=2.703
T1=1.49
SAT
f=69
TT=1798
T1=167.91
SAT (TO)
f=117
TT=1800.11
T1=1588.65
? (TO)

TT=1800.05

? (TO)

TT=1800.1

? (TO)

TT=1800.12

? (TO)

TT=1800.13

? (TO)

TT=1800.1

? (TO)

TT=1800.08

? (TO)

TT=1800.06

? (TO)

TT=1800.06

OPT
f=63
TT=87.215
T1=1.52
SAT (TO)
f=90
TT=1800.08
T1=0.15
SAT (TO)
f=141
TT=1802.1
T1=1.89
SAT
f=141
TT=1783.01
T1=7.52
SAT (TO)
f=89
TT=1800.07
T1=0.46
SAT
f=69
TT=1798
T1=172.13
SAT (TO)
f=89
TT=1800.74
T1=0.46
OPT
f=63
TT=6.398
T1=2.67
OPT
f=63
TT=2.703
T1=2.68
SAT (TO)
f=87
TT=1800.93
T1=13.38
OPT
f=63
TT=5.289
T1=1.97
SAT (TO)
f=82
TT=1800.03
T1=738.51
OPT
f=63
TT=23.241
T1=13.83
SAT (TO)
f=90
TT=1800.03
T1=1800.5
? (TO)

TT=1800.06

? (TO)

TT=1800.09

SAT (TO)
f=89
TT=1800.46
T1=900.31
SAT (TO)
f=89
TT=1800.51
T1=900.31
SAT (TO)
f=87
TT=1800.86
T1=7.37
SAT (TO)
f=89
TT=1800.09
T1=0.39
SAT (TO)
f=89
TT=1800.02
T1=0.38
OPT
f=63
TT=3.157
T1=1.54
OPT
f=63
TT=3.082
T1=1.49
OPT
f=63
TT=3.133
T1=1.52
? (TO)

TT=1800.01

? (TO)

TT=1800.1

?

TT=1799.45

?

TT=1799.74

Bench nameBest resultsbsolo
3.2
(complete)
clasp
2.0.6-R5325 (opt)
(complete)
npSolver
1.0
(complete)
npSolver
1.0 (fixed)
(complete)
npSolver
inc
(complete)
npSolver
inc (fixed)
(complete)
npSolver
inc-topDown
(complete)
npSolver
inc-topDown (fixed)
(complete)
npSolver
inc-topdown-quickBound
(complete)
npSolver
inc-topdown-quickBound (fixed)
(complete)
PB07: bsolo
3.0.17
(complete)
PB07: minisat+
1.14
(complete)
PB07: PB-clasp
2007-04-10
(complete)
PB07: Pueblo
1.4
(incomplete)
PB07: SAT4JPseudoResolution
2007-03-23
(complete)
PB09: bsolo
3.1
(complete)
PB09: SAT4J Pseudo Resolution
2.1.1
(complete)
PB09: SCIPspx
SCIP 1.1.0.7 with SoPLEX 1.4.1(24.4.2009)
(complete)
PB10: pb_cplex
2010-06-29
(complete)
PB10: SAT4J PB RES // CP
2.2.0 2010-05-31
(complete)
PB10: SCIPspx
SCIP 1.2.1.3 with SoPlex 1.4.2 (CVS Version 30.5.2010) as LP solver
(complete)
PB11: Sat4j Res//CP
2.3.0
(complete)
PB11: SCIP spx E_2
2011-06-10 (fixed)
(complete)
PB12: minisatp
1.0-2-g022594c
(complete)
pb2sat
2012-05-19
(complete)
pb2satCp2
2012-05-19
(complete)
pwbo
2.0
(complete)
pwbo
2.02
(complete)
SAT 4j PB RES // CP
2.3.2 Snapshot
(complete)
Sat 4j PB Resolution
2.3.2 Snapshot
(complete)
SAT4J PB specific settings
2.3.2 snapshot
(complete)
SCIP spx
SCIP 2.1.1.4. with SoPlex 1.6.0.3 fixed
(complete)
SCIP spx E
SCIP 2.1.1.4. Exp with SoPlex 1.6.0.3 fixed
(complete)
SCIP spx standard
SCIP 2.1.1.4. with SoPlex 1.6.0.3 standard fixed
(complete)
toysat
2012-05-17
(complete)
toysat
2012-06-01
(complete)
wbo
1.7
(complete)
wbo
1.72
(complete)
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
logic-synthesis/normalized-f51m.b.opb
OPT
f=18
TT=0.294
T1=0.26
OPT
f=18
TT=12.188
T1=10.8
SAT (TO)
f=20
TT=1800.03
T1=935.7
OPT
f=18
TT=95.944
T1=95.96
OPT
f=18
TT=80.45
T1=80.46
OPT
f=18
TT=97.752
T1=97.77
OPT
f=18
TT=79.838
T1=79.85
OPT
f=18
TT=96.938
T1=26.4
OPT
f=18
TT=80.643
T1=25.41
OPT
f=18
TT=97.234
T1=25.96
OPT
f=18
TT=78.887
T1=24.41
OPT
f=18
TT=6.444
T1=0.12
OPT
f=18
TT=447.589
T1=196.95
SAT (TO)
f=19
TT=1802.09
T1=593.2
OPT
f=18
TT=57.103
T1=22.57
SAT (TO)
f=26
TT=1800.02
T1=0.34
OPT
f=18
TT=11.694
T1=10.35
SAT (TO)
f=26
TT=1800.95
T1=0.31
OPT
f=18
TT=1.695
T1=0.89
OPT
f=18
TT=0.294
T1=0.26
OPT
f=18
TT=133.755
T1=7.31
OPT
f=18
TT=1.075
T1=0.56
SAT (TO)
f=18
TT=1800.23
T1=4.84
OPT
f=18
TT=1.3
T1=0.67
OPT
f=18
TT=229.807
T1=229.84
OPT
f=18
TT=101.972
T1=102.03
OPT
f=18
TT=103.468
T1=28.07
OPT
f=18
TT=1430.41
T1=715.27
OPT
f=18
TT=1068.68
T1=534.37
OPT
f=18
TT=713.496
T1=10.34
SAT (TO)
f=20
TT=1800.53
T1=56.17
SAT (TO)
f=26
TT=1800.03
T1=0.33
OPT
f=18
TT=3.225
T1=0.65
OPT
f=18
TT=3.127
T1=0.61
OPT
f=18
TT=1.089
T1=0.55
? (TO)

TT=1800.02

? (TO)

TT=1800.02

?

TT=1799.39

?

TT=1799.52

normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
logic-synthesis/normalized-jac3.opb
OPT
f=15
TT=0.295
T1=0.27
OPT
f=15
TT=1.046
T1=0.96
SAT (TO)
f=20
TT=1800.1
T1=0.01
? (TO)

TT=1800.13

? (TO)

TT=1800.08

? (TO)

TT=1800.12

? (TO)

TT=1800.1

? (TO)

TT=1800.08

? (TO)

TT=1800.13

? (TO)

TT=1800.06

? (TO)

TT=1800.11

OPT
f=15
TT=0.705
T1=0.66
SAT (TO)
f=15
TT=1800.12
T1=893.55
SAT (TO)
f=19
TT=1802.11
T1=294.42
SAT
f=19
TT=1783.01
T1=65.62
SAT (TO)
f=26
TT=1800.04
T1=0.38
OPT
f=15
TT=1.11
T1=1.01
SAT (TO)
f=26
TT=1800.31
T1=0.38
OPT
f=15
TT=0.231
T1=0.21
OPT
f=15
TT=0.773
T1=0.77
SAT (TO)
f=15
TT=1801.27
T1=69.39
OPT
f=15
TT=0.303
T1=0.28
OPT
f=15
TT=365.089
T1=100.98
OPT
f=15
TT=0.295
T1=0.27
SAT (TO)
f=16
TT=1800.04
T1=1800.5
? (TO)

TT=1800.11

? (TO)

TT=1800.04

OPT
f=15
TT=28.062
T1=14.03
OPT
f=15
TT=28.812
T1=14.45
OPT
f=15
TT=120.537
T1=29.26
SAT (TO)
f=21
TT=1800.02
T1=1357.08
SAT (TO)
f=26
TT=1800.7
T1=0.36
OPT
f=15
TT=4.303
T1=4.28
OPT
f=15
TT=4.438
T1=4.43
OPT
f=15
TT=5.792
T1=5.77
? (TO)

TT=1800.09

? (TO)

TT=1800.1

OPT
f=15
TT=14.418
T1=14.45
OPT
f=15
TT=14.279
T1=14.32
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/logic-synthesis/
normalized-max1024.pi.opb
OPT
f=259
TT=1.657
T1=1.17
SAT
f=264
TT=1798
T1=307.64
SAT (TO)
f=305
TT=1800.02
T1=516.6
? (TO)

TT=1800.11

? (TO)

TT=1800.13

? (TO)

TT=1800.12

? (TO)

TT=1800.1

? (TO)

TT=1800.04

? (TO)

TT=1800.08

? (TO)

TT=1800.08

? (TO)

TT=1800.06

OPT
f=259
TT=42.101
T1=29.96
SAT (TO)
f=279
TT=1800.04
T1=421.36
SAT (TO)
f=310
TT=1802.11
T1=0.18
SAT
f=308
TT=1783.01
T1=461.79
? (exit code)

TT=820

SAT
f=264
TT=1798.04
T1=326.04
SAT (TO)
f=301
TT=1800.03
T1=0.29
OPT
f=259
TT=15.147
T1=15.14
OPT
f=259
TT=1.657
T1=1.17
SAT (TO)
f=295
TT=1800.14
T1=752.37
OPT
f=259
TT=14.977
T1=14.47
SAT (TO)
f=294
TT=1800.16
T1=858.18
OPT
f=259
TT=18.679
T1=18.66
SAT (TO)
f=282
TT=1800.17
T1=1800.57
? (TO)

TT=1800.14

? (TO)

TT=1800.07

SAT (TO)
f=284
TT=1800.55
T1=900.31
SAT (TO)
f=284
TT=1800.12
T1=900.34
SAT (TO)
f=294
TT=1800.41
T1=763.71
SAT (TO)
f=301
TT=1800.84
T1=0.27
SAT (TO)
f=301
TT=1800.1
T1=0.28
OPT
f=259
TT=18.443
T1=18.43
OPT
f=259
TT=18.478
T1=18.46
OPT
f=259
TT=13.877
T1=13.86
? (TO)

TT=1800.01

? (TO)

TT=1800.01

?

TT=1799.5

?

TT=1799.55

normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/logic-synthesis/
normalized-prom2.pi.opb
OPT
f=287
TT=0.491
T1=0.48
SAT (TO)
f=303
TT=1800.02
T1=807.23
SAT (TO)
f=440
TT=1800.01
T1=115.41
? (TO)

TT=1800.11

? (TO)

TT=1800.12

? (TO)

TT=1800.09

? (TO)

TT=1800.11

? (TO)

TT=1800.11

? (TO)

TT=1800.09

? (TO)

TT=1800.06

? (TO)

TT=1800.12

OPT
f=287
TT=6.292
T1=2.56
SAT (TO)
f=436
TT=1800.06
T1=0.08
SAT (TO)
f=468
TT=1800.11
T1=0.73
SAT
f=442
TT=1783.01
T1=0.16
? (exit code)

TT=579.706

SAT (TO)
f=303
TT=1800.02
T1=809.68
SAT (TO)
f=436
TT=1800.05
T1=0.4
OPT
f=287
TT=2.064
T1=2.05
OPT
f=287
TT=0.896
T1=0.88
SAT (TO)
f=422
TT=1801.07
T1=645.31
OPT
f=287
TT=0.491
T1=0.48
SAT (TO)
f=431
TT=1800.56
T1=464.14
OPT
f=287
TT=1.117
T1=1.1
SAT (TO)
f=436
TT=1800.03
T1=1800.4
? (TO)

TT=1800.08

? (TO)

TT=1800.06

SAT (TO)
f=356
TT=1800.48
T1=900.41
SAT (TO)
f=356
TT=1800.03
T1=900.31
SAT (TO)
f=429
TT=1800.1
T1=603.88
SAT (TO)
f=436
TT=1800.07
T1=0.32
SAT (TO)
f=436
TT=1800.75
T1=0.34
OPT
f=287
TT=1.457
T1=1.44
OPT
f=287
TT=1.446
T1=1.43
OPT
f=287
TT=1.37
T1=1.35
? (TO)

TT=1800.1

? (TO)

TT=1800.09

?

TT=1799.6

?

TT=1799.77

normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
logic-synthesis/normalized-rot.b.opb
OPT
f=115
TT=1.125
T1=1.07
SAT
f=127
TT=1798
T1=421.37
SAT (TO)
f=140
TT=1800.1
T1=1510.45
? (TO)

TT=1800.13

? (TO)

TT=1800.11

? (TO)

TT=1800.12

? (TO)

TT=1800.1

? (TO)

TT=1800.1

? (TO)

TT=1800.07

? (TO)

TT=1800.1

? (TO)

TT=1800.07

SAT (TO)
f=117
TT=1800.03
T1=4.54
SAT (TO)
f=125
TT=1800.11
T1=90.17
SAT (TO)
f=148
TT=1802.11
T1=3.95
SAT
f=141
TT=1783.01
T1=591.45
SAT (TO)
f=161
TT=1800
T1=0.64
SAT
f=127
TT=1798.07
T1=414.13
SAT (TO)
f=162
TT=1800.72
T1=0.51
OPT
f=115
TT=26.418
T1=26.4
OPT
f=115
TT=1.125
T1=1.07
SAT (TO)
f=143
TT=1800.66
T1=441.85
OPT
f=115
TT=66.753
T1=66.76
SAT (TO)
f=142
TT=1800.48
T1=8.92
OPT
f=115
TT=23.068
T1=23.04
SAT (TO)
f=122
TT=1800.03
T1=1800.4
? (TO)

TT=1800.1

? (TO)

TT=1800.11

SAT (TO)
f=128
TT=1800.51
T1=900.41
SAT (TO)
f=128
TT=1800.48
T1=900.41
? (TO)

TT=1802.01

SAT (TO)
f=161
TT=1800.71
T1=0.45
SAT (TO)
f=158
TT=1800.04
T1=147.46
OPT
f=115
TT=21.33
T1=21.31
OPT
f=115
TT=22.23
T1=22.21
OPT
f=115
TT=22.594
T1=22.57
? (TO)

TT=1800.01

? (TO)

TT=1800.1

?

TT=1799.42

?

TT=1799.37

normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/
logic-synthesis/normalized-sao2.b.opb
OPT
f=25
TT=0.041
T1=0.04
OPT
f=25
TT=176.335
T1=176.35
SAT (TO)
f=28
TT=1800.02
T1=1244.96
OPT
f=25
TT=478.114
T1=320.63
OPT
f=25
TT=687.665
T1=687.78
OPT
f=25
TT=481.525
T1=322
OPT
f=25
TT=681.434
T1=681.55
OPT
f=25
TT=431.497
T1=272.3
OPT
f=25
TT=685.261
T1=530.22
OPT
f=25
TT=423.235
T1=265.47
OPT
f=25
TT=685.272
T1=530.84
OPT
f=25
TT=0.586
T1=0.58
SAT (TO)
f=26
TT=1800.02
T1=13.98
SAT (TO)
f=29
TT=1802.08
T1=391.38
SAT
f=25
TT=1783.01
T1=1717.73
SAT (TO)
f=36
TT=1800.03
T1=0.33
OPT
f=25
TT=176.242
T1=176.27
SAT (TO)
f=36
TT=1800.78
T1=0.3
OPT
f=25
TT=1.403
T1=1.39
OPT
f=25
TT=0.332
T1=0.26
SAT (TO)
f=26
TT=1800.03
T1=615.55
OPT
f=25
TT=1.739
T1=1.73
SAT (TO)
f=26
TT=1800.13
T1=272.54
OPT
f=25
TT=2.685
T1=2.67
SAT (TO)
f=26
TT=1800.11
T1=1800.4
OPT
f=25
TT=646.289
T1=516.41
OPT
f=25
TT=605.749
T1=475.26
OPT
f=25
TT=0.09
T1=0.04
OPT
f=25
TT=0.091
T1=0.04
SAT (TO)
f=26
TT=1800.18
T1=129.41
SAT (TO)
f=30
TT=1800.01
T1=166.05
SAT (TO)
f=37
TT=1800.71
T1=0.28
OPT
f=25
TT=1.132
T1=1.13
OPT
f=25
TT=1.154
T1=1.14
OPT
f=25
TT=1.182
T1=1.17
? (TO)

TT=1800.06

? (TO)

TT=1800.02

OPT
f=25
TT=0.04
T1=0.03
OPT
f=25
TT=0.041
T1=0.04
normalized-PB06/OPT-SMALLINT/
submitted-PB05/manquinho/logic-synthesis/
normalized-test4.pi.opb
SAT
f=96
TT=1796.76
T1=1166.35
SAT
f=155
TT=1798.05
T1=645.41
SAT (TO)
f=179
TT=1800.11
T1=0.02
? (TO)

TT=1800.1

? (TO)

TT=1800.12

? (TO)

TT=1800.06

? (TO)

TT=1800.12

? (TO)

TT=1800.08

? (TO)

TT=1800.11

? (TO)

TT=1800

? (TO)

TT=1800.12

SAT (TO)
f=105
TT=1800.05
T1=1578.28
SAT (TO)
f=180
TT=1800.1
T1=0.61
SAT (TO)
f=182
TT=1802.12
T1=97.78
SAT
f=179
TT=1783
T1=1.04
SAT (TO)
f=179
TT=1800.07
T1=0.82
SAT
f=155
TT=1798.02
T1=648.21
SAT (TO)
f=179
TT=1800.05
T1=0.83
SAT
f=97
TT=1793.78
T1=259.63
? (TO)

TT=1800.24

SAT (TO)
f=170
TT=1800.08
T1=244.96
SAT
f=114
TT=1789.76
T1=131.3
SAT (TO)
f=165
TT=1800.31
T1=518.13
SAT
f=96
TT=1796.76
T1=1166.35
SAT (TO)
f=180
TT=1800.03
T1=1800.61
? (TO)

TT=1800.05

? (TO)

TT=1800.1

SAT (TO)
f=171
TT=1800.07
T1=900.31
SAT (TO)
f=171
TT=1800.1
T1=900.41
SAT (TO)
f=166
TT=1800.38
T1=820.53
SAT (TO)
f=177
TT=1800.37
T1=42.15
SAT (TO)
f=179
TT=1800.8
T1=0.69
SAT
f=96
TT=1796.77
T1=1196.17
SAT
f=96
TT=1796.78
T1=1199.65
SAT
f=96
TT=1796.77
T1=1192.81
? (TO)

TT=1800.1

? (TO)

TT=1800.1

?

TT=1799.35

?

TT=1799.53

normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-apex6.b.opb
OPT
f=136
TT=10.933
T1=7.45
SAT
f=154
TT=1798.04
T1=1621.83
SAT (TO)
f=159
TT=1800.1
T1=1184.17
? (TO)

TT=1800.12

? (TO)

TT=1800.13

? (TO)

TT=1800.12

? (TO)

TT=1800.12

? (TO)

TT=1800.11

? (TO)

TT=1800.08

? (TO)

TT=1800.13

? (TO)

TT=1800.1

SAT (TO)
f=138
TT=1800.02
T1=24.45
SAT (TO)
f=184
TT=1800.09
T1=1.47
SAT (TO)
f=158
TT=1802.16
T1=18.3
SAT
f=164
TT=1783.01
T1=0.53
SAT (TO)
f=183
TT=1800.05
T1=0.82
SAT
f=156
TT=1798.01
T1=412.86
SAT (TO)
f=174
TT=1800.69
T1=1.16
OPT
f=136
TT=68.316
T1=68.25
OPT
f=136
TT=10.933
T1=7.45
SAT (TO)
f=160
TT=1801.04
T1=377.49
OPT
f=136
TT=105.894
T1=105.51
SAT (TO)
f=159
TT=1800.64
T1=881.24
OPT
f=136
TT=95.871
T1=95.8
SAT (TO)
f=180
TT=1800.09
T1=1800.5
? (TO)

TT=1800.08

? (TO)

TT=1800.15

SAT (TO)
f=155
TT=1800.21
T1=900.51
SAT (TO)
f=158
TT=1800.51
T1=900.41
SAT (TO)
f=175
TT=1800.04
T1=371.89
SAT (TO)
f=181
TT=1800.07
T1=1
SAT (TO)
f=183
TT=1800.56
T1=0.69
OPT
f=136
TT=103.68
T1=81.6
OPT
f=136
TT=96.532
T1=75.88
OPT
f=136
TT=58.415
T1=53.15
? (TO)

TT=1800.11

? (TO)

TT=1800.1

?

TT=1799.47

?

TT=1799.48

normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/
logic_synthesis/normalized-C499.a.opb
OPT
f=64
TT=4.249
T1=4.24
SAT
f=76
TT=1798
T1=1674.98
SAT (TO)
f=72
TT=1800.11
T1=0.01
? (TO)

TT=1800.03

? (TO)

TT=1800.12

? (TO)

TT=1800.12

? (TO)

TT=1800.1

? (TO)

TT=1800.1

? (TO)

TT=1800.09

? (TO)

TT=1800.07

? (TO)

TT=1800.08

SAT (TO)
f=71
TT=1800.11
T1=368.7
SAT (TO)
f=78
TT=1800.05
T1=30.04
SAT (TO)
f=112
TT=1802.09
T1=1.57
SAT
f=72
TT=1783
T1=0.08
SAT (TO)
f=88
TT=1800.03
T1=0.49
SAT
f=73
TT=1798
T1=1572
SAT (TO)
f=88
TT=1800.43
T1=0.37
OPT
f=64
TT=117.327
T1=54.96
OPT
f=64
TT=4.249
T1=4.24
SAT (TO)
f=76
TT=1800.18
T1=654.41
OPT
f=64
TT=126.916
T1=91.26
SAT (TO)
f=77
TT=1801.17
T1=273.64
OPT
f=64
TT=160.189
T1=154.9
SAT (TO)
f=76
TT=1800.07
T1=1800.4
? (TO)

TT=1800.11

? (TO)

TT=1800.05

SAT (TO)
f=73
TT=1800.44
T1=900.31
SAT (TO)
f=73
TT=1800.05
T1=900.31
SAT (TO)
f=75
TT=1800.38
T1=553.92
SAT (TO)
f=83
TT=1800.63
T1=0.47
SAT (TO)
f=89
TT=1800.58
T1=0.38
OPT
f=64
TT=193.448
T1=176.73
OPT
f=64
TT=195.224
T1=178.33
OPT
f=64
TT=123.889
T1=89.31
? (TO)

TT=1800.11

? (TO)

TT=1800.11

?

TT=1799.44

?

TT=1799.69

normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/
logic_synthesis/normalized-C499.b.opb
SAT
f=45
TT=1796.93
T1=844.73
SAT
f=70
TT=1798.05
T1=1280.67
SAT (TO)
f=78
TT=1800.09
T1=1365.34
? (TO)

TT=1800.05

? (TO)

TT=1800.06

? (TO)

TT=1800.05

? (TO)

TT=1800.08

? (TO)

TT=1800.02

? (TO)

TT=1800.06

? (TO)

TT=1800.08

? (TO)

TT=1800.05

SAT (TO)
f=51
TT=1800.07
T1=1583.24
SAT (TO)
f=88
TT=1800.12
T1=6.08
SAT (TO)
f=75
TT=1802.12
T1=16.1
SAT
f=77
TT=1783.01
T1=5.89
SAT (TO)
f=84
TT=1800.07
T1=2.2
SAT
f=70
TT=1798.02
T1=1207.98
SAT (TO)
f=84
TT=1800.24
T1=1.97
SAT
f=45
TT=1794.45
T1=1724.9
? (TO)

TT=1800.09

SAT (TO)
f=71
TT=1800.14
T1=83.02
SAT
f=55
TT=1791.47
T1=32.56
SAT (TO)
f=72
TT=1800.12
T1=177.72
SAT
f=45
TT=1796.93
T1=1307.69
SAT (TO)
f=88
TT=1800.09
T1=1800.81
? (TO)

TT=1800.02

? (TO)

TT=1800.03

SAT (TO)
f=68
TT=1800.12
T1=900.71
SAT (TO)
f=68
TT=1800.14
T1=900.71
SAT (TO)
f=75
TT=1800.43
T1=412.87
SAT (TO)
f=83
TT=1800.07
T1=2.26
SAT (TO)
f=88
TT=1800.07
T1=1.78
SAT
f=45
TT=1797.02
T1=909
SAT
f=45
TT=1797.04
T1=863.49
SAT
f=45
TT=1796.99
T1=844.73
? (TO)

TT=1800.09

? (TO)

TT=1800.11

?

TT=1799.6

?

TT=1799.57

Bench nameBest resultsbsolo
3.2
(complete)
clasp
2.0.6-R5325 (opt)
(complete)
npSolver
1.0
(complete)
npSolver
1.0 (fixed)
(complete)
npSolver
inc
(complete)
npSolver
inc (fixed)
(complete)
npSolver
inc-topDown
(complete)
npSolver
inc-topDown (fixed)
(complete)
npSolver
inc-topdown-quickBound
(complete)
npSolver
inc-topdown-quickBound (fixed)
(complete)
PB07: bsolo
3.0.17
(complete)
PB07: minisat+
1.14
(complete)
PB07: PB-clasp
2007-04-10
(complete)
PB07: Pueblo
1.4
(incomplete)
PB07: SAT4JPseudoResolution
2007-03-23
(complete)
PB09: bsolo
3.1
(complete)
PB09: SAT4J Pseudo Resolution
2.1.1
(complete)
PB09: SCIPspx
SCIP 1.1.0.7 with SoPLEX 1.4.1(24.4.2009)
(complete)
PB10: pb_cplex
2010-06-29
(complete)
PB10: SAT4J PB RES // CP
2.2.0 2010-05-31
(complete)
PB10: SCIPspx
SCIP 1.2.1.3 with SoPlex 1.4.2 (CVS Version 30.5.2010) as LP solver
(complete)
PB11: Sat4j Res//CP
2.3.0
(complete)
PB11: SCIP spx E_2
2011-06-10 (fixed)
(complete)
PB12: minisatp
1.0-2-g022594c
(complete)
pb2sat
2012-05-19
(complete)
pb2satCp2
2012-05-19
(complete)
pwbo
2.0
(complete)
pwbo
2.02
(complete)
SAT 4j PB RES // CP
2.3.2 Snapshot
(complete)
Sat 4j PB Resolution
2.3.2 Snapshot
(complete)
SAT4J PB specific settings
2.3.2 snapshot
(complete)
SCIP spx
SCIP 2.1.1.4. with SoPlex 1.6.0.3 fixed
(complete)
SCIP spx E
SCIP 2.1.1.4. Exp with SoPlex 1.6.0.3 fixed
(complete)
SCIP spx standard
SCIP 2.1.1.4. with SoPlex 1.6.0.3 standard fixed
(complete)
toysat
2012-05-17
(complete)
toysat
2012-06-01
(complete)
wbo
1.7
(complete)
wbo
1.72
(complete)
normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/
logic_synthesis/normalized-C880.b.opb
OPT
f=63
TT=0.273
T1=0.27
SAT
f=66
TT=1798
T1=1022.15
SAT (TO)
f=74
TT=1800.03
T1=110.23
? (TO)

TT=1800.12

? (TO)

TT=1800.12

? (TO)

TT=1800.13

? (TO)

TT=1800.1

? (TO)

TT=1800.06

? (TO)

TT=1800.1

? (TO)

TT=1800.12

? (TO)

TT=1800.09

OPT
f=63
TT=543.414
T1=541.14
SAT (TO)
f=64
TT=1800.08
T1=21.41
SAT (TO)
f=78
TT=1802.09
T1=852.11
SAT
f=74
TT=1783.01
T1=97.37
SAT (TO)
f=86
TT=1800.1
T1=0.45
SAT
f=66
TT=1798.02
T1=1020.69
SAT (TO)
f=86
TT=1800.07
T1=0.42
OPT
f=63
TT=2.695
T1=2.68
OPT
f=63
TT=0.273
T1=0.27
SAT (TO)
f=74
TT=1800.08
T1=983.48
OPT
f=63
TT=1.829
T1=1.81
SAT (TO)
f=74
TT=1800.2
T1=800.71
OPT
f=63
TT=6.117
T1=6.1
SAT (TO)
f=65
TT=1800.03
T1=1800.3
? (TO)

TT=1800.09

? (TO)

TT=1800.15

OPT
f=63
TT=943.65
T1=472.08
SAT (TO)
f=67
TT=1800.16
T1=900.31
SAT (TO)
f=78
TT=1800.04
T1=96.91
SAT (TO)
f=85
TT=1800.08
T1=0.46
SAT (TO)
f=89
TT=1800.07
T1=0.34
OPT
f=63
TT=1.853
T1=1.84
OPT
f=63
TT=1.903
T1=1.87
OPT
f=63
TT=3.542
T1=3.53
? (TO)

TT=1800.01

? (TO)

TT=1800.02

OPT
f=63
TT=167.73
T1=167.81
OPT
f=63
TT=162.326
T1=162.49
normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/
logic_synthesis/normalized-des.a.opb
OPT
f=942
TT=6.514
T1=6.47
SAT
f=1005
TT=1798.01
T1=2.17
SAT (TO)
f=1034
TT=1800.11
T1=39.42
? (TO)

TT=1800.04

? (TO)

TT=1800.01

? (TO)

TT=1800.07

? (TO)

TT=1800.08

? (TO)

TT=1800.07

? (TO)

TT=1800.1

? (TO)

TT=1800.07

? (TO)

TT=1800.09

SAT (TO)
f=961
TT=1800.08
T1=693.92
SAT (TO)
f=1030
TT=1800.06
T1=0.53
SAT (TO)
f=1020
TT=1802.09
T1=1.61
SAT
f=988
TT=1783.01
T1=0.43
? (exit code)

TT=431.71

SAT
f=1005
TT=1798.02
T1=2.19
SAT (TO)
f=1017
TT=1800.92
T1=0.72
OPT
f=942
TT=134.293
T1=134.23
OPT
f=942
TT=6.514
T1=6.47
SAT (TO)
f=1009
TT=1800.53
T1=76.76
OPT
f=942
TT=803.342
T1=168.68
SAT (TO)
f=1008
TT=1800.14
T1=105.81
OPT
f=942
TT=1356.25
T1=201.38
SAT (TO)
f=1030
TT=1800.04
T1=1800.5
? (TO)

TT=1800.08

? (TO)

TT=1800.02

SAT (TO)
f=1013
TT=1800.55
T1=900.41
SAT (TO)
f=1018
TT=1800.56
T1=900.41
SAT (TO)
f=1012
TT=1801.13
T1=23.81
SAT (TO)
f=1013
TT=1800.04
T1=0.79
SAT (TO)
f=1065
TT=1800.78
T1=0.78
SAT
f=946
TT=1796.82
T1=781.88
SAT
f=946
TT=1796.84
T1=788.44
SAT
f=946
TT=1796.87
T1=862.12
? (TO)

TT=1800.13

? (TO)

TT=1800.11

?

TT=1799.88

?

TT=1799.53

normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-ex4inp.r.opb
OPT
f=5
TT=0.134
T1=0.02
OPT
f=5
TT=1.077
T1=0.17
OPT
f=5
TT=12.786
T1=0.03
OPT
f=5
TT=1.568
T1=1.57
OPT
f=5
TT=2.498
T1=2.61
OPT
f=5
TT=1.512
T1=1.65
OPT
f=5
TT=1.34
T1=1.34
OPT
f=5
TT=1.407
T1=0.23
OPT
f=5
TT=1.668
T1=0.05
OPT
f=5
TT=1.405
T1=0.24
OPT
f=5
TT=1.662
T1=0.05
OPT
f=5
TT=0.095
T1=0.04
OPT
f=5
TT=0.72
T1=0.25
OPT
f=5
TT=624.703
T1=0.28
OPT
f=5
TT=0.578
T1=0.02
OPT
f=5
TT=191.177
T1=0.45
OPT
f=5
TT=1.064
T1=0.17
OPT
f=5
TT=323.43
T1=0.57
OPT
f=5
TT=0.154
T1=0.14
OPT
f=5
TT=0.203
T1=0.21
OPT
f=5
TT=2.974
T1=4.27
OPT
f=5
TT=0.14
T1=0.08
OPT
f=5
TT=2.045
T1=2.29
OPT
f=5
TT=0.134
T1=0.07
OPT
f=5
TT=0.412
T1=0.41
OPT
f=5
TT=1.329
T1=1.33
OPT
f=5
TT=1.339
T1=0.17
OPT
f=5
TT=4.287
T1=2.14
OPT
f=5
TT=4.388
T1=2.19
OPT
f=5
TT=2.988
T1=2.29
OPT
f=5
TT=108.208
T1=0.4
OPT
f=5
TT=208.162
T1=1.62
OPT
f=5
TT=0.139
T1=0.08
OPT
f=5
TT=0.14
T1=0.08
OPT
f=5
TT=0.136
T1=0.07
OPT
f=5
TT=407.672
T1=0.71
OPT
f=5
TT=408.793
T1=0.71
OPT
f=5
TT=1652.71
T1=1652.92
OPT
f=5
TT=1541.09
T1=1541.61
normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-ex6inp.r.opb
OPT
f=4
TT=0.01
T1=0
OPT
f=4
TT=0.082
T1=0.01
OPT
f=4
TT=0.042
T1=0
OPT
f=4
TT=0.093
T1=0.04
OPT
f=4
TT=0.093
T1=0.05
OPT
f=4
TT=0.066
T1=0.03
OPT
f=4
TT=0.077
T1=0.03
OPT
f=4
TT=0.073
T1=0.03
OPT
f=4
TT=0.074
T1=0.02
OPT
f=4
TT=0.074
T1=0.03
OPT
f=4
TT=0.064
T1=0.02
OPT
f=4
TT=0.262
T1=0.21
OPT
f=4
TT=0.084
T1=0.02
OPT
f=4
TT=0.374
T1=0.05
OPT
f=4
TT=0.01
T1=0
OPT
f=4
TT=0.785
T1=0.15
OPT
f=4
TT=0.084
T1=0.01
OPT
f=4
TT=0.964
T1=0.16
OPT
f=4
TT=0.028
T1=0.01
OPT
f=4
TT=0.017
T1=0.01
OPT
f=4
TT=0.824
T1=2.16
OPT
f=4
TT=0.053
T1=0.03
OPT
f=4
TT=0.745
T1=1.18
OPT
f=4
TT=0.052
T1=0.03
OPT
f=4
TT=0.044
T1=0.04
OPT
f=4
TT=0.07
T1=0.07
OPT
f=4
TT=0.097
T1=0.05
OPT
f=4
TT=0.123
T1=0.06
OPT
f=4
TT=0.142
T1=0.06
OPT
f=4
TT=0.985
T1=1.19
OPT
f=4
TT=0.825
T1=0.17
OPT
f=4
TT=0.995
T1=0.16
OPT
f=4
TT=0.078
T1=0.05
OPT
f=4
TT=0.071
T1=0.04
OPT
f=4
TT=0.035
T1=0.01
OPT
f=4
TT=1.382
T1=0
OPT
f=4
TT=1.366
T1=0
OPT
f=4
TT=0.352
T1=0.34
OPT
f=4
TT=0.352
T1=0.34
normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-lin.rom.r.opb
OPT
f=120
TT=0.185
T1=0.17
OPT
f=120
TT=2.013
T1=2.01
SAT (TO)
f=172
TT=1800.11
T1=1066.48
? (TO)

TT=1800.12

? (TO)

TT=1800.12

? (TO)

TT=1800.12

? (TO)

TT=1800.1

? (TO)

TT=1800.07

? (TO)

TT=1800.08

? (TO)

TT=1800.15

? (TO)

TT=1800.1

OPT
f=120
TT=0.181
T1=0.17
SAT (TO)
f=134
TT=1800.06
T1=10.9
SAT (TO)
f=186
TT=1800.14
T1=0.51
SAT
f=181
TT=1783.01
T1=0.61
No Cert.

TT=1664.37

OPT
f=120
TT=2.035
T1=2.03
SAT (TO)
f=177
TT=1800.06
T1=0.3
OPT
f=120
TT=0.273
T1=0.26
OPT
f=120
TT=0.2
T1=0.19
SAT (TO)
f=161
TT=1800.18
T1=962.11
OPT
f=120
TT=0.279
T1=0.27
SAT (TO)
f=159
TT=1800.13
T1=641.14
OPT
f=120
TT=0.291
T1=0.27
SAT (TO)
f=137
TT=1800.06
T1=1800.4
? (TO)

TT=1800.06

? (TO)

TT=1800.11

SAT (TO)
f=133
TT=1800.05
T1=900.31
SAT (TO)
f=133
TT=1800.42
T1=900.31
SAT (TO)
f=165
TT=1800.06
T1=246.02
SAT (TO)
f=177
TT=1800.03
T1=0.28
SAT (TO)
f=177
TT=1800.1
T1=0.29
OPT
f=120
TT=0.245
T1=0.23
OPT
f=120
TT=0.27
T1=0.25
OPT
f=120
TT=0.185
T1=0.17
? (TO)

TT=1800.11

? (TO)

TT=1800.11

?

TT=1799.88

?

TT=1799.81

normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-m100_100_10_10.r.opb
OPT
f=12
TT=1.706
T1=0.81
OPT
f=12
TT=12.588
T1=9.09
SAT (TO)
f=13
TT=1800.02
T1=1063.22
? (TO)

TT=1800.12

? (TO)

TT=1800.12

? (TO)

TT=1800.11

? (TO)

TT=1800.11

? (TO)

TT=1800.12

? (TO)

TT=1800.14

? (TO)

TT=1800.12

? (TO)

TT=1800.09

OPT
f=12
TT=39.867
T1=39.18
SAT (TO)
f=13
TT=1800.01
T1=1164.56
SAT (TO)
f=14
TT=1802.09
T1=777.01
SAT
f=13
TT=1783
T1=721.57
SAT (TO)
f=16
TT=1800.47
T1=4.03
OPT
f=12
TT=12.59
T1=9.11
? (TO)

TT=1803.95

OPT
f=12
TT=4.767
T1=4.75
OPT
f=12
TT=1.706
T1=0.81
SAT (TO)
f=14
TT=1801.2
T1=28.36
SAT
f=13
TT=1789.72
T1=61.51
SAT (TO)
f=13
TT=1800.1
T1=910.01
OPT
f=12
TT=3.549
T1=3.5
SAT (TO)
f=13
TT=1800.02
T1=1800.3
? (TO)

TT=1800.02

? (TO)

TT=1800.03

SAT (TO)
f=14
TT=1800.48
T1=900.31
SAT (TO)
f=14
TT=1800.14
T1=900.31
SAT (TO)
f=13
TT=1800.1
T1=645.74
SAT (TO)
f=13
TT=1800.05
T1=322.96
SAT (TO)
f=14
TT=1800.07
T1=161.09
OPT
f=12
TT=4.589
T1=4.58
OPT
f=12
TT=4.692
T1=4.68
OPT
f=12
TT=4.843
T1=4.83
? (TO)

TT=1800.01

? (TO)

TT=1800.03

?

TT=1799.89

?

TT=1799.45

normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-m100_100_10_15.r.opb
OPT
f=10
TT=0.13
T1=0.11
OPT
f=10
TT=26.78
T1=26.66
SAT (TO)
f=11
TT=1800.03
T1=464.36
? (TO)

TT=1800.11

OPT
f=10
TT=701.63
T1=434.3
? (TO)

TT=1800.12

? (TO)

TT=1800.09

? (TO)

TT=1800.09

? (TO)

TT=1800.09

? (TO)

TT=1800.12

? (TO)

TT=1800.07

OPT
f=10
TT=30.291
T1=29.64
SAT (TO)
f=11
TT=1800.03
T1=354.99
SAT (TO)
f=11
TT=1802.07
T1=1350.4
OPT
f=10
TT=1187.53
T1=1173.13
SAT (TO)
f=13
TT=1802.32
T1=29.73
OPT
f=10
TT=27.101
T1=26.98
SAT (TO)
f=12
TT=1800.78
T1=783.99
OPT
f=10
TT=3.723
T1=3.71
OPT
f=10
TT=0.13
T1=0.11
SAT (TO)
f=11
TT=1800.24
T1=185.15
SAT
f=11
TT=1789.74
T1=94.13
SAT (TO)
f=12
TT=1800.93
T1=7.2
OPT
f=10
TT=1.499
T1=0.83
OPT
f=10
TT=1726.5
T1=1726.76
? (TO)

TT=1800.03

? (TO)

TT=1800.09

SAT (TO)
f=12
TT=1800.39
T1=900.31
SAT (TO)
f=12
TT=1800.03
T1=900.21
SAT (TO)
f=12
TT=1800.08
T1=4.17
SAT (TO)
f=11
TT=1800.01
T1=1409.74
SAT (TO)
f=12
TT=1800.02
T1=79.14
OPT
f=10
TT=1.595
T1=0.88
OPT
f=10
TT=1.503
T1=0.83
OPT
f=10
TT=1.492
T1=0.83
? (TO)

TT=1800.02

? (TO)

TT=1800.03

?

TT=1799.81

?

TT=1799.53

normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-m100_100_10_30.r.opb
OPT
f=8
TT=0.075
T1=0.08
OPT
f=8
TT=1.394
T1=1
OPT
f=8
TT=1691.74
T1=74.87
OPT
f=8
TT=53.368
T1=45.7
OPT
f=8
TT=73.667
T1=73.68
OPT
f=8
TT=47.958
T1=31.01
OPT
f=8
TT=103.512
T1=103.53
OPT
f=8
TT=34.395
T1=16.19
OPT
f=8
TT=55.549
T1=38.75
OPT
f=8
TT=35.12
T1=16.53
OPT
f=8
TT=52.992
T1=37.31
OPT
f=8
TT=0.591
T1=0.39
OPT
f=8
TT=142.448
T1=118.67
SAT (TO)
f=9
TT=1802.12
T1=1.24
OPT
f=8
TT=34.399
T1=29.52
SAT (TO)
f=10
TT=1800.07
T1=31.12
OPT
f=8
TT=1.482
T1=1.07
SAT (TO)
f=9
TT=1800.25
T1=985.9
OPT
f=8
TT=0.646
T1=0.26
OPT
f=8
TT=0.075
T1=0.08
SAT (TO)
f=9
TT=1800.09
T1=42.57
SAT
f=8
TT=1789.73
T1=886.07
SAT (TO)
f=9
TT=1801.29
T1=9.21
OPT
f=8
TT=0.577
T1=0.22
OPT
f=8
TT=103.565
T1=103.57
OPT
f=8
TT=22.142
T1=13.63
OPT
f=8
TT=27.815
T1=19.31
OPT
f=8
TT=292.71
T1=146.47
OPT
f=8
TT=261.91
T1=131.09
SAT (TO)
f=9
TT=1800.03
T1=12.68
SAT (TO)
f=9
TT=1800.08
T1=6.25
SAT (TO)
f=9
TT=1800.43
T1=9.24
OPT
f=8
TT=0.577
T1=0.22
OPT
f=8
TT=0.57
T1=0.22
OPT
f=8
TT=0.559
T1=0.21
? (TO)

TT=1800.03

? (TO)

TT=1800.02

?

TT=1799.54

?

TT=1799.8

normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-m100_100_30_30.r.opb
OPT
f=5
TT=0.4
T1=0.26
OPT
f=5
TT=42.969
T1=41.82
OPT
f=5
TT=77.937
T1=72.12
OPT
f=5
TT=78.798
T1=78.81
OPT
f=5
TT=4.541
T1=4.98
OPT
f=5
TT=9.352
T1=9.35
OPT
f=5
TT=11.056
T1=11.05
OPT
f=5
TT=38.75
T1=29.97
OPT
f=5
TT=108.124
T1=103.38
OPT
f=5
TT=37.296
T1=28.79
OPT
f=5
TT=107.64
T1=103.21
OPT
f=5
TT=29.135
T1=28.89
OPT
f=5
TT=99.037
T1=92.5
OPT
f=5
TT=126.985
T1=98.06
OPT
f=5
TT=22.326
T1=21.27
SAT (TO)
f=6
TT=1801.53
T1=0.26
OPT
f=5
TT=42.418
T1=41.28
SAT (TO)
f=6
TT=1802.26
T1=1.61
OPT
f=5
TT=1.702
T1=0.99
OPT
f=5
TT=0.4
T1=0.26
OPT
f=5
TT=455.576
T1=166.38
OPT
f=5
TT=125.832
T1=15.68
OPT
f=5
TT=1009.59
T1=534.21
OPT
f=5
TT=1.666
T1=0.96
OPT
f=5
TT=56.214
T1=56.22
OPT
f=5
TT=8.202
T1=3.93
OPT
f=5
TT=8.078
T1=3.81
SAT (TO)
f=6
TT=1800.02
T1=900.21
SAT (TO)
f=6
TT=1800.02
T1=900.21
OPT
f=5
TT=356.969
T1=123.71
OPT
f=5
TT=38.55
T1=2.47
OPT
f=5
TT=586.408
T1=539.91
OPT
f=5
TT=1.854
T1=1.03
OPT
f=5
TT=1.748
T1=0.96
OPT
f=5
TT=1.741
T1=0.96
? (TO)

TT=1800.03

? (TO)

TT=1800.03

?

TT=1799.5

?

TT=1799.86

normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-m100_100_50_50.r.opb
OPT
f=4
TT=0.735
T1=0
OPT
f=4
TT=11.144
T1=0.5
OPT
f=4
TT=1.025
T1=0
OPT
f=4
TT=2.366
T1=0.23
OPT
f=4
TT=1.618
T1=1.61
OPT
f=4
TT=3.248
T1=0.18
OPT
f=4
TT=1.547
T1=1.64
OPT
f=4
TT=3.566
T1=0.53
OPT
f=4
TT=2.551
T1=0.03
OPT
f=4
TT=3.544
T1=0.53
OPT
f=4
TT=2.689
T1=0.03
OPT
f=4
TT=6.619
T1=0.65
OPT
f=4
TT=2.087
T1=0.03
OPT
f=4
TT=5.581
T1=0.08
OPT
f=4
TT=0.832
T1=0.02
OPT
f=4
TT=15.066
T1=0.37
OPT
f=4
TT=10.985
T1=0.5
OPT
f=4
TT=28.05
T1=0.34
OPT
f=4
TT=8.83
T1=0.51
OPT
f=4
TT=0.735
T1=0.35
OPT
f=4
TT=78.243
T1=3.24
OPT
f=4
TT=9.289
T1=0.42
OPT
f=4
TT=47.946
T1=1.73
OPT
f=4
TT=7.177
T1=0.53
OPT
f=4
TT=1.248
T1=1.24
OPT
f=4
TT=2.361
T1=0.21
OPT
f=4
TT=2.688
T1=0.53
OPT
f=4
TT=22.311
T1=11.18
OPT
f=4
TT=22.581
T1=11.31
OPT
f=4
TT=15.412
T1=1.73
OPT
f=4
TT=4.384
T1=0.28
OPT
f=4
TT=8.236
T1=0.28
OPT
f=4
TT=7.753
T1=0.55
OPT
f=4
TT=7.704
T1=0.54
OPT
f=4
TT=7.77
T1=0.55
OPT
f=4
TT=19.641
T1=0.02
OPT
f=4
TT=20.295
T1=0.03
OPT
f=4
TT=95.674
T1=95.68
OPT
f=4
TT=95.33
T1=95.43
Bench nameBest resultsbsolo
3.2
(complete)
clasp
2.0.6-R5325 (opt)
(complete)
npSolver
1.0
(complete)
npSolver
1.0 (fixed)
(complete)
npSolver
inc
(complete)
npSolver
inc (fixed)
(complete)
npSolver
inc-topDown
(complete)
npSolver
inc-topDown (fixed)
(complete)
npSolver
inc-topdown-quickBound
(complete)
npSolver
inc-topdown-quickBound (fixed)
(complete)
PB07: bsolo
3.0.17
(complete)
PB07: minisat+
1.14
(complete)
PB07: PB-clasp
2007-04-10
(complete)
PB07: Pueblo
1.4
(incomplete)
PB07: SAT4JPseudoResolution
2007-03-23
(complete)
PB09: bsolo
3.1
(complete)
PB09: SAT4J Pseudo Resolution
2.1.1
(complete)
PB09: SCIPspx
SCIP 1.1.0.7 with SoPLEX 1.4.1(24.4.2009)
(complete)
PB10: pb_cplex
2010-06-29
(complete)
PB10: SAT4J PB RES // CP
2.2.0 2010-05-31
(complete)
PB10: SCIPspx
SCIP 1.2.1.3 with SoPlex 1.4.2 (CVS Version 30.5.2010) as LP solver
(complete)
PB11: Sat4j Res//CP
2.3.0
(complete)
PB11: SCIP spx E_2
2011-06-10 (fixed)
(complete)
PB12: minisatp
1.0-2-g022594c
(complete)
pb2sat
2012-05-19
(complete)
pb2satCp2
2012-05-19
(complete)
pwbo
2.0
(complete)
pwbo
2.02
(complete)
SAT 4j PB RES // CP
2.3.2 Snapshot
(complete)
Sat 4j PB Resolution
2.3.2 Snapshot
(complete)
SAT4J PB specific settings
2.3.2 snapshot
(complete)
SCIP spx
SCIP 2.1.1.4. with SoPlex 1.6.0.3 fixed
(complete)
SCIP spx E
SCIP 2.1.1.4. Exp with SoPlex 1.6.0.3 fixed
(complete)
SCIP spx standard
SCIP 2.1.1.4. with SoPlex 1.6.0.3 standard fixed
(complete)
toysat
2012-05-17
(complete)
toysat
2012-06-01
(complete)
wbo
1.7
(complete)
wbo
1.72
(complete)
normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-m100_100_70_70.r.opb
OPT
f=3
TT=0.038
T1=0
OPT
f=3
TT=0.671
T1=0.02
OPT
f=3
TT=0.038
T1=0
OPT
f=3
TT=0.582
T1=0.13
OPT
f=3
TT=0.335
T1=0.03
OPT
f=3
TT=0.555
T1=0.11
OPT
f=3
TT=0.322
T1=0.03
OPT
f=3
TT=0.607
T1=0.11
OPT
f=3
TT=0.315
T1=0.03
OPT
f=3
TT=0.582
T1=0.11
OPT
f=3
TT=0.313
T1=0.03
OPT
f=3
TT=0.784
T1=0.03
OPT
f=3
TT=0.271
T1=0.03
OPT
f=3
TT=0.182
T1=0.07
Signal

TT=0.049

OPT
f=3
TT=1.194
T1=0.25
OPT
f=3
TT=0.678
T1=0.02
OPT
f=3
TT=1.267
T1=0.24
OPT
f=3
TT=1.142
T1=0.41
OPT
f=3
TT=0.211
T1=0.19
OPT
f=3
TT=2.996
T1=1.24
OPT
f=3
TT=0.689
T1=0.35
OPT
f=3
TT=3.275
T1=0.78
OPT
f=3
TT=1.127
T1=0.4
OPT
f=3
TT=0.139
T1=0.13
OPT
f=3
TT=0.841
T1=0.84
OPT
f=3
TT=0.835
T1=0.4
OPT
f=3
TT=0.826
T1=0.4
OPT
f=3
TT=0.836
T1=0.41
OPT
f=3
TT=2.473
T1=0.76
OPT
f=3
TT=1.024
T1=0.25
OPT
f=3
TT=0.984
T1=0.25
OPT
f=3
TT=1.245
T1=0.45
OPT
f=3
TT=1.252
T1=0.45
OPT
f=3
TT=1.263
T1=0.45
OPT
f=3
TT=2.139
T1=0.03
OPT
f=3
TT=2.107
T1=0.03
OPT
f=3
TT=2.377
T1=2.37
OPT
f=3
TT=2.366
T1=2.37
normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-m100_300_10_15.r.opb
OPT
f=19
TT=5.299
T1=0.66
OPT
f=19
TT=127.244
T1=26.43
SAT (TO)
f=25
TT=1800.02
T1=158.18
? (TO)

TT=1800.13

? (TO)

TT=1800.13

? (TO)

TT=1800.11

? (TO)

TT=1800.13

? (TO)

TT=1800.11

? (TO)

TT=1800.05

? (TO)

TT=1800.07

? (TO)

TT=1800.06

OPT
f=19
TT=31.465
T1=2.55
SAT (TO)
f=22
TT=1800.02
T1=1608.27
SAT (TO)
f=30
TT=1802.1
T1=1079.19
SAT
f=30
TT=1783.01
T1=906.44
SAT (TO)
f=34
TT=1800.11
T1=0.19
OPT
f=19
TT=127.117
T1=26.23
SAT (TO)
f=34
TT=1800.3
T1=0.17
OPT
f=19
TT=7.515
T1=0.77
OPT
f=19
TT=5.299
T1=1.85
SAT (TO)
f=24
TT=1800.17
T1=44.49
SAT
f=20
TT=1789.73
T1=0.71
SAT (TO)
f=26
TT=1800.05
T1=7.7
OPT
f=19
TT=6.683
T1=0.66
SAT (TO)
f=23
TT=1800.09
T1=1800.4
? (TO)

TT=1800.06

? (TO)

TT=1800.07

SAT (TO)
f=25
TT=1800.09
T1=900.31
SAT (TO)
f=25
TT=1800.44
T1=900.31
SAT (TO)
f=23
TT=1800.42
T1=907.74
SAT (TO)
f=27
TT=1800.06
T1=169.09
SAT (TO)
f=33
TT=1800.05
T1=0.2
OPT
f=19
TT=6.902
T1=0.73
OPT
f=19
TT=6.709
T1=0.68
OPT
f=19
TT=7.056
T1=0.74
? (TO)

TT=1800.03

? (TO)

TT=1800.03

?

TT=1799.55

?

TT=1799.37

normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-m100_50_20_20.r.opb
OPT
f=5
TT=0.331
T1=0
OPT
f=5
TT=1.332
T1=0.09
OPT
f=5
TT=0.622
T1=0
OPT
f=5
TT=1.094
T1=0.12
OPT
f=5
TT=0.698
T1=0.08
OPT
f=5
TT=0.723
T1=0.11
OPT
f=5
TT=0.65
T1=0.05
OPT
f=5
TT=0.662
T1=0.05
OPT
f=5
TT=0.438
T1=0.03
OPT
f=5
TT=0.662
T1=0.05
OPT
f=5
TT=0.459
T1=0.03
OPT
f=5
TT=1.326
T1=0.13
OPT
f=5
TT=0.931
T1=0.01
OPT
f=5
TT=1.375
T1=0.05
OPT
f=5
TT=0.46
T1=0
OPT
f=5
TT=5.184
T1=0.21
OPT
f=5
TT=1.345
T1=0.09
OPT
f=5
TT=7.115
T1=0.36
OPT
f=5
TT=2.702
T1=0.46
OPT
f=5
TT=0.331
T1=0.16
OPT
f=5
TT=15.391
T1=3.17
OPT
f=5
TT=4.33
T1=0.03
OPT
f=5
TT=14.691
T1=1.69
OPT
f=5
TT=2.624
T1=0.03
OPT
f=5
TT=0.605
T1=0.61
OPT
f=5
TT=0.806
T1=0.8
OPT
f=5
TT=0.797
T1=0.04
OPT
f=5
TT=4.302
T1=2.15
OPT
f=5
TT=4.502
T1=2.24
OPT
f=5
TT=7.884
T1=1.7
OPT
f=5
TT=2.793
T1=0.24
OPT
f=5
TT=4.432
T1=0.27
OPT
f=5
TT=2.596
T1=0.05
OPT
f=5
TT=2.456
T1=0.04
OPT
f=5
TT=2.5
T1=0.04
OPT
f=5
TT=8.785
T1=0.09
OPT
f=5
TT=8.726
T1=0.09
OPT
f=5
TT=155.04
T1=155.13
OPT
f=5
TT=157.42
T1=157.57
normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-m100_50_30_30.r.opb
OPT
f=3
TT=0.014
T1=0
OPT
f=3
TT=0.263
T1=0.11
OPT
f=3
TT=0.014
T1=0
OPT
f=3
TT=0.155
T1=0.15
OPT
f=3
TT=0.091
T1=0.09
OPT
f=3
TT=0.127
T1=0.12
OPT
f=3
TT=0.065
T1=0.06
OPT
f=3
TT=0.108
T1=0.06
OPT
f=3
TT=0.066
T1=0.05
OPT
f=3
TT=0.106
T1=0.06
OPT
f=3
TT=0.064
T1=0.04
OPT
f=3
TT=0.215
T1=0.08
OPT
f=3
TT=0.037
T1=0.02
OPT
f=3
TT=0.071
T1=0.05
OPT
f=3
TT=0.02
T1=0.01
OPT
f=3
TT=0.623
T1=0.23
OPT
f=3
TT=0.265
T1=0.11
OPT
f=3
TT=0.635
T1=0.21
OPT
f=3
TT=0.564
T1=0.47
OPT
f=3
TT=0.103
T1=0.09
OPT
f=3
TT=1.214
T1=2.19
OPT
f=3
TT=0.506
T1=0.42
OPT
f=3
TT=1.113
T1=1.21
OPT
f=3
TT=0.361
T1=0.28
OPT
f=3
TT=0.016
T1=0.01
OPT
f=3
TT=0.132
T1=0.08
OPT
f=3
TT=0.196
T1=0.15
OPT
f=3
TT=0.063
T1=0.02
OPT
f=3
TT=0.063
T1=0.03
OPT
f=3
TT=1.063
T1=1.21
OPT
f=3
TT=0.585
T1=0.25
OPT
f=3
TT=0.622
T1=0.22
OPT
f=3
TT=0.776
T1=0.68
OPT
f=3
TT=0.77
T1=0.68
OPT
f=3
TT=0.775
T1=0.68
OPT
f=3
TT=0.251
T1=0.16
OPT
f=3
TT=0.241
T1=0.16
OPT
f=3
TT=0.152
T1=0.15
OPT
f=3
TT=0.154
T1=0.15
normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-m100_50_40_40.r.opb
OPT
f=2
TT=0.002
T1=0
OPT
f=2
TT=0.07
T1=0.06
OPT
f=2
TT=0.002
T1=0
OPT
f=2
TT=0.124
T1=0.1
OPT
f=2
TT=0.056
T1=0.05
OPT
f=2
TT=0.075
T1=0.06
OPT
f=2
TT=0.031
T1=0.03
OPT
f=2
TT=0.082
T1=0.07
OPT
f=2
TT=0.034
T1=0.03
OPT
f=2
TT=0.075
T1=0.07
OPT
f=2
TT=0.032
T1=0.03
OPT
f=2
TT=0.104
T1=0.1
OPT
f=2
TT=0.026
T1=0.02
OPT
f=2
TT=0.068
T1=0.05
OPT
f=2
TT=0.01
T1=0.01
OPT
f=2
TT=0.384
T1=0.23
OPT
f=2
TT=0.072
T1=0.06
OPT
f=2
TT=0.404
T1=0.24
OPT
f=2
TT=0.565
T1=0.56
OPT
f=2
TT=0.037
T1=0.03
OPT
f=2
TT=0.485
T1=2.25
OPT
f=2
TT=0.223
T1=0.22
OPT
f=2
TT=0.554
T1=1.24
OPT
f=2
TT=0.507
T1=0.5
OPT
f=2
TT=0.008
T1=0
OPT
f=2
TT=0.082
T1=0.07
OPT
f=2
TT=0.109
T1=0.1
OPT
f=2
TT=0.004
T1=0
OPT
f=2
TT=0.004
T1=0
OPT
f=2
TT=0.516
T1=1.22
OPT
f=2
TT=0.354
T1=0.21
OPT
f=2
TT=0.364
T1=0.21
OPT
f=2
TT=0.595
T1=0.59
OPT
f=2
TT=0.584
T1=0.58
OPT
f=2
TT=0.602
T1=0.59
OPT
f=2
TT=0.025
T1=0.02
OPT
f=2
TT=0.026
T1=0.02
OPT
f=2
TT=0.003
T1=0
OPT
f=2
TT=0.004
T1=0
normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/
logic_synthesis/normalized-m4.r.opb
OPT
f=90
TT=0.143
T1=0.14
OPT
f=90
TT=0.329
T1=0.29
SAT (TO)
f=111
TT=1800.11
T1=515.5
? (TO)

TT=1800.12

? (TO)

TT=1800.12

? (TO)

TT=1800.11

? (TO)

TT=1800.12

? (TO)

TT=1800.09

? (TO)

TT=1800.07

? (TO)

TT=1800.03

? (TO)

TT=1800.04

OPT
f=90
TT=0.106
T1=0.04
SAT (TO)
f=101
TT=1800.07
T1=412.17
SAT (TO)
f=117
TT=1802.11
T1=0.15
SAT
f=113
TT=1783
T1=28.14
SAT (TO)
f=115
TT=1800.56
T1=0.3
OPT
f=90
TT=0.325
T1=0.28
SAT (TO)
f=115
TT=1800.3
T1=0.33
OPT
f=90
TT=0.46
T1=0.45
OPT
f=90
TT=0.143
T1=0.14
SAT (TO)
f=104
TT=1800.07
T1=448.76
OPT
f=90
TT=7.147
T1=7.14
SAT (TO)
f=104
TT=1800.68
T1=852.22
OPT
f=90
TT=1.044
T1=1.02
SAT (TO)
f=102
TT=1800.09
T1=1800.4
? (TO)

TT=1800.08

? (TO)

TT=1800.06

SAT (TO)
f=98
TT=1800.05
T1=900.31
SAT (TO)
f=98
TT=1800.49
T1=900.31
SAT (TO)
f=103
TT=1800.05
T1=949.4
SAT (TO)
f=115
TT=1800.73
T1=0.29
SAT (TO)
f=116
TT=1800.02
T1=0.29
OPT
f=90
TT=0.586
T1=0.57
OPT
f=90
TT=0.554
T1=0.53
OPT
f=90
TT=0.594
T1=0.58
? (TO)

TT=1800.04

? (TO)

TT=1800.07

?

TT=1799.44

?

TT=1799.45

normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-m50_100_10_10.r.opb
OPT
f=8
TT=0.019
T1=0.01
OPT
f=8
TT=0.037
T1=0.03
OPT
f=8
TT=604.501
T1=83.53
OPT
f=8
TT=2.748
T1=2.05
OPT
f=8
TT=3.305
T1=2.61
OPT
f=8
TT=2.357
T1=2.01
OPT
f=8
TT=2.209
T1=1.77
OPT
f=8
TT=12.287
T1=12.26
OPT
f=8
TT=5.321
T1=5.58
OPT
f=8
TT=12.257
T1=12.23
OPT
f=8
TT=5.571
T1=5.55
OPT
f=8
TT=0.02
T1=0.02
OPT
f=8
TT=12.776
T1=11.8
OPT
f=8
TT=325.639
T1=79.12
OPT
f=8
TT=19.053
T1=18.95
SAT (TO)
f=10
TT=1800.03
T1=51.98
OPT
f=8
TT=0.037
T1=0.03
SAT (TO)
f=9
TT=1800.33
T1=34.32
OPT
f=8
TT=0.102
T1=0.09
OPT
f=8
TT=0.019
T1=0.01
SAT (TO)
f=8
TT=1800.2
T1=94.26
OPT
f=8
TT=0.162
T1=0.15
OPT
f=8
TT=267.402
T1=4.14
OPT
f=8
TT=0.11
T1=0.1
OPT
f=8
TT=11.101
T1=11.1
OPT
f=8
TT=3.621
T1=3.14
OPT
f=8
TT=4.149
T1=3.62
OPT
f=8
TT=68.49
T1=34.29
OPT
f=8
TT=72.39
T1=36.23
OPT
f=8
TT=242.197
T1=4.15
OPT
f=8
TT=680.6
T1=243.57
OPT
f=8
TT=1648.93
T1=962.34
OPT
f=8
TT=0.102
T1=0.09
OPT
f=8
TT=0.107
T1=0.09
OPT
f=8
TT=0.106
T1=0.09
? (TO)

TT=1800.03

? (TO)

TT=1800.03

?

TT=1799.91

?

TT=1799.48

normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-m50_100_70_70.r.opb
OPT
f=2
TT=0.003
T1=0
OPT
f=2
TT=0.16
T1=0.15
OPT
f=2
TT=0.004
T1=0
OPT
f=2
TT=0.124
T1=0.1
OPT
f=2
TT=0.065
T1=0.05
OPT
f=2
TT=0.079
T1=0.06
OPT
f=2
TT=0.039
T1=0.03
OPT
f=2
TT=0.073
T1=0.06
OPT
f=2
TT=0.041
T1=0.03
OPT
f=2
TT=0.074
T1=0.06
OPT
f=2
TT=0.04
T1=0.03
OPT
f=2
TT=0.319
T1=0.32
OPT
f=2
TT=0.041
T1=0.03
OPT
f=2
TT=0.066
T1=0.05
OPT
f=2
TT=0.011
T1=0.01
OPT
f=2
TT=0.584
T1=0.23
OPT
f=2
TT=0.162
T1=0.15
OPT
f=2
TT=0.593
T1=0.24
OPT
f=2
TT=0.028
T1=0.02
OPT
f=2
TT=0.039
T1=0.03
OPT
f=2
TT=0.754
T1=3.2
OPT
f=2
TT=0.044
T1=0.04
OPT
f=2
TT=0.754
T1=1.74
OPT
f=2
TT=0.058
T1=0.04
OPT
f=2
TT=0.01
T1=0.01
OPT
f=2
TT=0.086
T1=0.07
OPT
f=2
TT=0.273
T1=0.14
OPT
f=2
TT=0.003
T1=0.01
OPT
f=2
TT=0.003
T1=0.01
OPT
f=2
TT=0.696
T1=1.71
OPT
f=2
TT=0.473
T1=0.22
OPT
f=2
TT=0.543
T1=0.25
OPT
f=2
TT=0.055
T1=0.04
OPT
f=2
TT=0.058
T1=0.05
OPT
f=2
TT=0.055
T1=0.04
OPT
f=2
TT=0.055
T1=0.02
OPT
f=2
TT=0.055
T1=0.02
OPT
f=2
TT=0.033
T1=0.03
OPT
f=2
TT=0.045
T1=0.03
normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-m50_100_90_90.r.opb
OPT
f=2
TT=0.004
T1=0
OPT
f=2
TT=0.039
T1=0.04
OPT
f=2
TT=0.004
T1=0
OPT
f=2
TT=0.137
T1=0.11
OPT
f=2
TT=0.051
T1=0.03
OPT
f=2
TT=0.088
T1=0.07
OPT
f=2
TT=0.037
T1=0.03
OPT
f=2
TT=0.08
T1=0.07
OPT
f=2
TT=0.036
T1=0.02
OPT
f=2
TT=0.083
T1=0.07
OPT
f=2
TT=0.055
T1=0.02
OPT
f=2
TT=0.04
T1=0.04
OPT
f=2
TT=0.033
T1=0.02
OPT
f=2
TT=0.063
T1=0.05
OPT
f=2
TT=0.012
T1=0.01
OPT
f=2
TT=0.552
T1=0.23
OPT
f=2
TT=0.04
T1=0.03
OPT
f=2
TT=0.527
T1=0.23
OPT
f=2
TT=0.032
T1=0.02
OPT
f=2
TT=0.057
T1=0.05
OPT
f=2
TT=0.633
T1=1.23
OPT
f=2
TT=0.035
T1=0.03
OPT
f=2
TT=0.646
T1=0.76
OPT
f=2
TT=0.039
T1=0.03
OPT
f=2
TT=0.007
T1=0
OPT
f=2
TT=0.094
T1=0.07
OPT
f=2
TT=0.093
T1=0.07
OPT
f=2
TT=0.004
T1=0
OPT
f=2
TT=0.004
T1=0
OPT
f=2
TT=0.614
T1=0.72
OPT
f=2
TT=0.484
T1=0.23
OPT
f=2
TT=0.514
T1=0.23
OPT
f=2
TT=0.034
T1=0.03
OPT
f=2
TT=0.042
T1=0.03
OPT
f=2
TT=0.036
T1=0.03
OPT
f=2
TT=0.043
T1=0.02
OPT
f=2
TT=0.043
T1=0.02
OPT
f=2
TT=0.024
T1=0.01
OPT
f=2
TT=0.024
T1=0.01
normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-maincont.r.opb
OPT
f=7
TT=0.003
T1=0.01
OPT
f=7
TT=0.055
T1=0.02
OPT
f=7
TT=4.748
T1=0.14
OPT
f=7
TT=0.122
T1=0.09
OPT
f=7
TT=0.075
T1=0.06
OPT
f=7
TT=0.069
T1=0.06
OPT
f=7
TT=0.042
T1=0.03
OPT
f=7
TT=0.078
T1=0.06
OPT
f=7
TT=0.051
T1=0.03
OPT
f=7
TT=0.07
T1=0.06
OPT
f=7
TT=0.046
T1=0.03
OPT
f=7
TT=0.026
T1=0.02
OPT
f=7
TT=0.064
T1=0.04
OPT
f=7
TT=4.206
T1=0.18
OPT
f=7
TT=0.012
T1=0.01
OPT
f=7
TT=21.45
T1=0.59
OPT
f=7
TT=0.058
T1=0.02
OPT
f=7
TT=21.843
T1=0.39
OPT
f=7
TT=0.048
T1=0.04
OPT
f=7
TT=0.015
T1=0.01
OPT
f=7
TT=1.056
T1=3.19
OPT
f=7
TT=0.068
T1=0.06
OPT
f=7
TT=0.879
T1=1.72
OPT
f=7
TT=0.065
T1=0.05
OPT
f=7
TT=0.034
T1=0.03
OPT
f=7
TT=0.075
T1=0.05
OPT
f=7
TT=0.081
T1=0.06
OPT
f=7
TT=0.043
T1=0.01
OPT
f=7
TT=0.044
T1=0.01
OPT
f=7
TT=0.904
T1=1.68
OPT
f=7
TT=9.254
T1=0.82
OPT
f=7
TT=17.891
T1=0.58
OPT
f=7
TT=0.067
T1=0.05
OPT
f=7
TT=0.07
T1=0.06
OPT
f=7
TT=0.063
T1=0.05
OPT
f=7
TT=14.331
T1=2.33
OPT
f=7
TT=14.121
T1=2.29
OPT
f=7
TT=0.003
T1=0.01
OPT
f=7
TT=0.003
T1=0.01
Bench nameBest resultsbsolo
3.2
(complete)
clasp
2.0.6-R5325 (opt)
(complete)
npSolver
1.0
(complete)
npSolver
1.0 (fixed)
(complete)
npSolver
inc
(complete)
npSolver
inc (fixed)
(complete)
npSolver
inc-topDown
(complete)
npSolver
inc-topDown (fixed)
(complete)
npSolver
inc-topdown-quickBound
(complete)
npSolver
inc-topdown-quickBound (fixed)
(complete)
PB07: bsolo
3.0.17
(complete)
PB07: minisat+
1.14
(complete)
PB07: PB-clasp
2007-04-10
(complete)
PB07: Pueblo
1.4
(incomplete)
PB07: SAT4JPseudoResolution
2007-03-23
(complete)
PB09: bsolo
3.1
(complete)
PB09: SAT4J Pseudo Resolution
2.1.1
(complete)
PB09: SCIPspx
SCIP 1.1.0.7 with SoPLEX 1.4.1(24.4.2009)
(complete)
PB10: pb_cplex
2010-06-29
(complete)
PB10: SAT4J PB RES // CP
2.2.0 2010-05-31
(complete)
PB10: SCIPspx
SCIP 1.2.1.3 with SoPlex 1.4.2 (CVS Version 30.5.2010) as LP solver
(complete)
PB11: Sat4j Res//CP
2.3.0
(complete)
PB11: SCIP spx E_2
2011-06-10 (fixed)
(complete)
PB12: minisatp
1.0-2-g022594c
(complete)
pb2sat
2012-05-19
(complete)
pb2satCp2
2012-05-19
(complete)
pwbo
2.0
(complete)
pwbo
2.02
(complete)
SAT 4j PB RES // CP
2.3.2 Snapshot
(complete)
Sat 4j PB Resolution
2.3.2 Snapshot
(complete)
SAT4J PB specific settings
2.3.2 snapshot
(complete)
SCIP spx
SCIP 2.1.1.4. with SoPlex 1.6.0.3 fixed
(complete)
SCIP spx E
SCIP 2.1.1.4. Exp with SoPlex 1.6.0.3 fixed
(complete)
SCIP spx standard
SCIP 2.1.1.4. with SoPlex 1.6.0.3 standard fixed
(complete)
toysat
2012-05-17
(complete)
toysat
2012-06-01
(complete)
wbo
1.7
(complete)
wbo
1.72
(complete)
normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-max1024.r.opb
OPT
f=245
TT=1.644
T1=1.01
SAT
f=250
TT=1798.01
T1=1257.16
SAT (TO)
f=291
TT=1800.11
T1=1395.46
? (TO)

TT=1800.12

? (TO)

TT=1800.12

? (TO)

TT=1800.12

? (TO)

TT=1800.12

? (TO)

TT=1800.1

? (TO)

TT=1800.12

? (TO)

TT=1800.13

? (TO)

TT=1800.07

OPT
f=245
TT=96.802
T1=83.73
SAT (TO)
f=282
TT=1800.01
T1=706.88
SAT (TO)
f=294
TT=1800.13
T1=0.37
SAT
f=292
TT=1783
T1=1428.8
? (exit code)

TT=822.11

SAT
f=250
TT=1798.02
T1=1256.44
SAT (TO)
f=303
TT=1800.6
T1=0.29
OPT
f=245
TT=21.902
T1=21.89
OPT
f=245
TT=1.644
T1=1.01
SAT (TO)
f=290
TT=1800.51
T1=682.11
OPT
f=245
TT=25.936
T1=25.93
SAT (TO)
f=288
TT=1800.17
T1=937.68
OPT
f=245
TT=17.509
T1=17.47
SAT (TO)
f=281
TT=1800.1
T1=1800.5
? (TO)

TT=1800.06

? (TO)

TT=1800.05

SAT (TO)
f=276
TT=1800.47
T1=900.31
SAT (TO)
f=276
TT=1800.12
T1=900.31
SAT (TO)
f=283
TT=1800.04
T1=527.95
SAT (TO)
f=303
TT=1800.05
T1=0.29
SAT (TO)
f=303
TT=1800.67
T1=0.28
OPT
f=245
TT=13.061
T1=13.05
OPT
f=245
TT=12.071
T1=12.05
OPT
f=245
TT=13.201
T1=13.18
? (TO)

TT=1800.11

? (TO)

TT=1800.02

?

TT=1799.45

?

TT=1799.51

normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/
logic_synthesis/normalized-opus.r.opb
OPT
f=5
TT=0.002
T1=0
OPT
f=5
TT=0.01
T1=0.01
OPT
f=5
TT=0.054
T1=0.01
OPT
f=5
TT=0.091
T1=0.08
OPT
f=5
TT=0.066
T1=0.05
OPT
f=5
TT=0.042
T1=0.04
OPT
f=5
TT=0.03
T1=0.03
OPT
f=5
TT=0.041
T1=0.04
OPT
f=5
TT=0.03
T1=0.02
OPT
f=5
TT=0.04
T1=0.03
OPT
f=5
TT=0.027
T1=0.02
OPT
f=5
TT=0.013
T1=0.01
OPT
f=5
TT=0.039
T1=0.01
OPT
f=5
TT=0.088
T1=0.07
OPT
f=5
TT=0.011
T1=0
OPT
f=5
TT=0.483
T1=0.16
OPT
f=5
TT=0.01
T1=0.01
OPT
f=5
TT=0.616
T1=0.19
OPT
f=5
TT=0.036
T1=0.03
OPT
f=5
TT=0.015
T1=0.01
OPT
f=5
TT=0.324
T1=2.15
OPT
f=5
TT=0.015
T1=0.01
OPT
f=5
TT=0.363
T1=1.17
OPT
f=5
TT=0.02
T1=0.01
OPT
f=5
TT=0.025
T1=0.02
OPT
f=5
TT=0.056
T1=0.03
OPT
f=5
TT=0.108
T1=0.04
OPT
f=5
TT=0.003
T1=0
OPT
f=5
TT=0.002
T1=0
OPT
f=5
TT=0.334
T1=1.16
OPT
f=5
TT=0.515
T1=0.16
OPT
f=5
TT=0.604
T1=0.16
OPT
f=5
TT=0.015
T1=0.01
OPT
f=5
TT=0.017
T1=0.01
OPT
f=5
TT=0.018
T1=0.01
OPT
f=5
TT=0.166
T1=0
OPT
f=5
TT=0.163
T1=0
OPT
f=5
TT=0.023
T1=0.02
OPT
f=5
TT=0.023
T1=0.02
normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-prom2.r.opb
OPT
f=278
TT=0.665
T1=0.65
OPT
f=278
TT=732.022
T1=728.75
SAT (TO)
f=428
TT=1800.11
T1=0
? (TO)

TT=1800.11

? (TO)

TT=1800.13

? (TO)

TT=1800.12

? (TO)

TT=1800.15

? (TO)

TT=1800.13

? (TO)

TT=1800.1

? (TO)

TT=1800.11

? (TO)

TT=1800.08

OPT
f=278
TT=1.804
T1=1.64
SAT (TO)
f=438
TT=1800.11
T1=0.08
SAT (TO)
f=454
TT=1802.1
T1=0.78
SAT
f=452
TT=1783
T1=0.16
? (exit code)

TT=565.23

OPT
f=278
TT=734.559
T1=731.27
SAT (TO)
f=439
TT=1800
T1=0.42
OPT
f=278
TT=1.769
T1=1.75
OPT
f=278
TT=0.923
T1=0.91
SAT (TO)
f=415
TT=1800.54
T1=627.55
OPT
f=278
TT=0.665
T1=0.65
SAT (TO)
f=414
TT=1800.03
T1=915.28
OPT
f=278
TT=1.799
T1=1.8
SAT (TO)
f=438
TT=1800.07
T1=1800.5
? (TO)

TT=1800.14

? (TO)

TT=1800.05

SAT (TO)
f=324
TT=1800.02
T1=900.31
SAT (TO)
f=324
TT=1800.18
T1=900.41
SAT (TO)
f=430
TT=1801.98
T1=666.93
SAT (TO)
f=439
TT=1800.81
T1=0.33
SAT (TO)
f=439
TT=1800
T1=0.33
OPT
f=278
TT=1.508
T1=1.49
OPT
f=278
TT=1.511
T1=1.49
OPT
f=278
TT=1.549
T1=1.53
? (TO)

TT=1800.08

? (TO)

TT=1800.09

? (TO)

TT=1800.07

?

TT=1799.27

normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/
logic_synthesis/normalized-rd84.b.opb
OPT
f=5
TT=5.707
T1=5.7
SAT
f=7
TT=1798.01
T1=5.94
OPT
f=5
TT=163.644
T1=161.57
OPT
f=5
TT=52.807
T1=44.06
OPT
f=5
TT=11.638
T1=11.63
OPT
f=5
TT=57.931
T1=53.15
OPT
f=5
TT=7.794
T1=7.79
OPT
f=5
TT=79.085
T1=77.64
OPT
f=5
TT=10.219
T1=10.39
OPT
f=5
TT=76.721
T1=75.31
OPT
f=5
TT=10.714
T1=10.68
OPT
f=5
TT=21.566
T1=21.32
OPT
f=5
TT=11.206
T1=10.65
SAT (TO)
f=6
TT=1802.12
T1=16.81
OPT
f=5
TT=36.034
T1=35.47
SAT (TO)
f=6
TT=1800.07
T1=472.53
OPT
f=5
TT=1396.21
T1=1396.23
SAT (TO)
f=6
TT=1800.48
T1=669.24
OPT
f=5
TT=32.577
T1=32.53
OPT
f=5
TT=26.207
T1=13.45
OPT
f=5
TT=1634.54
T1=252.14
OPT
f=5
TT=1408.83
T1=1409.02
SAT (TO)
f=5
TT=1800.02
T1=300.11
OPT
f=5
TT=39.659
T1=39.6
OPT
f=5
TT=5.707
T1=5.7
OPT
f=5
TT=82.618
T1=75.37
OPT
f=5
TT=96.7
T1=90.19
OPT
f=5
TT=38.362
T1=19.25
OPT
f=5
TT=38.564
T1=19.35
OPT
f=5
TT=200.413
T1=54.6
OPT
f=5
TT=812.341
T1=725.31
SAT (TO)
f=6
TT=1800.49
T1=292.79
OPT
f=5
TT=44.183
T1=44.13
OPT
f=5
TT=43.228
T1=43.16
OPT
f=5
TT=43.967
T1=43.91
? (TO)

TT=1800.09

? (TO)

TT=1800.1

OPT
f=5
TT=60.219
T1=60.25
OPT
f=5
TT=61.76
T1=61.82
normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-ricks.r.opb
OPT
f=5
TT=0.302
T1=0.3
OPT
f=5
TT=0.374
T1=0.37
OPT
f=5
TT=28.391
T1=1.68
OPT
f=5
TT=1.051
T1=0.96
OPT
f=5
TT=1.236
T1=1.14
OPT
f=5
TT=1.027
T1=0.94
OPT
f=5
TT=1.341
T1=1.13
OPT
f=5
TT=0.94
T1=0.85
OPT
f=5
TT=1.843
T1=1.75
OPT
f=5
TT=0.951
T1=0.86
OPT
f=5
TT=1.876
T1=1.77
OPT
f=5
TT=0.271
T1=0.27
OPT
f=5
TT=12.471
T1=0.56
OPT
f=5
TT=403.263
T1=143.24
OPT
f=5
TT=0.382
T1=0.38
OPT
f=5
TT=18.96
T1=4.67
OPT
f=5
TT=0.375
T1=0.37
OPT
f=5
TT=57.87
T1=24.01
OPT
f=5
TT=2.639
T1=2.63
OPT
f=5
TT=0.302
T1=0.3
OPT
f=5
TT=5.204
T1=3.28
OPT
f=5
TT=0.765
T1=0.76
OPT
f=5
TT=2.296
T1=1.8
OPT
f=5
TT=0.449
T1=0.44
OPT
f=5
TT=8.398
T1=8.39
OPT
f=5
TT=1.102
T1=0.97
OPT
f=5
TT=1.045
T1=0.92
OPT
f=5
TT=6.529
T1=3.27
OPT
f=5
TT=6.589
T1=3.29
OPT
f=5
TT=1.885
T1=1.79
OPT
f=5
TT=40.898
T1=27.68
OPT
f=5
TT=15.273
T1=2.42
OPT
f=5
TT=1.01
T1=1
OPT
f=5
TT=0.935
T1=0.92
OPT
f=5
TT=0.966
T1=0.96
OPT
f=5
TT=329.433
T1=250.63
OPT
f=5
TT=327.497
T1=249.19
OPT
f=5
TT=98.24
T1=98.32
OPT
f=5
TT=98.409
T1=98.43
normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-saucier.r.opb
OPT
f=6
TT=1593.1
T1=272.08
SAT
f=7
TT=1798.07
T1=1251.46
SAT (TO)
f=7
TT=1800.02
T1=20.13
? (TO)

TT=1800.11

? (TO)

TT=1800.1

? (TO)

TT=1800.13

? (TO)

TT=1800.06

? (TO)

TT=1800.02

? (TO)

TT=1800.02

? (TO)

TT=1800.03

? (TO)

TT=1800.04

SAT (TO)
f=8
TT=1800.09
T1=245.88
SAT (TO)
f=7
TT=1800.15
T1=74.04
SAT (TO)
f=8
TT=1802.08
T1=70.43
SAT
f=8
TT=1783.22
T1=1125.29
SAT (TO)
f=8
TT=1800.56
T1=426.13
SAT
f=7
TT=1798
T1=540.12
SAT (TO)
f=8
TT=1800.04
T1=1080.91
SAT
f=7
TT=1795.73
T1=1.69
OPT
f=6
TT=1593.1
T1=548.97
SAT (TO)
f=7
TT=1800.15
T1=98.16
SAT
f=6
TT=1789.82
T1=272.08
SAT (TO)
f=7
TT=1800.11
T1=302.77
SAT
f=7
TT=1796.83
T1=1.9
SAT (TO)
f=6
TT=1800.06
T1=1800.71
? (TO)

TT=1800.12

? (TO)

TT=1800.12

SAT (TO)
f=7
TT=1800.15
T1=900.51
SAT (TO)
f=7
TT=1800.61
T1=900.51
SAT (TO)
f=6
TT=1800.5
T1=360.03
SAT (TO)
f=10
TT=1800.38
T1=385.82
SAT (TO)
f=9
TT=1800.95
T1=382.95
SAT
f=7
TT=1796.85
T1=2.47
SAT
f=7
TT=1796.84
T1=2.23
SAT
f=7
TT=1796.84
T1=1.83
? (TO)

TT=1800.09

? (TO)

TT=1800.1

?

TT=1799.69

?

TT=1800.2

normalized-PB06/OPT-SMALLINT/
submitted-PB06/manquiho/logic_synthesis/
normalized-test1.r.opb
OPT
f=110
TT=0.131
T1=0.12
OPT
f=110
TT=0.756
T1=0.74
SAT (TO)
f=161
TT=1800.11
T1=1078.4
? (TO)

TT=1800.13

? (TO)

TT=1800.12

? (TO)

TT=1800.48

? (TO)

TT=1800.13

? (TO)

TT=1800.12

? (TO)

TT=1800.08

? (TO)

TT=1800.07

? (TO)

TT=1800.11

OPT
f=110
TT=0.135
T1=0.12
SAT (TO)
f=146
TT=1800.05
T1=0.03
SAT (TO)
f=184
TT=1802.12
T1=226.29
SAT
f=176
TT=1783.01
T1=0.73
SAT (TO)
f=149
TT=1800.04
T1=0.3
OPT
f=110
TT=0.759
T1=0.74
SAT (TO)
f=149
TT=1800.01
T1=0.33
OPT
f=110
TT=0.121
T1=0.11
OPT
f=110
TT=0.471
T1=0.46
SAT (TO)
f=135
TT=1800.19
T1=739
OPT
f=110
TT=0.17
T1=0.16
SAT (TO)
f=135
TT=1800.74
T1=703.18
OPT
f=110
TT=0.131
T1=0.12
SAT (TO)
f=146
TT=1800.03
T1=1800.4
? (TO)

TT=1800.1

? (TO)

TT=1800.12

SAT (TO)
f=138
TT=1800.03
T1=900.31
SAT (TO)
f=138
TT=1800.18
T1=900.41
SAT (TO)
f=136
TT=1800.06
T1=281.55
SAT (TO)
f=148
TT=1800.02
T1=7.76
SAT (TO)
f=149
TT=1800.08
T1=0.33
OPT
f=110
TT=0.252
T1=0.23
OPT
f=110
TT=0.233
T1=0.21
OPT
f=110
TT=0.235
T1=0.22
? (TO)

TT=1800.01

? (TO)

TT=1800.02

?

TT=1799.34

?

TT=1799.41




Statisticsbsolo
3.2
(complete)
clasp
2.0.6-R5325 (opt)
(complete)
npSolver
1.0
(complete)
npSolver
1.0 (fixed)
(complete)
npSolver
inc
(complete)
npSolver
inc (fixed)
(complete)
npSolver
inc-topDown
(complete)
npSolver
inc-topDown (fixed)
(complete)
npSolver
inc-topdown-quickBound
(complete)
npSolver
inc-topdown-quickBound (fixed)
(complete)
PB07: bsolo
3.0.17
(complete)
PB07: minisat+
1.14
(complete)
PB07: PB-clasp
2007-04-10
(complete)
PB07: Pueblo
1.4
(incomplete)
PB07: SAT4JPseudoResolution
2007-03-23
(complete)
PB09: bsolo
3.1
(complete)
PB09: SAT4J Pseudo Resolution
2.1.1
(complete)
PB09: SCIPspx
SCIP 1.1.0.7 with SoPLEX 1.4.1(24.4.2009)
(complete)
PB10: pb_cplex
2010-06-29
(complete)
PB10: SAT4J PB RES // CP
2.2.0 2010-05-31
(complete)
PB10: SCIPspx
SCIP 1.2.1.3 with SoPlex 1.4.2 (CVS Version 30.5.2010) as LP solver
(complete)
PB11: Sat4j Res//CP
2.3.0
(complete)
PB11: SCIP spx E_2
2011-06-10 (fixed)
(complete)
PB12: minisatp
1.0-2-g022594c
(complete)
pb2sat
2012-05-19
(complete)
pb2satCp2
2012-05-19
(complete)
pwbo
2.0
(complete)
pwbo
2.02
(complete)
SAT 4j PB RES // CP
2.3.2 Snapshot
(complete)
Sat 4j PB Resolution
2.3.2 Snapshot
(complete)
SAT4J PB specific settings
2.3.2 snapshot
(complete)
SCIP spx
SCIP 2.1.1.4. with SoPlex 1.6.0.3 fixed
(complete)
SCIP spx E
SCIP 2.1.1.4. Exp with SoPlex 1.6.0.3 fixed
(complete)
SCIP spx standard
SCIP 2.1.1.4. with SoPlex 1.6.0.3 standard fixed
(complete)
toysat
2012-05-17
(complete)
toysat
2012-06-01
(complete)
wbo
1.7
(complete)
wbo
1.72
(complete)
Number of times the solver is able to give the best known answer3117222322222222222202115211301304517381646222222022201604545451313019
Number of times the solver is the best solver from a complete solver point of view
(i.e. best known answer and best TT time)
040000000000010000270305200030000010002