Benchmark CPA/CoVeriTest TBF Test-Suite Validator
Tool CPAchecker 1.8-svn 30375 Tbf Test-suite Validator v1.2
Limits timelimit: 900 s, memlimit: 15000 MB, CPU core limit: 8 timelimit: 10800 s, memlimit: 7000 MB, CPU core limit: 2
Host apollon* [apollon049; apollon085; apollon116]
OS Linux 4.15.0-45-generic
System CPU: Intel Xeon E3-1230 v5 @ 3.40 GHz, cores: 8, frequency: 3.8 GHz, Turbo Boost: disabled; RAM: 33546 MB
Date of execution 2019-02-05 21:05:56 CET 2019-02-06 05:30:26 CET
Run set coveritest.test-comp19_prop-coverage-branches.ReachSafety-Loops tbf-testsuite-validator-coveritest.test-comp19_prop-coverage-branches.ReachSafety-Loops
Options -benchmark -heap 10000M -testcomp19 --verbose --sequence-file cov-seq.txt -r --test-suite ../../results-verified/coveritest.2019-02-05_2105.logfiles/${rundefinition_name}.${inputfile_name}.files/test-suite.zip
sv-benchmarks/c/ status score program test-suite TS size inspect test-suite cpu (s) wall (s) mem (MB) energy (J) blkio-w (MB) blkio-r (MB) status program test-suite TS size inspect test-suite cov branch cov (%) line cov (%) cpu (s) wall (s) mem (MB) energy blkio-w (MB) blkio-r (MB)
loops/array-1.yml .833  23   16   1600 240 .041  0      83.3  93.3 .14  .14  16   .14  0  
loops/array-2.yml 1.0    23   16   1300 290 .041  0      100    100   .14  .13  16   .16  0  
loops/bubble_sort-1.yml .0417 900   780   8600 9700 51      0      4.17 17.9 .15  .15  16   .25  0  
loops/compact.yml .0    900   900   2800 5200 .0041 0      0    0   .060 .060 8.9 0     0  
loops/count_up_down-1.yml .75   900   820   4900 11000 44      0      75.0  90.9 .12  .12  17   .11  0  
loops/count_up_down-2.yml .75   900   800   5000 10000 43      0      75.0  90.9 .13  .13  16   .11  0  
loops/eureka_01-1.yml .962  900   880   500 11000 .16   0      96.2  96.8 .19  .18  17   .41  0  
loops/for_bounded_loop1.yml 1.0    23   6.6 960 200 2.0    0      100    100   .14  .14  16   .19  0  
loops/insertion_sort-1.yml 1.0    900   790   4600 11000 50      0      100    100   .15  .15  16   .19  0  
loops/insertion_sort-2.yml .9    900   790   5400 11000 49      0      90.0  94.1 .14  .14  17   .18  0  
loops/invert_string-1.yml .875  900   810   5000 11000 36      0      87.5  95.0 .14  .14  16   .16  0  
loops/invert_string-3.yml .125  900   880   1900 11000 .26   0      12.5  27.8 .13  .13  16   .14  0  
loops/linear_sea.ch.yml .75   900   770   6000 11000 41      0      75.0  87.5 .15  .15  16   .18  0  
loops/linear_search.yml .714  900   790   5300 11000 44      0      71.4  88.2 .15  .15  16   .19  0  
loops/matrix-1.yml .875  23   16   1800 260 .061  0      87.5  94.1 .14  .14  16   .18  0  
loops/matrix-2.yml 1.0    23   17   1200 230 .066  0      100    100   .17  .16  16   .26  0  
loops/n.c40.yml .5    24   19   1700 290 .0041 0      50.0  63.6 .12  .12  17   .11  0  
loops/nec20.yml .833  8.2 3.4 430 73 .070  0      83.3  95.8 .17  .16  17   .21  0  
loops/nec40.yml .4    24   19   1800 310 .0041 0      40.0  46.7 .12  .12  16   .11  0  
loops/string-1.yml .808  11   3.6 480 99 .32   0      80.8  96.5 .18  .19  17   .34  0  
loops/string-2.yml .846  12   4.0 490 120 .37   0      84.6  100   .21  .20  16   .38  0  
loops/sum01-1.yml 1.0    25   6.6 870 220 1.6    0      100    100   .15  .15  17   .19  0  
loops/sum01-2.yml .833  900   720   6900 10000 46      0      83.3  90.0 .15  .15  16   .19  0  
loops/sum01_bug02.yml 1.0    22   5.9 840 180 1.6    0      100    100   .14  .14  16   .19  0  
loops/sum01_bug02_sum01_bug02_base.case.yml 1.0    10   3.2 460 90 .50   0      100    100   .14  .14  16   .21  0  
loops/sum03-1.yml .875  7.0 2.5 400 61 .14   0      87.5  100   .15  .15  16   .16  0  
loops/sum_array-1.yml 1.0    23   18   710 260 .016  0      100    100   .15  .16  16   .23  0  
loops/sum_array-2.yml .929  900   890   770 8900 .098  0      92.9  94.4 .15  .14  16   .26  0  
loops/terminator_01.yml .75   3.6 1.6 270 33 .016  0      75.0  81.8 .12  .12  16   .11  0  
loops/terminator_02-1.yml .875  4.1 1.7 270 42 .037  0      87.5  87.5 .14  .13  16   .16  0  
loops/terminator_02-2.yml .9    24   6.5 700 210 2.8    0      90.0  94.7 .16  .17  16   .27  0  
loops/terminator_03-1.yml .75   23   6.6 700 170 3.2    0      75.0  100   .14  .14  16   .19  0  
loops/terminator_03-2.yml .786  24   6.8 680 190 3.1    0      78.6  92.3 .15  .14  16   .19  0  
loops/trex01-1.yml 1.0    5.5 2.1 300 50 .11   0      100    96.2 .16  .19  17   .28  0  
loops/trex01-2.yml .962  35   12   1100 280 2.0    0      96.2  93.1 .19  .21  16   .38  0  
loops/trex02-1.yml .833  23   18   1400 260 .033  0      83.3  92.9 .14  .14  16   .14  0  
loops/trex02-2.yml 1.0    4.0 1.6 260 35 .041  0      100    100   .13  .13  16   .16  0  
loops/trex03-1.yml 1.0    23   15   1600 240 .14   0      100    93.8 .17  .16  16   .26  0  
loops/trex03-2.yml .889  22   16   1600 260 .082  0      88.9  87.5 .15  .14  16   .23  0  
loops/veris.c_sendmail_tTflag_arr_one_loop.yml .875  29   7.3 1100 240 1.8    0      87.5  94.7 .13  .13  16   .16  0  
loops/vogal-1.yml .95   900   760   5300 11000 52      0      95.0  96.2 .17  .16  16   .32  0  
loops/vogal-2.yml 1.0    31   12   840 270 1.1    0