bigcodebench-hard-complete

v1.0.0

BigCodeBench-Hard complete benchmark adapter for Harbor - challenging Python programming tasks with reward-based verification

uvx harbor run -d bigcodebench-hard-complete@1.0.0

Tasks (145)

bigcodebench_100
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_100
4f398de
bigcodebench_1003
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1003
4f398de
bigcodebench_1004
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1004
4f398de
bigcodebench_1006
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1006
4f398de
bigcodebench_1008
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1008
4f398de
bigcodebench_1012
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1012
4f398de
bigcodebench_1013
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1013
4f398de
bigcodebench_1015
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1015
4f398de
bigcodebench_1019
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1019
4f398de
bigcodebench_1020
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1020
4f398de
bigcodebench_1022
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1022
4f398de
bigcodebench_1039
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1039
4f398de
bigcodebench_1040
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1040
4f398de
bigcodebench_1042
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1042
4f398de
bigcodebench_1053
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1053
4f398de
bigcodebench_1057
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1057
4f398de
bigcodebench_1077
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1077
4f398de
bigcodebench_108
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_108
4f398de
bigcodebench_1085
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1085
4f398de
bigcodebench_1124
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1124
4f398de
bigcodebench_1129
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1129
4f398de
bigcodebench_1137
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_1137
4f398de
bigcodebench_120
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_120
4f398de
bigcodebench_123
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_123
4f398de
bigcodebench_124
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_124
4f398de
bigcodebench_129
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_129
4f398de
bigcodebench_13
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_13
4f398de
bigcodebench_139
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_139
4f398de
bigcodebench_147
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_147
4f398de
bigcodebench_15
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_15
4f398de
bigcodebench_161
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_161
4f398de
bigcodebench_162
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_162
4f398de
bigcodebench_17
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_17
4f398de
bigcodebench_177
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_177
4f398de
bigcodebench_184
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_184
4f398de
bigcodebench_187
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_187
4f398de
bigcodebench_19
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_19
4f398de
bigcodebench_199
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_199
4f398de
bigcodebench_208
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_208
4f398de
bigcodebench_211
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_211
4f398de
bigcodebench_214
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_214
4f398de
bigcodebench_227
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_227
4f398de
bigcodebench_239
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_239
4f398de
bigcodebench_241
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_241
4f398de
bigcodebench_267
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_267
4f398de
bigcodebench_273
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_273
4f398de
bigcodebench_274
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_274
4f398de
bigcodebench_287
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_287
4f398de
bigcodebench_302
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_302
4f398de
bigcodebench_308
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_308
4f398de
bigcodebench_310
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_310
4f398de
bigcodebench_313
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_313
4f398de
bigcodebench_324
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_324
4f398de
bigcodebench_326
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_326
4f398de
bigcodebench_34
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_34
4f398de
bigcodebench_341
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_341
4f398de
bigcodebench_346
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_346
4f398de
bigcodebench_360
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_360
4f398de
bigcodebench_367
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_367
4f398de
bigcodebench_368
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_368
4f398de
bigcodebench_37
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_37
4f398de
bigcodebench_374
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_374
4f398de
bigcodebench_399
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_399
4f398de
bigcodebench_401
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_401
4f398de
bigcodebench_409
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_409
4f398de
bigcodebench_417
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_417
4f398de
bigcodebench_418
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_418
4f398de
bigcodebench_424
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_424
4f398de
bigcodebench_443
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_443
4f398de
bigcodebench_445
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_445
4f398de
bigcodebench_454
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_454
4f398de
bigcodebench_458
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_458
4f398de
bigcodebench_461
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_461
4f398de
bigcodebench_477
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_477
4f398de
bigcodebench_486
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_486
4f398de
bigcodebench_492
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_492
4f398de
bigcodebench_501
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_501
4f398de
bigcodebench_502
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_502
4f398de
bigcodebench_503
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_503
4f398de
bigcodebench_509
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_509
4f398de
bigcodebench_511
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_511
4f398de
bigcodebench_513
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_513
4f398de
bigcodebench_526
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_526
4f398de
bigcodebench_528
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_528
4f398de
bigcodebench_530
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_530
4f398de
bigcodebench_532
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_532
4f398de
bigcodebench_553
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_553
4f398de
bigcodebench_560
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_560
4f398de
bigcodebench_567
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_567
4f398de
bigcodebench_574
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_574
4f398de
bigcodebench_579
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_579
4f398de
bigcodebench_582
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_582
4f398de
bigcodebench_583
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_583
4f398de
bigcodebench_587
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_587
4f398de
bigcodebench_592
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_592
4f398de
bigcodebench_594
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_594
4f398de
bigcodebench_618
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_618
4f398de
bigcodebench_636
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_636
4f398de
bigcodebench_637
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_637
4f398de
bigcodebench_654
uvx harbor run -d bigcodebench-hard-complete@1.0.0 -t bigcodebench_654
4f398de