swtbench-verified

v1.0

SWTBench Verified - Software Testing Benchmark for code generation

uvx harbor run -d swtbench-verified@1.0

Tasks (433)

django__django-16116
uvx harbor run -d swtbench-verified@1.0 -t django__django-16116
e39578f
django__django-16136
uvx harbor run -d swtbench-verified@1.0 -t django__django-16136
e39578f
django__django-16139
uvx harbor run -d swtbench-verified@1.0 -t django__django-16139
e39578f
django__django-16145
uvx harbor run -d swtbench-verified@1.0 -t django__django-16145
e39578f
django__django-16255
uvx harbor run -d swtbench-verified@1.0 -t django__django-16255
e39578f
django__django-16256
uvx harbor run -d swtbench-verified@1.0 -t django__django-16256
e39578f
django__django-16263
uvx harbor run -d swtbench-verified@1.0 -t django__django-16263
e39578f
django__django-16315
uvx harbor run -d swtbench-verified@1.0 -t django__django-16315
e39578f
django__django-16333
uvx harbor run -d swtbench-verified@1.0 -t django__django-16333
e39578f
django__django-16429
uvx harbor run -d swtbench-verified@1.0 -t django__django-16429
e39578f
django__django-16485
uvx harbor run -d swtbench-verified@1.0 -t django__django-16485
e39578f
django__django-16493
uvx harbor run -d swtbench-verified@1.0 -t django__django-16493
e39578f
django__django-16502
uvx harbor run -d swtbench-verified@1.0 -t django__django-16502
e39578f
django__django-16527
uvx harbor run -d swtbench-verified@1.0 -t django__django-16527
e39578f
django__django-16569
uvx harbor run -d swtbench-verified@1.0 -t django__django-16569
e39578f
django__django-16595
uvx harbor run -d swtbench-verified@1.0 -t django__django-16595
e39578f
django__django-16612
uvx harbor run -d swtbench-verified@1.0 -t django__django-16612
e39578f
django__django-16631
uvx harbor run -d swtbench-verified@1.0 -t django__django-16631
e39578f
django__django-16642
uvx harbor run -d swtbench-verified@1.0 -t django__django-16642
e39578f
django__django-16661
uvx harbor run -d swtbench-verified@1.0 -t django__django-16661
e39578f
django__django-16662
uvx harbor run -d swtbench-verified@1.0 -t django__django-16662
e39578f
django__django-16667
uvx harbor run -d swtbench-verified@1.0 -t django__django-16667
e39578f
django__django-16801
uvx harbor run -d swtbench-verified@1.0 -t django__django-16801
e39578f
django__django-16819
uvx harbor run -d swtbench-verified@1.0 -t django__django-16819
e39578f
django__django-16877
uvx harbor run -d swtbench-verified@1.0 -t django__django-16877
e39578f
django__django-16899
uvx harbor run -d swtbench-verified@1.0 -t django__django-16899
e39578f
django__django-16901
uvx harbor run -d swtbench-verified@1.0 -t django__django-16901
e39578f
django__django-16938
uvx harbor run -d swtbench-verified@1.0 -t django__django-16938
e39578f
django__django-16950
uvx harbor run -d swtbench-verified@1.0 -t django__django-16950
e39578f
django__django-17029
uvx harbor run -d swtbench-verified@1.0 -t django__django-17029
e39578f
django__django-17084
uvx harbor run -d swtbench-verified@1.0 -t django__django-17084
e39578f
django__django-17087
uvx harbor run -d swtbench-verified@1.0 -t django__django-17087
e39578f
django__django-9296
uvx harbor run -d swtbench-verified@1.0 -t django__django-9296
e39578f
matplotlib__matplotlib-13989
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-13989
e39578f
matplotlib__matplotlib-14623
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-14623
e39578f
matplotlib__matplotlib-20676
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-20676
e39578f
matplotlib__matplotlib-20826
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-20826
e39578f
matplotlib__matplotlib-20859
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-20859
e39578f
matplotlib__matplotlib-21568
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-21568
e39578f
matplotlib__matplotlib-22719
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-22719
e39578f
matplotlib__matplotlib-22865
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-22865
e39578f
matplotlib__matplotlib-22871
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-22871
e39578f
matplotlib__matplotlib-23299
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-23299
e39578f
matplotlib__matplotlib-23314
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-23314
e39578f
matplotlib__matplotlib-23412
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-23412
e39578f
matplotlib__matplotlib-23476
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-23476
e39578f
matplotlib__matplotlib-24026
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-24026
e39578f
matplotlib__matplotlib-24149
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-24149
e39578f
matplotlib__matplotlib-24177
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-24177
e39578f
matplotlib__matplotlib-24570
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-24570
e39578f
matplotlib__matplotlib-24627
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-24627
e39578f
matplotlib__matplotlib-24637
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-24637
e39578f
matplotlib__matplotlib-24870
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-24870
e39578f
matplotlib__matplotlib-24970
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-24970
e39578f
matplotlib__matplotlib-25122
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-25122
e39578f
matplotlib__matplotlib-25287
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-25287
e39578f
matplotlib__matplotlib-25311
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-25311
e39578f
matplotlib__matplotlib-25332
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-25332
e39578f
matplotlib__matplotlib-25479
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-25479
e39578f
matplotlib__matplotlib-25960
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-25960
e39578f
matplotlib__matplotlib-26113
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-26113
e39578f
matplotlib__matplotlib-26208
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-26208
e39578f
matplotlib__matplotlib-26291
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-26291
e39578f
matplotlib__matplotlib-26342
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-26342
e39578f
matplotlib__matplotlib-26466
uvx harbor run -d swtbench-verified@1.0 -t matplotlib__matplotlib-26466
e39578f
mwaskom__seaborn-3069
uvx harbor run -d swtbench-verified@1.0 -t mwaskom__seaborn-3069
e39578f
mwaskom__seaborn-3187
uvx harbor run -d swtbench-verified@1.0 -t mwaskom__seaborn-3187
e39578f
pallets__flask-5014
uvx harbor run -d swtbench-verified@1.0 -t pallets__flask-5014
e39578f
psf__requests-1142
uvx harbor run -d swtbench-verified@1.0 -t psf__requests-1142
e39578f
psf__requests-2931
uvx harbor run -d swtbench-verified@1.0 -t psf__requests-2931
e39578f
psf__requests-5414
uvx harbor run -d swtbench-verified@1.0 -t psf__requests-5414
e39578f
psf__requests-6028
uvx harbor run -d swtbench-verified@1.0 -t psf__requests-6028
e39578f
pydata__xarray-3095
uvx harbor run -d swtbench-verified@1.0 -t pydata__xarray-3095
e39578f
pydata__xarray-3151
uvx harbor run -d swtbench-verified@1.0 -t pydata__xarray-3151
e39578f
pydata__xarray-3677
uvx harbor run -d swtbench-verified@1.0 -t pydata__xarray-3677
e39578f
pydata__xarray-4075
uvx harbor run -d swtbench-verified@1.0 -t pydata__xarray-4075
e39578f
pydata__xarray-4356
uvx harbor run -d swtbench-verified@1.0 -t pydata__xarray-4356
e39578f
pydata__xarray-4629
uvx harbor run -d swtbench-verified@1.0 -t pydata__xarray-4629
e39578f
pydata__xarray-4687
uvx harbor run -d swtbench-verified@1.0 -t pydata__xarray-4687
e39578f
pydata__xarray-4966
uvx harbor run -d swtbench-verified@1.0 -t pydata__xarray-4966
e39578f
pydata__xarray-6461
uvx harbor run -d swtbench-verified@1.0 -t pydata__xarray-6461
e39578f
pydata__xarray-6599
uvx harbor run -d swtbench-verified@1.0 -t pydata__xarray-6599
e39578f
pydata__xarray-6721
uvx harbor run -d swtbench-verified@1.0 -t pydata__xarray-6721
e39578f
pydata__xarray-6938
uvx harbor run -d swtbench-verified@1.0 -t pydata__xarray-6938
e39578f
pydata__xarray-7229
uvx harbor run -d swtbench-verified@1.0 -t pydata__xarray-7229
e39578f
pydata__xarray-7233
uvx harbor run -d swtbench-verified@1.0 -t pydata__xarray-7233
e39578f
pydata__xarray-7393
uvx harbor run -d swtbench-verified@1.0 -t pydata__xarray-7393
e39578f
pylint-dev__pylint-4970
uvx harbor run -d swtbench-verified@1.0 -t pylint-dev__pylint-4970
e39578f
pylint-dev__pylint-6386
uvx harbor run -d swtbench-verified@1.0 -t pylint-dev__pylint-6386
e39578f
pylint-dev__pylint-6903
uvx harbor run -d swtbench-verified@1.0 -t pylint-dev__pylint-6903
e39578f
pylint-dev__pylint-7080
uvx harbor run -d swtbench-verified@1.0 -t pylint-dev__pylint-7080
e39578f
pylint-dev__pylint-7277
uvx harbor run -d swtbench-verified@1.0 -t pylint-dev__pylint-7277
e39578f
pylint-dev__pylint-8898
uvx harbor run -d swtbench-verified@1.0 -t pylint-dev__pylint-8898
e39578f
pytest-dev__pytest-10051
uvx harbor run -d swtbench-verified@1.0 -t pytest-dev__pytest-10051
e39578f
pytest-dev__pytest-10081
uvx harbor run -d swtbench-verified@1.0 -t pytest-dev__pytest-10081
e39578f
pytest-dev__pytest-10356
uvx harbor run -d swtbench-verified@1.0 -t pytest-dev__pytest-10356
e39578f
pytest-dev__pytest-5262
uvx harbor run -d swtbench-verified@1.0 -t pytest-dev__pytest-5262
e39578f
pytest-dev__pytest-5631
uvx harbor run -d swtbench-verified@1.0 -t pytest-dev__pytest-5631
e39578f
pytest-dev__pytest-5787
uvx harbor run -d swtbench-verified@1.0 -t pytest-dev__pytest-5787
e39578f
pytest-dev__pytest-5809
uvx harbor run -d swtbench-verified@1.0 -t pytest-dev__pytest-5809
e39578f