bfcl

v1.0

Berkeley Function-Calling Leaderboard: 3,641 function calling tasks for evaluating LLM tool use capabilities across simple, multiple, parallel, and irrelevance categories.

uvx harbor run -d bfcl@1.0

Tasks (3641)

bfcl-irrelevance-0
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-0
6bedd78
bfcl-irrelevance-1
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-1
6bedd78
bfcl-irrelevance-10
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-10
6bedd78
bfcl-irrelevance-100
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-100
6bedd78
bfcl-irrelevance-101
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-101
6bedd78
bfcl-irrelevance-102
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-102
6bedd78
bfcl-irrelevance-103
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-103
6bedd78
bfcl-irrelevance-104
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-104
6bedd78
bfcl-irrelevance-105
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-105
6bedd78
bfcl-irrelevance-106
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-106
6bedd78
bfcl-irrelevance-107
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-107
6bedd78
bfcl-irrelevance-108
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-108
6bedd78
bfcl-irrelevance-109
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-109
6bedd78
bfcl-irrelevance-11
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-11
6bedd78
bfcl-irrelevance-110
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-110
6bedd78
bfcl-irrelevance-111
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-111
6bedd78
bfcl-irrelevance-112
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-112
6bedd78
bfcl-irrelevance-113
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-113
6bedd78
bfcl-irrelevance-114
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-114
6bedd78
bfcl-irrelevance-115
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-115
6bedd78
bfcl-irrelevance-116
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-116
6bedd78
bfcl-irrelevance-117
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-117
6bedd78
bfcl-irrelevance-118
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-118
6bedd78
bfcl-irrelevance-119
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-119
6bedd78
bfcl-irrelevance-12
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-12
6bedd78
bfcl-irrelevance-120
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-120
6bedd78
bfcl-irrelevance-121
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-121
6bedd78
bfcl-irrelevance-122
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-122
6bedd78
bfcl-irrelevance-123
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-123
6bedd78
bfcl-irrelevance-124
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-124
6bedd78
bfcl-irrelevance-125
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-125
6bedd78
bfcl-irrelevance-126
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-126
6bedd78
bfcl-irrelevance-127
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-127
6bedd78
bfcl-irrelevance-128
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-128
6bedd78
bfcl-irrelevance-129
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-129
6bedd78
bfcl-irrelevance-13
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-13
6bedd78
bfcl-irrelevance-130
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-130
6bedd78
bfcl-irrelevance-131
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-131
6bedd78
bfcl-irrelevance-132
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-132
6bedd78
bfcl-irrelevance-133
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-133
6bedd78
bfcl-irrelevance-134
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-134
6bedd78
bfcl-irrelevance-135
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-135
6bedd78
bfcl-irrelevance-136
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-136
6bedd78
bfcl-irrelevance-137
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-137
6bedd78
bfcl-irrelevance-138
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-138
6bedd78
bfcl-irrelevance-139
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-139
6bedd78
bfcl-irrelevance-14
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-14
6bedd78
bfcl-irrelevance-140
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-140
6bedd78
bfcl-irrelevance-141
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-141
6bedd78
bfcl-irrelevance-142
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-142
6bedd78
bfcl-irrelevance-143
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-143
6bedd78
bfcl-irrelevance-144
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-144
6bedd78
bfcl-irrelevance-145
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-145
6bedd78
bfcl-irrelevance-146
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-146
6bedd78
bfcl-irrelevance-147
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-147
6bedd78
bfcl-irrelevance-148
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-148
6bedd78
bfcl-irrelevance-149
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-149
6bedd78
bfcl-irrelevance-15
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-15
6bedd78
bfcl-irrelevance-150
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-150
6bedd78
bfcl-irrelevance-151
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-151
6bedd78
bfcl-irrelevance-152
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-152
6bedd78
bfcl-irrelevance-153
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-153
6bedd78
bfcl-irrelevance-154
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-154
6bedd78
bfcl-irrelevance-155
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-155
6bedd78
bfcl-irrelevance-156
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-156
6bedd78
bfcl-irrelevance-157
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-157
6bedd78
bfcl-irrelevance-158
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-158
6bedd78
bfcl-irrelevance-159
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-159
6bedd78
bfcl-irrelevance-16
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-16
6bedd78
bfcl-irrelevance-160
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-160
6bedd78
bfcl-irrelevance-161
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-161
6bedd78
bfcl-irrelevance-162
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-162
6bedd78
bfcl-irrelevance-163
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-163
6bedd78
bfcl-irrelevance-164
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-164
6bedd78
bfcl-irrelevance-165
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-165
6bedd78
bfcl-irrelevance-166
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-166
6bedd78
bfcl-irrelevance-167
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-167
6bedd78
bfcl-irrelevance-168
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-168
6bedd78
bfcl-irrelevance-169
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-169
6bedd78
bfcl-irrelevance-17
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-17
6bedd78
bfcl-irrelevance-170
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-170
6bedd78
bfcl-irrelevance-171
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-171
6bedd78
bfcl-irrelevance-172
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-172
6bedd78
bfcl-irrelevance-173
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-173
6bedd78
bfcl-irrelevance-174
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-174
6bedd78
bfcl-irrelevance-175
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-175
6bedd78
bfcl-irrelevance-176
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-176
6bedd78
bfcl-irrelevance-177
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-177
6bedd78
bfcl-irrelevance-178
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-178
6bedd78
bfcl-irrelevance-179
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-179
6bedd78
bfcl-irrelevance-18
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-18
6bedd78
bfcl-irrelevance-180
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-180
6bedd78
bfcl-irrelevance-181
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-181
6bedd78
bfcl-irrelevance-182
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-182
6bedd78
bfcl-irrelevance-183
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-183
6bedd78
bfcl-irrelevance-184
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-184
6bedd78
bfcl-irrelevance-185
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-185
6bedd78
bfcl-irrelevance-186
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-186
6bedd78
bfcl-irrelevance-187
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-187
6bedd78
bfcl-irrelevance-188
uvx harbor run -d bfcl@1.0 -t bfcl-irrelevance-188
6bedd78