BenchMark·Hub
Benchmark测评分类可信级别开放热度
HumanEval
HumanEval· OpenAI
代码代码生成
S高可信61.5
MBPP
MBPP· Google
代码代码生成
S高可信56.1
SWE-bench Lite
SWE-bench· princeton-nlp
代码代码生成
B待确认49.9
code_contests
· deepmind
代码代码生成
B待确认45.6
SWE-bench
SWE-bench· princeton-nlp
代码代码生成
B待确认44.5
LiveCodeBench
LiveCodeBench· UC Berkeley 等
代码代码生成
S高可信43.0
BigCodeBench
BigCodeBench· BigCode
代码代码生成
S高可信40.3
code_x_glue_ct_code_to_text
· google
代码代码生成
B待确认36.5
humanevalpack
· bigcode
代码代码生成
B待确认33.8
code_x_glue_cc_code_to_code_trans
· google
代码代码生成
B待确认31.0
code_x_glue_cc_code_refinement
· google
代码代码生成
B待确认30.2
code_x_glue_tc_nl_code_search_adv
· google
代码代码生成
B待确认29.9
code_x_glue_cc_cloze_testing_all
· google
代码代码生成
B待确认29.7
code_x_glue_cc_cloze_testing_maxmin
· google
代码代码生成
B待确认28.5
code_x_glue_tt_text_to_text
· google
代码代码生成
B待确认27.8
code_x_glue_tc_text_to_code
· google
代码代码生成
B待确认27.3
SWE-bench Multimodal
SWE-bench· princeton-nlp
代码代码生成
B待确认25.4
code_generation
· livecodebench
代码代码生成
B待确认21.0
bigcodebench-hard
BigCodeBench· bigcode
代码代码生成
B待确认19.5
cvdp-benchmark-dataset
· nvidia
代码代码生成
B待确认19.3
test_generation
· livecodebench
代码代码生成
B待确认17.7
code_x_glue_cc_clone_detection_big_clone_bench
· google
代码代码生成
B待确认16.7
code_x_glue_cc_code_completion_token
· google
代码代码生成
B待确认16.4
code_x_glue_cc_code_completion_line
· google
代码代码生成
B待确认15.4
code_x_glue_cc_clone_detection_poj104
· google
代码代码生成
B待确认14.6
1 / 2
上一页下一页