Hugging Face Blog·· 2024-06-18AI 评分38
BigCodeBench:下一代 HumanEval 代码生成基准发布
BigCodeBench: The Next Generation of HumanEval
AI 导读
Hugging Face 发布 BigCodeBench,一个面向 LLM 代码生成的新基准,包含 1,140 个函数级任务,要求模型调用 139 个库中的多个函数作为工具,每个任务平均含 5.6 个测试用例、分支覆盖率约 99%。
来源:Hugging Face Blog · huggingface.co