Hugging Face Blog·· 2023-05-04精选AI 评分78
BigCode 发布 StarCoder:15B 参数开源代码大模型
StarCoder: A State-of-the-Art LLM for Code
AI 导读
BigCode 发布 StarCoder 与 StarCoderBase 两个代码大模型,基于 GitHub 上 80 多种编程语言的宽松许可数据训练,约 15B 参数、1 万亿 token,StarCoder 是在 StarCoderBase 上用 35B Python token 微调而来。
推荐理由
BigCode 公开了 StarCoder 的权重、训练数据与评测结果,读者可据此判断开源代码模型当时的能力位置。
来源:Hugging Face Blog · huggingface.co