DataLearner 标志
ST

StarCodeBase

编程大模型

StarCodeBase

发布时间: 2023-05-04更新于: 2023-07-08浏览量: 577
模型参数
155亿
上下文长度
2K
多语言支持
暂无数据
推理能力
暂无数据

StarCodeBase 是由 BigCode 发布的 AI 模型,发布时间为 2023-05-04,定位为 编程大模型,参数规模约为 155亿,上下文长度为 2K,模型文件大小约 64,采用 BigCode OpenRAIL-M v1 许可,在 MBPP 上取得 49.00 分。

数据优先来自官方发布(GitHub、Hugging Face、论文),其次为评测基准官方结果,最后为第三方评测机构数据。 了解数据收集方法

StarCodeBase

模型基本信息

推理过程
暂无数据
思考模式
不支持思考模式
上下文长度
2K tokens
最大输出长度
暂无数据
模型类型
编程大模型
输入/输出模态
暂无数据
发布时间
2023-05-04
模型文件大小
64
MoE架构
总参数 / 激活参数
155亿 / 不适用
知识截止
暂无数据
StarCodeBase

开源和体验地址

代码开源状态
预训练权重开源
BigCode OpenRAIL-M v1- 免费商用授权
在线体验
暂无
StarCodeBase

官方介绍与博客

DataLearnerAI博客
暂无
StarCodeBase

API接口信息

接口速度
暂无数据
暂无公开的 API 定价信息。
StarCodeBase

评测结果

StarCodeBase 当前已收录的代表性评测结果包括 MBPP(45 / 70,得分 49)、HumanEval(80 / 101,得分 30.40)。 本页还汇总了参数规模、上下文长度与 API 价格,便于结合评测结果与部署约束一起判断模型适配度。

思考模式

编程与软件工程

共 2 项评测
评测名称 / 模式
得分
排名/总数
MBPP
常规模式
49
45 / 70
HumanEval
常规模式
30.40
80 / 101
StarCodeBase

发布机构

StarCodeBase

模型解读

StarCodeBase与StarCode一样,都是来自BigCode的开源编程大模型。二者都是GPT-2的架构,唯一的区别是StarCodeBase是在80多种编程语言上训练的,基于1万亿tokens的数据集训练。而StarCode则是前面基础上,继续在350亿的python tokens上训练。



DataLearner 官方微信

欢迎关注 DataLearner 官方微信,获得最新 AI 技术推送

DataLearner 官方微信二维码