AI开源项目

Nanbeige-16B-强大的160亿参数大语言模型

Nanbeige-16B(南北阁-16B)是南北阁大模型实验室研发的160亿参数规模的大语言模型,采用了2.5T Tokens进行预训练,数据包含大量互联网高质量语料、各类书籍、代码等领域脱敏文本...

Nanbeige-16B(南北阁-16B)是南北阁大模型实验室研发的160亿参数规模的大语言模型,采用了2.5T Tokens进行预训练,数据包含大量互联网高质量语料、各类书籍、代码等领域脱敏文本,在各个权威测评数据集上都取得了不错的效果。本次发布包含有 Base、Chat 以及扩展上下文长度的 Base-32k、Chat-32k 版本。
Nanbeige-16B的特点:
1. 160亿参数规模
2. 使用2.5T Tokens进行预训练
3. 包含高质量互联网语料、书籍和代码
4. 多种版本:Base、Chat、Base-32k、Chat-32k
5. 在各类权威测评数据集上表现优异

Nanbeige-16B的功能:
1. 文本生成
2. 问答系统
3. 自然语言处理任务
4. 对话系统开发
5. 代码自动补全
6. 语言翻译
7. 文本摘要

相关推荐

暂无评论

暂无评论...