XuanYuan-70B 是基于Llama2-70B模型进行中文增强的一系列金融大模型,包含大量中英文语料增量预训练之后的底座模型以及使用高质量指令数据进行对齐的chat模型。
XuanYuan-70B的特点:
1. 支持长文本处理,上下文长度可达8k和16k
2. 基于高效的分布式训练框架
3. 开源大模型,参数量级达到70B
XuanYuan-70B的功能:
1. 用于金融领域的自然语言处理任务
2. 进行中英文的文本生成和对话
3. 适用于需要处理长文本的应用场景
相关推荐
暂无评论...