品玩资讯于9月22日披露,苏州大学的研究团队近期成功开发了一款名为OpenBA的开源seq2seq模型。
OpenBA作为一款含有150亿参数的双语非对称seq2seq模型,标志着首个加入中国开源模型社区的大语言模型变体。研究论文指出,该团队运用了高效技术,并实施了分三阶段的训练策略,对OpenBA模型进行了从头到尾的训练。
实验结果表明,OpenBA在BELEBELE基准测试中超越了LLaMA-70 B,在MMLU基准测试中胜过BLOOM-176 B,在C-Eval(hard)基准测试中优于GLM-130 B。
本文链接:https://www.8btc.com/article/6833694 转载时请务必注明文章来源
标签:
文章来源: 酷玩网
版权声明: 本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任