今天，在王小川成立的百川智能公司正式发布了拥有70亿参数的中英文大型开源模型——百川-7b。目前，百城-7b的大模型已经在抱脸、Github、模型范围等平台发布。
据官方介绍，百川-7B是由百川智能研发的开源、可商用的大规模预训练语言模型。基于Transformer结构，在约1.2万亿个令牌上训练的70亿个参数模型支持中英文两种语言，上下文窗口长度为4096。在标准的中英文权威基准(C-EVAL/MMLU)中，达到同等规模的最佳效果。
百川智能表示，百川-7B作为多个榜单中评测结果最好的7B开源商用机型，填补了空市场缺乏针对中文优化的高质量7B机型的空白，是开发者理想的7B机型基地。同时，在商业价值上，可以在专业领域，如医疗领域的文本生成、自动写作、数据分析、知识问答、汉英翻译、个性化交互、个人助理等领域为用户带来巨大价值。
百川智能CEO王小川表示:“此次开源模式的发布是百川智能成立两个月后的第一个里程碑，是百川智能的一个良好开端。百城-7B模型不仅可以为中国的AGI事业做出贡献，也可以为世界大模型的开源社区贡献新的力量。”
拥抱脸:
