今日,零一万物创始人及CEO李开复博士带队创办的AI 2.0公司零一万物,宣布开源发布首款预训练大模型 Yi-34B。零一万物此次开源发布的Yi系列模型,包含34B和6B两个版本。
据了解,在 “MMLU”、BBH等评测上,Yi-34B 表现较好,但数学和代码评测表现略逊GPT模型。
据介绍,此次开源的Yi-34B模型,将发布可支持200K 超长上下文窗口(context window)版本,可以处理约40万汉字超长文本输入。对比大模型标杆GPT-4,在CMMLU、E-Eval、Gaokao 三个主要的中文指标上,作为国产大模型的Yi-34B 能更好地满足国内市场需求。