在8月15日的消息中,我们得知华为、小米和OPPO不久前升级了它们的AI助手,其中包含了大规模模型的能力。现在,vivo也计划在大模型领域发力。
目前,华为、小米和OPPO正在测试与大模型相关的新智能助手,而vivo也在C-Eval排行榜上展示了他们自家研发的大模型云端方案。很有可能这个方案会在vivo的OriginOS 4中为Jovi助手带来一些独特的功能。
C-Eval是一个全面的中文基础模型评估套件,里面包含了13948个多项选择题,涵盖了人文、社科、理工等四个大方向,共涉及52个不同的学科和四个难度级别。
根据C-Eval给出的信息,vivo_Agent_LM_7B是vivo AI全球研究院自主研发的大规模预训练语言模型,从命名上可以看出它拥有70亿个参数。
根据最终结果显示,vivo_Agent_LM_7B获得了64.4的得分,在C-Eval排行榜上位列第五,与第二名的GPT-4非常接近,甚至在人文领域表现更强,在社会科学领域也有不错的表现。