12月19日,智源征询院发布国表里100余个,开源和营业闭源的大模子概述及专项评测效果。“大言语模子评测才略榜单”中,豆包通用模子pro(Doubao-pro-32k-preview),在主不雅评测中名轮番一。
智源征询院 FlagEval 大言语模子评测才略榜单-主不雅评测
“多模态模子评测榜单”中,豆包·视觉流露模子(Doubao-Pro-Vision-32k-241028)。在视觉言语模子中名轮番二,仅次于GPT-4o,是得分最高的国产大模子。
智源征询院 FlagEval 多模态模子评测榜单-视觉言语模子
“FlagEval大模子角斗场榜单”中jk 露出,豆包通用模子pro(Doubao-pro-32k-240828)。
在大言语模子榜单中位居第一梯队,评分名轮番二,仅次于OpenAI的o1-mini,是得分最高的国产大模子。
智源征询院 FlagEval 大模子角斗场榜单-大言语模子榜单
据智源征询院先容,大模子评测平台FlagEval当今已障翳民众800多个开闭源模子,在评测体式与器用上聚首了宇宙10余家高校和机构互助共建。这次公布的榜单中,大言语模子主不雅评测要点检察的是模子的中语才略,多模态模子评测榜单视觉言语模子主要检察的是模子在图文流露、长尾视觉学问、笔墨识别以及复杂图文数据分析才略;FlagEval大模子角斗场则是向用户绽放的模子对战评测处事,响应了用户对模子的偏好。
婷婷五月天大使用量才调打磨出更好的模子。刚刚狂妄的2024火山引擎冬季FORCE原能源大会公布了豆包大模子最新弘扬——豆包大模子12月日均tokens使用量向上4万亿,较5月发布时辰增长向上33倍,在不同利用场景中调用量快速增长。
使用量和利用场景的升迁,也让豆包大模子迎来了全新的升级。其中在“大言语模子评测才略榜单”的主不雅评测中名轮番一的豆包通用模子pro完成新版块迭代,概述贬责才略较5月发布时升迁了32%,在推理上升迁13%,在领导遵照上升迁9%,在代码上升迁58%,在数学上升迁43%,在专科学问规模才略升迁54%。
在“多模态模子评测榜单”的视觉言语模子中,得分国内最高的豆包·视觉流露模子也在FORCE原能源大会上认真对外发布。豆包·视觉流露模子不错流露用户所输入的文本和图片相关的信息,并给出准确的复兴。通过更强的试验识别才略、更强的流露和推理才略、更精良的视觉描述才略,豆包·视觉流露模子极地面拓宽了大模子场景界限,基于对实在世界的信息贬责,不错更好的扶助东谈主类完成复杂的任务。
豆包·视觉流露模子在教育、旅游、电商等场景有着相配无为的利用。为了更好地匡助企业拓荒大模子的鼎新利用场景,豆包·视觉流露模子的价钱为每千tokens 0.003元,比行业平均价钱缩短85%,非凡于一块钱不错贬责284张720P图片,让企业和配置者用好视觉流露模子,找到更多鼎新场景。
从才略升级到模态丰富,火山引擎将抓续拓展豆包大模子的才略界限及利用场景,加快鞭策AI大模子利用的普及与落地,为更多企业智能化升级提供有劲复古。