LiveBench 最新榜单:阶跃星辰位列中国大模型第一
近日消息,新榜国际权威榜单 LiveBench 官网公布了最新的单阶第语言大模型测评结果,阶跃星辰自研的跃星万亿参数语言大模型 Step-2 的技术表现位列中国基座大模型第一,成绩逼近 OpenAI 的辰位 o1-mini-2024-09-12,超越 gpt-4o-2024-08-06 、列中gemini-1.5-pro-002 等国际主流模型,模型是新榜唯一进入榜单前十名的中国语言大模型,位列全球第五。单阶第另外,跃星同时上榜的辰位中国大模型公司还有通义千问和 DeepSeek。
LiveBench 是列中由图灵奖得主、Meta 首席 AI 科学家杨立昆(Yann LeCun)联合 Abacus.AI、模型纽约大学等机构联合推出的新榜大模型测评基准。LiveBench 从包括数学、单阶第推理、跃星编程、语言理解、指令遵循和数据分析在内的多个复杂维度对模型进行评估,采用新颖的数据来源并保持每月更新,被誉为「世界上第一个不可玩弄的 LLM 基准测试」。
值得关注的是,Step-2 在 IF Average(Instruction Following)一项表现突出,超越包括 o1-preview-2024-09-12 在内的所有国内外语言大模型。这意味着,Step-2 在语言生成上对细节有最强的控制力,模型能够更好地理解和遵循人类指令,捕捉到模糊需求背后用户的真实意图,对通用及特定领域知识的覆盖上都有更好的表现。比如当使用 Step-2 创作古诗词,模型在发挥创意的同时能够对字数、格律、押韵、意境做到精准把握。
据了解,今年 3 月,阶跃星辰发布了 Step-2 语言大模型预览版,这是国内首个由创业公司发布的万亿参数模型。目前,阶跃星辰开放平台为开发者提供 Step-2 的 API 接口,该公司的 C 端智能助手「跃问」也已经接入了 Step-2 万亿参数语言大模型,用户在跃问 App 和跃问官网(https://yuewen.cn)皆可体验。
(责任编辑:休闲)
- ·[一图流]风箫玖欣脸探草丛,久寒火舞果断出手单人强杀,拿到三杀
- ·[流言板]福布斯市值最高运动队前50:足坛皇魔萨军城拜仁和巴黎入围
- ·穆帅:大家都在说亚马尔但我更喜欢尼科
- ·连送开启!Epic喜+1:《指环王:重返摩瑞亚》免费领
- ·[流言板]本赛季施罗德在篮网场均得到18.4分,加盟勇士后场均得8.2分
- ·米兰“小伊布”弗朗西斯科·卡马尔达崭露头角
- ·维C含量是橙子6倍!这种长得像枣的水果 竟是猕猴桃
- ·新款吉利银河E8有望明年上市:比亚迪汉同级 定位中大型纯电轿车
- ·两位转会费加起来超2亿😅格拉利什18场0球,安东尼10场1球
- ·[流言板]Windhorst:巴特勒希望续约待在热火,但莱利并未表现出兴趣
- ·詹姆斯:勇士总能激发最佳表现,祝全世界家庭圣诞快乐
- ·韩乔生:小奥斯卡对中国足球非常适应归化可为国足提供更多选择
- ·比苹果良心!小米15、REDMI K80系列MiCare仅299元起:两年质保、免费维修
- ·《切尔诺贝利人:完全版》宣布登陆Switch 发售日期待定
- ·太逗了!终场哨响,西蒙尼一边咆哮,一边“冲刺”回更衣室
- ·AOC新款32寸电竞显示器上市:4K 165Hz QD
- ·KK官方对战平台新图推荐!顶级羁绊肉鸽CARRY全场!
- ·曼城近10场输了7场,与他们此前105场输球场次持平
- ·[JR热议]大跌眼镜,惨遭零封,广州TTG今天输在哪里?
- ·动作冒险游戏《暗影诅咒:地狱重制版》今日发售!创作者寄语公布