LiveBench 最新榜单:阶跃星辰位列中国大模型第一
近日消息,新榜国际权威榜单 LiveBench 官网公布了最新的单阶第语言大模型测评结果,阶跃星辰自研的跃星万亿参数语言大模型 Step-2 的技术表现位列中国基座大模型第一,成绩逼近 OpenAI 的辰位 o1-mini-2024-09-12,超越 gpt-4o-2024-08-06 、列中gemini-1.5-pro-002 等国际主流模型,模型是新榜唯一进入榜单前十名的中国语言大模型,位列全球第五。单阶第另外,跃星同时上榜的辰位中国大模型公司还有通义千问和 DeepSeek。
LiveBench 是列中由图灵奖得主、Meta 首席 AI 科学家杨立昆(Yann LeCun)联合 Abacus.AI、模型纽约大学等机构联合推出的新榜大模型测评基准。LiveBench 从包括数学、单阶第推理、跃星编程、语言理解、指令遵循和数据分析在内的多个复杂维度对模型进行评估,采用新颖的数据来源并保持每月更新,被誉为「世界上第一个不可玩弄的 LLM 基准测试」。
值得关注的是,Step-2 在 IF Average(Instruction Following)一项表现突出,超越包括 o1-preview-2024-09-12 在内的所有国内外语言大模型。这意味着,Step-2 在语言生成上对细节有最强的控制力,模型能够更好地理解和遵循人类指令,捕捉到模糊需求背后用户的真实意图,对通用及特定领域知识的覆盖上都有更好的表现。比如当使用 Step-2 创作古诗词,模型在发挥创意的同时能够对字数、格律、押韵、意境做到精准把握。
据了解,今年 3 月,阶跃星辰发布了 Step-2 语言大模型预览版,这是国内首个由创业公司发布的万亿参数模型。目前,阶跃星辰开放平台为开发者提供 Step-2 的 API 接口,该公司的 C 端智能助手「跃问」也已经接入了 Step-2 万亿参数语言大模型,用户在跃问 App 和跃问官网(https://yuewen.cn)皆可体验。
(责任编辑:知识)
- ·2024年西甲助攻榜:巴埃纳15助居首,亚马尔14助&拉菲尼亚10助
- ·迪丽热巴介绍moto:联想moto竖向折叠屏全球第一
- ·342元起!华为宣布8.8折升级手机内存服务延期至2025年3月
- ·《英雄联盟》S14总决赛T1击败BLG夺冠:Faker五冠大魔王
- ·不到1米7vs全超1米9⚔️两队谁能赢?梅西老马vs魔人伊布古利特
- ·小米:SU7 Ultra外部扬声器暂不支持播放音乐
- ·斯卢茨基:这是我来到中国的首个赛季,印象最深的就是申花球迷
- ·[流言板]挺身而出!普林斯底角三分稳稳命中,目前6投5中得到14分
- ·意媒:国米没有与比约尔或乌迪内斯接触 迪切萨雷不是国米的目标
- ·[流言板]挺身而出!普林斯底角三分稳稳命中,目前6投5中得到14分
- ·龙skr要是能去4a m就好了!
- ·[流言板]好的开始!唐斯在尼克斯前5场比赛得到111分,仅次于安东尼
- ·梅州队长廖均健:这是失败的赛季,犯了很多错必须承受这样的结果
- ·[流言板]起飞!杰伦
- ·[流言板]给机会?恩比德接底线球掉球失误,还剩40秒凯尔特人追至5分
- ·类暗黑快节奏俯视角动作游戏《法术塑造者》现已在Steam推出试玩Demo
- ·支持Win/Mac!微信PC 4.0版公测:全新UI 新增深色模式
- ·[流言板]Memes调侃:里弗斯试图弄清楚如何带利拉德和哈姆一起赢球
- ·英超金靴赔率榜:萨拉赫压哈兰德领跑,帕尔默、伊萨克在列
- ·射击游戏《Active Matter》Steam页面公布 发售日待定