谷歌升级Android_Bench代码排行榜:Claude5斩获榜首:Gemini准确率与效率双落后
7月9日,谷歌正式宣布对Android Bench代码开发者排行榜实施全面重构,核心举措是整合标准化的Harbor沙箱框架。该调整将全部测试迁移至高度隔离的安全运行环境,旨在降低全球开发者执行独立性能评估、灵活配置开发环境以及协作共享测试数据的技术门槛。随着底层架构升级,谷歌同步在GitHub平台开源整个基准测试套件,开放社区参与——开发者可自主提交定制化的Android开发任务及模型评测方案。
值得注意的是,在此次更新后的权威排名中,谷歌自研模型未达预期表现:Anthropic推出的旗舰级模型Claude Fable5以84.5%的准确率位居第一;OpenAI最新迭代模型GPT-5.5以80.2%的得分位列第二;而谷歌Gemini 3.1 Pro仅排在第五位。
虽然Gemini系列在单次推理成本方面仍具竞争力(Gemini 3.1 Pro单轮测试约87美元,显著低于头部竞品普遍超130美元的开销),但其轻量版本Gemini 3.5 Flash在处理百题规模评估数据集时却暴露明显瓶颈——单次完整运行耗时长达28小时,总成本攀升至165美元。
目前,构建以自主智能为核心的端到端开发工作流已成为业界主流方向。谷歌在这一关键移动生态基准测试中的相对滞后,客观上对其整体AI战略落地构成实质性技术压力。不过,依托公开透明的评测逻辑与Harbor沙箱框架的深度开放能力,Android Bench正加速成长为业内公认的、非商业导向的权威AI编程能力评估基础设施。
-
08.22
AI 视频生成模型横向评测:深度上手 Vera 1.1 的时序一致性表现
-
08.22
Headless 指标解析原理
-
08.22
AgentKit智能体沙箱环境配置实现安全运行
-
08.22
火山引擎智能创作混剪适配电商素材操作操作步骤
-
08.22
《异种航员2》运动说明
-
08.22
《促进网信企业高质量发展行动计划(2026-2030年)》印发:加强高端芯片、基础软件和等关键核心技术攻关
推荐专题
热门阅读
-
-
- 一秒回答;扬州开餐饮发票-开票指南
- 07.13
-
- 一秒解答:徐州开餐饮发票-开票指南
- 07.13
-
-
- 中国智慧推动人工智能向善普惠发展
- 07.13
-
-
-
下载
- |
-
-
下载
- 《行尸走肉第一章》免安装中文汉化硬盘版下载
- 单机|436 MB
- 一款以动作冒险为主题的游戏
-
-
下载
- 《街头霸王X铁拳》免安装中文汉化硬盘版下载
- 单机|111MB
- 一款非常好玩的格斗游戏
-
-
下载
- |
-
-
下载
- 《暗黑破坏神3》免安装繁体中文正式版下载
- 单机|7630 MB
- 一款以角色扮演为主题的游戏
-
-
下载
- 《马克思佩恩3》免安装硬盘版下载
- 单机|27033 MB
- 一款以第三人称射击为主题的游戏