程序员茄子
全部
编程
代码
资讯
案例
综合
联系我们
时间视野 相关技术文章
php
mysql
shell
go
vue
css
api接口对接
支付接口对接
METR 的 50% 时间视野:AI 能完成人类要花多久的任务,以及这些数字为什么不能直接比
编程
METR 的 50% 时间视野:AI 能完成人类要花多久的任务,以及这些数字为什么不能直接比
2026-09-22 00:04:49
METR 用「50% 时间视野」度量 Agent 能力:任务难度按人类专家完成时长标定,取模型成功率跌到 50% 的任务时长。本文讲清四步算法、已发布数字,以及六个不能忽略的坑——超过 16 小时不可信、换任务集改变排名、置信区间达一个数量级、scaffold 影响结果、reward hacking 能让估计从 11.3h 跳到 270h,外加 RCT 显示 AI 让资深开发者慢了 19%。
Agent
能力
智能体
METR
时间视野
Agent评测
基准测试
大家都在搜索什么?
devops
易支付
一个官网+多少钱
统一接受回调
统一回调
python
sub
node
宝塔日志
mysql
shell
ElasticSearch
css
vue
api接口对接
2025
支付接口对接
go
php
php回调