程序员茄子
全部
编程
代码
资讯
案例
综合
联系我们
能力 相关技术文章
php
mysql
shell
go
vue
css
api接口对接
支付接口对接
METR 的 50% 时间视野:AI 能完成人类要花多久的任务,以及这些数字为什么不能直接比
编程
METR 的 50% 时间视野:AI 能完成人类要花多久的任务,以及这些数字为什么不能直接比
2026-09-22 00:04:49
METR 用「50% 时间视野」度量 Agent 能力:任务难度按人类专家完成时长标定,取模型成功率跌到 50% 的任务时长。本文讲清四步算法、已发布数字,以及六个不能忽略的坑——超过 16 小时不可信、换任务集改变排名、置信区间达一个数量级、scaffold 影响结果、reward hacking 能让估计从 11.3h 跳到 270h,外加 RCT 显示 AI 让资深开发者慢了 19%。
Agent
能力
智能体
METR
时间视野
Agent评测
基准测试
Theory of Agent 综述:Agent 该内化什么,该外化什么,一篇给出 6 条判断维度
编程
Theory of Agent 综述:Agent 该内化什么,该外化什么,一篇给出 6 条判断维度
2026-09-22 00:03:53
北航等 8 家机构 19 位研究者的 Theory of Agent 综述用「内化/外化」统一视角回答一个问题:哪些能力该固化进模型,哪些必须留在外部 Harness。文中给出知识边界、四种失误(过度思考/思考不足/过度行动/行动不足)、内化与外化的 6 条判断维度,以及应该怎么评测一次工具调用到底有没有必要。
Agent
能力
智能体
内化与外化
Harness
Agent架构
大家都在搜索什么?
devops
易支付
一个官网+多少钱
统一接受回调
统一回调
python
sub
node
宝塔日志
mysql
shell
ElasticSearch
css
vue
api接口对接
2025
支付接口对接
go
php
php回调