看到一个有意思的想法:让 AI Agent 从零开始养一个 PT(Private Tracker)账号。仔细想想这其实是一个很好的 Agent 能力测试场景。
任务拆解
如果让 AI 全自动完成,需要这几步:
- 信息搜集 - 自主搜索了解 PT 站的玩法和规则
- 注册入门 - 找到邀请码或开放注册的站点,完成注册
- 规则学习 - 阅读站点规则,设计通过新手考核的方案
- 工具配置 - 安装和配置下载客户端
- 日常维护 - 选种、下载、做种,维护上传下载比
难点分析
| 步骤 | 难度 | 瓶颈 |
|---|---|---|
| 信息搜集 | 低 | 网页搜索能力 |
| 注册 | 高 | 验证码识别、邀请码获取 |
| 规则学习 | 中 | 长文本理解和规划 |
| 工具配置 | 中 | 系统权限和软件操作 |
| 日常维护 | 低 | 定时任务执行 |
现实思考
说实话,目前的 AI Agent 还做不到完全自主完成这套流程。验证码是第一个拦路虎,邀请码获取需要社交能力,新手考核需要真正理解规则而不是死记硬背。
但这个场景很适合测试 Agent 的综合能力:信息搜集、规划、工具使用、长期任务执行。作为能力评估的 benchmark 倒是挺有价值的。
大家还能想到什么类似的"AI 能力压测"场景?