工具党追逐排行榜,造物者先写任务说明。
第三天,小明打开电脑,浏览器里排着十几个模型评测页面。
小明:“这次我不是不敢开始。我是不知道该用什么开始。有人说这个模型写代码最好,有人说另一个推理最强,还有人说一定要本地部署。我要不要先选一个长期主力?”
Jason:“你是在选工具,还是在找一个不会让你后悔的信仰?”
小明:“我只是怕选错。模型变化太快,今天学会的,明天会不会就没用了?”
Jason:“具体工具当然会变。所以你更要学习一种不会随着榜单变化的能力:先判断任务需要什么,再选择资源。”
一、模型不会变得完全一样,但单一排行榜越来越不够用
不同模型会长期存在能力、成本、速度、上下文、工具调用、隐私方案和生态差异。把它们说成“终将完全无差别”并不准确。
但对大多数造物者来说,更重要的变化是:基础能力会持续提高,今天需要顶级模型完成的任务,未来可能由更便宜的模型、规则或本地工具完成。单纯记住“谁最强”无法形成长期能力。
Jason:“模型排名回答的是特定测试里的表现。你的项目需要回答的是:在我的数据、成本、风险和用户场景里,什么方案最合适。”
二、先问:这个任务真的需要大模型吗?
小明:“做 AI 项目,不就是尽量让 AI 多做吗?”
Jason:“不是。为了显得智能而使用模型,和为了显得高级而给自行车装火箭一样。”
Jason 写下一条选择阶梯。
- 固定规则能否解决?例如明确字段校验、价格计算、日期提醒。
- 普通搜索或数据库查询能否解决?例如查找已有记录、筛选结构化数据。
- 传统自动化能否解决?例如文件搬运、定时触发、格式转换。
- 只有在需要理解自然语言、生成、归纳、分类或开放式推理时,再考虑大模型。
- 即使使用大模型,也要判断是否需要强推理、多模态、联网、长上下文或本地部署。
Jason:“不用 AI 也能稳定解决的部分,就不要强行交给 AI。”
三、模型选择不是一次婚姻,而是一张任务适配卡
小明:“所以同一个项目里,也可以用不同工具?”
Jason:“当然。写需求可以用一个模型,批量分类可以用便宜模型,确定性计算用规则,敏感数据在本地处理,最终高风险结论交给人确认。”
小明:“那 AI Agent 不是一个万能大脑。”
Jason:“更像一支按任务分工的团队。真正的架构不是把最强模型接到所有地方,而是让每一步使用恰当的能力。”
四、选择工具时必须同时看五种成本
- 金钱成本:调用价格、订阅、服务器、存储和后续维护。
- 时间成本:生成速度、人工等待、重新尝试和调试时间。
- 错误成本:输出错误会造成多大损失,是否容易被发现。
- 切换成本:流程是否过度绑定单一模型或平台。
- 责任成本:涉及隐私、专业判断和外部承诺时,谁承担最终责任。
Jason:“便宜不等于低成本。一个便宜但经常出错的流程,可能消耗更多人工。贵也不等于浪费。关键是错误代价和任务价值。”
五、模型越强,人越不能放弃判断
小明:“模型以后越来越强,人是不是只要说一句需求就够了?”
Jason:“模型越能生成完整结果,人越容易忘记检查。真正稀缺的不是按下生成键,而是判断它有没有回答正确的问题。”
小明:“那长期应该练什么?”
Jason:“观察现实、定义任务、设计流程、准备数据、设置边界、验收结果,以及在失败时修正。”
模型是船,不是彼岸。你要学的是识别河流、掌舵和靠岸,而不是每天拜一条新船。
本谈铁律
本谈作业|任务适配卡
项目名称:
当前任务: 只填写一个明确任务。
目标输出: 格式、长度、质量标准。
输入数据: 来源、数量、是否完整。
确定性要求: 允许创意变化,还是必须稳定一致?
是否需要最新信息: 需要时说明核验来源。
是否涉及隐私或机密: 决定是否脱敏或本地处理。
调用频率: 一次、每天、每位用户或高频批量。
错误可能造成的损失:
规则、搜索或普通自动化能否完成:
选择的模型 / 工具组合:
选择理由: 能力、速度、成本、隐私和生态。
人工确认点:
备选与回退方案:
自检清单
□ 我是否因为排行榜或社交媒体热度,而不是任务要求选择工具?
□ 这个任务是否其实可以由规则、搜索或普通自动化稳定完成?
□ 我是否同时考虑了成本、速度、错误代价、隐私和维护?
□ 流程是否过度绑定单一模型?
□ 高风险输出是否设置了人工确认和来源核验?
□ 模型不可用时,项目是否有基本回退方案?