很多人第一次用大模型,是被一句「它好像什么都懂」带进来的,用两天又觉得「怎么老是瞎编」。问题不在模型本身,而在于没人告诉你它的强项和短板分别长什么样。这篇不吹也不黑,把优点、缺点、以及每条优缺点的适用边界摊开讲,最后给你一张按任务类型分工的对照表,照着填就知道某个活该不该交给它。
很多人第一次用大模型,是被一句「它好像什么都懂」带进来的,用两天又开始怀疑人生:怎么老是瞎编。问题往往不在模型本身,而在于没人提前告诉你它的强项和短板分别长什么样。有人拿它算账,有人拿它查法条,有人拿它写最终对外发布的稿子,翻车几乎都发生在这些地方。
这篇不吹也不黑,把优点、缺点、以及每条优缺点的适用边界摊开讲,最后给你一张按任务类型分工的对照表,照着填就知道某个活该不该交给它。看的时候建议一边看一边把手上的任务往里套,比光读结论有用得多。
先说清楚:大模型到底在做什么事
它的底层动作其实很朴素:根据上文预测下一个词。所有优点和缺点都从这一步长出来。因为是在预测「接下来最像话的词」,它天生擅长把话说得通顺;同样因为这个机制,它并不真的去数据库里核对,也不需要外部逻辑引擎,所以既能流畅成句,也会一本正经地编。
理解这一点之后,很多「它怎么这么蠢」的抱怨会变成「我这个问题问错类型了」。比如你让它查一个冷门事实,它给你的其实是「听起来最像答案的答案」,而不是「核对过的答案」。这两者的区别,决定了你能不能用它。
- 语言加工
- 它真正在做的事:按上文续写最合理的下一段话
- 检索
- 它默认不做的事:去某个权威库里逐条比对
- 逻辑引擎
- 它也不是:多步推理是「像在推理」,不等于可验证的推导
- 误区转化
- 把「它很蠢」改成「我该不该问这类问题」,思路会顺很多
- 它的输出是一次生成,不是一次查询,别默认背后有权威来源
- 它能同时写出对的和错的,且两段话的语气完全一样
- 它的强项来自「像人话」,短板也来自「只要像人话就行」
- 想知道更细的机制链路,可以顺着站内 /stacks/atlas 往下查名词
它真正强的地方:四类活它比人快得多
先说优点,而且要说具体。它的优势不在「无所不知」,而在几个特定的加工环节。只要你的任务落在这几类里,它几乎是立刻可用的,不需要你额外准备数据集,也不需要训练。
- 语言层面的加工改写、摘要、翻译、换语气、缩句扩句,这类活它几乎不需要额外准备。验证方式:拿一段你熟悉的材料让它改写,看意思有没有跑偏、语气是不是你要的。
- 模式归纳给一堆零散材料,让它找共性、做分类、起标题,比人工翻快很多。验证方式:故意混进一条和其他材料明显不同的条目,看它能不能挑出来。
- 从零起草写初稿、搭架子、列提纲,把「空白页恐惧」这一步直接跳过。验证方式:看初稿的结构能不能用,能不能在此基础上改,而不是从零重写。
- 跨领域陪聊不懂的领域先问它一轮,至少能攒出一批可以拿去检索的关键词。验证方式:把它给的关键词丢进搜索里,看能不能搜到靠谱内容。
这四类活的共同点是:它们要的是「像样的一版」,不是「唯一正确的一版」。只要下游还有人把关、还有地方能改,它就能帮你省下最枯燥的那一段。反过来,如果这个活产出即终点、没人再看,那它的优点就变成了风险。
它明显不行的地方:五类短板要提前认
短板不是「偶尔出错」这么笼统,而是有明确的类型。提前认清楚,比出事后复盘便宜得多。下面五类,遇到任何一类都要在多一道人工或检索环节,别直接采信。
- 事实性错误:越冷门、越新、越具体的事实,编造概率越高,且语气一样笃定,读起来分辨不出来
- 算不准也不记账:长链条数字计算、需要精确累计的活,容易中间某一步就飘了,后面一路顺着错下去
- 不知道自己不知道:它很少主动说「这题我不会」,这比答错更危险,因为你会以为它知道
- 长文越往后越容易丢:材料塞太满时,开头讲的约束到后面可能就不认了,规则形同虚设
- 同一问题两次答案可能不一样,需要严格复现的场景要先做额外处理,比如固定提问、固定材料
这五条里,第三条最容易被忽视。一个会明确说「我不确定」的工具,你还会警惕;一个永远自信满满的工具,你反而容易放下防备。所以判断用不用它,不取决于它答得多漂亮,而取决于这个答案错了好不好收拾。
一分钟判断:这个任务能不能交给它
下面这套判断只需要一分钟,三个问题,任何一个是「是」,就必须加环节,不能裸用。这套标准不追求精确,只追求让你在动手前停下来想三秒。
| 自问的问题 | 答「否」意味着 | 答「是」意味着 |
|---|---|---|
| 答案错了会不会有实际损失? | 试错成本低,可以先让它打头阵 | 必须加人工复核或权威来源比对 |
| 结果需不需要可复现? | 每次略有差异可以接受 | 固定提问方式与材料,或干脆不用它 |
| 事实能不能事后核对? | 没有可查的出处,解释性内容为主 | 凡有出处的部分一律要求它给来源,自己点开看 |
- 典型绿灯:起标题、做摘要、写草稿、翻译、整理会议记录骨架
- 典型红灯:直接对外发布的数字、法律与医疗结论、需要签字负责的最终稿
- 拿不准时,先让它做「草稿」而不是「结论」,成本最低,退路也最好留
- 注意:绿灯任务如果突然要求「必须是最终版」,也会直接变红灯,判断要跟着任务性质走,不是跟着任务名字走
这套清单的不适用场景也要说清楚:如果你的活本身没有明确对错,比如头脑风暴、找灵感,那三个问题问不出什么,直接用就好,别被清单捆住手脚。
按任务分档:什么活给什么用法
同样是问大模型,用法可以分四档。档位选错,往往不是模型不行,而是你让它干了它不擅长那一档的事。下面这张表可以贴在工位上,接到活先对齐一下档位。
| 档位 | 适用任务 | 判断要点 |
|---|---|---|
| 纯生成档 | 头脑风暴、文案初稿、起名 | 让它自由发挥,人来挑,不要求正确只要求够多 |
| 给料档 | 文档问答、会议纪要整理 | 先把资料贴进去再提问,答案必须能指着原文说出来 |
| 工具档 | 计算、查最新信息、动外部系统 | 接到检索或工具上,而不是硬问模型本身 |
| 核对档 | 任何能查到出处的内容 | 一律要求它给来源,然后自己去点开看一眼 |
档位之间可以叠加,但顺序别倒。先想清楚这个活落在哪一档,再决定要不要加检索、加核对。如果一开始就把它当成「什么都能问的专家」,那后面所有的补救都是在给小错误擦屁股。
新手最容易搞反的四个印象
这四个印象几乎每个新手都中过,中了之后会觉得「大模型不过如此」。其实不是能力问题,是预期没对齐。把它们逐个拆开,你的使用体感会好很多。
- 「它记得我说过的话」
- 多数情况下是当前这段对话里还在,换个窗口就没了,重要的信息每次都要重新给
- 「它答得越流畅越靠谱」
- 流畅度和准确度是两条独立的线,读起来顺不代表对
- 「多问几遍取一致的答案就对了」
- 同一种错法重复出现很常见,一致性不等于正确性
- 「它不行就是模型不行」
- 很多情况是问法、材料、格式没给到位,先排查自己这边再说
最后一条要展开说:如果你怀疑是服务本身的问题,先按站内 /ai-status 看服务状态,再回头检查自己的提问和材料。顺序反了,容易把「我材料没给全」误判成「这家不行」,白白换一圈工具。
这些场景,先别急着上大模型
说完怎么用,再说什么时候不用。有些场景用大模型不是「效果差一点」,而是「方向就不对」。下面几种情况,先把别的手段摆在前面,模型只做辅助。
- 要求百分百准确且无法人工复核的流程,先跑人工或规则,模型只做辅助
- 数据不能外发的场景,先确认合规与部署形态,别默认走公网接口
- 只是查固定字段、做固定换算的活,写死规则比调模型更省事也更稳
- 已经有人手写得很顺、量又很小的事,接模型的投入产出不划算
- 需要长期稳定、口径完全一致的输出,先做评估再说,别直接替换现有流程
这不是保守,是分工。模型的优势区间在过去几节已经说清楚了,把不适合的活硬塞给它,最后往往是两边都不满意:流程被拖慢,模型还被骂不好用。
怎么用一周时间摸清它的脾气
看完整篇,最有用的动作其实是自己上手测。给你一个一周的练法,每天半小时到一个小时就够,目的不是学会用某个工具,而是建立你自己的「不可信清单」。
- 第一天:找错拿十个你熟悉的领域问题去问,把它答错的地方记下来,形成你的不可信清单,写下来比记在脑子里管用
- 第二到三天:对比问法同一件事分别用「直接问」和「先给材料再问」两种方式做,对比差异,你会直观感受到给料档的价值
- 第四到五天:接真活把手上真实的小活交给它,只交草稿环节,记录省了多少时间、返工多少,别只交最简单的活,那样测不出边界
- 收尾:定模板把验证过的用法写成自己的模板,之后按模板调用,不靠手感,也方便和别人对齐
一周之后你大概会有感觉:哪些活可以闭着眼交,哪些活必须先给材料,哪些活压根不该给它。这份感觉比任何评测榜单都贴身。如果你还想横向比较不同渠道的表现和大致费用,可以到站内对照页面看当时的数字,别用道听途说的印象下单。
下一步把手上正在做的活按上面的四档分一分,再顺手看一眼你打算用的渠道靠不靠谱,比继续读十篇评测都更快。→常见问题
大模型是不是什么都懂,只是不愿意说?
不是。它没有「懂不懂」这种自我判断,本质是在续写最像人话的下文。所以它不会因为不知道就闭嘴,反而会用同样自信的语气把话补圆。冷门事实、最新动态、具体数字这三类最容易出问题,用之前先假设它可能编。
既然会瞎编,那它还有什么用?
它的价值主要在语言加工和初稿生成,不负责提供真相。把它的输出当成一份需要你审的草稿,而不是一份可以直发的结论,绝大多数场景就安全了。凡是能核对的就核对,核对不了的就不让它单独下结论。
同一件事我该问几遍才算靠谱?
多问几遍只能看出它稳不稳定,看不出对不对。稳定的错误答案照样是错的。更有效的做法是换一种问法、补上材料、或者要求它指出依据,然后拿依据去原始来源核对。重复提问适合用来发现答案里的分歧点。
是不是换个更强的模型,缺点就都没了?
不会。模型升级会改善错误率和长文处理能力,但「会编、算不准、不知道自己不知道」这几条属于机制层面的特征,只能缓解不能消除。所以判断标准还是一样:错一次会不会有代价,需要人工兜底的地方一个都不能省。
小团队没有专人审核,怎么用才不翻车?
把模型限制在「不影响对外结果」的环节:内部草稿、会议纪要骨架、素材整理、代码注释这类。凡是要发出去的内容,哪怕只是一个人扫一眼也比不看强。另外把常见任务的提示词固定成模板,减少每次自由发挥带来的波动。