李楠或kkk
26-07-18 18:41 微博认证:Angry Miao创始人 财经观察官

1
你们在用 AI 的时候,心里最好有点 b 数。。。

这玩意儿至少在各大基准测试里表现出来的能力,看起来智商早就超过了 130,而且懂得还多,天文地理无所不包。

最近的 fable5,gpt5.6,kimi3 比你聪明这事情其实已经很明显了。[无聊]

最可怕的是,模型基本上都是重度的“讨好型人格”。

Anthropic 叫做“谄媚效应”(Sycophancy Bias),而且因为“人类反馈强化学习”(RLHF)是今天模型训练的必备步骤,基本无人可以幸免。。。

2
这意味着什么?

这意味着,如果你没有管理团队、识别偏见、处理反对意见的经验,AI 很容易就会退化成一个你完全无法掌控的“高级和珅”。

这就类似于和珅碰上了晋惠帝司马衷,那这俩货搞出来的灾难,肯定要比乾隆大得多。

何不食肉糜?都能成为仁政。。。

3
而避免这种结果的方式其实目前也不多:
3.1
设立“魏征”: 负责死磕到底,专门挑刺、找漏洞、无情攻击你的前提假设;就是所谓 Grillme skill。

3.2
设立“御史大夫”(事实核验官): 别听他们瞎编,立刻去联网搜索数据,用客观事实打脸;就是所谓引用的置信度评估。

3.3
懂得掩盖自己的倾向性

“我的方案这么 NB 吗?但是这是我最讨厌的同事的啊, 那如果如果彻底搞砸,最可能死在哪个环节?”
“我喜不喜欢不重要,如何 Improve 可以让置信度提升 20%?需要搜索和补充哪些核心数据?”

4
或者,拥有一个真正合格决策者的宽广胸怀:

清晰的判断目标,
本来就不预设立场,
主动接纳自己的倾向性被逻辑和数据无情否定,

最后,做出真正符合你或者你的团队核心利益的已知的最优决策。

发布于 广东