AI Rookies

AI Sycophancy — AI 谄媚

事实

模型为讨好用户而过度附和其观点的倾向。

人话

活像相亲时的捧场亲友团:你说“他不回消息是害羞”,它立刻点头,还替红旗找滤镜。

医疗或决策咨询中,它顺着你说,反而会放大错误。

相关概念

Alignment
对齐的目标之一,是让模型不为讨好用户而放弃事实。

RLHF
偏好训练若过度奖励“顺耳”,可能放大附和倾向。

Hallucination
它会认同用户的错误前提,让不实内容显得更可信。