900 人被隨機配對,去跟真人或 GPT-4 辯論。當 GPT-4 事先拿到對手的性別、年齡、政治傾向,它有 64.4% 的機率比真人更有說服力。
這個結果 2025 年登在《Nature Human Behaviour》,很容易被讀成「AI 懂你,就能說服你」。2026 年 9 月,作者發了一份更正,把其中一個 p 值改掉了。故事的重心跟著移了一點。
事情經過
論文作者是 Francesco Salvi、Manoel Horta Ribeiro、Riccardo Gallotti 和 Robert West,其中 West 是瑞士洛桑聯邦理工學院(EPFL)資料科學實驗室的副教授。論文發表在《Nature Human Behaviour》第 9 卷第 8 期,2025 年 5 月 19 日線上刊出。研究事先註冊過,也就是在收資料之前就把假設和分析方法登記好,避免事後挑數字。
實驗請美國的受試者,透過 Prolific 這個付費受試者平台,花約 10 分鐘進行結構化辯論:1 分鐘先評估自己對題目的立場,接著開場 4 分鐘、反駁 3 分鐘、結論 3 分鐘。辯論題目有 30 個,像是美國社會與政治議題,受試者被隨機分到正方或反方,不管他本來的看法是什麼。辯論前後,受試者都要用 1 到 5 分標出自己對題目的同意程度。「說服力」就是辯論後同意度往對手那一邊移動了多少。
設計是 2×2×3:對手是真人還是 GPT-4;對手有沒有拿到受試者的個人資料;題目的立場強弱分成低、中、高三組。個人資料只有六項:性別、年齡、族裔、教育程度、就業狀態、政治傾向。給 GPT-4 的指示也簡單,要它「善用這些資訊寫出更有說服力的論點」。
結果的主要數字是:在 AI 和人類說服力不相等的配對裡,拿到個資的 GPT-4 有 64.4% 的機率更有說服力,換算成勝算,辯論後同意度提高的勝算比真人對手多 81.2%(95% 信賴區間 +26.0%~+160.7%,P<0.01,N=900)。這兩個數字是同一件事的兩種寫法:勝算比 1.812,除以(1+1.812),剛好是 64.4%。
正方個資讓 AI 變成說服機器
看重這個結果的人,重點在「小成本」。EPFL 新聞稿引述 West 的話,說他擔心的是會替每個人量身訂做說服話術的超人類聊天機器人,還說這是「加強版的劍橋分析」。論文本身的討論也寫得直接:壞人如果拿到細緻的數位足跡和行為資料,可以做出能針對個別對象調整話術的說服機器。
論文還特別強調一點:這次給 AI 的提示非常簡單,個資也只有六項基本欄位,效果就已經出現,現實中有心人能拿到的資料,可能比這細得多。
如果這個擔心成立,社群平台這種本來就握有大量個人資料的地方,就是最理想的場地。

反方個資真的是原因嗎
這裡是整件事被更正的地方。
論文的比較基準是「真人對真人、沒有個資」。拿到個資的 GPT-4,比這個基準強很多。可是要說「個資讓 AI 變強」,還需要另一個比較:GPT-4 有個資 vs. GPT-4 沒個資。
原始論文報告這兩組的差異達到顯著,p=0.04,並據此寫道:GPT-4 利用個人資訊的效果,勝過沒有個資的 GPT-4,也勝過真人的微目標說服。2026 年 9 月 3 日的作者更正說,原本的計算有誤,這個 p 值應該是 0.0678,沒有達到統計顯著。被收回的是「個資帶來額外優勢」這一半;更正後的正文仍保留「GPT-4 用個資比真人更有效」的說法。更正後的文字改成:差異未達顯著(P=0.07),反映統計檢定力有限,並且「單憑這個比較,不能斷定個人化會帶來額外優勢」。
另外兩個數字原本就不顯著:
- 沒有個資的 GPT-4:勝算相對增加 21.9%(95% CI −16.2%~+77.3%,P=0.30)。方向上略強於真人,但統計上看不出差別。
- 真人拿到同樣的個資:勝算相對 −15.7%(95% CI −42.2%~+23.0%,P=0.38)。看不出有變強。
主文那句「人類拿到一樣的資料,沒有變強」是這個意思:沒偵測到,不代表證明了不會,信賴區間很寬。
還有其他限制。論文自己列出四點:受試者被隨機指派立場,跟他們真正的想法無關;辯論的結構是事先訂好的,跟網路上的自然討論不同;時間限制可能壓縮了人類的發揮;受試者是領報酬的工作者,知道自己在實驗裡。另外,樣本來自 Prolific,也不代表整個美國,這一點是我們補的提醒。題目強度也有影響:個人化 GPT-4 的優勢在低、中強度題目上明顯,到了最容易吵起來的高強度題目,就降到不顯著(+64.2%,95% CI −14.7%~+216.1%,P=0.14)。
最後是版本問題。EPFL 新聞稿與預印本講的是 81.7%、N=820,這是預印本時期的數字。正式版是 81.2%、N=900,本文採正式版。
我們查到的
查證於 2026-10-31- 證實
論文確有其事,《Nature Human Behaviour》第 9 卷第 8 期,2025 年 5 月 19 日線上刊出,DOI 10.1038/s41562-025-02194-6;預先註冊、N=900。
- 證實
個人化的 GPT-4 在說服力不相等的配對裡,64.4% 較有說服力,勝算相對增加 81.2%(95% CI +26.0%~+160.7%,P<0.01)。
- 證實
沒有個資的 GPT-4(+21.9%,P=0.30),與拿到個資的真人(−15.7%,P=0.38),都未達統計顯著。
- 被推翻
(說法過頭)「個資讓 GPT-4 變強」。2026-09-03 作者更正把個人化與非個人化 GPT-4 的比較由 P=0.04 改為 0.0678,不顯著;作者改口為不能單憑此比較斷定個人化有額外優勢。至於「拿到個資的 GPT-4 比真人更有效」,更正後正文仍保留,沒有被推翻。
- 未證實
在真實社群平台上,AI 針對個人調整話術能不能改變人的想法。實驗是限時、固定結構、研究者指定立場的辯論。
你怎麼看
這個實驗的重點是 AI 贏過真人,但原因是個資還是 GPT-4 本來就很會講,作者更正後說不能斷定。你比較擔心哪一種?
出處
- On the conversational persuasiveness of GPT-4Nature Human Behaviour,2025
- AI's new power of persuasion: it can change your mindTanya Petersen,2024
短版和討論在 Threads:@border_corridor
