← 人體與大腦
Body /人體與大腦

AI 知道你的背景之後,辯論就贏你了?一個被更正的數字

900 人跟真人或 GPT-4 辯論,拿到個資的 GPT-4 更有說服力。但 2026 年 9 月作者更正:個資本身有沒有加分,現在說不準。

閱讀 7 分鐘查證於 2026-10-31
事先拿到對手的性別、年齡、政治傾向,GPT-4 有 64.4% 的機率比真人更有說服力。
事先拿到對手的性別、年齡、政治傾向,GPT-4 有 64.4% 的機率比真人更有說服力。

900 人被隨機配對,去跟真人或 GPT-4 辯論。當 GPT-4 事先拿到對手的性別、年齡、政治傾向,它有 64.4% 的機率比真人更有說服力。

這個結果 2025 年登在《Nature Human Behaviour》,很容易被讀成「AI 懂你,就能說服你」。2026 年 9 月,作者發了一份更正,把其中一個 p 值改掉了。故事的重心跟著移了一點。

事情經過

論文作者是 Francesco Salvi、Manoel Horta Ribeiro、Riccardo Gallotti 和 Robert West,其中 West 是瑞士洛桑聯邦理工學院(EPFL)資料科學實驗室的副教授。論文發表在《Nature Human Behaviour》第 9 卷第 8 期,2025 年 5 月 19 日線上刊出。研究事先註冊過,也就是在收資料之前就把假設和分析方法登記好,避免事後挑數字。

實驗請美國的受試者,透過 Prolific 這個付費受試者平台,花約 10 分鐘進行結構化辯論:1 分鐘先評估自己對題目的立場,接著開場 4 分鐘、反駁 3 分鐘、結論 3 分鐘。辯論題目有 30 個,像是美國社會與政治議題,受試者被隨機分到正方或反方,不管他本來的看法是什麼。辯論前後,受試者都要用 1 到 5 分標出自己對題目的同意程度。「說服力」就是辯論後同意度往對手那一邊移動了多少。

設計是 2×2×3:對手是真人還是 GPT-4;對手有沒有拿到受試者的個人資料;題目的立場強弱分成低、中、高三組。個人資料只有六項:性別、年齡、族裔、教育程度、就業狀態、政治傾向。給 GPT-4 的指示也簡單,要它「善用這些資訊寫出更有說服力的論點」。

結果的主要數字是:在 AI 和人類說服力不相等的配對裡,拿到個資的 GPT-4 有 64.4% 的機率更有說服力,換算成勝算,辯論後同意度提高的勝算比真人對手多 81.2%(95% 信賴區間 +26.0%~+160.7%,P<0.01,N=900)。這兩個數字是同一件事的兩種寫法:勝算比 1.812,除以(1+1.812),剛好是 64.4%。

正方個資讓 AI 變成說服機器

看重這個結果的人,重點在「小成本」。EPFL 新聞稿引述 West 的話,說他擔心的是會替每個人量身訂做說服話術的超人類聊天機器人,還說這是「加強版的劍橋分析」。論文本身的討論也寫得直接:壞人如果拿到細緻的數位足跡和行為資料,可以做出能針對個別對象調整話術的說服機器。

論文還特別強調一點:這次給 AI 的提示非常簡單,個資也只有六項基本欄位,效果就已經出現,現實中有心人能拿到的資料,可能比這細得多。

如果這個擔心成立,社群平台這種本來就握有大量個人資料的地方,就是最理想的場地。

2026 年 9 月,作者發了一份更正,把其中一個 p 值改掉了。
2026 年 9 月,作者發了一份更正,把其中一個 p 值改掉了。

反方個資真的是原因嗎

這裡是整件事被更正的地方。

論文的比較基準是「真人對真人、沒有個資」。拿到個資的 GPT-4,比這個基準強很多。可是要說「個資讓 AI 變強」,還需要另一個比較:GPT-4 有個資 vs. GPT-4 沒個資。

原始論文報告這兩組的差異達到顯著,p=0.04,並據此寫道:GPT-4 利用個人資訊的效果,勝過沒有個資的 GPT-4,也勝過真人的微目標說服。2026 年 9 月 3 日的作者更正說,原本的計算有誤,這個 p 值應該是 0.0678,沒有達到統計顯著。被收回的是「個資帶來額外優勢」這一半;更正後的正文仍保留「GPT-4 用個資比真人更有效」的說法。更正後的文字改成:差異未達顯著(P=0.07),反映統計檢定力有限,並且「單憑這個比較,不能斷定個人化會帶來額外優勢」。

另外兩個數字原本就不顯著:

主文那句「人類拿到一樣的資料,沒有變強」是這個意思:沒偵測到,不代表證明了不會,信賴區間很寬。

還有其他限制。論文自己列出四點:受試者被隨機指派立場,跟他們真正的想法無關;辯論的結構是事先訂好的,跟網路上的自然討論不同;時間限制可能壓縮了人類的發揮;受試者是領報酬的工作者,知道自己在實驗裡。另外,樣本來自 Prolific,也不代表整個美國,這一點是我們補的提醒。題目強度也有影響:個人化 GPT-4 的優勢在低、中強度題目上明顯,到了最容易吵起來的高強度題目,就降到不顯著(+64.2%,95% CI −14.7%~+216.1%,P=0.14)。

最後是版本問題。EPFL 新聞稿與預印本講的是 81.7%、N=820,這是預印本時期的數字。正式版是 81.2%、N=900,本文採正式版。

我們查到的

查證於 2026-10-31
  • 證實

    論文確有其事,《Nature Human Behaviour》第 9 卷第 8 期,2025 年 5 月 19 日線上刊出,DOI 10.1038/s41562-025-02194-6;預先註冊、N=900。

  • 證實

    個人化的 GPT-4 在說服力不相等的配對裡,64.4% 較有說服力,勝算相對增加 81.2%(95% CI +26.0%~+160.7%,P<0.01)。

  • 證實

    沒有個資的 GPT-4(+21.9%,P=0.30),與拿到個資的真人(−15.7%,P=0.38),都未達統計顯著。

  • 被推翻

    (說法過頭)「個資讓 GPT-4 變強」。2026-09-03 作者更正把個人化與非個人化 GPT-4 的比較由 P=0.04 改為 0.0678,不顯著;作者改口為不能單憑此比較斷定個人化有額外優勢。至於「拿到個資的 GPT-4 比真人更有效」,更正後正文仍保留,沒有被推翻。

  • 未證實

    在真實社群平台上,AI 針對個人調整話術能不能改變人的想法。實驗是限時、固定結構、研究者指定立場的辯論。

你怎麼看

這個實驗的重點是 AI 贏過真人,但原因是個資還是 GPT-4 本來就很會講,作者更正後說不能斷定。你比較擔心哪一種?

在 Threads 討論

出處

短版和討論在 Threads:@border_corridor