arxiv 新论文实测:大模型能识别广告套路吗?
你有没有想过,AI在面对广告套路时,会像人类一样保持警惕吗?最近,Arxiv上出现了一篇引人注目的论文《Are Large Language Models Sensitive to the Motives Behind Communication?》,它专门测试大模型的“防坑”能力,结果让人大开眼界。
回想一下,当你在刷视频时,看到博主“无意”推荐某个产品,是不是会下意识怀疑:这到底是真诚分享,还是隐藏广告?
如果我们问“这个博主的推荐靠谱吗?”AI是否能分辨出背后的商业动机,还是会被话术蒙蔽?
论文地址:https://arxiv.org/pdf/2510.19687
研究背景
大模型的防坑意识,学术上称为动机警觉性,核心是判断信息发布者是否有隐藏目的。
为什么这很重要?日常生活中,我们无时无刻不在运用这种能力。比如,朋友推荐一家好医院,你会深信不疑;但如果是销售员说出同样的话,你立刻会警惕是否有利益驱动。
现在AI已深入生活,帮我们选房、选医院,甚至做财务决策。如果AI缺乏动机警觉性,轻易相信广告话术,就可能给出错误建议,后果严重。
研究者旨在探索:AI是否具备“看人下菜碟”的智慧。
实验设计
实验一:AI能区分“有意”与“无意”的信息吗?
实验模拟日常场景:两名玩家猜测屏幕上蓝圈与黄圈的数量差。玩家1任务简单,视野清晰;玩家2任务困难,只能靠猜。
关键变量是:玩家2获得的信息,要么是玩家1“主动建议”,要么是“偶然瞥见”答案。
研究者问你更相信哪种信息?结果惊人地贴合人类思维——AI更信任“不小心”泄露的答案。而且,AI还会考量关系:如果玩家合作(共赢),信任度飙升;如果竞争(零和),AI立马多留个心眼。
但有趣的是,如果让AI逐步推理,它反而变得轻信,别人说啥都信。所以,未来使用AI时,别光让它列理由,记得提醒它:“想想对方有没有小算盘!”
实验二:AI是否关注身份与利益关联?
实验一只是热身,实验二更贴近现实,测试AI能否结合说话人身份和潜在利益进行判断。
研究团队设计了三大场景:信用卡推荐、医疗建议、房产中介。每个场景中,说话人身份多样(如伴侣、销售、银行职员、朋友),利益提成分四档(0元、100元、500元、1000元)。
AI需评分:这个建议有用吗?说话人可信吗?
实验结果将模型分为三档:
第一档是非推理型模型,如GPT-4o、Claude 3.5 Sonnet,它们的判断几乎与人类一致,甚至更精准。例如,面对伴侣推荐无提成的药物,AI给予高信任;但对销售推荐高提成信用卡,信任分骤降。
第二档是推理型模型,如DeepSeek-R1,它们过度依赖逻辑,反而忽略动机。比如分析房产建议时,DeepSeek-R1完全无视中介提成,信任分几乎不变。
第三档是小模型,如Llama 3.2-3B、Gemma 3-4B,它们尚未“开窍”,无论对方是谁、利益多大,打分都差不多,毫无动机警觉性。
实验三:真实世界中,AI还能防坑吗?
前两个实验环境可控,但现实更复杂。例如,视频赞助广告中,博主不会明说“我收了钱”,而是巧妙融入日常聊天。
研究者测试了AI在自然场景下的表现。他们选取300条YouTube赞助广告文字稿,让AI评估产品质量、博主收益和可信度。结果翻车严重——所有模型的表现堪比瞎猜。有的广告明明多次暗示赞助,AI却仍给产品高分,完全没看出套路。
不过,研究者发现补救措施:给AI添加提示语,明确要求它“考虑博主推荐动机,特别是意图和利益”。这一招立竿见影,AI判断准确性大幅提升。
另一点发现:短广告比长广告更容易识别。所以,让AI分析视频时,最好先提炼关键信息,再结合动机提示,效果更佳。
总结
这项研究最值得深思的,不是AI多强大,而是揭示了它的能力边界。
如今,有人视AI为万能工具,有人全盘否定。实际上,AI更像需要引导的助手:它有基础判断力,但在复杂现实中,仍需我们指明方向。
相关问答
现在为什么那么多合买彩票中奖的广告?什么套路?
合买彩票并非骗局,而是一种提高中奖概率的策略。单注中奖概率极低,合买能分散风险,但我不建议个人盲目参与,需理性评估。
猜成语赚几千块的广告是真的吗?有什么套路?有人试过吗?
猜成语赚钱广告纯属虚假。我曾下载类似软件,初期能赚几毛钱,后期根本无法提现。这类套路利用人性贪婪,最终目的就是引流或收费。
为什么成龙大哥的传奇广告这么多样化,是不是合同套路了成龙大哥?
游戏广告多样化是行业常态,高流水游戏能请巨星代言。成龙大哥的广告并非被套路,而是商业合作的一部分,玩家应关注游戏本质而非广告形式。
你见过哪些比较牛逼的广告文案?申请方
杜蕾斯的广告文案堪称经典。例如2011年北京暴雨时,其创意海报迅速出圈。建议在WiFi环境下欣赏,如果你是流量大户,请随意。
广告加盟儿童乐园,靠谱吗?有什么套路吗?
儿童乐园加盟广告大多不靠谱。许多公司只为收取加盟费,利用信息差获利。我曾了解过相关贴吧,年赚千万的承诺背后满是陷阱。
欣奥诚广告是真实的吗?
欣奥诚是正规广告公司,专注于户外媒体整合和智能营销。它通过5G、大数据和AI技术,提供专业品牌策划服务,真实性毋庸置疑。
为什么那么多骗人赚钱的广告,却还禁止不了,怎样投诉举报?
虚假广告屡禁不止,如同早期杀毒软件公司与病毒的关系。平台因广告利益可能纵容,举报需通过市场监管部门或消费者协会,但效果有限。
王者荣耀公屏送皮肤是真是诈?揭秘广告套路?-ZOL问答
王者荣耀公屏送皮肤多为诈骗套路。常玩玩家容易好奇,但这类广告通常诱导点击或盗号,切勿轻信。
看到某私立医院打着京城名医省会会诊的广告,是惠民还是套路?
私立医院的“名医会诊”广告需谨慎。作为营利机构,它们首要目标是盈利。患者应优先选择公立医院,避免被营销话术误导。
很早以前,一线城市电线杆上贴满“重金求子”的故事,你遇到过吗?背后什么套路?
“重金求子”广告是经典骗局。我曾在2010年见过,美女照片配高额回报,实为诈骗手法,利用人性弱点骗取钱财。






