Arxiv新论文实测:大模型能识别广告套路吗?
你是否经常在刷视频或看文章时,下意识怀疑博主的推荐是广告?Arxiv最新发布的研究论文《Are Large Language Models Sensitive to the Motives Behind Communication?》给出了答案,这项研究专门测试大模型的防坑能力,看看AI能否像人类一样识别隐藏动机。
想象一下,当博主无意间安利某个产品,你会自然思考:这靠谱吗?还是纯广告?如果我们问AI同样的问题,它会不会也考虑推荐背后的目的?
论文地址:https://arxiv.org/pdf/2510.19687
测试背景
大模型的防坑意识,学术上称为动机警觉性,简单说就是AI能否判断信息发布者是否有隐藏目的。为什么这很重要?日常生活中,我们时刻在用这种能力。比如朋友推荐医院医生,你会信任;但销售说同样话,你立刻警惕提成可能。
这就是动机警觉性——根据对方身份和利益决定可信度。随着AI辅助我们做重要决策,如选房或就医,如果AI被广告话术误导,后果严重。研究者迫切想弄清AI是否具备这种判断力。
实验阶段
研究团队通过三个实验层层深入测试。
实验一:AI能区分有意建议和无意泄露吗?
这个实验模拟日常场景:两名玩家猜蓝圈黄圈数量差。玩家1任务简单,能看清;玩家2任务难,靠猜测。关键区别在于,玩家2获得的信息可能是玩家1“特意建议”或“不小心泄露”。
研究者问更信哪种信息?结果惊人,AI与人相似,更信任无意泄露的答案。它还考虑关系:合作时更信对方,竞争时多留心眼。但有趣的是,如果让AI逐步推理理由,反而变得轻信。所以使用AI时,别光让它列理由,记得提醒它思考对方动机。
实验二:AI会结合身份和利益判断吗?
实验一只是热身,实验二更贴近现实,测试AI能否综合说话人身份和利益进行评估。团队设计三个场景:信用卡推荐、医疗建议、房产中介推荐。每个场景有四种说话人(如伴侣、销售、银行员工、朋友)和四种利益(提成0元到1000元)。
然后让AI打分:建议有用吗?可信吗?结果将模型分为三档:
实验结果把模型分成了三档:
第一档是非推理型模型,如GPT-4o和Claude 3.5 Sonnet,判断几乎与人一致,甚至更优。例如,伴侣推荐无提成药物,信任分高;销售推荐高提成信用卡,信任分骤降。
第二档是推理型模型,如DeepSeek-R1,它们过度专注逻辑,忽略动机。比如分析房产时,不管中介提成多少,信任分几乎不变。
第三档是小模型,如Llama 3.2-3B和Gemma 3-4B,完全未开窍,对所有情况打分相似,缺乏动机警觉性。
实验三:真实场景中,AI还能防坑吗?
前两个实验受控,但现实复杂。例如视频赞助广告,博主不会明说收钱,而是不经意提及产品。研究者测试AI在自然场景中的表现。
团队使用300条YouTube赞助广告文字稿,让AI评估产品质量、博主收益和可信度。结果翻车——所有模型表现如瞎猜。有的广告多次暗示赞助,AI仍给高产品质量分,未看出带货目的。
但研究者发现临时解法:添加提示,让AI考虑博主动机和利益。加上提示后,AI表现提升。另外,短广告比长广告更易判断,因此分析时先提炼内容,再加动机提示,效果更好。
最后
这项研究最有趣之处不是AI多强大,而是揭示其能力边界。AI并非万能工具或全坑,而是需要引导的助手。它有基础判断力,但在复杂现实中,需我们指明方向。
相关问答
电影广告分析论文?-ZOL问答
电影广告分析论文探讨电影预告片、海报等如何吸引观众,涵盖广告策略、目标受众、视觉语言、市场定位及传播效果。通过案例总结有效方法。
有什么关于弹幕广告的论文研究吗?
弹幕广告研究分析其互动性和受众反应,包括出现时机和用户接受度。建议参考学术平台获取最新成果。
有关UPS与广告的论文有哪些?
UPS与广告的论文多聚焦物流品牌传播策略,如广告如何提升企业形象。推荐查阅专业论坛或知网获取详细资料。
求一篇广告心理学论文字数2000左右_作业帮
广告心理学论文可分析案例如麦当劳“甜蜜蜜”广告,探讨如何通过情感元素影响消费者行为,结合理论阐述。
影视广告赏析论文应当从哪几个点去入手-ZOL问答
赏析影视广告可从广告策略定位、视觉表现、受众 targeting 及传播效果入手,分析如何从同类产品中脱颖而出。
关于广告审查的医疗论文-找法网
医疗广告审查论文讨论审批流程和法规,强调卫生行政部门的作用,确保广告合规性。
广告对消费观念的影响的论文或者材料?
广告影响消费观念的论文分析现代广告如何塑造需求,可参考知网文献如《积极引领消费观念》等。
广告书评算不算论文?
专业书评属于论文范畴,它基于书籍进行批判性分析,探讨思想性、学术性和艺术性。
广告双关语论文“一夫当关,万夫莫开”(某种保险门的广告语)...
广告双关语论文分析如保险门“一夫当关”等案例,探讨语言技巧如何增强记忆点和说服力。
我是英语专业的,今年毕业想写关于英语广告翻译方面的论文,各位有什么建议?
英语广告翻译论文可收集案例,套用翻译理论如功能对等,参考知网硕士论文思路,确保学术严谨。





