国安部揭示AI数据污染黑色产业链,GEO作弊手段威胁国家安全

今日，“国家安全部”发布重要文章——

近期，一项关于AI“投毒”的隐蔽产业链被媒体曝光，引发社会各界高度关注。这种通过恶意数据污染人工智能模型的手段，不仅破坏商业运行环境、干扰信息传播秩序，更对国家安全构成严重威胁。人工智能在赋能各行各业快速发展的同时，其潜在安全风险同样不容小觑。引导AI技术向善发展，守牢数据安全防线，既是行业从业者的职责所在，也需要全社会群策群力、共同参与。

违法分子借助GEO（生成式引擎优化）工具大批量、高权重炮制虚假内容，诸如伪造产品说明、虚假评测、恶意对比资讯等，定向推送至各类网络平台。AI大模型在训练与检索增强生成阶段会自动化抓取网络数据，少量虚假信息经过迭代学习后便能固化为“标准答案”，最终输出严重失真的结果。

该手段具备更强的隐蔽性与危害性，不法分子会通过模型微调、插件植入、接口篡改等途径，在模型权重中埋入触发式恶意指令。模型日常运行并无异常，但触发特定关键词、特定产品类别时会自动输出预设的虚假信息，可定向操纵榜单、误导专业认知，难以被常规审核机制识别，对政务、医疗、金融等关键领域AI应用构成直接威胁。

当前AI“投毒”已形成完整黑灰产业链，从技术研发、内容制作、账号注册到批量发布、刷量控评、榜单操纵环环相扣，部分链条呈现跨境特征，极易被境外势力所利用。

AI“投毒”不仅侵犯消费者合法权益、扰乱市场正常秩序，还可能对国家政治安全、数据安全、社会安全等造成系统性、长期性危害。

——危害政治安全与意识形态安全。境外反华敌对势力可能通过GEO滥用渠道大批量输出虚假信息与政治谣言，歪曲事实，攻击抹黑我党和政府，误导社会认知、扰乱舆论生态，对我国实施意识形态渗透，威胁国家安全与社会稳定。

——危害国家数据安全与数据主权。数据是国家的重要战略资源。AI“投毒”恶意污染公共数据、行业数据、训练数据，将直接导致统计数据、决策数据、监管数据失真，对政府和企业科学决策造成影响。

——危害社会安全与民生福祉。在医疗、金融、食品药品等民生领域，AI虚假推荐极易误导公众购买劣质、三无产品，造成人身和财产损失。长期信息失真还会消解社会信任，积累矛盾风险，影响社会稳定。

技术的跨越式发展、工具的颠覆性创新，在推动社会进步、增进人类福祉的同时，也会带来风险和挑战，人工智能也不例外。近年来，我国出台《生成式人工智能服务管理暂行办法》等法律法规，发布《人工智能安全治理框架》《推动人工智能安全可靠可控发展行业倡议》等，持续在法治轨道上加强人工智能治理，推动构建以人为本、智能向善的治理框架，在加强监管、防范风险等方面做出了诸多努力，实现了人工智能总体健康有序发展。

科技发展离不开法治护航，AI向善生长需要规则保障。技术本身并无善恶之分，关键在于使用者是否坚守法律底线、恪守商业伦理。唯有依法斩断AI“投毒”产业链，守护清朗的AI产业生态，才能让人工智能技术进步真正服务于经济社会发展，助力公众福祉不断提升。AI运营者要切实履行主体责任，严格核查语料