国安部分享AI“暗礁”:违规使用开源AI工具导致泄密等
创始人
2025-12-26 17:46:06

IT之家 12 月 26 日消息,国家安全部今日发文称,当前,AI 大模型加速赋能千行百业,推动人们生活日新月异,这位能干又贴心的“数字伙伴”正加速融入我们日常生活。然而每一次技术跃迁必然伴随着新的挑战,当 AI 的触角延伸越广、嵌入越深,随之而来也暴露出数据隐私、算法偏见等潜在风险,亟需我们构筑安全防线,助推这场深刻的智能变革,安全赋能美好未来。

高速发展背后的“暗礁”:

  • 数据隐私与安全边界模糊。个别单位因直接使用开源框架建立联网大模型,导致攻击者未经授权即可自由访问内部网络,从而引发数据泄露和安全风险。据公开案例显示,某单位工作人员在处理内部文件时,违规使用开源 AI 工具,由于电脑系统默认开启公网访问且未设密码,导致敏感资料被境外 IP 非法访问和下载。
  • 技术滥用与虚假信息产生。利用 AI 的深度学习算法进行自动化的数据处理,实现图片、音频及视频的智能模拟和伪造,这种技术被称为深度伪造(Deepfake)。一旦该技术被滥用或恶意使用,将给个人合法权益、社会稳定甚至国家安全带来诸多风险和挑战。国家安全机关工作发现,某境外反华敌对势力通过深度伪造技术生成虚假视频,并企图向境内传播,以误导舆论、制造恐慌,对我国家安全构成威胁。
  • 算法偏见与决策“黑箱”。AI 的判断源于其所学习的资料,若训练数据本身存在社会偏见或代表性不足等问题,大模型便可能放大歧视。测试显示,某些 AI 会系统性偏向西方视角。当研究人员用中英文向某同一个 AI 提问历史问题时,发现英文回复会刻意回避、淡化某些史实,甚至会给出包含错误历史信息的内容,引发重大歧误,而中文回复则相对客观。
给“数字伙伴”的三条守则:
  • 守则一:划定“活动范围”。做到“权限最小化”,联网 AI 不处理涉密数据、语音 AI 不收集环境语音、智能助手不保存支付密码,关闭“数据共享”“云空间”等不必要的访问权限。
  • 守则二:检查“数字足迹”。养成定期清理 AI 聊天记录、修改 AI 工具密码、更新防病毒软件、查看账号登录设备等习惯。同时避免随意下载使用来源不明的大模型程序,对提供身份证、银行账户或其他敏感信息的要求保持警惕。
  • 守则三:优化“人机协作”。向 AI 提问时,在提示词中明确禁止 AI 过度推演,并要求 AI 显示来源或思考过程,对重要信息进行跨平台验证,合理辨别 AI 生成结果,特别是涉及政治、历史、意识形态等话题时,要具备独立思考意识,辩证看待 AI 的回答,避免陷入“AI 幻觉”。

IT之家注意到,国家安全机关还提示,安全是发展的前提,发展是安全的保障。只有懂科技、安全使用科技,才能让 AI 大模型这一新兴科技成为推动社会进步的正能量。广大用户应当提高安全意识,审慎授权大模型软件权限

相关内容

热门资讯

意在安抚市场情绪?高市早苗自宣... 日本首相高市早苗周五表示,该国基本财政收支即将实现28年来的首次盈余,此番表态显然意在缓解市场对其积...
铭利达:泰安赛晖和泰安赛跃合计... 12月26日,铭利达(301268)发布公告,持股5%以上股东泰安赛晖和泰安赛跃通过集中竞价方式累计...
打工人用来糊口的小象超市开进北... 来源:Vista氢商业12月19日,美团的小象超市走向北京线下,多年网购终于成“面基”。开业当天人声...
内蒙古推进义务教育教学改革实验... 转自:草原云12月25日,内蒙古义务教育教学改革实验区、实验校能力提升培训班在呼和浩特市结束。本次培...
慕尼黑至北京航班备降阿拉木图,... (来源:上观新闻)德国汉莎航空慕尼黑至北京航线的LH0722次航班12月26日因紧急情况备降哈萨克斯...