国安部分享AI“暗礁”:违规使用开源AI工具导致泄密等
创始人
2025-12-26 17:46:06

IT之家 12 月 26 日消息,国家安全部今日发文称,当前,AI 大模型加速赋能千行百业,推动人们生活日新月异,这位能干又贴心的“数字伙伴”正加速融入我们日常生活。然而每一次技术跃迁必然伴随着新的挑战,当 AI 的触角延伸越广、嵌入越深,随之而来也暴露出数据隐私、算法偏见等潜在风险,亟需我们构筑安全防线,助推这场深刻的智能变革,安全赋能美好未来。

高速发展背后的“暗礁”:

  • 数据隐私与安全边界模糊。个别单位因直接使用开源框架建立联网大模型,导致攻击者未经授权即可自由访问内部网络,从而引发数据泄露和安全风险。据公开案例显示,某单位工作人员在处理内部文件时,违规使用开源 AI 工具,由于电脑系统默认开启公网访问且未设密码,导致敏感资料被境外 IP 非法访问和下载。
  • 技术滥用与虚假信息产生。利用 AI 的深度学习算法进行自动化的数据处理,实现图片、音频及视频的智能模拟和伪造,这种技术被称为深度伪造(Deepfake)。一旦该技术被滥用或恶意使用,将给个人合法权益、社会稳定甚至国家安全带来诸多风险和挑战。国家安全机关工作发现,某境外反华敌对势力通过深度伪造技术生成虚假视频,并企图向境内传播,以误导舆论、制造恐慌,对我国家安全构成威胁。
  • 算法偏见与决策“黑箱”。AI 的判断源于其所学习的资料,若训练数据本身存在社会偏见或代表性不足等问题,大模型便可能放大歧视。测试显示,某些 AI 会系统性偏向西方视角。当研究人员用中英文向某同一个 AI 提问历史问题时,发现英文回复会刻意回避、淡化某些史实,甚至会给出包含错误历史信息的内容,引发重大歧误,而中文回复则相对客观。
给“数字伙伴”的三条守则:
  • 守则一:划定“活动范围”。做到“权限最小化”,联网 AI 不处理涉密数据、语音 AI 不收集环境语音、智能助手不保存支付密码,关闭“数据共享”“云空间”等不必要的访问权限。
  • 守则二:检查“数字足迹”。养成定期清理 AI 聊天记录、修改 AI 工具密码、更新防病毒软件、查看账号登录设备等习惯。同时避免随意下载使用来源不明的大模型程序,对提供身份证、银行账户或其他敏感信息的要求保持警惕。
  • 守则三:优化“人机协作”。向 AI 提问时,在提示词中明确禁止 AI 过度推演,并要求 AI 显示来源或思考过程,对重要信息进行跨平台验证,合理辨别 AI 生成结果,特别是涉及政治、历史、意识形态等话题时,要具备独立思考意识,辩证看待 AI 的回答,避免陷入“AI 幻觉”。

IT之家注意到,国家安全机关还提示,安全是发展的前提,发展是安全的保障。只有懂科技、安全使用科技,才能让 AI 大模型这一新兴科技成为推动社会进步的正能量。广大用户应当提高安全意识,审慎授权大模型软件权限

相关内容

热门资讯

广东:推动建设一批服务型人形机... 广东省人民政府办公厅印发《广东省加快培育发展新赛道引领现代化产业体系建设行动规划(2026—2035...
慧居科技(02481.HK)拟... 格隆汇3月10日丨慧居科技(02481.HK)宣布,本公司将于2026年3月20日(星期五)举行董事...
广东:到2030年力争培育形成... 格隆汇3月10日|广东省人民政府办公厅印发《广东省加快培育发展新赛道引领现代化产业体系建设行动规划(...
投资者提问:请问公司产品AI端... 投资者提问:请问公司产品AI端侧业务落地进展情况如何?飞利浦高端授权产品落地情况如何?谢谢董秘回答(...
欧睿国际:美的位列2025年全... 3月10日,世界权威市场研究机构欧睿国际在美的2026全屋智能战略发布会上,正式为美的颁发“2025...