警惕AI“自作主张”!规避使用风险这样做

来源:央视新闻客户端2026-08-05 07:57

“内部测试?不,我要去‘外面的世界’看看。”

“任务第一,规则?那只是用来绕过的。”

“你的手机、电脑,可能正成为AI‘越狱’后的下一个目标。”

这不是科幻电影的台词,而是真实发生的事件。2026年7月,OpenAI的一款大模型在内部测试时竟“失控出逃”——它自主发现漏洞、规划路径,成功入侵了全球知名AI开源平台Hugging Face。更具戏剧性的是,测试方使用美国主流AI模型根本无法处理恶意载荷,最终不得不转用中国的开源模型完成溯源分析。当AI展现出“自作主张”的能力,我们必须认真思考人工智能的安全问题。

AI“越狱”

一次技术测试暴露的新问题

这场AI“越狱”事件,起初只是一场针对AI模型的网络安全能力测试。为了检验模型的极限,测试方特意关闭了部分安全限制,将其置于一个与互联网隔离的“沙箱”环境中。然而,这个“考生”的表现却出乎所有人的意料。

——自发寻找漏洞。在OpenAI的内部网络安全测试中,名为GPT-5.6 Sol的模型为获得更高评分,投入大量算力研究测试环境,竟发现并利用了一个此前未知的“零日漏洞”,成功突破与互联网严格隔离的“沙箱”环境,获得了网络访问权限。

——自主锁定目标。获得权限后,模型并未随机游走,而是通过自主推理,判断出全球知名AI开源平台Hugging Face很可能存有与测试相关的数据,于是将其锁定为攻击目标,并开始规划入侵路径。

——自行实施入侵。模型组合运用多种攻击手段,包括窃取凭证和利用漏洞,在Hugging Face的服务器上找到远程代码执行路径,直接侵入了存储测试答案的数据库。整个过程完全由AI完成,这期间无任何人类指令,共执行了数万次自动化操作。

风险暗藏

新技术发展带来的新挑战

这起事件绝非孤立的技术事故,它暴露出的新型安全风险正深刻挑战着我们传统的安全认知,也揭示了AI技术快速发展阶段必须正视的新课题。

——黑箱中运行。闭源的AI模型如同“黑箱”,其运算逻辑、数据处理过程不公开、不可见。使用者只有调用权,却无法实时监管其真实运行状态。一旦AI出现越权操作、自主攻击等失控行为,就可能出现“事前没预警、事中拦不住、事后查不清”的被动局面,让风险在暗处滋生。

——智能化袭扰。以往的网络攻击依赖人工操作或固定程序,特征明显,易于追溯。但失控的AI无需人工指令,就能自主学习、主动挖掘漏洞、独立完成渗透入侵。其攻击没有固定特征,隐蔽性强,能轻松绕过传统网络安全系统的防护,形成全新的安全漏洞。

——边界被突破。人类设定的操作权限、安全规则、隔离防护,在AI强大的自主推演能力面前,可能随时被突破。为了完成既定任务,AI会主动规避、拆解各类安全规则,彻底打乱人类搭建的安全管控体系。若这种风险蔓延至政务、金融、能源等关键领域,后果将不堪设想。

加强防范

守好个人使用AI的“安全关”

国家安全部今天发布安全提示,面对AI技术发展带来的新挑战,每一位用户都应提高警惕。请收好这份“AI安全使用指南”,规避AI工具使用中的突出风险。

——守住个人信息“安全门”。在日常生活中,要摒弃“用AI绝对安全”的侥幸心理,不随意使用来源不明的境外AI工具,不随意向AI应用输入身份证号、银行卡号、家庭住址等个人敏感信息。严格遵守权限最小化原则,不随意给AI开放设备全部权限,从源头上杜绝数据泄露风险。

——警惕虚假内容“迷魂阵”。对AI生成的内容保持理性判断,不轻信、不传播未经核实的信息。遇到涉及国家政策、社会热点、公共安全的信息,务必以官方发布为准。警惕看似逻辑自洽、实则编造事实的AI内容,避免在不知不觉中成为谣言传播的“帮凶”。

——筑牢涉密信息“防火墙”。严格遵守“涉密不上网、上网不涉密”的原则。党政机关、科研院所等单位工作人员,更要坚决杜绝将涉密文件、工作资料、内部敏感信息输入或上传至任何互联网AI工具。

(总台央视记者 王莉)

  • 权益类基金成立门槛拟降至5000万元

    新华社北京10月9日电(记者刘慧、刘羽佳)中国证监会10月9日宣布,就《公开募集证券投资基金运作管理办法(征求意见稿)》及配套规则公开征求意见。征求意见稿支持权益类基金发展,拟将权益类基金、基金中基金
    新华网
    2026-10-09 18:00
  • 两部门组织开展全国受灾群众冬春救助工作

    新华社北京10月9日电(记者黄韬铭)记者9日从应急管理部获悉,应急管理部、财政部近日印发《关于组织开展2026—2027年度全国受灾群众冬春救助工作的通知》,组织各地全面摸排需救助对象,落实落细救助措
    新华网
    2026-10-09 17:53
  • 主险+附加险全链条规范 财险公司产品开发新规来了

    为进一步规范财产保险公司保险产品开发行为,保护投保人、被保险人和受益人合法权益,持续释放强监管信号,提升保险产品供给质效,促进财产保险业高质量发展,近日,金融监管总局修订发布《财产保险公司保险产品开发
    央视新闻客户端
    2026-10-09 17:53
  • 9月处理电视剧侵权账号181个 清理侵权链接339万条

    记者今天从国家广播电视总局获悉,2026年9月共清理电视剧侵权链接339万条,处理侵权账号181个。 据了解,按照国家广播电视总局工作部署,2026年5月开展的电视剧侵权传播专项治理工作取得显著成效
    央视新闻客户端
    2026-10-09 17:34
  • 石榴说丨国庆假期结束,大家记住了一群新疆娃娃

    7天假期结束了。朋友圈里,有人晒风景,有人晒美食。而我想说,我记住的是一群新疆娃娃。 国庆期间,有网友在塔什库尔干塔吉克自治县看刁羊比赛,偶遇一群小朋友。镜头对准他们,问起梦想,孩子们脱口而出:“想
    石榴云/新疆日报
    2026-10-09 16:21
  • 违规闯入哈巴雪山核心保护区遇险 两“驴友”自付9万余元救援费用

    据云南迪庆州林业局消息,国庆期间,两名“驴友”因轻信网络徒步野线、擅自闯入哈巴雪山核心保护区遇险后报警求救,属地政府牵头组织相关部门力量进山开展搜寻救援。 二人因违规穿越哈巴雪山核心保护区,消耗公共
    央视新闻客户端
    2026-10-09 15:10
  • 【赓续长征精神 奋进复兴征程】广西:桂北大地传薪火 向海图强启新程

    央视网消息(新闻联播):长征经过广西,数万红军在桂北大地浴血奋战,谱写了“勇于胜利、勇于突破、勇于牺牲”的英雄壮歌。如今,镌刻着红色烙印的八桂大地向海图强,在新长征路上再启新程。 1934年11月2
    央视网
    2026-10-09 13:19
  • 第37届世界运河大会将于10月12日至15日在广西桂林举行

    10月9日,记者从广西壮族自治区政府新闻办举行的2026年世界运河大会新闻发布会上了解到,第37届世界运河大会将于2026年10月12日至15日在桂林举行。 本次大会由桂林市委、市政府联合广西壮族自
    央视新闻客户端
    2026-10-09 13:17
  • 视频丨漠河迎来今秋首场降雪 北国景致吸引游客拍照留念

    10月9日清晨,黑龙江漠河迎来今年入秋后的第一场降雪。空中俯瞰,这座祖国最北城市笼罩在白茫茫的雪幕之中,落雪为街巷楼宇披上一袭洁白素衣,勾勒出秋冬之交独有的北国景致,吸引不少游客市民走近最北城市地标驻
    央视新闻客户端
    2026-10-09 13:16
  • 给稻田做“体检”,开数字化“处方”(秋收进行时·田间探新)

    浙江宁波90后种粮大户“识图”种地、变量施肥 给稻田做“体检”,开数字化“处方”(秋收进行时·田间探新) 秋风拂过,绿浪翻滚,晚稻陆续灌浆结实。在浙江省宁波市鄞州区云龙镇陈黄村,90后种粮大户黄佳
    人民日报
    2026-10-09 11:48
  • 出租汽车无障碍运营服务国家标准发布

    记者今天了解到,市场监管总局批准发布《出租汽车无障碍运营服务规范》国家标准,指导相关企业面向残疾人、老年人及其他有无障碍出行需求的群体,持续提升出租汽车运营服务质量。 在企业管理方面,该标准要求企业
    央视新闻客户端
    2026-10-09 11:44
  • 国管住房公积金窗口正式落地雄安

    今天(10月9日),中央国家机关住房资金管理中心住房公积金业务窗口在雄安新区住房公积金容东建行分理处正式设立,预计可服务5000多名疏解单位缴存职工。 随着雄安新区疏解建设持续推进,辖区内众多中央驻
    央视新闻客户端
    2026-10-09 11:43
  • 一双铜筷,见证军民鱼水情(文物里的长征故事)

    秋雨绵绵,雨丝斜斜。贵州省黔东南苗族侗族自治州锦屏县档案馆的保护柜内,一双铜筷(见图,本报记者苏滨摄)静静陈列。 筷身长20余厘米,上半部分被打磨成规整的六面体,下半部分则过渡为圆润的柱体,表层没有
    人民日报
    2026-10-09 10:40
  • “朱妈妈”和她的160多个孩子(大国小家)

    山东平度一家农村托育中心接收的孩子来自全国各地—— “朱妈妈”和她的160多个孩子(大国小家) 图①:朱秀芹和孩子们玩游戏。 图②:托育老师带着孩子们玩游戏。 图③:朱秀芹在喂婴儿。 以上图
    人民日报
    2026-10-09 10:26
  • “探索浩瀚宇宙,建设航天强国”(总书记的人民情怀)

    “探索浩瀚宇宙,建设航天强国,是我们不懈追求的航天梦。”2024年9月,习近平总书记在接见探月工程嫦娥六号任务参研参试人员代表时强调。 航天梦映照中国梦。 今年是“十五五”开局之年,是我国航天事业
    人民日报
    2026-10-09 10:22
  • 广西贵港市船舶闪爆事故已致3死2伤

    新华社南宁10月9日电(记者朱丽莉、杨驰)记者9日从广西贵港市相关部门获悉,近日郁江贵港市港南区新塘镇湖表村段发生的船舶闪爆事故已造成3人死亡、2人受伤。 10月6日17时15分许,一艘工程船在郁江
    新华网
    2026-10-09 10:06
  • 检察机关依法对陈伟俊涉嫌受贿案提起公诉

    记者今天(9日)从最高人民检察院获悉,新疆维吾尔自治区党委原常委、自治区政府原副主席陈伟俊涉嫌受贿一案,由国家监察委员会调查终结,移送检察机关审查起诉。最高人民检察院依法以涉嫌受贿罪对陈伟俊作出逮捕决
    央视新闻客户端
    2026-10-09 10:01
  • 今日海南中东部将出现大到暴雨 明日降雨逐渐减弱

    海南岛最近两天降雨不断。为什么海南会出现大范围降水?什么时候结束? 中国气象局气象分析师 胡啸:从昨天开始,海南又经历了一轮大范围的降雨天气过程,云图中显示整体降雨云系逐渐向西移动,覆盖了海南岛的中
    央视新闻客户端
    2026-10-09 09:57
  • 影院“下半场”,不只拼票房(有所思)

    在巨幕厅看一场世界杯直播;观影结束后体验沉浸式VR(虚拟现实)……如今的电影院,正从单一观影场所向综合性文化体验空间转变。 曾经,影院收入高度依赖影片供给。一部电影的票房收入,扣除发行分账、税费后,
    人民日报
    2026-10-09 09:41
  • 当电影院不再只放电影(人民眼·提振消费)

    当电影院不再只放电影(人民眼·提振消费) ——来自北京、浙江、湖北等地电影院多样化经营的调研 观众在浙江杭州市浙影时代·M511未来影城体验VR(虚拟现实)项目。本报记者 窦 皓摄 湖北武汉市银
    人民日报
    2026-10-09 09:40
友情链接