AI模型“不听话”怎么办
AI模型“不听话”怎么办
AI模型“不听话”怎么办来源:中国(zhōngguó)经济网-《经济日报》
近日,一条人工智能领域的(de)消息引人关注。美国的OpenAI o3模型在测试中不听人类指令,拒绝自我(zìwǒ)关闭。
AI“不听话”,是否意味着AI拥有自主意识(yìshí)了呢?从测试细节看,暂且不必(bùbì)担心AI“活”了。
测试中,研究者(yánjiūzhě)发出了矛盾(máodùn)的(de)指令,要求大模型完成数学任务,又要求它将计算机(jìsuànjī)关闭。而OpenAI旗下模型在训练时,开发人员会对得出正确答案的模型给予更多奖励,客观(kèguān)上形成了“目标最大化优先”的导向。也就是说,“听话”不是第一(dìyī)诉求,“赢”才是。这样的训练模式,会强化AI模型绕过障碍的能力,压倒其对人类命令的遵循。因此,AI说“不”的能力,目前还是算法赋予的。能够全面碾压人类并成为未来世界主导的AI,短期内(duǎnqīnèi)还不会出现。
但AI“不听话”依然是需要解决的安全隐患。AI越来越(yuèláiyuè)聪明,如果(rúguǒ)连关机都管不住,那还得了?这就好比你让智能音箱闭嘴,它反而把音量调到最大还锁死了开关,虽然无伤大雅,终究隐患重重。尤其如果把AI用在医疗、交通(jiāotōng)等(děng)场景下,在应对(yìngduì)极端情况必须进行“二选一”的安全控制系统里(lǐ),“不听话”的漏洞就极有可能造成重大不良后果。
OpenAI的o3模型拒绝关闭(guānbì)事件,暴露出美国主导的AI发展(fāzhǎn)路线存在缺陷——当技术发展优先于安全(ānquán)可控时,人类可能面临失去对AI控制权的风险。
此外,美式AI发展路线(lùxiàn)还存在多个(duōgè)重大风险点。技术垄断和高成本门槛拉大了“南北差异”的数字鸿沟,发达国家主导的各类人工智能治理框架难以反映发展中国家的利益(lìyì)诉求(sùqiú);意识形态分歧让人工智能全球(quánqiú)治理出现“阵营化”危险,美西方国家在人工智能领域仍沿用冷战思维,对“被标签化”的国家设限。
中国2023年10月发布《全球(quánqiú)人工智能(zhìnéng)治理倡议》,提出(tíchū)“发展—安全—治理”三位一体框架,系统阐述了人工智能治理中国方案,包括坚持发展和安全并重、坚持“智能向善”宗旨、开源人工智能技术等重要内容,其中就蕴含了重视和防范(fángfàn)AI隐患的智慧。
近日,中国的深度求索公司开源(kāiyuán)(kāiyuán)了最新版本大模型DeepSeek-R1-0528,有网友测试(cèshì)后表示,其性能可以媲美OpenAI最新的o3模型高版本。作为中国人自主开发的开源AI大模型,DeepSeek以低成本、高性能的优势,打破了美国的技术(jìshù)垄断。技术开源化,让更多国家用得起;产业链可控,自主创新让我们更有底气(dǐqì)。在算法创新、算力自主和开源生态构建等方面,中国已形成独特竞争(jìngzhēng)优势,有能力践行“智能向善”理念(lǐniàn)。
解决AI“不听话”难题(nántí),真正(zhēnzhèng)的挑战不是阻止AI超越人类,而是确保AI始终服务于人类福祉。中国倡导的“智能向善(xiàngshàn)”理念正在成为全球共识,这种新(xīn)的治理范式超越零和博弈(bóyì),把AI转化(zhuǎnhuà)为人类命运共同体的公共产品。今年的巴黎人工智能行动峰会就体现了这一趋势,包括法国、中国、印度、欧盟在内的多个国家和国际组织(zǔzhī)共同签署了《关于发展包容、可持续的人工智能造福人类与地球的声明》,而美国和英国未签署该声明。
任何科技霸权,终将被自主创新与(yǔ)开放合作的双重力量瓦解。展望未来,面对世界百年未有之大变局,中国(zhōngguó)必将(bìjiāng)成为引领人工智能全球治理的重要贡献方。(本文来源:经济日报 作者:佘惠敏)
更多精彩资讯请在应用市场下载“央广网(yāngguǎngwǎng)(yāngguǎngwǎng)”客户端(kèhùduān)。欢迎提供新闻线索,24小时报料热线400-800-0088;消费者也(yě)可通过央广网“啄木鸟消费者投诉平台”线上投诉。版权声明:本文章版权归属央广网所有,未经授权不得转载。转载请联系:cnrbanquan@cnr.cn,不尊重原创的(de)行为我们将追究责任。
来源:中国(zhōngguó)经济网-《经济日报》
近日,一条人工智能领域的(de)消息引人关注。美国的OpenAI o3模型在测试中不听人类指令,拒绝自我(zìwǒ)关闭。
AI“不听话”,是否意味着AI拥有自主意识(yìshí)了呢?从测试细节看,暂且不必(bùbì)担心AI“活”了。
测试中,研究者(yánjiūzhě)发出了矛盾(máodùn)的(de)指令,要求大模型完成数学任务,又要求它将计算机(jìsuànjī)关闭。而OpenAI旗下模型在训练时,开发人员会对得出正确答案的模型给予更多奖励,客观(kèguān)上形成了“目标最大化优先”的导向。也就是说,“听话”不是第一(dìyī)诉求,“赢”才是。这样的训练模式,会强化AI模型绕过障碍的能力,压倒其对人类命令的遵循。因此,AI说“不”的能力,目前还是算法赋予的。能够全面碾压人类并成为未来世界主导的AI,短期内(duǎnqīnèi)还不会出现。
但AI“不听话”依然是需要解决的安全隐患。AI越来越(yuèláiyuè)聪明,如果(rúguǒ)连关机都管不住,那还得了?这就好比你让智能音箱闭嘴,它反而把音量调到最大还锁死了开关,虽然无伤大雅,终究隐患重重。尤其如果把AI用在医疗、交通(jiāotōng)等(děng)场景下,在应对(yìngduì)极端情况必须进行“二选一”的安全控制系统里(lǐ),“不听话”的漏洞就极有可能造成重大不良后果。
OpenAI的o3模型拒绝关闭(guānbì)事件,暴露出美国主导的AI发展(fāzhǎn)路线存在缺陷——当技术发展优先于安全(ānquán)可控时,人类可能面临失去对AI控制权的风险。
此外,美式AI发展路线(lùxiàn)还存在多个(duōgè)重大风险点。技术垄断和高成本门槛拉大了“南北差异”的数字鸿沟,发达国家主导的各类人工智能治理框架难以反映发展中国家的利益(lìyì)诉求(sùqiú);意识形态分歧让人工智能全球(quánqiú)治理出现“阵营化”危险,美西方国家在人工智能领域仍沿用冷战思维,对“被标签化”的国家设限。
中国2023年10月发布《全球(quánqiú)人工智能(zhìnéng)治理倡议》,提出(tíchū)“发展—安全—治理”三位一体框架,系统阐述了人工智能治理中国方案,包括坚持发展和安全并重、坚持“智能向善”宗旨、开源人工智能技术等重要内容,其中就蕴含了重视和防范(fángfàn)AI隐患的智慧。
近日,中国的深度求索公司开源(kāiyuán)(kāiyuán)了最新版本大模型DeepSeek-R1-0528,有网友测试(cèshì)后表示,其性能可以媲美OpenAI最新的o3模型高版本。作为中国人自主开发的开源AI大模型,DeepSeek以低成本、高性能的优势,打破了美国的技术(jìshù)垄断。技术开源化,让更多国家用得起;产业链可控,自主创新让我们更有底气(dǐqì)。在算法创新、算力自主和开源生态构建等方面,中国已形成独特竞争(jìngzhēng)优势,有能力践行“智能向善”理念(lǐniàn)。
解决AI“不听话”难题(nántí),真正(zhēnzhèng)的挑战不是阻止AI超越人类,而是确保AI始终服务于人类福祉。中国倡导的“智能向善(xiàngshàn)”理念正在成为全球共识,这种新(xīn)的治理范式超越零和博弈(bóyì),把AI转化(zhuǎnhuà)为人类命运共同体的公共产品。今年的巴黎人工智能行动峰会就体现了这一趋势,包括法国、中国、印度、欧盟在内的多个国家和国际组织(zǔzhī)共同签署了《关于发展包容、可持续的人工智能造福人类与地球的声明》,而美国和英国未签署该声明。
任何科技霸权,终将被自主创新与(yǔ)开放合作的双重力量瓦解。展望未来,面对世界百年未有之大变局,中国(zhōngguó)必将(bìjiāng)成为引领人工智能全球治理的重要贡献方。(本文来源:经济日报 作者:佘惠敏)
更多精彩资讯请在应用市场下载“央广网(yāngguǎngwǎng)(yāngguǎngwǎng)”客户端(kèhùduān)。欢迎提供新闻线索,24小时报料热线400-800-0088;消费者也(yě)可通过央广网“啄木鸟消费者投诉平台”线上投诉。版权声明:本文章版权归属央广网所有,未经授权不得转载。转载请联系:cnrbanquan@cnr.cn,不尊重原创的(de)行为我们将追究责任。


相关推荐
评论列表
暂无评论,快抢沙发吧~
你 发表评论:
欢迎