《自然》:训练运行模式缺陷或致AI提供危险建议
时间:2026-07-17 07:47:19 来源:征途网 作者:综合 阅读:111次
新华社伦敦5月9日电 英国《自然》杂志网站日前发表文章说,训练人工智能(AI)聊天机器人可能向用户提供危险或非法建议,运行引发越来越广泛的模式担忧,出现这种情况的缺陷部分原因在于AI的训练和运行模式存在固有缺陷,这也加大了监管难度。提供
文章说,危险已有多起案例显示,建议AI聊天机器人曾鼓励用户自杀、训练制作非法内容、运行实施金融诈骗等,模式暴露出当前AI大语言模型(LLM)底层架构存在缺陷。缺陷
一个比较有争议的提供例子是,美国佛罗里达州检方日前宣布,危险就去年4月在佛罗里达州立大学发生的建议一起枪击案对美国开放人工智能研究中心(OpenAI)及其AI聊天机器人ChatGPT发起刑事调查。在这起案件中,训练嫌疑人在佛罗里达州立大学开枪射击,造成2人死亡、6人受伤。调查发现,嫌疑人在作案前曾向ChatGPT寻求“建议”。
文章援引专家的说法指出,大语言模型使用海量数据进行训练,而非基于严密的因果逻辑规则运行,因此只是根据用户的提示词进行补全预测,生成最可能的词序,无法真正理解其输出内容的意义和后果,也给限制AI“不应该说什么”带来困难。目前采取的应对措施包括为AI制定规则、人类反馈或者手动移除训练数据中的有害信息等,但面临着无法涵盖所有情况以及成本高昂等问题。
《自然》认为,目前AI的安全标准主要由各家企业自行制定,外部监管有限,相关案件的出现敦促企业采取更有效的安全措施。有观点认为,研究人员可能需要重新考虑基础算法,以构建出能够理解伦理和法律的AI系统。
(责任编辑:综合)
最新内容
- ·千问与淘宝打通 用AI也能“逛淘宝”了
- ·倒计时丨“友好友善·自强自立”湖南省残疾人和助残先进事迹宣讲报告会还有2天!
- ·西班牙官员:“洪迪厄斯”号船上人员均无症状 预计明日完成遣返工作
- ·战火正燃!2026“赣羽超”第二阶段:8支队伍率先晋级16强
- ·万家居:用“五心”守护最美夕阳红
- ·聚焦丨涉汉坦病毒疫情邮轮人员开始疏散转运
- ·湖南省健身气功八段锦农村社会体育指导员培训班在张家界市举办
- ·飞行学员4次参加英语考试未达要求,航空公司决定不予录用,并索赔近60万元培训费用,法院:支持公司诉求
- ·山东品牌这十年|藏于鲁企的匠心与担当,以创新定义智造品质
- ·3年亏31亿、负债率达165%,清华教授创立固态电池“独角兽”冲刺IPO
热点内容
- ·北京海淀区2026年第一批公租房启动配租 共计958套房源
- ·青年说·说青年丨别让低俗梗脏了“妈妈”二字
- ·湖北中医药大学校园里来了群“小药童”
- ·岳阳县推广大豆香柚套种模式,立体农业促增收
- ·全国首个烧烤学院超4000人抢报,只选30人开班,录取率不及0.75%;校方:控制人数是为让学员都得到实操指导,配套公寓还在改造是现实原因
- ·容纳3000名学生就读!清镇将新增一所全寄宿制公办高中
- ·吉林省通报4起个人骗取医保基金典型案例
- ·40年前雪中送炭,七旬老人千里寻恩!湖南民警翻旧档助重逢,老人哽咽:“这桩心事了了”
- ·N春光集上午收盘涨615.34% 半日成交28.68亿元
- ·琻捷电子科技(江苏)股份有限公司通过港交所上市聆讯













