《自然》:训练运行模式缺陷或致AI提供危险建议
来源:新华网
新华社伦敦5月9日电 英国《自然》杂志网站日前发表文章说,训练人工智能(AI)聊天机器人可能向用户提供危险或非法建议,运行引发越来越广泛的模式担忧,出现这种情况的缺陷部分原因在于AI的训练和运行模式存在固有缺陷,这也加大了监管难度。提供
文章说,危险已有多起案例显示,建议AI聊天机器人曾鼓励用户自杀、训练制作非法内容、运行实施金融诈骗等,模式暴露出当前AI大语言模型(LLM)底层架构存在缺陷。缺陷
一个比较有争议的提供例子是,美国佛罗里达州检方日前宣布,危险就去年4月在佛罗里达州立大学发生的建议一起枪击案对美国开放人工智能研究中心(OpenAI)及其AI聊天机器人ChatGPT发起刑事调查。在这起案件中,训练嫌疑人在佛罗里达州立大学开枪射击,造成2人死亡、6人受伤。调查发现,嫌疑人在作案前曾向ChatGPT寻求“建议”。
文章援引专家的说法指出,大语言模型使用海量数据进行训练,而非基于严密的因果逻辑规则运行,因此只是根据用户的提示词进行补全预测,生成最可能的词序,无法真正理解其输出内容的意义和后果,也给限制AI“不应该说什么”带来困难。目前采取的应对措施包括为AI制定规则、人类反馈或者手动移除训练数据中的有害信息等,但面临着无法涵盖所有情况以及成本高昂等问题。
《自然》认为,目前AI的安全标准主要由各家企业自行制定,外部监管有限,相关案件的出现敦促企业采取更有效的安全措施。有观点认为,研究人员可能需要重新考虑基础算法,以构建出能够理解伦理和法律的AI系统。
- ·近视防控问答⑥ | 开启手机“护眼模式”就可以长时间使用了吗?
- ·大连一物业4天3名工作人员接连突发心梗、脑梗
- ·2026年国家基本医疗保险药品目录调整工作方案公开征求意见
- ·半年内套现超9亿元后,富创精密二股东泰州祥浦再抛减持计划,公司去年首亏
- ·科技育苗为杨凌田西村红薯产业带来飞跃式发展
- ·以色列人权组织:遭拘押的援助加沙人士即将获释
- ·以色列人权组织:遭拘押的援助加沙人士即将获释
- ·“汉楚大战”补时绝杀!高驰梅开二度,宿迁队2:1客胜徐州队
- ·杨凌农高会夏季分会开幕 全国百余知名品牌参展
- ·宝马车提回不久,男子打开引擎盖里面竟有一窝猫!4S店回应
- ·江苏南京4月二手房成交量破万套 创近一年新高
- ·图库推荐丨天柱:“大水缸”上建起“绿银行”
- ·OPPO就母亲节文案事件发布问责通告 高级副总裁职级直降两级
- ·电视剧《主角》发布会西安举行 窦骁用陕西话问候观众
- ·港交所:前四个月IPO集资金额为1514亿港元 同比上升604%
- ·唐人神(002567.SZ):4月生猪销售收入4.62亿元 同比下降39.33%
