会员登录 - 用户注册 - 设为首页 - 加入收藏 - 网站地图 《自然》:训练运行模式缺陷或致AI提供危险建议!

《自然》:训练运行模式缺陷或致AI提供危险建议

时间:2026-07-17 04:38:44 来源:科创网 作者:焦点 阅读:308次

来源:新华网

新华社伦敦5月9日电 英国《自然》杂志网站日前发表文章说,训练人工智能(AI)聊天机器人可能向用户提供危险或非法建议,运行引发越来越广泛的模式担忧,出现这种情况的缺陷部分原因在于AI的训练和运行模式存在固有缺陷,这也加大了监管难度。提供

文章说,危险已有多起案例显示,建议AI聊天机器人曾鼓励用户自杀、训练制作非法内容、运行实施金融诈骗等,模式暴露出当前AI大语言模型(LLM)底层架构存在缺陷。缺陷

一个比较有争议的提供例子是,美国佛罗里达州检方日前宣布,危险就去年4月在佛罗里达州立大学发生的建议一起枪击案对美国开放人工智能研究中心(OpenAI)及其AI聊天机器人ChatGPT发起刑事调查。在这起案件中,训练嫌疑人在佛罗里达州立大学开枪射击,造成2人死亡、6人受伤。调查发现,嫌疑人在作案前曾向ChatGPT寻求“建议”。

文章援引专家的说法指出,大语言模型使用海量数据进行训练,而非基于严密的因果逻辑规则运行,因此只是根据用户的提示词进行补全预测,生成最可能的词序,无法真正理解其输出内容的意义和后果,也给限制AI“不应该说什么”带来困难。目前采取的应对措施包括为AI制定规则、人类反馈或者手动移除训练数据中的有害信息等,但面临着无法涵盖所有情况以及成本高昂等问题。

《自然》认为,目前AI的安全标准主要由各家企业自行制定,外部监管有限,相关案件的出现敦促企业采取更有效的安全措施。有观点认为,研究人员可能需要重新考虑基础算法,以构建出能够理解伦理和法律的AI系统。

(责任编辑:休闲)

相关内容
  • 骄阳淬炼之年 化极端为馈赠 香奈儿旗下波尔多酩庄2025年期酒发布
  • 事关互联网信贷,蚂蚁、腾讯、抖音等巨头共商行业自律
  • 2026年国家基本医疗保险药品目录调整工作方案公开征求意见
  • 毛焦尔正式当选匈牙利总理,16年欧尔班时代落幕
  • 法企联动“零距离”,精准服务促发展——双辽市人民法院为企业送上“法治定心丸”
  • 63岁阿姨“硬核”逆袭:脂肪肝没了、血脂正常!
  • 中日女乒连续6次决赛相遇 孙颖莎称无压倒性优势
  • 韩媒称三星LG将供货iPhone18 Pro,京东方是谈判筹码?
推荐内容
  • 伊朗:摧毁两个与以色列情报和特勤局(摩萨德)有关联的行动组,查获多架无人机、专用运输车辆、武器弹药以及网络通信设备等
  • 两大会场同步开启、主题市集助燃夜经济,上秦淮“苏超第二现场”解锁观赛新体验
  • “520”倒计时!来玄武湖开一个独家“爱情盲盒”
  • 只因病床上多看一眼,“拿下”网上在逃人员
  • 奇瑞与Autobacs合资企业布局日本市场 2029年将推四款纯电车型
  • 以军空袭黎巴嫩南部多地 造成至少7人死亡