发现者网
产业经济 科技业界 3C数码 文化传媒 移动智能 家电行业 AI大模型 汽车出行 热点资讯

OpenAI 设立‘防备’预警团队,确保 AI 技术安全

2023-12-19来源:发现者网编辑:芳华

【发现者网】12月19日消息,OpenAI,全球领先的人工智能研究公司,最近成立了一个名为“防备”(Preparedness)的专项团队,专注于评估和缓解其技术可能带来的潜在风险。这一措施是对近期关于 AI 技术安全性的广泛关注的回应。

这一新团队由 AI 领域的资深专家亚历山大・马德里(Aleksander Madry)领衔,他在麻省理工学院的人工智能研究中心担任主要职位。团队成员涵盖多个领域的专家,包括人工智能研究员、计算机科学家、国家安全专家和政策专家,共同监控 OpenAI 开发的技术,并确保这些技术不会被滥用,如用于制造化学、生物甚至核武器。

据发现者网了解,OpenAI 还发布了一个名为“防备框架”的指导方针,虽然目前仍处于试验阶段,但目的是确保技术的安全可控。此外,防备团队将定期向公司内部的安全咨询小组报告其发现,进而向首席执行官萨姆・阿尔特曼和董事会提出建议。基于这些建议,公司将决定是否发布新的 AI 系统,同时董事会拥有最终决策权。

为了进一步增强对技术的监控,防备团队将对 OpenAI 最先进的 AI 模型进行定期评估,并根据潜在风险将其分为四个等级:低、中、高和严重。根据新指南,仅当模型的风险等级被评定为低或中时,OpenAI 才会考虑发布。

OpenAI 的这一步骤是对全球科技界关于 AI 安全性的热烈讨论的回应。一些知名 AI 专家,包括来自谷歌和微软的专家,曾警告称 AI 技术可能构成严重威胁,与流行病或核武器威胁相当。尽管有些人认为这些担忧被夸大了,但 OpenAI 采取了更加审慎的立场。

在公司内部,马德里的领导地位受到了高度重视。他在麻省理工学院的职务以及他在 AI 政策论坛中的角色为他在 OpenAI 的角色奠定了基础。在公司的一次领导层变动中,他曾短暂离职,但随后又重返公司。在这个过程中,OpenAI 的董事会也经历了变化,目前正在寻找新的成员。

马德里表示,尽管公司经历了领导层的动荡,但他依然对 OpenAI 董事会处理 AI 风险的能力充满信心。除了技术人才,他还强调将引入国家安全领域的专家,以增强团队的多元化。

OpenAI 还计划允许合格的第三方独立测试其技术,以进一步提高透明度和安全性。马德里强调,AI 的发展需要在创新与安全之间找到平衡,既不能忽视其巨大潜力,也不能忽视潜在的风险。他认为,正确的途径是在保证安全的前提下,推动技术的发展。

“祖冲之三号”同款芯片赋能!我国超导量子计算机“天衍-287”搭建完成并开放服务
据了解,该量子计算系统具备“量子计算优越性”能Q力,处理特定问题的速度比目前最快的超级计算机快4.5亿倍,未来将接入“天衍”量子计算云平台并首次面向全球开放应用服务,这也将是我国首个具备“量子计算优越性”的量…

2025-11-14

水库增殖放流站物联网升级:实时监测,远程管控,开启智慧渔业新模式
通过接入溶解氧传感器、水温传感器、水质监测仪、自动投料机、自动增氧机、循环水设备PLC、摄像头等多种设备,物通博联智能数采网关能够实时采集各个鱼池的水质、溶解氧、水温以及投料、增氧、循环水等设备状态,通过5…

2025-11-14

水浸传感器RS-SJ:4G蓝牙双助力,高效守护防积水安全
当检测到水浸情况时,相关信息会通过4G网络快速传输至指定的管理平台或用户终端,无需人工现场查看,让用户在第一时间知晓积水隐患,为及时采取排水、设备转移等应对措施争取时间,避免积水造成更大损失。 水浸传感器凭借…

2025-11-14

上海电信“双万兆”护航进博会:数智赋能通信保障,服务跨越语言距离
浦东机场T1电信营业厅及T2一站式服务中心电信柜台是进博会观众和外宾抵沪的“入境第一站”, 两处服务点均开设“进博专席”,为参展人员和往来旅客提供中英双语咨询、交通指引与爱心便民服务。未来,上海电信将持续夯…

2025-11-13

照片压缩至5M内超全指南!七大实用方法助你轻松搞定分享难题
具体的执行步骤是:将它们直接开启,随后去挑选照片,该应用会自动给出推荐的压缩级别,你能去预览最终结果,还能够对某些设置予以调整,比如把分辨率调低或者转换格式,借此令文件大小小于5MB,这对即时分享至社交媒体来…

2025-11-12

山海星耀攻克超低轨难题,以硬核技术逐梦空天新蓝海
天虎科技了解到,虽然当前市场上有一些针对超低轨的吸气式推进器,但从气体收集率、推进效率、测试工作环境等维度上,山海星耀的电推进器均具备一定优势。 蔡东升表示,目前该产品是商业航天公司首次实现了“高真空运行环…

2025-11-12

万卡AI集群:算力变革下数据中心建设逻辑、系统瓶颈与交付模式之变
它迫使数据中心的建设逻辑从“基建思维”转向“IT思维”;它将系统瓶颈从“算力”引向了“网络”;它也将交付模式从“工程项目”推向了“产品制造”。 当一个万卡集群被点亮时,它不再是一个被动容纳IT设备的“机房”…

2025-11-12

荣旭传媒技术破局:以专业方案化解直播痛点,成就高性价比之选
传统方案在视频、音频和网络方面存在诸多不足,而荣旭传媒通过先进的技术和专业的设备,有效解决了这些问题。传统方案的视频分辨率较低,画面不够清晰,而荣旭传媒的4K 超高清视频拍摄制作让画面质量有了质的提升;传统…

2025-11-12

Viwoods发布AiPaper Reader电纸书:6.13英寸墨水屏搭载AI阅读互动功能
IT之家 11 月 11 日消息,据科技媒体 NoteBook Check 今天报道,Viwoods 现已推出 AiPaper Reader电纸书,运行 Android 16 操作系统,机身配备专用 AI …

2025-11-12