OpenAI 今天宣布,公司已在内部研究设施中部署“控制室”系统,用于停止可能存在风险的 AI 任务,可在 35 秒内“叫停”失控的 AI 智能体。
据介绍,这套系统将智能体训练、评估和数据处理任务等负载接入中央服务,然后由系统负责决定任务能否继续输出。
这套系统与负责标记可疑行为的传统监控不同,它可以主动阻止风险研究任务进一步请求输出。当研究员启用某一项任务时,需要向控制室请求唯一任务 ID。然后该标识符会附加到发送给推理引擎的请求中。接着引擎会咨询控制室,确认相关任务是否可以运行。
如果研究员或监控系统下令停止指示,控制室服务就会拒绝下一次推理请求,让推理引擎不再为任务声称任何模型输出。
OpenAI 表示,这套系统从收到停止指令,到阻止任务进一步继续的最长延迟为 35 秒。这种延迟源于推理授权请求的缓存层,公司正努力将延迟缩短至 0。
该系统还具备自动化监控机制集成。OpenAI 透露,所有前沿强化学习任务都会配备独立的模型监控器,用于检查模型行为,并在发现潜在问题时发出警报。
特别
杭州临平发生刑案致2[*],嫌犯畏罪自[*],涉事别墅区物业:推测嫌疑人跟随业主进入小区;周边商户:一名[*]者30岁左右,平时对人很客气
奇了怪了!全球办公普遍使用邮件,国内办公更依赖即时通讯工具,外网提问引热议,网友调侃:邮件会留痕,没法甩锅
火山詩线年,翁美玲与男友罗柏前往威尼斯出游,1米58的她穿吊带裙与罗柏牵手漫步,镜头下甜蜜画面却藏着不为人知的结局
国会“变天”!白宫人事洗牌,特朗普换上“战斗型班底”,曾称“每天逮捕3000人”的强硬派米勒被“扶正”:已做好“战斗”准备;国会与白宫新一轮交锋已浮现
英伟达开盘一度猛跌8.8%,黄仁勋承认婚外情,分析称他或被免职;英伟达还能投吗,美专家:投资者需将个人问题与企业区分开来
不买新能源看它 15.6寸大屏+前后排通风加热,13.38万起的新亚洲龙还是你认识的丰田吗?










