虽然市场的注意力大多集中在Anthropic最新修订后的S-1A文件中披露的财务数据上(收入飙升,但支出也同样飙升),但这家人工智能实验室在细则中又抛出了一颗小炸弹——公司已经非常接近做出具备RSI能力的模型。
(资料图片仅供参考)
递归自我改进(RSI),是指人工智能系统以自身改进结果作为输入,不断优化自身能力并修改自身架构,形成自我改进闭环的过程,被视为实现通用人工智能(AGI)的关键路径。简单来说,就是AI系统能够在无人干预的情况下设计和开发其后续版本。
尽管RSI目前尚未实现,但随着人工智能系统在互联网上变得越来越复杂和普遍,基础模型构建者可能会失去对底层技术的控制,或者未能考虑到潜在的意外后果。包括Anthropic和OpenAI在内的多家公司此前警告称,这将使人类更容易失去对这些系统的控制。
在人工智能末日论者看来,RSI更是代表着一场无法挽回的灾难,人工智能将自身构建得足够强大,以至于超出人类的控制,并在实现目标的过程中对造成的破坏漠不关心。但对AI支持者而言,RSI将成为提高生产力、科学发现等方面的巨大工具。
看Anthropic的表述,似乎介于两者之间。
该公司在上述文件中指出,其在研发中大量使用AI,但同时提醒:“用AI去帮助构建能力更强的AI,也可能带来相当大的安全风险,尤其是在它急剧加快进展速度的时候。”这类风险被纳入公司的“负责任扩展政策”(RSP)加以监控。
“该政策阐述了我们在推进所谓‘递归式自我改进’的过程中,如何监测和降低风险的计划。”文件补充道、
今年早些时候,当RSI这个词流行起来时,许多人认为它只是一个流行词,或者充其量是一个难以实现、定义或证明的目标。
但周一,Anthropic 在其“风险因素”部分添加了新的声明,称:1)它已经使用人工智能开发了新的模型,但当时它并未意识到这些模型的能力有了飞跃;2)它可能很快就会符合其内部对RSI的定义:
此外,我们越来越多地利用人工智能系统来加速自身的研发,这可能导致模型能力的提升速度超过我们开发、验证和实施相应安全、校准和保障措施的能力。因此,过去我们未能察觉,将来也可能在研发速度显著加快之后才察觉到这一点。
例如,我们内部对未来模型(而非当前模型)的评估和预期表明,我们可能很快就能达到“负责任扩展政策”中“人工智能带来的显著加速发展”的定义。我们尚未将任何当前模型认定为超过此阈值,并且我们将继续评估相关数据。
不过,Anthropic公司在提交的文件中也表示,目前没有任何一款模型越过这条线,并承诺在可预见的未来继续让人类参与研发过程。
“我们预计,即便技术上可行,也无法在缺乏有效人工监督或理解的情况下,安全地使用Claude完全自主地设计和构建下一代前沿模型。因此,我们正在考虑更新我们的RSP,以确保人类始终掌控Anthropic前沿模型的开发。”文件称。
凡本网注明“XXX(非中国微山网)提供”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和其真实性负责。
清理规范城镇供水供电供气供暖行业收费意见三月起施行水电气暖四十余项不合理收费将取消初春的大地,乍暖还寒。每天的开销看似不大,但一样
2021-02-22 15:22
还记得沸沸扬扬的退出家长群新闻吗?这几年来,批改作业已成为越来越多家长的痛。为了给家长减负,多地陆续出台规定,明确要求教师亲自批改
2021-02-22 15:24
ok镜在感冒期间是不能佩戴的,很容易引起眼部不适,还会影响视力恢复,降低塑形效果,这个时候一般都需要停戴一个星期左右的时间,等感冒好
2022-03-28 12:47
大学被退学能考研吗是很多人好奇的,毕竟大学作为你步入社会前的一个垫脚石,很多人觉得上了大学就没什么事情了,但是吧如果你严重违反了纪律
2022-03-28 12:57
2020年10月17日,上海野生动物园一名工作人员在猛兽区实施作业时,遭到棕熊攻击不幸身亡。日前,这一事件调查结果公布,9名相关责任人被处
2021-02-22 15:25
受冷空气影响,昨天(2月21日)夜间开始,北京告别了白天的假夏天模式,大风降温齐上线。今天,冷空气带来的影响会更加明显,预计白天的最高
2021-02-22 15:29
为何这些从业门槛较低的岗位总缺人?阅读提示营销员、保洁员、餐厅服务员等从业门槛较低的工种之所以持续招工难,专业人士认为,一方面是受
2021-02-22 15:29
从疫情爆发至今已有超过一年的时间,人们已经习惯戴上口罩。在口罩的掩护下,就算是最精致的丽人们,也减少了使用口红的频率。红星资本局从
2021-02-22 15:51
原标题:教育部发布预警: 高校招生录取期间谨防诈骗 勿信不实传言据教育部网站消息,2021年普通高校招生录取工作即将开始,一些不法分子
2021-07-08 17:25
赟是一个汉字,读音yūn,作人名时亦为yún,常用意思美好,大等美好。该字因其由文、武、贝三字组成,古代‘贝’指&lsquo
2020-12-16 15:12