OpenAI、谷歌DeepMind现任和前任员工警告人工智能风险,呼吁保护吹哨人

周二,7名OpenAI前员工、4名现任匿名员工和谷歌DeepMind前任与现任员工发布公开信,警告商业公司竞相开发人工智能产品存在风险,该行业缺乏足够的监管,并可能对吹哨人打击报复。

公开信刊载在righttowarn.ai网站上,网站域名和信件标题都在捍卫这些顶尖AI公司员工《对先进人工智能发出警告的权利》,呼吁对AI行业进行全面改革,包括提高透明度和保护吹哨人。

信件称,人工智能技术有潜力为人类带来前所未有的利益,但也存在严重风险,包括进一步加剧现有的不平等、操纵和误导信息,以及失去对自主人工智能系统的控制,可能导致人类灭绝。

信件随即列出OpenAI、谷歌人工智能实验室Google DeepMind、谷歌和亚马逊支持的AI初创公司Anthropic等官网,以及英美等国政府网站和一些人工智能专家都“已承认存在这些风险”。

公开信称,原本希望在科学界、政策制定者和公众的充分指导下,上述先进AI系统带来的风险能够得到充分缓解,但人工智能公司有强烈的经济动机来逃避有效监督:

“人工智能公司掌握着大量非公开信息,包括其系统的能力和局限性、保护措施的充分性,以及不同类型伤害的风险水平。但它们目前只有很弱的义务向政府分享部分信息,对公民社会则没有任何分享义务。我们认为,不能指望它们(注:商业公司)自愿分享这些信息。”

信件还称,AI公司们与员工签署了广泛的保密协议,与离职员工签署了不能借由披露AI风险而“对公司进行贬低批评”的严苛条款,整个行业发生过对吹哨人各种形式的报复案件。

因此,公开信要求OpenAI及所有人工智能公司都不得签订或执行避免批评AI风险的保密协议,不能通过妨碍揭露AI风险吹哨人的既得经济利益来打击报复,而且要为现任和前任员工提供“可验证的匿名流程”,以便向公司董事会、监管机构和具有相关专业知识的独立组织提出与AI风险相关的担忧,前提是吹哨人需要对公司的商业机密和其他知识产权利益进行适当保护。

据介绍,签署公开信的多位OpenAI前任雇员曾从事人工智能安全工作,为公开信背书的业内大佬则有“人工智能教父”Geoffrey Hinton、因开创性AI研究而获得图领奖的Yoshua Bengio,以及AI安全领域的顶尖专家Stuart Russell。

不过,上个月从OpenAI离职的两位资深人工智能研究员没有签署或支持公开信,其中包括Geoffrey Hinton的学生、OpenAI联合创始人兼前任首席科学家lya Sutskever。另一位OpenAI前任董事Jan Leike在离职之际发表一系列文章对强大的AI系统潜在风险发出警告。

据署名签字公开信的OpenAI前任员工对媒体介绍,这家位于旧金山的人工智能热门公司存在“为争夺谁第一个把最强大AI产品推向市场而不计后果”的鲁莽企业文化,无法有效察觉和治理AI系统的潜在风险,还用剥夺吹哨人前员工股权等强硬手段阻止他们表达对AI技术的担忧。签字公开信的OpenAI现任员工全部选择匿名,就是因为担心被打击报复。

OpenAI则发布声明称,为公司能提供最强大、最安全人工智能系统的历史成就感到自豪,并相信其内部应对风险的科学方法,“我们同意,鉴于这项技术的重要性,严谨的辩论至关重要,我们将继续与世界各地政府、民间社会和其他社区进行接触。”

公开信的签署者之一、今年4月从OpenAI人工智能治理岗位离职的Daniel Kokotajlo指出,辞职是因为“对OpenAI能否负责任地行事失去了信心”。他称OpenAI的人工智能系统已经接近人类智能水平,通用人工智能AGI有50%的可能性在2027年就会问世,而不是此前预测的2050年:

“世界还没有准备好(迎接如此高级的AI智能),我们也没有准备好,我担心(这些商业公司)将不管不顾地一意孤行,并为自己的行为寻找借口。先进的人工智能毁灭人类或对人类造成灾难性伤害的可能性高达70%。”

他称,尽管OpenAI已与微软联合开展“部署安全委员会”等安全协议,旨在公开发布新AI模型之前进行重大风险审查,但并没有因此减慢新产品的发布速度。与投入更多时间和资源用来防范人工智能潜在风险相比,OpenAI仍在急于改进模型并进行商业化推广。

微软甚至两年前在印度悄悄测试Bing搜索引擎包含未发布GPT-4的新版本,引发了一些搜索引擎对用户行为异常的报告。OpenAI原本不知道最先进大语言模型被投入测试,知道后也没有阻止微软更广泛地推出该产品。不过,OpenAI发言人对上述说法提出异议。

OpenAI上周表示,已开始训练一种新的旗舰人工智能模型,并正在组建一个由CEO奥特曼牵头的新版安全委员会,以探索与新模型和其他未来技术相关的风险。奥特曼称不知道存在“强迫离职员工签署禁止诽谤公司的协议条款”,并称已废除这种做法,也不会影响员工的既得股权。

华尔街见闻曾援引报道称,自去年11月奥特曼被董事会罢免CEO、几天后又重返OpenAI以来,他在公司内部的主要对手已纷纷辞职或被迫离开:

据知情人士透露,奥特曼正在推动董事会对OpenAI现有的非营利组织架构进行全面改革,以避免与公司正在构建的数十亿美元收入业务产生冲突,甚至考虑把OpenAI转型为一家营利性公司。

本文来自华尔街见闻,欢迎下载APP查看更多

【来源:经济界】凡本网注明“来源:经济界” 的所有作品,版权均属于经济界。如转载,须注明“来源:经济界”。违反上述声明者,本网将追究其相关法律责任。
上一篇 2024-06-06 下午9:12
下一篇 2024-06-06

相关推荐

  • 非遗碰撞科技,福建三地齐聚共赏华为“非凡”之作

    (2024年9月30日,福建)国庆假期期间,华为“开合见 见非凡”限时体验馆正式亮相泉州、福州、厦门三地,为福建的消费者呈现了一场融合福建非遗文化与科技创新的沉浸式体验。活动现场特别邀请非遗大师亲临现场,展示福建传统非遗技艺,带来一场别具匠心的视觉盛宴。此外,活动现场还有大学生创新性地将非遗元素融入当代时尚,展现了年轻一代传播非遗文化的新颖方式。同时,全球首…

    2天前
    0
  • 官宣:容声冰箱牵手以旧换新“值选官”宝石老舅

    家电“以旧换新”活动轰轰烈烈、热闹非凡,已成为当下的流行热词。那么,哪些产品能以旧换新?哪些地方可以换?又该如何操作?繁杂的信息亟待汇总。别急,CCTV厂牌rapper——宝石老舅来了!9月29日,容声冰箱正式宣布宝石老舅成为其以旧换新的“值选官”,而老舅也带来了冰箱选购“秘诀”:把老旧的都换成老舅推荐的! 《你也是个Rapper》、《电梯战神》、《野狼Di…

    2024-09-29
    0
  • 真空分子级锁鲜科技!海信真空冰箱以旧换新“上新”

    “以旧换新,你家参与了吗?”“好划算!”“优惠真大!”今年以来,国家推出了一系列家电以旧换新活动,带动了消费市场热力飙升。作为以旧换新的主力军,海信将于9月30日推出搭载真空分子级锁鲜技术的新品冰箱,让用户享受更佳的换新体验。正如其在以旧换新短剧中所说:以旧换新,换的不仅是家电,更是按自己心意生活的方式。 海信真空冰箱以旧换新短剧《把家整活,人就活了》通过不…

    2024-09-29
    0
  • 助推专利转化 发展新质生产力 第二届全国专利密集型产品展区开展

    ●500余件专利密集型产品集中亮相数贸会 ●专利密集型产品认定数浙江居全国第一 ●浙江中小企业成长“金种子”计划正式启动 ●20余场专利转化主场对接活动陆续开启 一件专利要转化为企业的竞争力、产业的硬实力,都离不开产品这个媒介和终端。培育和推广专利密集型产品,既是推进专利转化运用专项行动的重点任务,也是检验行动实施成效的重要方面。9月25日,作为第三届全球数…

    2024-09-29
    0
  • 国际城市设计产业中心1周年庆启幕仪式暨“1路相伴 1月同辉”游园会圆满举行

    国际城市设计产业中心1周年庆启幕仪式暨 “1路相伴 1月同辉”游园会圆满举行 在这金风送爽、丹桂飘香的九月,国际城市设计产业中心迎来了它的一周年庆典。值此特殊时刻,园区特别策划了以“1路相伴 1起向未来”为主题的系列活动,旨在增进人才、企业、机构之间的沟通交流,共同展望美好的未来。 近日,国际城市设计产业中心1周年庆启幕仪式暨“1路相伴 1月同辉”游园会在园…

    2024-09-27
    0