OpenAI、谷歌DeepMind现任和前任员工警告人工智能风险,呼吁保护吹哨人

周二,7名OpenAI前员工、4名现任匿名员工和谷歌DeepMind前任与现任员工发布公开信,警告商业公司竞相开发人工智能产品存在风险,该行业缺乏足够的监管,并可能对吹哨人打击报复。

公开信刊载在righttowarn.ai网站上,网站域名和信件标题都在捍卫这些顶尖AI公司员工《对先进人工智能发出警告的权利》,呼吁对AI行业进行全面改革,包括提高透明度和保护吹哨人。

信件称,人工智能技术有潜力为人类带来前所未有的利益,但也存在严重风险,包括进一步加剧现有的不平等、操纵和误导信息,以及失去对自主人工智能系统的控制,可能导致人类灭绝。

信件随即列出OpenAI、谷歌人工智能实验室Google DeepMind、谷歌和亚马逊支持的AI初创公司Anthropic等官网,以及英美等国政府网站和一些人工智能专家都“已承认存在这些风险”。

公开信称,原本希望在科学界、政策制定者和公众的充分指导下,上述先进AI系统带来的风险能够得到充分缓解,但人工智能公司有强烈的经济动机来逃避有效监督:

“人工智能公司掌握着大量非公开信息,包括其系统的能力和局限性、保护措施的充分性,以及不同类型伤害的风险水平。但它们目前只有很弱的义务向政府分享部分信息,对公民社会则没有任何分享义务。我们认为,不能指望它们(注:商业公司)自愿分享这些信息。”

信件还称,AI公司们与员工签署了广泛的保密协议,与离职员工签署了不能借由披露AI风险而“对公司进行贬低批评”的严苛条款,整个行业发生过对吹哨人各种形式的报复案件。

因此,公开信要求OpenAI及所有人工智能公司都不得签订或执行避免批评AI风险的保密协议,不能通过妨碍揭露AI风险吹哨人的既得经济利益来打击报复,而且要为现任和前任员工提供“可验证的匿名流程”,以便向公司董事会、监管机构和具有相关专业知识的独立组织提出与AI风险相关的担忧,前提是吹哨人需要对公司的商业机密和其他知识产权利益进行适当保护。

据介绍,签署公开信的多位OpenAI前任雇员曾从事人工智能安全工作,为公开信背书的业内大佬则有“人工智能教父”Geoffrey Hinton、因开创性AI研究而获得图领奖的Yoshua Bengio,以及AI安全领域的顶尖专家Stuart Russell。

不过,上个月从OpenAI离职的两位资深人工智能研究员没有签署或支持公开信,其中包括Geoffrey Hinton的学生、OpenAI联合创始人兼前任首席科学家lya Sutskever。另一位OpenAI前任董事Jan Leike在离职之际发表一系列文章对强大的AI系统潜在风险发出警告。

据署名签字公开信的OpenAI前任员工对媒体介绍,这家位于旧金山的人工智能热门公司存在“为争夺谁第一个把最强大AI产品推向市场而不计后果”的鲁莽企业文化,无法有效察觉和治理AI系统的潜在风险,还用剥夺吹哨人前员工股权等强硬手段阻止他们表达对AI技术的担忧。签字公开信的OpenAI现任员工全部选择匿名,就是因为担心被打击报复。

OpenAI则发布声明称,为公司能提供最强大、最安全人工智能系统的历史成就感到自豪,并相信其内部应对风险的科学方法,“我们同意,鉴于这项技术的重要性,严谨的辩论至关重要,我们将继续与世界各地政府、民间社会和其他社区进行接触。”

公开信的签署者之一、今年4月从OpenAI人工智能治理岗位离职的Daniel Kokotajlo指出,辞职是因为“对OpenAI能否负责任地行事失去了信心”。他称OpenAI的人工智能系统已经接近人类智能水平,通用人工智能AGI有50%的可能性在2027年就会问世,而不是此前预测的2050年:

“世界还没有准备好(迎接如此高级的AI智能),我们也没有准备好,我担心(这些商业公司)将不管不顾地一意孤行,并为自己的行为寻找借口。先进的人工智能毁灭人类或对人类造成灾难性伤害的可能性高达70%。”

他称,尽管OpenAI已与微软联合开展“部署安全委员会”等安全协议,旨在公开发布新AI模型之前进行重大风险审查,但并没有因此减慢新产品的发布速度。与投入更多时间和资源用来防范人工智能潜在风险相比,OpenAI仍在急于改进模型并进行商业化推广。

微软甚至两年前在印度悄悄测试Bing搜索引擎包含未发布GPT-4的新版本,引发了一些搜索引擎对用户行为异常的报告。OpenAI原本不知道最先进大语言模型被投入测试,知道后也没有阻止微软更广泛地推出该产品。不过,OpenAI发言人对上述说法提出异议。

OpenAI上周表示,已开始训练一种新的旗舰人工智能模型,并正在组建一个由CEO奥特曼牵头的新版安全委员会,以探索与新模型和其他未来技术相关的风险。奥特曼称不知道存在“强迫离职员工签署禁止诽谤公司的协议条款”,并称已废除这种做法,也不会影响员工的既得股权。

华尔街见闻曾援引报道称,自去年11月奥特曼被董事会罢免CEO、几天后又重返OpenAI以来,他在公司内部的主要对手已纷纷辞职或被迫离开:

据知情人士透露,奥特曼正在推动董事会对OpenAI现有的非营利组织架构进行全面改革,以避免与公司正在构建的数十亿美元收入业务产生冲突,甚至考虑把OpenAI转型为一家营利性公司。

本文来自华尔街见闻,欢迎下载APP查看更多

【来源:经济界】凡本网注明“来源:经济界” 的所有作品,版权均属于经济界。如转载,须注明“来源:经济界”。违反上述声明者,本网将追究其相关法律责任。
上一篇 2024-06-06 下午9:12
下一篇 2024-06-06

相关推荐

  • 养老更宜老 新濠超防滑大理石瓷砖护航人居安全

    在现代社会,随着人口老龄化的加剧,越来越多的家庭开始重视老人居住环境的安全与舒适。“地滑走路怕摔跤,洗浴水迹多,晚间起夜恐磕碰”,室内装修的选择,对于老年人的日常生活影响尤为显著。针对老年人的特殊需求,选择合适的地面材料显得尤为重要。在众多的地面装修材料中,新濠超防滑大理石瓷砖以其卓越的防滑性能和美观的外观脱颖而出,守护老人居住环境安全。 老年人由于身体机能…

    1天前
    0
  • 优斯美研访谈:乔治城大学MPP专业

    在优斯美研的帮助下,D同学拿到了乔治城大学MPP录取,并且于2023秋季入读,怀着感恩的心情,D同学今天跟优斯团队老师分享读书感受和专业信息,希望对以后的学弟学妹有所帮助! 招生篇 优斯:项目招生规模大概是多少人?其中中国学生比例是多少?(录取的中国学生群体有什么特点吗? 比如海本 985 这样?) 学长:学院总共400人,这个项目一届大约140人,其中差不…

    4天前
    0
  • 联合 PingCAP 与沙利文,共探出海企业从走出去到融入的可持续之旅

    作为全球云计算的创造者和引领者,亚马逊云科技依托覆盖全球的基础设施、领先的安全和合规理念以及全球业务体系的强大支撑,始终致力于为中国企业出海打造全球化发展的技术桥梁。2024年,亚马逊云科技联合 PingCAP 以及全球知名的市场研究机构弗若斯特沙利文(Frost & Sullivan,下称沙利文)撰写了《中国企业全球化运营白皮书——从“走出去”迈向…

    4天前
    0
  • Nullmax推出新一代端到端自动驾驶技术NI

    随着自动驾驶技术的飞速发展,汽车智能化程度快速提升,智驾应用场景逐步扩大,高阶功能向城市加速渗透。但是由于重规则、泛化差、成本高、开不好等问题,智能驾驶的普及受到限制,范围、规模有待提升。7月16日,Nullmax纽劢在上海举办的“AI无止境,智变新开端”2024技术发布会上,新一代自动驾驶技术Nullmax Intelligence(简称“NI”)的亮相,…

    4天前
    0
  • 拜登有阿尔茨海默症风险吗?中国的公司告诉你真相

    中国科技公司预测美国总统感染风险:从视频分析到现实验证 在科技日益融入全球公共卫生监测体系的背景下,中国沃民高新科技(北京)股份有限公司的新冠病毒风险监测分析能力再次吸引了世界的目光。7月11日,该公司发布的一份报告指出,美国总统乔·拜登存在新冠病毒感染的高风险。7月18日早晨,拜登竞选团队负责人珍妮特·穆尔吉亚(Janet Murguia)确认,总统的Co…

    2024-07-19
    0