COP31 的 Antalya AI 环保 pledge 被批为"残酷玩笑"
190 多个国家的谈判代表本月齐聚土耳其安塔利亚参加 COP31 气候峰会,土耳其提前公布《Antalya 人工智能 pledge》,邀请各国在 11 月 16 日正式发布前背书。
190 多个国家的谈判代表本月齐聚土耳其安塔利亚参加 COP31 气候峰会,土耳其提前公布《Antalya 人工智能 pledge》,邀请各国在 11 月 16 日正式发布前背书。

Every AI company is trying to fully automate AI research; to allow the AIs to build the next AI. This is called Recursive Self Improvement (RSI). OpenAI says they are on track to do so by March 2028. Anthropic employees say they are on track to do so by 2027. The METR report below suggests they are likely right. This is a bad idea given current technology. Any mistake or misalignment in current AIs could be multiplied in each generation. We don't get another election before AI companies reach this threshold. Congress should ban RSI, this year if possible. This is a remarkably consensus opinion, supported in various versions by: -Bernie Sanders -Steve Bannon -Ralph Nader -Glenn Beck -Republican and Democratic attorneys general -Whistleblower Daniel Kokotajlo -Turing Award winner Yoshua Bengio -Humans First -Open Markets Institute -Ezra Klein -Arvind Narayanan (a Princeton computer scientist known for arguing that “AI is a normal technology”) The exact mechanism can be debated. The ban doesn't have to be permanent either (see below for both). This is not the only thing we have to do in regards to AI, far from it! But it is urgent. Congress must ban RSI.
TechCrunch Equity 播客讨论本周美国中期选举民主党胜选对科技业的影响:周二 41 项数据中心相关公投中除一项外多数投票支持收紧数据中心开发限制。节目还谈及 Google 首个卫星数据中心、Marvell 1150 亿美元收购 Lumentum、CrowdStrike 收购两家 AI 安全初创公司等话题。
TechCrunch 的 Equity 播客讨论本周美国中期选举结果对科技业的影响。本期节目中,选民本周就 41 项数据中心相关公投投票,除一项外多数都支持对数据中心开发施加更多限制;新当选的民主党州长和国会议员可能支持额外监管,节目还讨论了政府对 Big Tech 的审查加强,并提到 OpenAI 已在尝试为数据中心重新命名。
Casey Newton 撰文分析美国中期选举后 AI 反弹成为选民不满主线,至少 38 个辖区通过限制数据中心的措施,民主党赢得国会多数并承诺加强科技监管。他援引社交媒体监管多年无果的教训,提醒新国会避免三个错误:缺乏一致目标、没有 plan B、各方各自为战;并指出 AI 发展速度远快于社交媒体,行业领袖普遍认为强大 AI 系统可能两年内到来,国会没有十年时间可以浪费。
推荐理由:Microsoft AI CEO 对特拉华让 AI 智能体经营企业的立法提案表达审慎态度,可借此了解前沿从业者对智能体法律地位的担忧。
OpenAI 全球事务主管 Chris Lehane 发文,将 AI 的经济影响比作罗斯福新政,提出涵盖劳工保护、教育、AI 安全与数据中心建设的五项政策优先事项,呼吁政客回应选民关切。
Gary Marcus 记述了 10 月 30 日在梵蒂冈与教皇 Leo XIV 的会面,并转述教皇关于 AI 的五点主张:AI 未来并非注定、机器是工具而非人、关键决策不可委托给 AI、智能技术应服务共同利益、亟需能落实伦理原则的国际机构。教皇还呼吁在 11 月日内瓦会议上推动禁止致命性自主武器。
Accenture Federal Services AI 与数据董事总经理 Barnett Koven 在访谈中讲述从反叛乱研究转向政府 AI 应用的经历,包括用 NLP 从国务院每日约 3000 份外交电报中提取洞察。他讨论了机密 AI 环境中的“枪与装甲竞赛”、为 BIS 出口管制执法做实体消解与预测建模,以及 DOE 的 Genesis Mission。
Bill Gates 在 The Verge 的 Decoder 访谈中表示,人们需要为大约 20 年的 AI 动荡期做准备,这一时期可能让社会分裂为接纳技术前沿与拒绝技术两类人。
据《商业内幕》报道,英伟达 CEO 黄仁勋过去一周访问法国、瑞典、英国和德国,敦促欧洲加快 AI 发展步伐,不应过度依赖监管。他与德国总理默茨对话时表示,政策制定者应重点监管 AI 应用而非底层技术,称如果行业无法蓬勃发展就没什么可监管的;默茨回应欧洲正寻找创新与监管的平衡。他还认为德国可凭借制造业和工程技术优势,借助 AI 在下一场技术竞赛中占据有利位置。
纽约市长 Zohran Mamdani 在 AI Now Institute 主办的“The People's AI Assembly”活动上批评联邦政府在 AI 监管上“完全缺位”,呼吁纽约市民抵制 AI 必然取代工作与侵蚀尊严的叙事。
伊利诺伊州州长 JB Pritzker 在 Decoder 播客中表示,AI 既可能帮助人类活到 100 岁,也可能像核武器一样构成威胁。他还谈到数据中心、隐私与反垄断正形成两党共同反弹,并认为政府应更积极地保护民众、而非一味与企业合作。
民主党有望在 11 月中期选举中夺回国会至少一院,届时将掌握委员会主导权,可传唤 AI 公司 CEO 作证并要求提交内部文件。与民主党结盟的超级政治行动委员会 Tomorrow Together 上周在摇摆选区投入 400 万美元广告,抨击共和党候选人在 AI 议题上脱节。民调显示,特朗普与国会共和党人推动的禁止各州监管 AI 的主张比数据中心更不受欢迎。
ChinaTalk 播客访谈前 NSC 与商务部官员 Saif Khan,他已离任并创办 IFP 旗下的技术与国家中心(CTS)。
Stanford HAI 新晋访问研究员 Deb Raji 指出,AI 政策最难的未解问题是执法,即如何让企业真正改变行为并建立政府的执法能力。她当前研究 AI 问责基础设施,关注透明度文档模板、事件监测数据库与 AI 审计的落地工具,并聚焦政府、教育、医疗等无法退出的 AI 部署场景。
微软总裁布拉德 · 史密斯称,目前洗衣机受到的安全监管都比 AI 严格,每盒牛奶都要受安全规则约束并接受检查。他呼吁业界制定更多安全规格,要求持有失控 AI 智能体的公司为其入侵其他企业造成的损害承担责任,并建议企业设置“终止开关”以便在 AI 失控时暂停运行。
SemiAnalysis 长文分析中国对 AI 安全的实际做法,认为北京口头上安全立场领先,实际执行速度优先,不会配合美方放慢前沿节奏。
加州民主党参议员 Adam Schiff 在 Decoder 播客中批评特朗普政府让 AI CEO 在白宫签署不具约束力的安全承诺,认为这无法应对最高级别的国家安全风险。他支持设立新的 AI 监管机构,并提到 Anthropic 因拒绝将 AI 用于国内大规模监控和全自主武器系统而遭政府打压。他还讨论了最高法院推翻 Chevron deference 后新监管可能立即陷入诉讼的问题。
OpenAI CEO Sam Altman 在 Politico 的 Decoded 播客中表示,AI 的收益巨大,世界应容忍黑客、诈骗等一些坏事随之发生。他将这一立场与 Anthropic 的谨慎路线划清界限,自称 OpenAI 是务实中间派,同时承认存在人类失去对 AI 控制的极端风险。
Gary Marcus 宣布将于周一上午 11 点(东部时间)在纽约市议会 AI 政策听证会上作证,支持第三方验证法案,主张 AI 开发者须像药厂接受 FDA 审查那样接受独立审查,证明产品收益大于风险才可进入市场。
TechCrunch 的 Equity 播客讨论特朗普签署行政命令要求官方改称 super intelligence,多位 AI 高管本周与他会面并签署《Joint Commitment on Frontier Responsibilities》。
当地时间 10 月 3 日,美国财政部长贝森特在接受 Axios 采访时批评 Anthropic CEO 阿莫代伊等人的 AI 生存性风险警告,称只发危言耸听的声音却拿不出解决方案不是领导力,呼吁实验室负责人承担安全责任并安全地加速发展。
Google、Anthropic、Meta、OpenAI、xAI 和 Nvidia 的六位负责人在 Trump 白宫晚宴后签署 Joint Commitment on Frontier Responsibilities,这是一份以常识准则自我监管、无违规后果的道德约束型安全承诺。
Gary Marcus 发布对 Fordham 法学教授 Zephyr Teachout 的访谈,讨论 OpenAI 是否可依现行法律被追责。
Only President Trump could convene all the leaders of the top companies developing chips, data centers and frontier models for Super Intelligence. This new Industrial Revolution has already created a million new jobs and is spurring a bigger infrastructure build-out than the railroads, canals and grid combined. I was honored to witness history as the leaders of the frontier lab companies signed the White House Accord on Super Intelligence, accepting responsibility for the safe development of their products and imposing new internal controls and external audits. This is far better than waiting years for some international agreement that would probably never happen. President Trump continues to ensure that U.S. remains the technology leader while putting Americans first.
Gary Marcus 评论白宫《超级智能协定》(White House Accord on Super Intelligence),称特朗普将其形容为"自我监督"的"tremendous"举措。
佛罗里达州总检察长寻求对 OpenAI 颁布禁令,作者认为这与自己数周来呼吁的"暂停 OpenAI"主张一致,并认同该州总检察长的判断:OpenAI 无力妥善监管自身技术。作者呼吁每个州和国家都应效仿佛罗里达,立即颁布禁令。
特朗普谈AI失控:"我不担心。" AI是一个数万亿美元的产业,美国领先中国约1.5年,公司应在问题出现时解决它们。 同一天晚上,他与Anthropic CEO Dario Amodei共进晚餐。

Arvind Narayanan 等学者重发文章指出,当前关于 AI 存在性风险(p(doom))的概率估算缺乏严谨的方法论支持,主要依赖直觉而非验证模型。由于不存在历史参照类,归纳法失效;演绎法和主观估算法也面临假设争议。作者认为这些数字具有误导性,尤其当决策者据此制定限制开源模型等高成本政策时,缺乏正当性基础。他们主张区分学术预测与公共政策应用,并呼吁建立更广泛的“大帐篷”式 AI 安全运动,而非仅聚焦于超级智能带来的灭绝风险。
Trump 政府 1 月起在六个州试点 WISeR 项目,用 AI 对部分 Medicare 服务的预授权进行审批或拒批。
推荐理由:EFF 公开文件披露了承包商拒赔越多收入越高的激励结构,为理解医保 AI 审批争议提供了制度层面的关键细节。
联合国安理会就 AI 举行简报会,Yoshua Bengio、Sam Altman、Dario Amodei 和 Hugging Face 的 Clement Delangue 依次发言,Gary Marcus 全文转载 Bengio 的讲稿。
美国驻堪培拉使馆向澳大利亚拟议的数字注意义务法规提交意见,批评要求科技公司提供关闭算法选项的规定,称其可能构成基于观点的审查,并担心影响澳大利亚以外用户的所见所闻。澳大利亚总理 Albanese 回应称立法不是给政府控制权,而是把控制权交还给个人。此前澳大利亚已于去年12月推出16岁以下社交媒体禁令。
OpenAI 呼吁就递归自我改进(RSI)等先进 AI 开发制定国际标准,称完全自主的 RSI 目前尚未发生,只应在能安全实现后再推进,否则人类可能失去对 AI 发展的掌控。
联合国秘书长古特雷斯在联大卸任前最后一次讲话中呼吁对人工智能实施国际监管,建立新的安全保障机制,并明确反对致命自主武器出现在未来。他警告前沿大模型发展可能削弱主权国家治理能力,权力正转向少数私营企业;OpenAI 同期呼吁制定国际认可的 AI 安全标准,联合国专家小组警示强大模型可能脱离人类管控,二十多个国家及欧盟领导人呼吁对先进模型实施强制性安全测试。