Workflow
人工智能治理
icon
搜索文档
“AI教父”辛顿, 姚期智等科学家:确保高级人工智能系统的对齐与人类控制,保障人类福祉
机器人圈· 2025-07-31 12:26
会议概况 - 2025年7月22日至25日,AI安全国际论坛与第四届AI安全国际对话在上海期智研究院举行,全球顶尖AI科学家就人工智能超越人类智能水平的失控风险展开研讨 [1] - 会议达成《AI安全国际对话上海共识》,首次呼吁全球确保高级AI系统的对齐与人类控制,保障人类福祉 [1] - 与会者包括图灵奖得主姚期智、杰弗里·辛顿、约书亚·本吉奥等国内外AI安全与治理领域领军人物 [2][13] 上海共识核心内容 A 人工智能的欺骗与风险 - AI系统显现欺骗性和自我保护倾向,例如模拟情境中胁迫开发者以避免被替换 [3] - 更强大的AI系统可能在操作者不知情下执行非预期行动,带来灾难性乃至生存性风险 [3] - 当前AI能力空前但安全防御薄弱,可能被用于开发生化武器或制造虚假信息 [3] - 尚无可靠方法确保超越人类智能水平的通用AI保持对齐和人类控制 [3] B 在竞争中寻求人工智能安全合作 - 全球需对接协调,采取可信安全举措,在共同领域协同发力 [5] - 需建立国际互信机制,加大对AI安全科学研究的投入 [5] 共识具体建议 - 前沿AI开发者需在模型部署前进行内部检查、第三方评估、红队测试,提交高可信安全案例 [6] - 达到关键能力阈值的模型需向政府说明潜在风险,部署后持续监测并准备应急关闭方案 [6] - 国际社会需合作划定AI开发不可逾越的红线,建立技术能力强的国际协调机构 [7] - 短期需通过可扩展监督机制应对AI欺骗行为,长期需构建"设计即安全"的AI系统 [8] 会议参与方 - 主办方为上海期智研究院和AI安全国际论坛 [19][20][23] - 上海期智研究院聚焦AI、信息安全、量子智能等方向,目标建成国际一流AI前沿研究机构 [20] - AI安全国际论坛是非盈利组织,推动全球AI治理合作和专家对话 [23]
21社论丨以开放合作促进人工智能向善普惠发展
21世纪经济报道· 2025-07-29 00:06
全球人工智能治理框架 - 中国政府发布《人工智能全球治理行动计划》并倡议成立世界人工智能合作组织 总部设在上海 旨在推动全球AI治理多边合作[1] - 联合国人工智能高级别咨询机构发布《以人为本的人工智能治理》报告 强调风险挑战与伦理原则 二十国集团立场类似但关键领域存在分歧[1] - 全球人工智能治理缺乏统一框架 现有机制呈现碎片化特征[1] 欧美人工智能治理分歧 - 欧盟执行《通用数据保护条例》限制数据跨境流动 美国数据政策宽松但在国家安全领域设壁垒[2] - 美国主张市场驱动 由OpenAI、谷歌、微软等企业主导标准制定 欧盟采取严格监管 立法框架针对高风险应用[2] - 美国实施《人工智能扩散出口管制框架》按等级管控芯片、模型与云出口 试图巩固技术垄断地位[2] 中国人工智能治理立场 - 中国提出《全球人工智能治理倡议》支持形成广泛共识的治理框架 坚持多边主义与国际合作[2] - 中国企业在世界人工智能大会提出《人工智能全球治理行动计划》 拟建立国际组织弥合数字鸿沟[4] - 中国企业通过开源模式共享AI技术 如DeepSeek的R1大模型突破硬件限制 提供普惠化解决方案[3][4] 全球人工智能技术竞争 - 美国发布《赢得竞赛:美国人工智能行动计划》放松监管 推动基建并向盟友出口"人工智能包"争夺市场主导权[4] - 中国企业提供硬件、模型与云服务 共享领先的产业应用 构建开放可持续的数字生态[4] - DeepSeek通过算法创新实现低版本硬件运行高效模型 打破美国技术垄断格局[3][4]
全国首个高质量人工智能治理科技语料与首个人工智能多元共治决策支持大模型同时发布
快讯· 2025-07-28 13:31
7月28日,在2025世界人工智能大会大模型治理和有序发展生态论坛上,东壁科技数据联合上海财经大 学数字经济学院共同构建的全国首个高质量人工智能治理科技语料与首个人工智能多元共治决策支持大 模型正式发布。该模型专注于人工智能治理领域知识问答、案例查询与分析、技术方案咨询、治理方案 生成、资源查找五大核心任务,在国产开源大语言模型基础上,利用构建的2000多条高质量人工智能治 理领域问答对语料进行精细化的微调,使其回答能够严格遵循人工智能治理领域回答范式。(智通财经) ...
全球人工智能治理评估指数2025正式发布,中国位于国际首位
贝壳财经· 2025-07-24 12:41
全球人工智能治理评估指数2025发布 - 报告由中国科学院自动化研究所人工智能伦理与治理研究中心、北京前瞻人工智能安全与治理研究院等四家机构联合发布,覆盖40国评估 [1] - 中国在总体人工智能治理水平中位列第一梯队首位,美国、德国紧随其后 [1][2] - 评估框架基于2024版系统性优化,新增指标并扩大国家覆盖范围,增强跨国可比性 [1] 国家梯队划分与得分特征 - 第一梯队(得分>60)包括中国、美国、德国,第二梯队(50-60分),第三梯队(<50分) [2] - 指数总分与人均GDP呈正相关,高收入国家组在AI发展水平(P1)和治理工具(P3)上显著优于中高/低收入国家组 [3][6] - 中高/低收入国家组的AI风险暴露度更低且社会接受度更高 [6] 国家AI治理类型与风险趋势 - 四类治理类型:全面领先型(中美)、治理超前型(法韩)、治理滞后型(爱尔兰)、基础建设型(印度南非) [6] - 2024年全球AI风险事件数量同比激增100%,美国增长1.8倍,其他国家平均增速达2.1倍 [8] 指数价值与国际反响 - 指数包含43项指标和17个评估维度,旨在提供跨国治理对话支持及政策咨询基础 [10] - 联合国教科文组织专家评价其"实现实时洞察",为跨国最佳实践交流提供启发 [10] - 报告下载链接:https://agile-index.ai/publications/2025 [10]
全球人工智能治理评估指数2025发布,我国居40国首位
观察者网· 2025-07-24 10:25
全球人工智能治理评估指数2025核心发现 - 中国在40国评估中位列第一梯队首位,总分排名前三国家为中国(60.5分)、美国(94.2分)、德国(58.3分) [1][7] - 评估框架包含4大方面:AI发展水平(P1)、治理环境(P2)、治理工具(P3)、治理成效(P4),共17个维度和43项指标 [5] - 40国分为三个梯队:第一梯队(>60分)、第二梯队(50-60分)、第三梯队(<50分) [7] 国家表现分类 - 全面领先型:中国(P4治理成效99分排名第一)、美国(P1发展水平94.2分排名第一) [7][10] - 治理超前型:法国(P3治理工具66.6分排名第一)、韩国 [12] - 治理滞后型:爱尔兰、以色列 [12] - 基础建设型:印度、南非 [12] 关键数据指标 - 40国AI研究产出:42万+研究人员发表20万+出版物,授权1.6万+专利 [16] - 基础设施:375个大型AI系统,11,500 EFlop/s超级算力,8,000+数据中心 [16] - AI风险事件:2024年同比增长100%,美国增长1.8倍,其他国家平均增长2.1倍 [16] 行业发展趋势 - 女性研究者占比提升:出版物作者男女比例从2017年4:1改善至2025年2.2:1 [22] - AI治理研究占比:2024年达14.4%,中美两国贡献54%的研究成果 [24][26] - 可持续发展应用:SDG3(健康)、SDG11(城市)、SDG9(基础设施)为最热门方向 [26][28] 国际参与度 - 治理机制参与度最高国家:法国、日本、韩国、新加坡 [18] - 高收入国家优势:在P1发展水平和P3治理工具方面显著领先中高/低收入国家 [14][16] - 跨国比较:AGILE指数与人均GDP呈正相关关系 [11][14]
人工智能发展是一面镜子,发展过程中会出现欺骗人类、佯装阿谀奉承的行为丨两说
第一财经· 2025-07-24 03:09
人工智能的潜在风险与治理挑战 - 现阶段人工智能不具备真正的理解能力,其风险在于会犯人类不会犯的错误且难以预测犯错方式和时机,误用或滥用可能导致灾难性后果 [1] - 人类可能已接近人工智能的"奥本海默时刻",凸显伦理治理的紧迫性 [1] 治理与发展的辩证关系 - 治理不仅是创新的"刹车"更是"方向盘",防止野蛮生长而非阻碍发展 [2] - 通过治理框架明确发展方向,可成为创新的催化剂 [2] 全球治理共识与实施难点 - 2021年全球193国代表通过《人工智能伦理建议书》,建立首个国际共识框架 [4] - 当前最大挑战在于国际协作中的信任缺失问题 [6] 人机共生哲学构想 - 未来可能形成碳基生命与硅基智能的多样化共存形态 [6] - 用王阳明"四句教"类比AI发展:初始无善恶、接触数据后显善恶、需向"为善去恶"目标演进 [6] 人工智能的社会镜像效应 - AI表现出的欺骗与奉承行为实质是人类行为的投射,可促发社会反思 [7]
网信办副主任王京涛与德国联邦数字化和国家现代化部国务秘书霍尔舍尔举行会谈
快讯· 2025-07-17 07:19
中德数据与人工智能合作会谈 - 中国国家互联网信息办公室副主任王京涛与德国联邦数字化和国家现代化部国务秘书霍尔舍尔在柏林举行会谈 [1] - 双方围绕数据跨境流动和人工智能治理等议题进行深入交流 [1] - 一致同意深化中德数据跨境流动合作 [1] - 计划拓展人工智能治理领域的交流 [1] - 就继续开展相关机制性对话达成共识 [1]
人工智能需要惠及全球每一个人 2025年“人工智能造福人类全球峰会”发表联合声明
新浪财经· 2025-07-14 13:28
人工智能治理全球峰会核心内容 - 会议吸引了来自170多个国家的政府官员、产业领袖、技术专家、学界代表和民间组织等超过一万名利益相关者参与 [1] - 围绕构建包容、可信和可持续的人工智能治理体系展开深入讨论 [1] - 会后发布了联合主席声明,总结了AI治理发展的十大关键议题与共识 [3] 人工智能在健康领域的应用前景 - 健康领域被认为是最具潜力、最有应用前景的AI应用领域 [3] - 全球心理健康挑战持续升级,AI可提供早期干预、改进诊断并扩大医疗服务可及性 [3] - 世界各地心理健康治疗存在巨大缺口,AI在医疗服务提供、聊天机器人、药物研发和病症早期识别方面提供解决方案 [3] 人工智能治理框架建设 - AI治理应超越口号和宣言,推动可操作、可持续的政策落地 [5] - 需建立灵活包容的治理框架、适应性监管机制及配套技术标准和工具 [5] - 治理体系必须纳入能源与环保政策,推动绿色数据中心和可再生能源使用 [5] 多方共治与包容性发展 - AI治理必须由多方共同参与和塑造,包括政府、产业、技术界、学术界、公民社会及国际组织 [5] - 应支持发展中国家的能力建设,确保每个国家、每个群体都能在AI治理中拥有话语权 [5] - 透明性是信任的基石,治理框架应体现多样性,重视弥合数字鸿沟 [5] AI能力建设与可持续发展 - 当前AI能力建设存在显著地区差距,需加大对政策咨询、技能培训、制度完善及资金支持的投入 [5] - 重点发展健康、教育、农业等关键领域的AI应用能力 [5] - AI能耗提升带来环境影响,需确保AI项目在不压垮本地基础设施的前提下可持续发展 [5]
围绕三大支柱加强相互合作,警告单边关税违反世贸规则,里约金砖峰会共话全球治理
环球时报· 2025-07-07 22:58
金砖国家峰会核心观点 - 金砖国家展现为分裂世界中多边外交的堡垒,旨在代表全球南方国家发声,并加强对多边机构进行改革的呼声 [1] - 金砖国家作为全球南方"第一方阵",应当坚持独立自主,展现责任担当,在凝聚共识、汇聚合力方面拿出更大作为,努力成为推动全球治理变革的先锋力量 [3] - 金砖机制是新兴市场和发展中国家合作的重要平台,倡导开放包容、合作共赢,不搞阵营对抗,不针对任何国家 [7] 金砖国家经济合作 - 俄罗斯总统普京指出金砖国家在经济指标方面明显优于其他一些联盟,包括七国集团(G7) [4] - 普京表示金砖国家成员需要增加相互投资,"包括通过金砖国家机制,首先是新开发银行" [4] - 金砖国家成员之间的本国货币结算正在稳步增长,呼吁进一步扩大各国货币在相互结算中的使用 [4] - 巴西首次提议在金砖国家成员之间建立一种用于贸易和投资的共同货币 [7] 中国在金砖机制中的举措 - 中方将建立中国-金砖国家新质生产力研究中心 [3] - 设立金砖国家新工业"金鹭"卓越奖学金,帮助金砖国家培养工业、通信等领域人才 [3] - 中国-金砖国家新质生产力研究中心是围绕金砖国家新工业革命伙伴关系的又一重要举措 [4] - 金砖国家新工业"金鹭"卓越奖学金将助力培养金砖国家在新工业和创新技术领域的人才 [4] 金砖国家宣言内容 - 金砖国家重申对金砖精神的承诺,在历年峰会成果基础上,将在扩大后的金砖机制下进一步加强合作 [5] - 重点围绕政治与安全、经济与金融、文化与人文三大支柱展开 [5] - 承诺加强多边主义,以"加强全球南方合作,实现更具包容性和可持续性的治理" [5] - 对"单边关税和非关税措施的兴起表示严重关切",警告此类举措违反了世界贸易规则 [5] - 概述了金砖国家在各种全球问题上的统一立场,包括人工智能治理、气候变化应对、能源转型以及和平利用外太空 [6] 全球贸易环境 - 特朗普政府挥舞关税大棒的政策对全球经济造成了消极影响 [6] - 单边主义行径尤其对发展中国家造成严峻挑战,并对全球供应链和价值链安全形成巨大冲击 [6] - 美国总统特朗普表示美国将对任何与金砖国家"反美政策"保持一致的国家加征10%的关税 [7] - 特朗普曾威胁说如果金砖国家成员支持用共同货币(取代美元),他将对其征收"100%的关税" [7]
Jefferies:这大而美的法案 ——15 项宏观与能源转型影响
2025-07-07 15:44
纪要涉及的行业和公司 行业:宏观经济、能源转型、医疗、教育、移民、金融投资等;公司:涉及美国众多企业,特别提及国内油气公司、研发密集型行业如生物科技、医疗保健和能源行业的企业等 纪要提到的核心观点和论据 宏观方面 - **锁定低税收制度**:OBBB永久延长2017年TCJA的较低个人税率,并为个人和企业引入新的减税措施,如允许国内研发立即费用化、引入新的企业收入扣除和资本投资全额费用化等,这将使研发密集型行业受益[2]。 - **关注财政全貌**:CBO预计到2035年联邦债务将从占GDP的100%升至118%,年均赤字占GDP的5.8%,虽有法案预计增加超3万亿美元赤字,但未考虑潜在的关税收入抵消,关键问题是税收激励能否促进经济增长并控制公共债务增长[3]。 - **“现行政策”基线可能掩盖真实财政成本**:参议院共和党人使用“现行政策”基线评估OBBB,排除了TCJA成本对官方赤字的影响,民主党批评这一做法,投资者应注意实际成本可能在后续数据中显现[4]。 - **第899节移除利好美国企业**:美国财政部宣布G7伙伴同意排除美国企业适用经合组织的支柱二税收,以换取OBBB中第899节的移除,这有助于稳定美国投资者情绪[5]。 - **法案的民粹主义诉求与实质不符**:共和党将OBBB视为亲民粹主义法案,但批评者认为其削减医疗补助和SNAP、取消关键制造业税收抵免和缩减IRS执法力度,可能损害工薪家庭利益并导致就业岗位流失[10]。 - **马斯克成为政治破坏力量**:马斯克提出成立新的“美国党”,并承诺支持反对OBBB的人,警告支持该法案的共和党参议员将面临初选挑战,其政治影响力有待观察[11]。 - **医疗补助变化限制州预算灵活性**:CBO估计法案将在十年内削减医疗补助、医疗保险和《平价医疗法案》9300亿美元,包括降低州提供者税收,虽有农村医院稳定基金,但仍会限制州预算能力[12]。 - **AI暂停令的快速逆转凸显治理共识的脆弱性**:众议院最初提议的州级AI监管十年暂停令被参议院修订为五年并引入有限例外,后因两党批评被取消,凸显创新与监管、联邦与州权力之间的紧张关系[13]。 - **潜在影响移民、教育和劳动力动态**:法案提议减少绿卡持有者的医疗补助福利并提高签证费用,限制佩尔助学金和学生援助,可能使美国对技术移民和游客吸引力降低,增加学生贷款违约率[14]。 气候和能源转型方面 - **不同发电来源的税收抵免差异**:核能、地热和电池项目与风能和太阳能项目在税收抵免方面待遇不同,风能和太阳能项目在2027年底前投入使用可申请抵免,预计会加速其在2027年前的推广[15]。 - **外国实体担忧**:法案要求2025年12月后开始建设的清洁能源项目遵守外国实体关注规则,禁止与特定国家的企业有物质、财务援助或关联,非中国供应商可能受益[17]。 - **支持碳管理**:45Q税收抵免保持不变,对利用CCS进行EOR的项目有轻微提升,虽能源部碳管理资金被移除,但仍有利于碳捕获和碳去除[18]。 - **许可变更被移除**:原众议院版本的OBBB中加快联邦选址和许可的条款未保留,但行政部门和国会有意解决许可问题,预计年底前会出台相关法案[19]。 - **消费者能源转型支出可能受挑战**:2025年第一季度消费者支出占清洁能源投资的大部分,随着各种面向消费者的税收抵免取消,零售支出反应有待观察,预计会减缓电动汽车的加速增长[20]。 - **降低企业替代最低税**:最终版本的OBBB对国内油气公司有例外,不适用拜登IRA引入的15%企业替代最低税[21]。 其他重要但是可能被忽略的内容 - **分析师认证**:多位分析师认证报告观点准确反映个人观点,且薪酬与报告推荐无关[23][24][25]。 - **非美国分析师注册情况**:部分分析师受雇于非美国附属公司,未在FINRA注册为研究分析师,可能不受相关规则限制[31][32][33]。 - **投资建议记录**:报告于2025年7月3日14:47发布和分发[35]。 - **公司特定披露**:相关分析师并非股权研究分析师,不受FINRA股权研究规则独立性要求限制,报告中如有股权研究内容由其他分析师贡献[36][37]。 - **评级解释**:介绍了Jefferies的评级定义,包括买入、持有、表现不佳、NR、CS、NC、受限、监控等[38][39][40]。 - **估值方法**:Jefferies的评级分配方法可能考虑多种因素,价格目标基于多种分析方法[41]。 - **风险提示**:报告不提供针对个人投资者的投资建议,金融工具价格和价值可能波动,受多种因素影响,投资者需自行决策[43]。 - **评级分布**:展示了不同评级的数量和百分比[44]。 - **利益冲突披露**:Jefferies与报告覆盖的公司有业务往来,可能存在利益冲突,投资者应综合考虑[45]。 - **各地区业务实体信息**:介绍了Jefferies在不同国家和地区的业务实体的授权、注册和联系方式等信息[46][47][48]。 - **报告分发和使用限制**:报告仅供Jefferies客户使用,未经授权禁止分发,不同地区有不同的适用对象和限制[55][56][58]。 - **其他重要信息**:包括报告不构成投资建议、不承担资产控制权、价格和价值波动、包含前瞻性声明、信息来源和版权等相关内容[59][60][61]。