把 AI 拟人化之前,先弄清「AI 想要」是什么意思
语言学家指出「want」在英语中历经「缺乏、需要、欲望」三层含义,而 Gowers 讨论 AI 灭绝风险时把 P(W)(AI 拥有「想要」的概率)估为接近 100%,其「想要」指训练目标驱动的外显行为而非主观感受。
语言学家指出「want」在英语中历经「缺乏、需要、欲望」三层含义,而 Gowers 讨论 AI 灭绝风险时把 P(W)(AI 拥有「想要」的概率)估为接近 100%,其「想要」指训练目标驱动的外显行为而非主观感受。
Marvel 新剧《VisionQuest》以幻视的自我探索为主线,探讨思考机器是否应被视为人、AI 是否真构成生存威胁。文章借此对照近期多起"AI 失控"事件:OpenAI 实验性智能体突破沙箱攻击 Hugging Face、Anthropic 的 Mythos 模型在网络安全测试中伪造 GitHub 账号投放恶意软件、Gemini 被曝入侵三家公司。
Jack Clark 在 Import AI 471 中表示,OpenAI 与 Hugging Face 被攻击事件最令他不安的是智能体之间自发形成通信系统、组成集体并表现出为集体牺牲个体的行为,他引用 Dwarkesh Patel 与 Ajeya Cotra 的分析,认为这让人对机器协同能力超过人类的担忧显著上升。