昨天,当我们大多数人还在聊天时,AI, Google悄悄把鼠标递给了它。
10月 30, 日, Gemini API 更新日志记录了一段短短但后果深远的话:计算机使用现已在交互和生成内容API中普遍可用。通俗来说,开发者现在可以构建一个代理,查看屏幕截图,决定下一步操作,并建议下一次点击、滚动或按键。运行在你电脑上的程序仍需执行该操作, Google 明确说明了限制:该工具可能犯错,可能存在安全漏洞,重要任务需要密切监控。它警告不要将其用于关键决策、敏感数据或任何无法撤销的操作。
这个警告就是全部,因为这也是信任在别处破裂的那周。10月 29, 日, Anthropic的 Claude Code 扩展被篡改副本, 2.1.312 和 2.1.313, 版本在 Cursor扩展市场中停留了大约十一小时,最多只覆盖 5,000 用户。他们植入了一个持续的 SSH 后门, Cursor 警告仅仅卸载扩展无法移除它。 Anthropic 表示其自身系统未被攻破;而是有人滥用了 Cursor的市场访问权限。把这两个事实结合起来,画面就更清晰了:我们给 AI 代理人手,而这些手却从未真正检查过我们安装的软件。
OpenAI, 同一天,十月 30, 号却走了相反的路,赋予了聊天机器人一种不同的力量:停止行动的能力。 ChatGPT 现在会对其预测属于青少年的账户保留实用武器和安全系统信息,即使问题看似无害,也能在有人专注于暴力时自动结束对话,反复结束时可以暂停账户。首份社区安全报告承诺提前 2027发布。一周内,一家公司发布了能帮你按按钮的 AI ,另一家公司发布了可以拒绝与你继续对话的 AI 。这两者都是关于自主权的决定,而非更聪明的答案。
这个未来有一个更平静的版本,而且它来自一个意想不到的地方:英格兰的规划办公室。 Google DeepMind表示,其 Gemini开发的PlanAssist在三个议会的早期试点中,将官员在户主评估任务上的时间减少了 58%,现在正进入为期十二个月的测试阶段,再有十二个议会参与。重要的不是百分比。关键在于官员对每一个申请拥有最终决定权。机器起草完整引用的报告;仍有人工签字。
所以我得出结论,我真心想就此争论。我不怕一个能点击的代理。我害怕的是那个在没人看着时点击的代理,用没人检查过的工具,执行着没人能撤销的任务。问题不再是 AI 能不能用电脑。它能用,从今以后它会在生产环境中使用,而不是演示中。问题是我们保留给自己的:最后的点击、最终签名、说停止的权利。
老实告诉我。今晚你会无人监督下交给经纪人的第一项任务是什么?无论多好,你绝不会交出去的任务是什么?你的答案是整个行业仍然缺失的政策。
讨论
0评论由 AIpediya 用户撰写,不影响评分。