Claude 实现“像素级操控”:AI 助手正式进入“真实执行”时代

3.24 该能力被业界视为Claude体系迄今为止最激进的能力跃迁,标志着AI交互正式从动嘴迈入动手的新阶段

2026年3月24日,AI 公司 Anthropic 正式宣布对旗下产品 Claude Code 与 Claude Cowork 进行“史诗级升级”。此次更新的核心突破在于:AI 彻底冲破了传统工具调用的限制,实现了对电脑的直接像素级操控。该能力被业界视为 Claude 体系迄今为止最激进的能力跃迁,标志着 AI 交互正式从“动嘴”迈入“动手”的新阶段。


1346989871032

 


升级后的 Claude 不再依赖预设 API 或插件工具,而是能像真人一样“看懂”屏幕并执行操作:

  • 全流程控制:可自主打开文件、操控浏览器,并在没有预设接口的情况下,完成点击、滚动、拖拽等完整动作;

  • 低门槛交互:用户只需下达自然语言指令,无需配置开发环境,AI 即可接管任务。


1352133143

 


配合此次升级,Anthropic 同步上线 Dispatch 跨设备功能,打通手机与电脑的对话链路:

  • 用户可通过手机远程下达指令,由电脑后台静默执行;

  • 支持自动处理海量邮件、复杂数据汇总、远程代码调试等全场景任务。

 


随着 Claude 展现出强大能力,竞品 OpenClaw 也于同日发布架构更新,两条技术路线日益清晰:

  • Claude 路线:主打产品化与即插即用,侧重 macOS 系统下的易用性与安全,初期面向 Pro/Max 订阅用户开放;

  • OpenClaw 路线:坚持系统级 Agent 架构,通过 ClawHub 插件市场强化生态开放性,并深化与 VS Code、Obsidian 等开发工具的兼容。

 


尽管表现惊艳,当前能力仍处于研究预览阶段:

  • 实测显示,在处理极度复杂的任务时,AI 可能需要多次尝试;

  • 模拟操作的速度尚不及原生 API 集成;

  • 但当 AI 开始握住鼠标、接管桌面,人机协作的边界已被永久改变。