昨晚,Claude 发布了全新的 SONNET 3.5,Haiku 版本预计在月底推出。其中有两大亮点值得关注:AI 操作电脑和编程能力的显著提升。
编程能力的提升将会有单独的文章进行详细介绍,感兴趣的朋友可以持续关注。今天,我们将专注于如何在自己的电脑上运行 Claude 3.5 的 AI 操作功能,带您体验这一新技术。
准备工作
在开始之前,请确保您具备以下条件:
- 一台电脑(我使用的是 Windows,理论上任何能运行 Docker 的系统都可以)
- Claude 的官方 Key(目前大多数中转服务不支持,我们正在加紧对接)
Docker 安装
首先,您需要正常安装 Docker。安装完成后,打开 Docker 并登录,确保服务成功启动。

拉取镜像
Claude 官方提供了一个 Demo(Python),您可以直接将其拉取到本地运行。
您可以在 GitHub 上找到相关代码:anthropic-quickstarts/computer-use-demo。
将代码拉取到本地后,在当前 Python 环境下安装依赖(建议使用 Python 3.11 及以上版本):
bash
pip install -r dev-requirement.txt
接下来,根据官方文档设置环境变量并启动 Docker。

如果您对环境变量不太熟悉,可以直接使用以下我修改过的启动命令(Key 可以在启动后再设置):
bash
docker run -v ${env:USERPROFILE}.anthropic:/home/computeruse/.anthropic -p 5900:5900 -p 8501:8501 -p 6080:6080 -p 8080:8080 -it ghcr.io/anthropics/anthropic-quickstarts:computer-use-demo-latest
启动应用
在镜像拉取完成后,您可以访问网页:http://localhost:8080 来启动应用。

在侧边栏中输入您的 Key,即可开始使用。
体验
帮我写一个贪吃蛇游戏并运行
- Claude 直接为我安装了 Pygame 库。
- 然后编写代码并运行,整个过程大约只需 1 分钟。

试试他能不能帮我玩这个游戏
经过测试,Claude 的表现不太理想,因为它是通过截图获取当前信息的,虽然可以操作,但存在时延。

帮我看看京东最近的大新闻
Claude 能够正确打开浏览器并使用 Google 搜索。

不过,搜索的关键词有时会丢失。
帮我把新闻整理到 Excel 里
Claude 在创建标题行时未能正确分隔,导致输入新闻时出现困难。

帮我去小红书找一下北非蛋的做法
在尝试时出现了异常报错,未能成功获取信息。

结论
json
[“key”,”type”,”mouse_move”,”left_click”,”left_click_drag”,”right_click”,”middle_click”,”double_click”,”screenshot”,”cursor_position”]
因此,一个任务所需的步骤较多,交互频繁,导致整体速度较慢。