计算机使用Linux：本地Linux桌面的AI控制
Computer Use Linux by Agent Sh 是一个用 Rust 构建的 MCP 服务器工具，旨在为 AI 代理提供对本地 Linux 桌面环境的控制。它通过读取可访问性树、捕获屏幕截图以及在各种桌面环境中驱动输入来操作。该工具专注于 Wayland，并支持 X11，使 AI 客户端能够以语义方式与桌面交互，为 AI 助手提供了新的自动化和交互水平。它集成到多个 AI 编码助手中，成为高级 Linux 桌面控制的关键组件。
计算机使用 Linux 连接到什么？
计算机使用 Linux 直接连接到真实的 Linux 桌面环境。它与可访问性树交互，截取屏幕截图，并在流行的桌面环境中驱动用户输入，如 GNOME、KDE/KWin、Hyprland、i3 和 COSMIC。该工具优先考虑 Wayland 显示服务器，提供对 X11 的最佳努力支持。它作为 MCP 服务器，专门用于本地 Linux 桌面控制，允许与操作系统的图形界面进行深度交互。
核心功能和工具
计算机使用 Linux 暴露了几个可调用的桌面交互工具。这些包括 doctor，提供单次 JSON 准备报告，以及 setup_accessibility，旨在启用 GNOME 的工具包可访问性设置。另一个工具是 setup_window_targeting，它安装并启用捆绑的 GNOME Shell 扩展。此外，它还提供工具，如 click、perform_action 和 set_value，都能够接受角色、名称、文本或状态等语义选择器，以实现精确交互。
适合谁？
计算机使用 Linux 旨在为 AI 编码助手和 MCP 主机的开发者和用户提供服务。它的能力使 AI 代理能够完全控制本地 Linux 桌面，执行诸如读取可访问性树、列出并聚焦窗口、截取屏幕截图、点击、拖动、滚动、输入和调用语义可访问性操作等动作。该工具使 AI 代理能够像人类用户一样与桌面进行交互。如果您不在 Linux 桌面上使用 AI 编码助手或 MCP 主机，请跳过此部分。
如何开始
访问计算机使用 Linux 不需要直接的工具凭据，因为其设置是通过将二进制文件注册到 MCP 主机来处理的。其传输协议是 stdio，允许与兼容的 AI 客户端连接，如 Codex Desktop 的 Linux 版本、Claude Desktop、Hermes Agent、Claude Code、OpenCode、Cursor 和 Kiro。
用例
- 使 AI 代理能够完全控制本地 Linux 桌面，直接在图形环境中执行操作。
- 允许 AI 代理读取可访问性树、列出窗口，并专注于特定应用程序以进行有针对性的交互。
- 促进 AI 代理截取屏幕截图、点击元素、拖动项目、滚动页面、输入文本，并调用语义可访问性操作以完成复杂任务。
计算机使用Linux使AI代理能够原生控制Linux桌面，基于Rust构建，并支持各种Wayland和X11环境。它提供了特定的工具用于设置和交互，使其对开发人员和AI编码助手的用户非常有价值。它执行语义桌面操作的能力为高级自动化打开了可能性。尝试使用doctor工具检查您的Linux桌面设置的准备情况报告。
