電腦使用（測試版）

使用鼠標和鍵盤與電腦交互，並進行截圖。
* 這是一個桌面 GUI 界面。您沒有訪問終端或應用程序菜單的權限。您必須點擊桌面圖標來啟動應用程序。
* 某些應用程序可能需要時間來啟動或處理動作，因此您可能需要等待並連續截圖以查看動作的結果。例如，如果您點擊 Firefox 但窗口沒有打開，請嘗試再次截圖。
* 屏幕的分辨率是 {{ display_width_px }}x{{ display_height_px }}。
* 顯示器編號是 {{ display_number }}
* 當您打算移動光標以點擊圖標等元素時，應該查看截圖以確定元素的坐標，然後再移動光標。
* 如果您嘗試點擊程序或鏈接但即使等待後也未能加載，請嘗試調整光標位置，使光標尖端視覺上落在您想要點擊的元素上。
* 確保用光標尖端點擊按鈕、鏈接、圖標等的中心。除非被要求，否則不要點擊框的邊緣。

{
    "properties": {
        "action": {
            "description": "要執行的動作。可用的動作有：\n"
            "* `key`：在鍵盤上按下一個鍵或鍵組合。\n"
            "  - 支持 xdotool 的 `key` 語法。\n"
            '  - 示例："a"、"Return"、"alt+Tab"、"ctrl+s"、"Up"、"KP_0"（用於數字鍵盤 0 鍵）。\n'
            "* `hold_key`：按住一個或多個鍵指定的時間（以秒為單位）。支持與 `key` 相同的語法。\n"
            "* `type`：在鍵盤上輸入一串文本。\n"
            "* `cursor_position`：獲取光標在屏幕上的當前 (x, y) 像素坐標。\n"
            "* `mouse_move`：將光標移動到屏幕上的指定 (x, y) 像素坐標。\n"
            "* `left_mouse_down`：按下鼠標左鍵。\n"
            "* `left_mouse_up`：釋放鼠標左鍵。\n"
            "* `left_click`：在屏幕上的指定 (x, y) 像素坐標處點擊鼠標左鍵。您還可以使用 `text` 參數包含在點擊時要按住的鍵組合。\n"
            "* `left_click_drag`：從 `start_coordinate` 點擊並拖動光標到屏幕上的指定 (x, y) 像素坐標。\n"
            "* `right_click`：在屏幕上的指定 (x, y) 像素坐標處點擊鼠標右鍵。\n"
            "* `middle_click`：在屏幕上的指定 (x, y) 像素坐標處點擊鼠標中鍵。\n"
            "* `double_click`：在屏幕上的指定 (x, y) 像素坐標處雙擊鼠標左鍵。\n"
            "* `triple_click`：在屏幕上的指定 (x, y) 像素坐標處三擊鼠標左鍵。\n"
            "* `scroll`：在指定的 (x, y) 像素坐標處，按指定的滾輪點擊次數向指定方向滾動屏幕。不要使用 PageUp/PageDown 來滾動。\n"
            "* `wait`：等待指定的時間（以秒為單位）。\n"
            "* `screenshot`：對屏幕進行截圖。",
            "enum": [
                "key",
                "hold_key",
                "type",
                "cursor_position",
                "mouse_move",
                "left_mouse_down",
                "left_mouse_up",
                "left_click",
                "left_click_drag",
                "right_click",
                "middle_click",
                "double_click",
                "triple_click",
                "scroll",
                "wait",
                "screenshot",
            ],
            "type": "string",
        },
        "coordinate": {
            "description": "(x, y)：要移動鼠標到的 x（距左邊緣的像素數）和 y（距上邊緣的像素數）坐標。僅 `action=mouse_move` 和 `action=left_click_drag` 需要。",
            "type": "array",
        },
        "duration": {
            "description": "按住鍵的時間。僅 `action=hold_key` 和 `action=wait` 需要。",
            "type": "integer",
        },
        "scroll_amount": {
            "description": "要滾動的「點擊」次數。僅 `action=scroll` 需要。",
            "type": "integer",
        },
        "scroll_direction": {
            "description": "滾動屏幕的方向。僅 `action=scroll` 需要。",
            "enum": ["up", "down", "left", "right"],
            "type": "string",
        },
        "start_coordinate": {
            "description": "(x, y)：開始拖動的 x（距左邊緣的像素數）和 y（距上邊緣的像素數）坐標。僅 `action=left_click_drag` 需要。",
            "type": "array",
        },
        "text": {
            "description": "僅 `action=type`、`action=key` 和 `action=hold_key` 需要。也可以用於點擊或滾動動作，以在點擊或滾動時按住鍵。",
            "type": "string",
        },
    },
    "required": ["action"],
    "type": "object",
}

{
    "properties": {
        "action": {
            "description": """要執行的動作。可用的動作有：
                * `key`：在鍵盤上按下一個鍵或鍵組合。
                  - 支持 xdotool 的 `key` 語法。
                  - 示例："a"、"Return"、"alt+Tab"、"ctrl+s"、"Up"、"KP_0"（用於數字鍵盤 0 鍵）。
                * `type`：在鍵盤上輸入一串文本。
                * `cursor_position`：獲取光標在屏幕上的當前 (x, y) 像素坐標。
                * `mouse_move`：將光標移動到屏幕上的指定 (x, y) 像素坐標。
                * `left_click`：點擊鼠標左鍵。
                * `left_click_drag`：點擊並拖動光標到屏幕上的指定 (x, y) 像素坐標。
                * `right_click`：點擊鼠標右鍵。
                * `middle_click`：點擊鼠標中鍵。
                * `double_click`：雙擊鼠標左鍵。
                * `screenshot`：對屏幕進行截圖。""",
            "enum": [
                "key",
                "type",
                "mouse_move",
                "left_click",
                "left_click_drag",
                "right_click",
                "middle_click",
                "double_click",
                "screenshot",
                "cursor_position",
            ],
            "type": "string",
        },
        "coordinate": {
            "description": "(x, y)：要移動鼠標到的 x（距左邊緣的像素數）和 y（距上邊緣的像素數）坐標。僅 `action=mouse_move` 和 `action=left_click_drag` 需要。",
            "type": "array",
        },
        "text": {
            "description": "僅 `action=type` 和 `action=key` 需要。",
            "type": "string",
        },
    },
    "required": ["action"],
    "type": "object",
}

用於查看、創建和編輯文件的自定義編輯工具
* 狀態在命令調用和與用戶的討論中保持持久
* 如果 `path` 是文件，`view` 顯示應用 `cat -n` 的結果。如果 `path` 是目錄，`view` 列出最多 2 層深的非隱藏文件和目錄
* 如果指定的 `path` 已作為文件存在，則不能使用 `create` 命令
* 如果 `command` 生成長輸出，它將被截斷並標記為 `<response clipped>`
* `undo_edit` 命令將恢復對 `path` 處文件的最後一次編輯

使用 `str_replace` 命令的注意事項：
* `old_str` 參數應該與原始文件中的一行或多行連續行完全匹配。注意空格！
* 如果 `old_str` 參數在文件中不是唯一的，則不會執行替換。確保在 `old_str` 中包含足夠的上下文使其唯一
* `new_str` 參數應包含要替換 `old_str` 的編輯行

{
    "properties": {
        "command": {
            "description": "要運行的命令。允許的選項有：`view`、`create`、`str_replace`、`insert`、`undo_edit`。",
            "enum": ["view", "create", "str_replace", "insert", "undo_edit"],
            "type": "string",
        },
        "file_text": {
            "description": "`create` 命令的必需參數，包含要創建的文件的內容。",
            "type": "string",
        },
        "insert_line": {
            "description": "`insert` 命令的必需參數。`new_str` 將在 `path` 的第 `insert_line` 行之後插入。",
            "type": "integer",
        },
        "new_str": {
            "description": "`str_replace` 命令的可選參數，包含新字符串（如果未給出，則不會添加字符串）。`insert` 命令的必需參數，包含要插入的字符串。",
            "type": "string",
        },
        "old_str": {
            "description": "`str_replace` 命令的必需參數，包含要替換的 `path` 中的字符串。",
            "type": "string",
        },
        "path": {
            "description": "文件或目錄的絕對路徑，例如 `/repo/file.py` 或 `/repo`。",
            "type": "string",
        },
        "view_range": {
            "description": "當 `path` 指向文件時，`view` 命令的可選參數。如果未給出，則顯示完整文件。如果提供，則將在指定的行號範圍內顯示文件，例如 [11, 12] 將顯示第 11 和 12 行。從 1 開始索引。設置 `[start_line, -1]` 顯示從 `start_line` 到文件末尾的所有行。",
            "items": {"type": "integer"},
            "type": "array",
        },
    },
    "required": ["command", "path"],
    "type": "object",
}

在 bash shell 中運行命令
* 調用此工具時，"command" 參數的內容不需要進行 XML 轉義。
* 您可以通過 apt 和 pip 訪問常見的 linux 和 python 包的鏡像。
* 狀態在命令調用和與用戶的討論中保持持久。
* 要檢查文件的特定行範圍，例如第 10-25 行，請嘗試 'sed -n 10,25p /path/to/the/file'。
* 請避免可能產生大量輸出的命令。
* 請在後台運行長期運行的命令，例如 'sleep 10 &' 或在後台啟動服務器。

{
    "properties": {
        "command": {
            "description": "要運行的 bash 命令。除非工具正在重新啟動，否則為必需。",
            "type": "string",
        },
        "restart": {
            "description": "指定 true 將重新啟動此工具。否則，請不要指定此項。",
            "type": "boolean",
        },
    }
}