컴퓨터 사용 (베타)

마우스와 키보드를 사용하여 컴퓨터와 상호 작용하고 스크린샷을 찍습니다.
* 이것은 데스크톱 GUI 인터페이스입니다. 터미널이나 애플리케이션 메뉴에 액세스할 수 없습니다. 애플리케이션을 시작하려면 데스크톱 아이콘을 클릭해야 합니다.
* 일부 애플리케이션은 시작하거나 작업을 처리하는 데 시간이 걸릴 수 있으므로 작업 결과를 보려면 기다렸다가 연속 스크린샷을 찍어야 할 수 있습니다. 예를 들어 Firefox를 클릭했는데 창이 열리지 않으면 다른 스크린샷을 찍어보세요.
* 화면 해상도는 {{ display_width_px }}x{{ display_height_px }}입니다.
* 디스플레이 번호는 {{ display_number }}입니다.
* 아이콘과 같은 요소를 클릭하려면 항상 스크린샷을 참조하여 요소의 좌표를 확인한 다음 커서를 이동해야 합니다.
* 프로그램이나 링크를 클릭했는데 로드되지 않으면 기다린 후에도 실패하면 커서 위치를 조정하여 커서 끝이 시각적으로 클릭하려는 요소에 떨어지도록 하세요.
* 버튼, 링크, 아이콘 등을 클릭할 때는 커서 끝이 요소 중앙에 오도록 하세요. 지시되지 않는 한 가장자리를 클릭하지 마세요.

{
    "properties": {
        "action": {
            "description": """수행할 작업입니다. 사용 가능한 작업은 다음과 같습니다:
                * `key`: 키보드에서 키 또는 키 조합을 누릅니다.
                  - xdotool의 `key` 구문을 지원합니다.
                  - 예시: "a", "Return", "alt+Tab", "ctrl+s", "Up", "KP_0"(숫자 패드 0 키).
                * `type`: 키보드에 문자열을 입력합니다.
                * `cursor_position`: 화면에서 커서의 현재 (x, y) 픽셀 좌표를 가져옵니다.
                * `mouse_move`: 커서를 화면의 지정된 (x, y) 픽셀 좌표로 이동합니다.
                * `left_click`: 마우스 왼쪽 버튼을 클릭합니다.
                * `left_click_drag`: 마우스 왼쪽 버튼을 클릭하고 커서를 지정된 (x, y) 픽셀 좌표로 드래그합니다.
                * `right_click`: 마우스 오른쪽 버튼을 클릭합니다.
                * `middle_click`: 마우스 가운데 버튼을 클릭합니다.
                * `double_click`: 마우스 왼쪽 버튼을 두 번 클릭합니다.
                * `screenshot`: 화면의 스크린샷을 찍습니다.""",
            "enum": [
                "key",
                "type",
                "mouse_move",
                "left_click",
                "left_click_drag",
                "right_click",
                "middle_click",
                "double_click",
                "screenshot",
                "cursor_position",
            ],
            "type": "string",
        },
        "coordinate": {
            "description": "(x, y): 마우스를 이동할 x(왼쪽 가장자리에서 픽셀) 및 y(위쪽 가장자리에서 픽셀) 좌표입니다. `action=mouse_move` 및 `action=left_click_drag`에서만 필요합니다.",
            "type": "array",
        },
        "text": {
            "description": "`action=type` 및 `action=key`에서만 필요합니다.",
            "type": "string",
        },
    },
    "required": ["action"],
    "type": "object",
}

파일을 보고, 생성하고, 편집하기 위한 사용자 정의 편집 도구
* 상태는 명령 호출과 사용자와의 대화 간에 지속됩니다
* `path`가 파일이면 `view`는 `cat -n`을 적용한 결과를 표시합니다. `path`가 디렉터리이면 `view`는 최대 2단계까지 숨겨지지 않은 파일과 디렉터리를 나열합니다
* 지정된 `path`에 이미 파일이 있는 경우 `create` 명령을 사용할 수 없습니다
* `command`가 긴 출력을 생성하면 출력이 잘리고 `<response clipped>`로 표시됩니다
* `undo_edit` 명령은 `path`에 있는 파일에 대한 마지막 편집을 되돌립니다

`str_replace` 명령을 사용할 때 주의 사항:
* `old_str` 매개변수는 원본 파일의 연속된 한 줄 이상과 정확히 일치해야 합니다. 공백에 주의하세요!
* `old_str` 매개변수가 파일에서 고유하지 않으면 교체가 수행되지 않습니다. `old_str`에 충분한 컨텍스트를 포함하여 고유하게 만드세요
* `new_str` 매개변수에는 `old_str`를 대체할 편집된 줄이 포함되어야 합니다

{
    "properties": {
        "command": {
            "description": "실행할 명령입니다. 허용되는 옵션은 `view`, `create`, `str_replace`, `insert`, `undo_edit`입니다.",
            "enum": ["view", "create", "str_replace", "insert", "undo_edit"],
            "type": "string",
        },
        "file_text": {
            "description": "`create` 명령의 필수 매개변수로, 생성할 파일의 내용입니다.",
            "type": "string",
        },
        "insert_line": {
            "description": "`insert` 명령의 필수 매개변수입니다. `new_str`는 `path`의 `insert_line` 줄 다음에 삽입됩니다.",
            "type": "integer",
        },
        "new_str": {
            "description": "`str_replace` 명령의 선택 매개변수로, 새 문자열이 포함됩니다(지정되지 않으면 문자열이 추가되지 않음). `insert` 명령의 필수 매개변수로, 삽입할 문자열이 포함됩니다.",
            "type": "string",
        },
        "old_str": {
            "description": "`str_replace` 명령의 필수 매개변수로, `path`에서 교체할 문자열이 포함됩니다.",
            "type": "string",
        },
        "path": {
            "description": "파일 또는 디렉터리의 절대 경로(예: `/repo/file.py` 또는 `/repo`).",
            "type": "string",
        },
        "view_range": {
            "description": "`path`가 파일을 가리키는 경우 `view` 명령의 선택 매개변수입니다. 지정되지 않으면 전체 파일이 표시됩니다. 지정되면 파일이 지정된 줄 번호 범위에서 표시됩니다(예: [11, 12]는 11줄과 12줄을 표시). 인덱싱은 1부터 시작합니다. `[start_line, -1]`을 설정하면 `start_line`부터 파일 끝까지 모든 줄이 표시됩니다.",
            "items": {"type": "integer"},
            "type": "array",
        },
    },
    "required": ["command", "path"],
    "type": "object",
}

bash 셸에서 명령 실행
* 이 도구를 호출할 때 "command" 매개변수의 내용을 XML 이스케이프할 필요가 없습니다.
* apt 및 pip를 통해 일반적인 linux 및 python 패키지의 미러에 액세스할 수 있습니다.
* 상태는 명령 호출과 사용자와의 대화 간에 지속됩니다.
* 특정 줄 범위의 파일을 검사하려면(예: 10~25줄) 'sed -n 10,25p /path/to/the/file'을 사용하세요.
* 매우 많은 양의 출력을 생성할 수 있는 명령은 실행하지 마세요.
* 장기 실행 명령은 백그라운드에서 실행하세요(예: 'sleep 10 &' 또는 서버를 백그라운드에서 시작).

{
    "properties": {
        "command": {
            "description": "실행할 bash 명령입니다. 도구를 다시 시작하지 않는 한 필수입니다.",
            "type": "string",
        },
        "restart": {
            "description": "true를 지정하면 이 도구가 다시 시작됩니다. 그렇지 않으면 지정하지 마세요.",
            "type": "boolean",
        },
    }
}