Sử dụng máy tính là công nghệ cho phép AI vận hành máy tính một cách tự động giống như con người thông qua nhận dạng màn hình, thao tác chuột và bàn phím.
Đây là công nghệ cho phép AI trực tiếp vận hành GUI (giao diện đồ họa) và được công nhận rộng rãi khi Anthropic triển khai nó trong Claude 3.5 Sonnet vào tháng 10 năm 2024. Bằng cách thực hiện nhấp chuột, gõ, cuộn, v.v. trong khi liên tục chụp ảnh màn hình, có thể tự động hóa ngay cả các hệ thống cũ không có API với số lượng mã tối thiểu.
Ba cạm bẫy trong hoạt động thực tế vào năm 2026 sẽ thường xuyên xảy ra tại hiện trường: (1) thời gian chờ đọc màn hình sẽ tích lũy và tốc độ xử lý sẽ chậm hơn con người từ 5 đến 10 lần, (2) công việc sẽ dừng do cửa sổ bật lên bất ngờ hoặc xác thực đa yếu tố và (3) những thay đổi về bố cục giao diện người dùng sẽ gây ra lỗi ngay lập tức. Giá thị trường vào khoảng 0,5 đến 5 USD cho mỗi nhiệm vụ thông qua API và bạn cần cẩn thận về việc tăng chi phí đối với các nhiệm vụ dài hạn và tần suất cao. Chìa khóa để lựa chọn là tập trung vào các nhiệm vụ đáp ứng ba điều kiện sau: ``yêu cầu lặp lại, tiêu chuẩn và GUI.'' Trong các hệ thống tồn tại API, các cuộc gọi trực tiếp ổn định hơn và rẻ hơn, vì vậy câu trả lời đúng trong trường này là xem Sử dụng máy tính như "phương sách cuối cùng trong môi trường không có API".