- Anthropic đã giới thiệu khả năng AI (Claude) tương tác trực tiếp với giao diện máy tính, cho phép tự động hóa các tác vụ phức tạp.
- AI có thể điều hướng qua nhiều ứng dụng khác nhau như bảng tính và hệ thống CRM, trích xuất thông tin cần thiết và điền biểu mẫu.
- Tính năng này giúp tự động hóa các tác vụ lặp đi lặp lại mà không cần con người can thiệp, hiện đã có sẵn qua API và dự kiến sẽ được cải thiện đáng kể.
Claude | Computer use for automating operations
- Anthropic's AI, Claude, possesses the capability to interact with computer interfaces, mimicking human actions.
- The AI can perform multi-step workflows, navigating between different applications like spreadsheets and CRM systems.
- Specific actions demonstrated include taking screenshots, searching for information, scrolling through pages, and extracting relevant data.
- Claude can autonomously fill out and submit forms, such as vendor request forms, using the data it collects.
- This technology aims to automate many repetitive administrative tasks, reducing manual effort.
- The feature is currently available for use through an Application Programming Interface (API).
- Anthropic anticipates significant improvements and enhancements to this AI interaction capability in the coming months.
- Trí tuệ nhân tạo — Artificial Intelligence (AI)
- máy tính — computer
- demo — demonstration
- biểu mẫu yêu cầu nhà cung cấp — vendor request form
- bảng tính — spreadsheet
- CRM — Customer Relationship Management
- ảnh màn hình — screenshot
- tác vụ — task
- API — Application Programming Interface
Giới thiệu chung
Xin chào, tôi là Sam, một trong những nhà nghiên cứu tại Anthropic. Khả năng Trí tuệ nhân tạo tương tác với máy tính là điều mà chúng tôi đã nhận thấy tầm quan trọng từ lâu. Hôm nay, chúng tôi sẽ trình bày một phiên bản rất sơ khai của khả năng này và đi sâu vào một ví dụ minh họa về những ứng dụng mà chúng tôi tin rằng sẽ hữu ích.
Tình huống demo
Hôm nay, chúng tôi sẽ thực hiện một buổi demo nhanh. Trong demo giả định này, một khách hàng, cụ thể là công ty Ant Equipment, đã yêu cầu chúng tôi điền vào một biểu mẫu yêu cầu nhà cung cấp (vendor request form). Dữ liệu cần thiết để điền vào biểu mẫu này nằm rải rác ở nhiều vị trí khác nhau trên máy tính của tôi.
Quy trình làm việc của Claude
Chúng tôi sẽ yêu cầu Claude xem bảng tính, kiểm tra xem thiết bị có trong đó không, và nếu không, chuyển sang CRM để tìm thêm thông tin. Sau khi có đủ dữ liệu, Claude sẽ điền biểu mẫu cho chúng tôi và hy vọng sẽ chuyển thông tin đó sang biểu mẫu nhà cung cấp. Điều đầu tiên sẽ xảy ra là Claude bắt đầu chụp ảnh màn hình trên màn hình của tôi và nhanh chóng nhận ra rằng công ty Ant Equipment không có trong bảng tính. Vì vậy, điều đầu tiên nó làm là chuyển sang một CRM và tìm kiếm công ty mà chúng tôi quan tâm. May mắn thay, chúng tôi tìm thấy một kết quả khớp, và Claude sau đó bắt đầu cuộn trang, tìm kiếm tất cả thông tin cần thiết để điền vào biểu mẫu này.
Tự động hóa và kết luận
Claude sau đó tự động bắt đầu chuyển thông tin mà tôi không cần phải làm gì cả, thực hiện các bước và điền tất cả thông tin cần thiết, rồi gửi biểu mẫu. Ví dụ này minh họa cho rất nhiều tác vụ lặp đi lặp lại mà mọi người phải thực hiện. Tính năng này hiện có sẵn thông qua API. Chúng tôi rất mong mọi người dùng thử và kỳ vọng mọi thứ sẽ được cải thiện đáng kể trong những tháng tới.
TL;DR
- Anthropic đã giới thiệu khả năng AI (Claude) tương tác trực tiếp với giao diện máy tính, cho phép tự động hóa các tác vụ phức tạp.
- AI có thể điều hướng qua nhiều ứng dụng khác nhau như bảng tính và hệ thống CRM, trích xuất thông tin cần thiết và điền biểu mẫu.
- Tính năng này giúp tự động hóa các tác vụ lặp đi lặp lại mà không cần con người can thiệp, hiện đã có sẵn qua API và dự kiến sẽ được cải thiện đáng kể.
Điểm chính
- Anthropic's AI, Claude, possesses the capability to interact with computer interfaces, mimicking human actions.
- The AI can perform multi-step workflows, navigating between different applications like spreadsheets and CRM systems.
- Specific actions demonstrated include taking screenshots, searching for information, scrolling through pages, and extracting relevant data.
- Claude can autonomously fill out and submit forms, such as vendor request forms, using the data it collects.
- This technology aims to automate many repetitive administrative tasks, reducing manual effort.
- The feature is currently available for use through an Application Programming Interface (API).
- Anthropic anticipates significant improvements and enhancements to this AI interaction capability in the coming months.
Từ vựng
- Trí tuệ nhân tạo — Artificial Intelligence (AI)
- máy tính — computer
- demo — demonstration
- biểu mẫu yêu cầu nhà cung cấp — vendor request form
- bảng tính — spreadsheet
- CRM — Customer Relationship Management
- ảnh màn hình — screenshot
- tác vụ — task
- API — Application Programming Interface
Nội dung chi tiết
Giới thiệu chung
Xin chào, tôi là Sam, một trong những nhà nghiên cứu tại Anthropic. Khả năng Trí tuệ nhân tạo tương tác với máy tính là điều mà chúng tôi đã nhận thấy tầm quan trọng từ lâu. Hôm nay, chúng tôi sẽ trình bày một phiên bản rất sơ khai của khả năng này và đi sâu vào một ví dụ minh họa về những ứng dụng mà chúng tôi tin rằng sẽ hữu ích.
Tình huống demo
Hôm nay, chúng tôi sẽ thực hiện một buổi demo nhanh. Trong demo giả định này, một khách hàng, cụ thể là công ty Ant Equipment, đã yêu cầu chúng tôi điền vào một biểu mẫu yêu cầu nhà cung cấp (vendor request form). Dữ liệu cần thiết để điền vào biểu mẫu này nằm rải rác ở nhiều vị trí khác nhau trên máy tính của tôi.
Quy trình làm việc của Claude
Chúng tôi sẽ yêu cầu Claude xem bảng tính, kiểm tra xem thiết bị có trong đó không, và nếu không, chuyển sang CRM để tìm thêm thông tin. Sau khi có đủ dữ liệu, Claude sẽ điền biểu mẫu cho chúng tôi và hy vọng sẽ chuyển thông tin đó sang biểu mẫu nhà cung cấp. Điều đầu tiên sẽ xảy ra là Claude bắt đầu chụp ảnh màn hình trên màn hình của tôi và nhanh chóng nhận ra rằng công ty Ant Equipment không có trong bảng tính. Vì vậy, điều đầu tiên nó làm là chuyển sang một CRM và tìm kiếm công ty mà chúng tôi quan tâm. May mắn thay, chúng tôi tìm thấy một kết quả khớp, và Claude sau đó bắt đầu cuộn trang, tìm kiếm tất cả thông tin cần thiết để điền vào biểu mẫu này.
Tự động hóa và kết luận
Claude sau đó tự động bắt đầu chuyển thông tin mà tôi không cần phải làm gì cả, thực hiện các bước và điền tất cả thông tin cần thiết, rồi gửi biểu mẫu. Ví dụ này minh họa cho rất nhiều tác vụ lặp đi lặp lại mà mọi người phải thực hiện. Tính năng này hiện có sẵn thông qua API. Chúng tôi rất mong mọi người dùng thử và kỳ vọng mọi thứ sẽ được cải thiện đáng kể trong những tháng tới.