Microsoft mở nguồn công cụ biến video quay màn hình thành kịch bản tự động cho AI

Bạn chỉ cần tự quay màn hình khi làm việc một lần, AI sẽ biến nó thành kịch bản tự động hóa cho AI agent chạy mãi mãi.

Microsoft vừa mở nguồn Skill Recorder, một ứng dụng máy tính giúp biến các thao tác thủ công thành quy trình tự động cho AI. Tool này chạy trực tiếp trên macOS và Windows 11. Làm xong việc, ứng dụng sẽ dùng GitHub Copilot CLI để xếp lại các cú click, chuyển cửa sổ và lời thuyết minh của bạn thành quy trình từng bước rõ ràng. Sau đó, nó tạo ra một file SKILL.md tái sử dụng được hoặc một kịch bản chạy theo lịch.

Vì sao việc này quan trọng: Các công cụ quay macro thông thường sẽ hỏng ngay khi giao diện thay đổi. Skill Recorder thì khác: nó hiểu mục đích thao tác của bạn, ưu tiên dùng các công cụ native như gh CLI hoặc gọi web fetch thay vì phát lại tọa độ chuột. Làm mẫu một việc chán ngắt đúng một lần là AI agent của bạn nhớ luôn cách làm.

Cần biết: Việc quay video và chuyển giọng nói thành văn bản đều diễn ra ngay trên máy bạn bằng mô hình Whisper local. Dữ liệu timeline và ảnh chụp màn hình chỉ gửi lên cloud của GitHub khi bạn bấm Analyze. Vì dữ liệu có rời khỏi máy, nhớ giấu mật khẩu và API key khỏi màn hình khi quay.

Dự án đã kiếm được 766 star trong tuần này — nhu cầu tự động hóa công việc bằng cách quay màn hình rõ ràng là rất cao.