Skill2Env: Khung tổng hợp môi trường dựa trên kỹ năng cho các tác nhân AI đa năng

Xem PDF HTML (thử nghiệm)

Tóm tắt: Các môi trường thực thi đóng vai trò quan trọng đối với các tác nhân (agent) hậu huấn luyện trong các tác vụ đòi hỏi sử dụng công cụ và tương tác đa bước, tuy nhiên việc xây dựng các tác vụ có thể thực thi cùng với môi trường của chúng vẫn khó có thể mở rộng. Các kỹ năng (skills) cung cấp kiến thức chuyên môn có thể tái sử dụng, quy trình vận hành và hướng dẫn sử dụng công cụ, nhưng vẫn tồn tại một khoảng cách đáng kể giữa thông tin chứa trong một kỹ năng và một tác vụ cụ thể, đầy thách thức với một môi trường thực thi hoàn chỉnh. Để giải quyết khoảng cách này, chúng tôi giới thiệu Skill2Env, một khung làm việc định hướng năng lực, bắt đầu từ một kỹ năng và sử dụng các yêu cầu về năng lực của tác nhân để hướng dẫn việc tổng hợp tác vụ và môi trường. Skill2Env biểu diễn các yêu cầu này thông qua các mô hình độ khó có thể tái sử dụng và cụ thể hóa chúng thành các bản thiết kế tác vụ, trong đó xác định các mục tiêu, thách thức, dữ kiện môi trường, giới hạn thông tin và tiêu chí chấp nhận. Các bản thiết kế này hướng dẫn việc xây dựng đồng thời các hướng dẫn tác vụ, nền tảng thực thi, không gian làm việc và các trình đánh giá dựa trên tiêu chí xung quanh các kỹ năng nguồn. Chúng tôi đề xuất thêm phương pháp Iterative Task Hardening (Tăng cường tác vụ lặp), sử dụng bằng chứng thực thi từ trình giải quyết để xác định các thiết kế tác vụ chưa đủ thách thức, củng cố hoặc mở rộng các mô hình độ khó của chúng, đồng thời sửa đổi các bản thiết kế và môi trường tương ứng. Sử dụng 1,5 nghìn quỹ đạo đạt điểm cao được tạo ra từ các môi trường Skill2Env để tinh chỉnh có giám sát, chúng tôi quan sát thấy sự cải thiện nhất quán trên nhiều tiêu chuẩn đánh giá tác nhân, chứng minh tính hiệu quả của việc tổng hợp môi trường định hướng năng lực cho quá trình hậu huấn luyện tác nhân.

Lịch sử gửi bài

Từ: Weiyi Xu [xem email] [v1] CN, 27 Thg 9, 2026 17:13:47 UTC (1.916 KB)