Sakana AI tích hợp Nvidia Nemotron: Chứng minh sức mạnh của 'trí tuệ tập thể' trước các mô hình đơn lẻ

Startup Sakana AI có trụ sở tại Tokyo đang bổ sung các mô hình Nemotron mã nguồn mở của Nvidia vào hệ thống điều phối Fugu của mình. Quan hệ đối tác này nhằm chứng minh rằng các mô hình mở được phối hợp nhịp nhàng có thể bắt kịp các hệ thống tiên tiến nhất (frontier systems).

Sakana AI chỉ mới ra mắt Fugu gần đây. Bản thân hệ thống này là một mô hình ngôn ngữ, được huấn luyện để gọi các LLM khác từ một nhóm tác nhân (agent pool) bao gồm cả các thực thể của chính nó. Đằng sau một API duy nhất, Fugu chọn lọc một cách linh hoạt các mô hình để kết hợp cho một tác vụ cụ thể, phân bổ các tác vụ phụ và tổng hợp kết quả thành một phản hồi duy nhất.

Thiết lập này mang tính mô-đun. Theo Sakana AI, các mô hình mới có thể được thêm vào bất cứ lúc nào, vì vậy hệ thống không bị phụ thuộc vào thế mạnh hay sự cố của bất kỳ nhà cung cấp đơn lẻ nào. Trong các bài kiểm tra điểm chuẩn của riêng mình, công ty tuyên bố biến thể mạnh hơn là Fugu Ultra có hiệu suất ngang ngửa với Fable 5 và Mythos Preview của Anthropic. Tuy nhiên, các thử nghiệm độc lập ban đầu lại kém hào hứng hơn, với những chỉ trích xoay quanh tốc độ và chi phí.

Nemotron đóng vai trò chuyên biệt trong nhóm tác nhân của Fugu.

Dòng sản phẩm Nemotron của Nvidia bao gồm các mô hình và công cụ có trọng số mở. Sakana AI chỉ ra thế mạnh của chúng trong việc lập trình, gọi công cụ và tuân thủ hướng dẫn. Là các mô hình chuyên biệt, chúng được thiết kế để bổ sung cho các mô hình tiên tiến bên trong lớp điều phối của Fugu, chứ không phải thay thế chúng. Công ty cho biết các mô hình mở sẽ trở nên hữu ích hơn khi được điều phối trong các hệ thống tác nhân thay vì triển khai một cách riêng lẻ.

Nvidia đã và đang mở rộng dòng sản phẩm Nemotron rất nhanh. Với Nemotron 3 Ultra, một mô hình có khoảng 550 tỷ tham số và 55 tỷ tham số hoạt động, công ty đã phát hành thứ mà nền tảng điểm chuẩn Artificial Analysis gọi là mô hình mở của Mỹ có năng lực nhất tính đến nay. Nó xếp trên Gemma 4 31B, gpt-oss-120b và chính Nemotron 3 Super của Nvidia, nhưng vẫn xếp sau các mô hình của Trung Quốc như Kimi K2.6.

Nvidia cũng đã xuất xưởng Nemotron 3 Nano Omni, một mô hình đa phương thức xử lý văn bản, hình ảnh, video và âm thanh, nhắm đến các trường hợp sử dụng tác nhân như xử lý tài liệu và các tác nhân sử dụng máy tính. Nhìn chung, dòng Nemotron bao phủ một loạt các khả năng mà Fugu có thể tận dụng khi lựa chọn các tác nhân.

Sakana AI chưa đưa ra ngày cụ thể cho việc tích hợp, chỉ cho biết nó sẽ có trong một bản phát hành Fugu sắp tới. Sau đó, các đội ngũ của Sakana và Nemotron dự định sẽ giám sát và tối ưu hóa hiệu suất của Nemotron bên trong Fugu một cách liên tục. Nvidia sẽ cung cấp hướng dẫn kỹ thuật về các công thức và đánh giá Nemotron.

Điều phối là con đường mở rộng quy mô cho AI mở.

Sakana AI coi quan hệ đối tác này là một phần của xu hướng lớn hơn. Công ty lập luận rằng sự tiến bộ trong AI sẽ ngày càng phụ thuộc vào việc các mô hình được đánh giá, kết hợp và lồng ghép vào các quy trình làm việc thực tế tốt đến mức nào. Không một mô hình đơn lẻ nào có thể dẫn đầu trong mọi tác vụ, ngôn ngữ, phương thức và môi trường doanh nghiệp. Điều đó làm cho lớp điều phối trở thành một phần quan trọng trong giai đoạn tiếp theo của AI mở.

"AI có năng lực nhất sẽ không đến từ bất kỳ mô hình đơn lẻ nào, mà từ nhiều mô hình hoạt động phối hợp với nhau," Sakana AI viết trong thông báo của mình. Trong các đánh giá ban đầu, phương pháp dựa trên điều phối đã cho thấy hiệu suất mạnh mẽ bên cạnh các hệ thống tiên tiến hàng đầu. Tuy nhiên, thông báo không bao gồm bất kỳ con số điểm chuẩn mới nào cho sự kết hợp với Nemotron. Trên thực tế, thỏa thuận này có nghĩa là Sakana có quyền truy cập vào một nhóm mô hình chuyên biệt rộng lớn hơn, trong khi Nvidia thu thập dữ liệu về cách Nemotron hoạt động trong các quy trình làm việc đa tác nhân.

Sakana AI cũng định vị quan hệ đối tác này dưới góc độ địa chính trị. Startup này mô tả đóng góp của mình như một cách tiếp cận "trí tuệ tập thể" của Nhật Bản, được thiết kế để mang đến cho các nhà phát triển và công ty trên toàn thế giới quyền truy cập vào một hệ sinh thái mô hình mở đang phát triển. Khi lần đầu tiên công bố Fugu, công ty đã chỉ ra những rủi ro khi phụ thuộc vào một nhà cung cấp AI duy nhất và quảng bá các mô hình mở, có thể điều phối như một biện pháp phòng ngừa trước các hạn chế về quy định hoặc chính sách đối ngoại.

Startup này được thành lập tại Tokyo vào năm 2023 bởi các cựu nghiên cứu viên của Google là Llion Jones, đồng tác giả của bài báo Transformer "Attention Is All You Need", và David Ha. Ngay từ đầu, họ đã đặt trí tuệ tập thể làm trọng tâm trong chiến lược mở rộng quy mô thay vì các mô hình đơn lẻ ngày càng lớn hơn. Trước Fugu, Sakana AI đã thành lập RSI Lab, một nhóm nghiên cứu tập trung vào khả năng tự cải thiện đệ quy nhằm tự động hóa chính quá trình phát triển AI.

Tin tức AI không cường điệu – Được tuyển chọn bởi con người.

Đăng ký THE DECODER để đọc không quảng cáo, nhận bản tin AI hàng tuần, báo cáo độc quyền "AI Radar" về các công nghệ tiên phong sáu lần một năm, quyền truy cập toàn bộ kho lưu trữ và phần bình luận của chúng tôi.

Đăng ký ngay.