Institute of Foundation Models ra mắt dòng mô hình mã nguồn mở K2 Horizon
Tổng quan sự kiện
Toàn cảnh do AI tổng thuật
Institute of Foundation Models (IFM) đã ra mắt dòng mô hình mã nguồn mở K2 Horizon, bao gồm 6 mô hình nền tảng: 0.9B, 3.7B, 7B, 32B, 36B-A4B và 375B-A23B, tất cả đều được phát hành theo giấy phép Apache 2.0. Trong đó, các mô hình 0.9B, 3.7B và 7B được tuyên bố đạt trạng thái SOTA (tốt nhất hiện nay) trong phân khúc quy mô của chúng, còn mô hình 36B-A4B sử dụng kiến trúc chú ý thưa (sparse attention) mới có tên là MoVA.
Phía nhà phát triển khẳng định đây là đợt phát hành mô hình mã nguồn mở hoàn toàn lớn nhất trong lịch sử AI, khi công khai cả mã nguồn huấn luyện, dữ liệu và công thức thực hiện. Các tác giả đánh giá rằng việc công khai toàn bộ hồ sơ huấn luyện bên cạnh trọng số chính là tiêu chuẩn mà một đợt phát hành mã nguồn mở cần có.
Thông tin ra mắt đã được lan truyền trên nền tảng X và Hacker News, truy cập tại đường dẫn: https://ifm.ai/k2/.
Tổng thuật do AI tổng hợp từ toàn bộ bài đưa tin, cập nhật theo diễn biến · làm mới T6 · 04/09 · 12:41.
Diễn biến mới nhất
IFM công bố 6 mô hình mã nguồn mở K2 Horizon, trải dài từ 0.9B đến 375B và công khai toàn bộ vòng đời huấn luyện.
Dòng thời gian đưa tin
Đang hiện 3 bài · tất cả · mới trước
T6 · 04/09
IFM ra mắt 6 mô hình mã nguồn mở K2 Horizon, trải dài từ 0.9B đến 375B-A23B và công khai toàn bộ vòng đời huấn luyện
Hacker News Nổi bật (buzzing.cc bản dịch tiếng Trung)IFM công bố dòng mô hình K2 Horizon gồm 6 phiên bản: 375B-A23B, 36B-A4B, 32B, 7B, 3.7B và 0.9B, tất cả đều được mở theo giấy phép Apache 2.0. Trong đó, các bản 0.9B, 3.7B và 7B được tuyên bố đạt SOTA trong phân khúc, còn bản 36B-A4B sử dụng kiến trúc chú ý thưa MoVA mới.
T5 · 03/09
Institute of Foundation Models ra mắt K2 Horizon: Mở mã nguồn hoàn toàn cho 6 mô hình từ 0.9B đến 375B
X: Kim (@kimmonismus)Institute of Foundation Models ra mắt K2 Horizon, bao gồm 6 mô hình nền tảng từ 0.9B đến 375B, trong đó các bản 0.9B, 3.7B và 7B đã thiết lập SOTA trong phân khúc quy mô của mình. Phía nhà phát triển gọi đây là đợt phát hành mô hình mã nguồn mở hoàn toàn lớn nhất trong lịch sử AI, khi công khai mã nguồn huấn luyện, dữ liệu và công thức. Các tác giả cho rằng việc công khai toàn bộ hồ sơ huấn luyện bên cạnh trọng số chính là cách làm đúng đắn cho các mô hình mã nguồn mở. Đường dẫn: https://ifm.ai/k2/
Institute of Foundation Models ra mắt dòng mô hình mã nguồn mở K2 Horizon, bao gồm 6 kích thước từ 0.9B đến 375B
X: Testing Catalog (@testingcatalog)Institute of Foundation Models (IFM) vừa ra mắt dòng mô hình mã nguồn mở K2 Horizon, bao gồm sáu mô hình nền tảng với quy mô từ 0,9 tỷ đến 375 tỷ tham số, tất cả đều được phát hành theo giấy phép Apache 2.0.