SenseTime ra mắt mô hình đa phương thức mã nguồn mở SenseNova U1.5 Lite 8B

Theo tin từ IT ngày 21 tháng 8, SenseTime hôm nay đã công bố mã nguồn mở cho mô hình đa phương thức hợp nhất, nguyên bản và gọn nhẹ mang tên SenseNova U1.5 Lite.

Theo giới thiệu, SenseNova U1.5 Lite hỗ trợ nguyên bản độ dài ngữ cảnh từ 3-4k, có khả năng xử lý đồng thời nhiều ràng buộc như chủ thể, số lượng, quan hệ không gian, văn bản, bố cục, phong cách, v.v., từ đó nâng cao tính ổn định khi thực hiện các tác vụ thị giác phức tạp.

Ngoài ra, SenseNova U1.5 Lite còn có các đặc điểm sau:

Tạo hình ảnh chất lượng cao hơn: Cải thiện bố cục tổng thể, màu sắc, chất liệu, ánh sáng, độ chân thực và các chi tiết cục bộ, giảm thiểu tình trạng "đúng cục bộ nhưng độ hoàn thiện tổng thể chưa cao".

Chỉnh sửa hình ảnh nguyên bản đáng tin cậy hơn: Tăng cường khả năng giữ nguyên danh tính chủ thể, cấu trúc không gian, quan hệ bố cục và các khu vực không chỉnh sửa, đồng thời nâng cao năng lực sửa đổi cục bộ, thay thế phần tử, tinh chỉnh văn bản và chỉnh sửa dựa trên nhiều hình ảnh tham chiếu.

Văn bản và bố cục phức tạp tốt hơn: Tăng cường khả năng xử lý văn bản tiếng Trung và tiếng Anh, áp phích, đồ họa thông tin, nhận diện thương hiệu và dàn trang đa văn bản, tiến xa hơn từ việc "tạo nội dung" sang "tổ chức biểu đạt thị giác hoàn chỉnh".

Kiểm soát thị giác tinh tế hơn: Hỗ trợ Bounding Box, Visual Marker cũng như các phương thức tham chiếu đơn ảnh hoặc đa ảnh, giúp chỉnh sửa chính xác hơn cho các khu vực và đối tượng được chỉ định.

Xuất hình ảnh độ phân giải cao 4K nguyên bản: Đảm bảo sự cân bằng giữa bố cục tổng thể với kết cấu cực kỳ tinh xảo, văn bản nhỏ và khúc xạ ánh sáng trong quá trình tạo hình ảnh độ phân giải cao.

Phía chính thức cho biết, là một mô hình gọn nhẹ với 8 tỷ tham số, SenseNova U1.5 Lite vượt trội hơn các mô hình cùng quy mô về khả năng tuân thủ chỉ dẫn và duy trì chỉnh sửa hình ảnh, đồng thời đạt được mức độ hoàn thiện về kết xuất văn bản và bố cục phức tạp sánh ngang với các mô hình thương mại quy mô lớn.

IT đính kèm các liên kết mã nguồn mở:

GitHub: https://github.com/OpenSenseNova/SenseNova-U1

Hugging Face: https://huggingface.co/collections/sensenova/sensenova-u15

Cộng đồng ModelScope: https://modelscope.cn/models/SenseNova/SenseNova-U1.5-8B-MoT

Tuyên bố quảng cáo: Các liên kết chuyển hướng bên ngoài có trong bài viết (bao gồm nhưng không giới hạn ở siêu liên kết, mã QR, mật khẩu, v.v.) được sử dụng để truyền tải thêm thông tin, giúp tiết kiệm thời gian lựa chọn, kết quả chỉ mang tính chất tham khảo. Các bài viết của IT có chứa liên kết ngoài đều bao gồm tuyên bố này.