Meta ra mắt Hologram: Avatar AI siêu thực cho kính Ray-Ban và Quest vào mùa thu này

IT ngày 28 tháng 9 đưa tin, Meta thông báo bắt đầu từ mùa thu năm nay sẽ lần lượt ra mắt tính năng hình đại diện ảo hoàn toàn mới mang tên "Hologram" cho kính thông minh Ray-Ban Meta, kính thực tế ảo Quest và các mẫu kính thực tế ảo mỏng nhẹ mới. Công nghệ này tương tự như Persona trên Apple Vision Pro, có khả năng tạo ra các hình đại diện ảo có ngoại hình giống hệt người thật thông qua AI tạo sinh.

Trên thực tế, Meta đã trình diễn dự án hình đại diện ảo chân thực có tên Codec Avatars từ 7 năm trước, tuy nhiên các sản phẩm Meta VR hiện có trên thị trường vẫn chủ yếu sử dụng các nhân vật tùy chỉnh mang phong cách hoạt hình. Theo kế hoạch hiện tại, Meta sẽ dần dần chuyển đổi các nhân vật tùy chỉnh của người dùng từ phong cách hoạt hình sang phong cách chân thực, sống động.

Theo giới thiệu, khi sử dụng Hologram lần đầu, người dùng cần mở ứng dụng Meta AI trên điện thoại và làm theo hướng dẫn như xoay đầu, mỉm cười. Sau đó, hệ thống sẽ đưa ra một số câu hỏi mở và người dùng cần trả lời trong một khoảng thời gian nhất định. Trong quá trình trả lời, hệ thống sẽ thu thập biểu cảm khuôn mặt và trạng thái nói chuyện của người dùng để huấn luyện và tinh chỉnh mô hình Hologram, đồng thời ghi lại trang phục và bối cảnh của người dùng.

Toàn bộ quá trình tạo chỉ mất vài phút, sau khi xử lý phía máy chủ, Hologram sẽ được tạo ra. Sau đó, khi người dùng đeo kính Ray-Ban Meta để nhận hoặc thực hiện cuộc gọi video qua WhatsApp, hình ảnh mà đối phương nhìn thấy sẽ không còn là khung hình từ camera truyền thống, mà là hình đại diện ảo của người dùng do AI tạo ra.

Xét về góc độ kỹ thuật, phiên bản Hologram trên kính Ray-Ban Meta sử dụng mô hình khuếch tán AI tạo sinh thời gian thực chạy trên máy chủ của Meta. Hệ thống lấy âm thanh thu được từ micro của kính làm đầu vào và tạo ra luồng video 2D theo thời gian thực để gửi đến đầu dây bên kia. Biểu cảm khuôn mặt của Hologram chủ yếu được tạo ra dựa trên sự thay đổi giọng nói của người dùng khi nói chuyện, thay vì trực tiếp sử dụng camera để ghi lại hình ảnh người thật.

Đối với nền tảng Quest, tính năng Hologram tương ứng được trình bày dưới dạng 3D toàn thân. Khi hai người dùng Quest thực hiện cuộc gọi video qua WhatsApp, cả hai trước tiên sẽ nhìn thấy Hologram của đối phương trong một cửa sổ 3D. Sau khi nhấn vào nút bên cạnh cửa sổ, cuộc gọi có thể chuyển sang chế độ toàn thân, hình đại diện ảo của đối phương sẽ xuất hiện trước mặt người dùng với kích thước gần như người thật.

Tuy nhiên, phiên bản hiện tại vẫn còn một số điểm cần cải thiện, chẳng hạn như kích thước nhân vật có thể có sự khác biệt nhỏ so với người thật, các chi tiết như mắt trong một số trường hợp còn khá thô. Đồng thời, nếu người dùng nghiêng đầu quá nhiều sang một bên, nhân vật ảo sẽ bị biến dạng, vì vậy vẫn cần các nhà phát triển tiếp tục tối ưu hóa.