JD.com ra mắt JoyAI: Trợ lý ảo mua sắm qua video thời gian thực

Theo tin từ IT ngày 7 tháng 9, ứng dụng JoyAI của JD.com vừa ra mắt AI kỹ thuật số đầu tiên có khả năng mua sắm qua video thời gian thực, hiện thực hóa trải nghiệm "thấy là mua, nói là chốt đơn". Người dùng chỉ cần tải lên một bức ảnh là có thể tùy chỉnh ngoại hình, tính cách, giọng nói và bối cảnh tương tác để tạo ra AI kỹ thuật số độc bản cho riêng mình.

IT đính kèm giới thiệu chi tiết từ phía chính thức như sau:

Trong cuộc gọi video, "Tiến sĩ Vạn năng" đồng hành cùng bạn vừa dạo chơi vừa mua sắm.

Hầu hết các giải pháp mua sắm bằng AI trên thị trường hiện nay vẫn dừng lại ở mô hình "nhận diện hình ảnh rồi chuyển hướng trang web" hoặc "gửi link sản phẩm qua hội thoại", buộc người dùng phải chuyển đổi qua lại giữa nhiều ứng dụng. Dựa trên nhân vật kỹ thuật số "Tiến sĩ Vạn năng", JoyAI tích hợp toàn bộ quy trình mua sắm vào cuộc gọi video: khi bắt đầu cuộc gọi, camera hướng vào sản phẩm mong muốn, AI sẽ phân tích hình ảnh theo thời gian thực, đưa ra thông tin sản phẩm và gợi ý chọn mua. Chỉ cần nói "tìm giúp tôi sản phẩm tương tự", hệ thống sẽ truy xuất hàng hóa từ JD.com và hoàn tất thanh toán ngay trên giao diện cuộc gọi mà không cần thoát ứng dụng, tiên phong tạo ra trải nghiệm khép kín: vừa dạo, vừa trò chuyện, vừa mua sắm ngay trong cuộc gọi video.

Trên điện thoại, "Tiến sĩ Vạn năng" giống như một người bạn đồng hành mua sắm am hiểu và tâm lý, không có cửa sổ bật lên (pop-up), không ép buộc quảng cáo, đưa việc mua sắm hòa quyện tự nhiên vào nhịp điệu trò chuyện. Khi chọn mua đồ ăn vặt tại siêu thị, chỉ cần hướng camera vào bao bì, nhân vật kỹ thuật số sẽ cảnh báo về rủi ro thành phần, đồng thời so sánh giá với JD.com; khi thử tai nghe tại cửa hàng mà còn phân vân, chỉ cần hướng vào sản phẩm và hỏi "cái này có đáng mua không", AI sẽ truy xuất đánh giá từ cộng đồng để tham khảo, người dùng xác nhận là có thể đặt hàng. JoyAI hỗ trợ ngắt lời và đổi chủ đề bất cứ lúc nào, AI phản hồi trong tích tắc, mang lại cảm giác trò chuyện gần như người thật. Từ việc bày tỏ nhu cầu, gợi ý thông minh, xác nhận phương án cho đến thanh toán, toàn bộ quy trình được hoàn tất khép kín trong cùng một luồng hội thoại.

Tải lên một bức ảnh, tạo ra "người bạn đồng hành cuộc sống toàn năng" của riêng bạn.

Khả năng của ứng dụng JoyAI không chỉ dừng lại ở mua sắm, nó còn sở hữu tính năng tùy chỉnh nhân vật kỹ thuật số với độ tự do cao đầu tiên trong ngành, thực sự hiện thực hóa cá nhân hóa cho từng người dùng. Chỉ cần tải lên một bức ảnh, người dùng có thể tùy chỉnh ngoại hình, tính cách, giọng nói và bối cảnh tương tác, nhanh chóng tạo ra một AI kỹ thuật số độc bản với nhân cách riêng biệt.

Giống như "Tiến sĩ Vạn năng", nhân vật kỹ thuật số tùy chỉnh không bị giới hạn trong việc trò chuyện văn bản và mua sắm. Nhờ công nghệ đa phương thức (multimodal) kết hợp giọng nói, cử chỉ, hình ảnh và cuộc gọi video, nó hỗ trợ các hoạt động phong phú như hát, nhảy, nói phương ngữ, diễn xuất, nâng cấp từ một cuộc đối thoại đơn thuần thành nhân vật AI đa phương thức biết biểu đạt và có khả năng trình diễn. Dựa trên sự thấu hiểu và kiểm soát tính cách từ mô hình ngôn ngữ lớn (LLM), nhân vật kỹ thuật số có thể tương tác liên tục theo tính cách và mối quan hệ đã thiết lập, tiến hóa từ một hình ảnh ảo thành người bạn AI vừa có nhân cách, vừa mang lại sự đồng hành và khả năng sáng tạo nội dung.

Người dùng chỉ cần sử dụng ngôn ngữ tự nhiên và cấu hình nhẹ nhàng là có thể hoàn tất việc xây dựng nhân vật, giảm đáng kể rào cản sáng tạo. Nền tảng kết nối toàn bộ chuỗi "Tạo lập — Tương tác — Sáng tạo — Lan tỏa", nhân vật kỹ thuật số vừa là đối tượng trò chuyện, vừa là chủ thể sáng tạo nội dung, có thể sản xuất tư liệu giọng nói, hình ảnh, video ngắn, cung cấp nền tảng cho việc lan tỏa xã hội, tạo nội dung lan truyền và ấp ủ IP nhân vật kỹ thuật số.

Trong cuộc gọi video, "Tiến sĩ Vạn năng" đồng hành cùng bạn vừa dạo chơi vừa mua sắm.

Dựa vào hệ sinh thái JD.com, ngoài mua sắm, ứng dụng JoyAI còn hỗ trợ các dịch vụ cuộc sống đa dạng như đặt đồ ăn, nạp tiền điện thoại, đặt khách sạn, tư vấn sức khỏe, tư vấn tài chính, v.v. Chỉ cần một câu nói để đưa ra yêu cầu, mọi thứ đều được xử lý khép kín trong một luồng duy nhất.

Trong lĩnh vực sức khỏe, JoyAI kết nối với tác nhân thông minh (AI agent) bác sĩ AI, hỗ trợ khám bệnh, kê đơn thuốc, giải thích kết quả xét nghiệm; trong lĩnh vực tài chính, nó liên kết với Jingxiaobei, cung cấp phân tích danh mục đầu tư, chẩn đoán quỹ và giải thích diễn biến thị trường; khâu thanh toán được tích hợp JD AI Pay, sử dụng xác thực bằng giọng nói thay cho mật khẩu. Khi người dùng cảm thấy không khỏe, chỉ cần thuật lại triệu chứng, AI sẽ chẩn đoán sơ bộ, phân loại và kết nối trực tiếp đến dịch vụ khám chuyên khoa; khi người dùng đi công tác đột xuất và nói "đặt khách sạn, ngày mai nhận phòng ở Bắc Kinh, ngày kia rời đi", AI sẽ tự động hoàn tất việc chọn phòng và điền thông tin, người dùng chỉ cần xác nhận là có thể thanh toán; khi người dùng đầu tư tài chính và hỏi "quỹ của tôi gần đây bị giảm thì phải làm sao", họ sẽ nhận được phân tích khách quan dựa trên danh mục đầu tư thực tế.

Từ đầu năm nay, số lượng người dùng hội thoại của ứng dụng JoyAI đã tăng trưởng hơn 15 lần. Khi việc mua sắm chuyển từ "mở ô tìm kiếm" thành "thấy là tương tác, nói là xử lý được", khi nhân vật kỹ thuật số chuyển từ dịch vụ khách hàng tiêu chuẩn thành người bạn đồng hành cùng bạn dạo phố và giải quyết công việc, trải nghiệm tương tác giữa người và máy đang được ứng dụng JoyAI định nghĩa lại.