Google DeepMind ra mắt mô hình chuyển đổi ngôn ngữ ký hiệu sang văn bản trên smartphone

Theo tin từ IT ngày 13 tháng 8, phòng thí nghiệm trí tuệ nhân tạo của Google thông báo vào ngày 12 (giờ địa phương) về việc ra mắt mô hình dịch thuật ngôn ngữ ký hiệu sang văn bản (SL2T) đa ngôn ngữ quy mô lớn.

Nhờ mô hình này, trí tuệ nhân tạo ngôn ngữ ký hiệu lần đầu tiên được đưa vào các sản phẩm tiêu dùng: ứng dụng Gboard và Live Transcribe trên dòng điện thoại thông minh Google Pixel 11 đã hỗ trợ tính năng nhập liệu chuyển đổi từ ngôn ngữ ký hiệu sang văn bản (giai đoạn đầu chỉ giới hạn ở Ngôn ngữ ký hiệu Mỹ - ASL, sau đó sẽ mở rộng sang nhiều ngôn ngữ ký hiệu khác và nhiều thiết bị hơn).

Trên toàn cầu có khoảng 70 triệu người khiếm thính sử dụng hơn 200 loại ngôn ngữ ký hiệu khác nhau. Tính năng mới này cho phép họ tận hưởng trải nghiệm "thay thế gõ phím" linh hoạt tương tự như nhập liệu bằng giọng nói. Các thử nghiệm cho thấy, việc sử dụng Ngôn ngữ ký hiệu Mỹ nhanh hơn, tự nhiên hơn và mang lại cảm giác thoải mái hơn so với việc gõ phím bằng tiếng Anh.

DeepMind cho biết, ngôn ngữ ký hiệu là một ngôn ngữ tự nhiên độc lập, sở hữu ngữ pháp và từ vựng riêng biệt. Do đó, việc dịch ngôn ngữ ký hiệu đòi hỏi khả năng dịch máy thực thụ chứ không phải là chuyển đổi tuần tự từ ký hiệu sang văn bản. Một mô hình có thể đáp ứng các tác vụ SL2T phải có khả năng "hiểu" được các chuyển động đồng bộ từ nhiều bộ phận trên cơ thể người dùng, điều này đòi hỏi năng lực xử lý thị giác máy tính mạnh mẽ.

Mô hình SL2T của Google DeepMind được huấn luyện trên 100.000 giờ dữ liệu của hơn 50 loại ngôn ngữ ký hiệu. Mô hình này chuyển đổi ngôn ngữ ký hiệu thành thông tin vị trí của các điểm đặc trưng tư thế nhằm bảo vệ quyền riêng tư của người dùng, không cần gửi luồng video gốc lên máy chủ. Đồng thời, mô hình đã loại bỏ phương pháp "chú thích trung gian" vốn được sử dụng rộng rãi trước đây để trực tiếp giải mã thông tin không gian.

Đọc thêm:

"Nâng cấp khả năng tiếp cận, tin đồn cho biết bàn phím Google Gboard sắp hỗ trợ tính năng 'chuyển đổi ngôn ngữ ký hiệu sang văn bản'" (Thông tin rò rỉ trước đó, nay đã được xác nhận)