Doubao bứt phá nhờ khả năng lập trình đa phương thức

"Nâng cấp khả năng lập trình đa phương thức"

Tôi đã từng viết rằng ngay khi Doubao Work ra mắt cùng với Seed 2.1 pro, nó đã đủ khả năng để xử lý các công việc văn phòng.

Nhưng các ông lớn internet giỏi nhất việc gì? Đó là tạo ra nhu cầu ở những nơi vốn không tồn tại nhu cầu đó.

Gần đây, Seed vừa tung ra một bản cập nhật nữa — một phiên bản "nhỏ" mang tên 0915. Nhưng nó không chỉ dừng lại ở việc điều chỉnh tham số rồi thôi. Nó đã tích hợp các khả năng đa phương thức (multimodal) với các tính năng Coding & Agent.

Nói một cách đơn giản: Doubao đã trở nên giỏi hơn trong các tác vụ lập trình đòi hỏi khả năng quan sát thực tế và hoàn thành công việc 👍

Hiện tại, thế giới AI đang xôn xao về ba thứ — tạo mô hình 3D, trợ lý cá nhân và các tác vụ dài hạn — tất cả đều phụ thuộc rất nhiều vào đầu vào và đầu ra đa phương thức. Vậy hãy cùng kiểm chứng sức mạnh của bản cập nhật Seed-2.1-pro-0915 này ⬇️

01

Doubao thử sức với thiết kế nội thất

Đầu tiên, tôi kiểm tra khả năng hiểu và tái tạo thế giới vật lý của Seed 2.1 pro. Tôi chụp ảnh phòng khách của mình từ ba góc độ khác nhau và gửi cho Seed 2.1 pro, yêu cầu nó xây dựng mô hình không gian của tôi.

Cần lưu ý rằng: bốn bức ảnh này được chụp ngẫu nhiên từ các góc độ không theo quy luật nào, vì vậy AI phải tự mình tìm ra hướng của các bức tường và đồ vật — điều này không hề dễ dàng.

Nhưng Seed 2.1 pro đã làm được ⬇️

Bố trí nội thất: chính xác. Phân biệt được thảm và sàn nhà: chuẩn. Nó thậm chí còn tái tạo lại cả cửa sổ lồi (bay window) của tôi.

Sau đó, tôi yêu cầu Seed 2.1 pro tạo ra bốn phương án cải tạo khác nhau dựa trên mô hình 3D gốc, kèm theo hình ảnh phối cảnh và báo giá.

Nó bắt đầu bằng việc tìm kiếm trên web và đưa cho tôi các kế hoạch mua sắm nội thất chi tiết ⬇️

Sau đó, nó chuyển toàn bộ kế hoạch cải tạo thành một trang web tương tác động để xem trước một cách trực quan hơn ⬇️

Gu thẩm mỹ của Seed 2.1 pro thực sự rất ổn. Kết hợp với khả năng tạo ảnh của Seedream 5.0, việc thuê nhà ở một thành phố như Bắc Kinh — nơi mà chủ nhà thường khá "khó chiều" — chỉ cần nhờ AI lên phương án, bỏ ra một chút chi phí, là chất lượng cuộc sống của bạn sẽ tăng vọt.

Thành thật mà nói, nếu Mark Zuckerberg có được "chiêu" này từ trước, bất động sản trong metaverse có lẽ đã bùng nổ thêm 50 năm nữa 👍

02

GeoGuessr

Trọng tâm của bản cập nhật Seed 2.1 pro lần này là khả năng hiểu hình ảnh, vì vậy GeoGuessr là bài kiểm tra hoàn hảo nhất.

Giải thích nhanh: GeoGuessr là một trò chơi đoán địa điểm qua Google Street View toàn cầu do nhà phát triển người Thụy Điển Anton Wallén tạo ra vào năm 2013. Luật chơi sẽ đưa bạn đến một nơi ngẫu nhiên trên thế giới trong chế độ xem phố 360 độ. Bạn có thể xoay xung quanh, di chuyển tới lui, tìm kiếm manh mối và suy luận vị trí của mình.

Kiểu như bộ phim Searching — tìm ra vị trí của bạn từ những hình ảnh.

Vì vậy, nếu Seed 2.1 pro có thể "phá đảo" GeoGuessr, điều đó chứng minh nó thực sự có năng lực trong việc hiểu hình ảnh và truy xuất thông tin.

Nói thật nhé, nếu bắt tôi chơi GeoGuessr thủ công, tôi chỉ có nước đoán mò.

Vì vậy, tôi mở phiên bản GeoGuessr của Trung Quốc (Tuxun), gửi cho Seed 2.1 pro một bộ sưu tập khổng lồ các hướng dẫn chiến thuật được biên soạn bởi những người chơi kỳ cựu, và để nó tự học sâu cũng như tư duy độc lập. Sau một lúc, nó đã tự đúc kết được các Kỹ năng (Skills) của riêng mình ⬇️

Sau đó, tôi để nó tự bắt đầu các trận đấu.

Đáng tiếc là trong vài vòng đầu, Seed 2.1 pro hoặc là đoán sai, hoặc mất quá nhiều thời gian thao tác trên trang web khiến nó bị quá thời gian và nhận điểm số bằng không. Tôi thậm chí còn bị đối thủ chế giễu vài lần.

May mắn thay, Seed 2.1 pro có tinh thần phê bình và tự phê bình. Sau mỗi vòng, nó tóm tắt những sai lầm của mình và viết các quy tắc mới vào Kỹ năng của nó.

Sau khoảng hơn chục vòng, Seed 2.1 pro thực sự đã trở thành một chuyên gia Tuxun ⬇️

Nó không chỉ hoàn thành trong thời gian quy định mà vị trí nó ghim còn cách đáp án đúng chỉ 15 km.

15 km — tôi còn đi xa hơn thế để gặp bạn bè ở Bắc Kinh đấy.

Và kể từ đó, nó liên tục giữ các dự đoán của mình trong phạm vi 200 km.

Tôi thực sự nghĩ rằng tính năng này xứng đáng được tách ra thành một ứng dụng riêng. Cái thứ của Yong Ge bắt bạn phải xoay 360 độ chỉ để biết một địa điểm có phù hợp để mở cửa hàng hay không. Còn Seed chỉ cần liếc qua là biết ngay tọa độ vĩ độ và kinh độ.

Trong tương lai, tôi khuyên bạn nên tải Doubao trước khi đi du lịch Đông Nam Á. Nếu chẳng may bị bắt cóc, hãy chụp vài bức ảnh từ bên trong khu nhà — tỷ lệ giải cứu thành công sẽ tăng vọt đấy 🤭