Meta tái xuất với chiến lược mã nguồn mở: Zuckerberg đặt cược vào mô hình chưng cất

Các vị thần hãy tuân lệnh, nhà vua đã trở lại! Meta công bố "bom tấn" mô hình ngôn ngữ lớn mã nguồn mở mạnh nhất: Llama 3.

Sau khi Llama 3 ra mắt, Mark Zuckerberg chia sẻ với truyền thông quốc tế: "Mục tiêu của chúng tôi không phải là cạnh tranh với các mô hình mã nguồn mở... Công nghệ này đã được ứng dụng vào chatbot Meta AI. Meta cho biết, nhờ vào..."

AI (Căn cứ công nghệ AI)

Mark Zuckerberg đích thân công bố mô hình thị giác máy tính của Meta! Học tự giám sát không cần tinh chỉnh (fine-tuning), hiệu suất đa nhiệm vượt trội hơn OpenCLIP | Mã nguồn mở.

Mô hình thị giác máy tính của Meta hoàn toàn tự giám sát, không cần nhãn văn bản đã xuất hiện! Mark Zuckerberg đích thân công bố và ngay lập tức thu hút sự chú ý lớn — trong các tác vụ phân đoạn ngữ nghĩa, phân đoạn thực thể, ước tính độ sâu và hình ảnh...

FightingCV

Tổng hợp tin tức AI hàng ngày -- Synced, QbitAI, NVIDIA, arXiv...

Đồng thời tiết lộ chưng cất (distillation) là chìa khóa đột phá của mô hình Flash từ Google. Tiêu đề: Robot tự thu dọn hoàn toàn tự chủ... Tiêu đề: Alexander Wang rời Meta? Mark Zuckerberg phản hồi. Liên kết: https://www....

(Tiểu Trần lẩm bẩm)

Đại học Phúc Đán công bố mã nguồn mở "ChatGPT phiên bản Trung Quốc" đầu tiên: MOSS! Hệ thống plugin hoàn toàn mới, có thể truy cập internet, giải được bài toán "gà và thỏ chung lồng".

[Dẫn nhập] Hai tháng sau khi nhóm NLP của Đại học Phúc Đán ra mắt MOSS, họ đã thực hiện đúng cam kết... Tại đây, Tôn Thiên Thắng đã đặc biệt làm rõ về việc "MOSS là chưng cất từ ChatGPT", "dựa trên LLaMA"...

(Xưởng thị giác máy tính)

Thu về 20 triệu chỉ trong 4 tháng, mô hình ngôn ngữ lớn đầu tiên tại Trung Quốc công khai doanh thu đã "hốt bạc" khủng?

Nhưng khi được hỏi về thời điểm đấu võ với Mark Zuckerberg, anh ấy đột nhiên khiêm tốn và cười trừ. Hoặc là... lĩnh vực thị giác máy tính, chuyển động và mô hình ngôn ngữ lớn đa phương thức đều đang giữ vị trí dẫn đầu ngành...

Metaverse (Vũ trụ ảo)

Meta-Transformer: Sử dụng một mô hình Transformer để mã hóa 12 loại phương thức (Giải mã chi tiết về đa phương thức).

Nhờ mục tiêu sử dụng học máy để dự đoán đặc tính phân tử, nó đã đạt được những bước tiến trong khám phá thuốc và khoa học vật liệu... Phân loại zero-shot của Meta-Transformer-B16F và Meta-Transformer-L14F...

(Nền tảng Extreme-Mart)

(2024|TMLR|Meta, DINOv2, ViT, tự chưng cất, iBOT, SwAV tập trung, tiền huấn luyện tự giám sát phân biệt, phân loại/phân đoạn, điều chỉnh độ phân giải) Học đặc trưng thị giác mạnh mẽ không cần giám sát.

float16 độ chính xác hỗn hợp tự động. Chưng cất mô hình: Cải tiến quy trình huấn luyện trong bài viết này chủ yếu hướng tới huấn luyện mô hình lớn trên các tập dữ liệu lớn. Đối với các mô hình nhỏ hơn, bài viết chọn từ ViT lớn nhất...

EDPJ

Nhóm NLP của Đại học Phúc Đán công bố mã nguồn mở MOSS, đây là mô hình dạng ChatGPT đầu tiên công khai tại Trung Quốc.

Hai tháng sau, MOSS đã được mở mã nguồn. Phiên bản hiện tại là MOSS 003, thứ... Tuy nhiên, họ đã nhận được nhiều ý kiến như "MOSS là chưng cất từ ChatGPT" / "dựa trên tinh chỉnh LLaMA"...

(OFweek AI)

Mô hình LLaMA bị rò rỉ thảm hại, ChatGPT phiên bản Meta buộc phải "mở mã nguồn"! Đạt 8k sao trên GitHub, hàng loạt bài đánh giá đã xuất hiện.

Mặc dù Meta tuyên bố LLaMA là mã nguồn mở, nhưng các nhà nghiên cứu vẫn cần phải nộp đơn và trải qua quy trình xét duyệt... Microsoft đề xuất phương pháp chưng cất tiền huấn luyện nhanh TinyViT CVPR2022 | Nhanh hơn VinVL gấp mười nghìn lần...

FightingCV

Google và OpenAI đều công cốc, mã nguồn mở mới là người chiến thắng cuối cùng! Tài liệu nội bộ Google bị rò rỉ: Muốn dùng mã nguồn mở để đánh bại OpenAI.

Chỉ một tháng sau, chúng ta đã đi đến cục diện hiện tại, với việc tinh chỉnh chỉ dẫn (instruction tuning), lượng tử hóa... Hầu hết các đổi mới trong cộng đồng mã nguồn mở hiện nay đều dựa trên trọng số mô hình bị rò rỉ của Meta. Mặc dù...

InfoQ

1 2 3 4 Trang tiếp theo

Tìm thấy khoảng 32 kết quả