Đo lường sức mạnh mô hình: Kết quả Benchmark tranh cãi, phương pháp đánh giá và biến động bảng xếp hạng.
OpenAI chính thức giới thiệu GPT-6 Astra, mô hình được đánh giá là bước nhảy vọt về năng lực trong các lĩnh vực từ kỹ thuật phần mềm đến khoa học, đồng thời là mô hình đầu tiên đạt ngưỡng an ninh mạng quan trọng của hãng.
Rohan Paul@rohanpaul_aiApodex giới thiệu TRACES, bộ benchmark gồm 423 câu hỏi khoa học thực tế từ 561 lĩnh vực, được các chuyên gia STEM biên soạn nhằm kiểm tra khả năng tư duy và khám phá của AI đối với những vấn đề chưa có đáp án xác định.
Ant Ling@AntLingAGIAnt Group vừa công bố mã nguồn mở mô hình Ling-3.0-flash-Fin tối ưu cho nghiệp vụ tài chính, đi kèm bộ tiêu chuẩn FinFIRST giúp đánh giá khả năng tìm kiếm thông tin của AI trong lĩnh vực tài chính.
HUMAIN, công ty AI thuộc PIF, vừa giới thiệu humain-m3, mô hình ngôn ngữ được tối ưu hóa cho tiếng Ả Rập dựa trên nền tảng MiniMax-M3. Với khả năng xử lý dữ liệu quy mô lớn, mô hình này hiện dẫn đầu các bảng xếp hạng đánh giá tiếng Ả Rập và sẽ sớm phát hành phiên bản mở.
Alexandr Wang (Scale AI /Meta AI )@alexandr_wangNhà sáng lập Scale AI khẳng định Muse 1.3 đã vươn lên hàng ngũ các mô hình hàng đầu, phá vỡ thế độc tôn cũ. Với hiệu suất ấn tượng trên các bảng xếp hạng kỹ thuật, Muse chính thức trở thành đối trọng mới bên cạnh Claude, ChatGPT và Grok.
Artificial Analysis@ArtificialAnlysViện nghiên cứu MBZUAI vừa công bố mô hình MoE K2 Horizon 375B (23B tham số kích hoạt), đạt 47 điểm trên bảng xếp hạng Artificial Analysis, đánh dấu bước nhảy vọt đáng kể so với thế hệ tiền nhiệm.
OpenRouter@OpenRouterOpenRouter vừa giới thiệu tính năng benchmark cho phép so sánh trực tiếp các mô hình video. Seedance 2.5 gây ấn tượng về vật lý, trong khi MiniMax H3 Max thiết lập chuẩn mực mới về tốc độ và chi phí.
/ Qwen@Alibaba_Qwen· 3 nguồnQwen giới thiệu bộ tiêu chuẩn E-Commerce Bench để đánh giá khả năng của AI Agent trong việc tự chủ vận hành kinh doanh dài hạn, từ quản lý kho bãi, đàm phán giá đến tối ưu dòng tiền dựa trên dữ liệu thị trường thực tế.
Bộ trưởng Giao thông Pháp xác nhận đã bắt đầu thử nghiệm hai xe Tesla trang bị FSD để đánh giá độ an toàn, nhằm chuẩn bị cho cuộc bỏ phiếu phê duyệt của EU vào cuối năm nay.
OpenAI đang đẩy mạnh các tiêu chuẩn an toàn và kiểm soát truy cập nghiêm ngặt khi chuẩn bị trình làng Astra, mô hình AI được đánh giá là có tầm ảnh hưởng quan trọng đến an ninh mạng.
CEO Sam Altman cho biết mô hình Astra sắp ra mắt đã được chính quyền Trump kiểm duyệt tự nguyện về an ninh mạng. Đây là mô hình đầu tiên của OpenAI được xếp vào nhóm năng lực trọng yếu, cho phép giới chức tiếp cận đánh giá trong 30 ngày.
Alibaba Cloud / Alibaba Cloud@alibaba_cloudAlibaba Cloud chia sẻ kết quả đánh giá từ LMArena cho dòng mô hình Qwen 3.8, bao gồm phiên bản Max và phiên bản mã nguồn mở 27B, khẳng định hiệu suất vượt trội trong các bài kiểm tra kỹ thuật mới nhất.
UBTECH hợp tác cùng Meditech giới thiệu robot chăm sóc sức khỏe với ngoại hình nam/nữ tùy chọn, tích hợp AI đánh giá lão khoa và quản lý bệnh mãn tính chuyên sâu cho người cao tuổi.
Rohan Paul@rohanpaul_ai· 3 nguồnLoopArena là bộ tiêu chuẩn mới giúp đánh giá hiệu quả của các mô hình AI khi đóng vai trò 'Controller' điều phối các tác vụ lập trình phức tạp, thay vì chỉ tập trung vào khả năng viết code đơn lẻ.
赵纯想@chunxiangaiZhao Chunxiang nhận định Fable 5.1 đã đạt đến trạng thái 'mô hình vô hình' – nơi mọi rào cản kỹ thuật biến mất, khiến con người chỉ còn là kẻ ra lệnh và đối mặt với sự khủng hoảng ý nghĩa trong sáng tạo.
Rohan Paul@rohanpaul_aiDuMateBench giới thiệu bộ tiêu chuẩn đánh giá AI Agent qua 200 tác vụ thực tế phức tạp, từ lập trình đến sáng tạo nội dung, giúp đo lường khả năng xử lý lỗi và môi trường thực tế của các mô hình.
Artificial Analysis@ArtificialAnlysMô hình Wan 3.0 của Alibaba vừa vươn lên dẫn đầu bảng xếp hạng chỉnh sửa video có âm thanh của Artificial Analysis, đồng thời xếp thứ hai ở hạng mục tạo video từ văn bản. Đây là mô hình đa năng hỗ trợ xuất video 1080p dài 30 giây với khả năng tùy chỉnh sâu qua văn bản, hình ảnh và âm thanh.
LangChain chia sẻ kinh nghiệm từ các tập đoàn lớn trong việc xây dựng nền tảng Agent dùng chung, áp dụng LLMOps và thiết kế kiến trúc đa tác nhân có khả năng quan sát, đánh giá và kiểm soát chặt chẽ.
Rohan Paul@rohanpaul_aiSau khi phát hiện nhân viên cố tình 'cày' chỉ số sử dụng AI, Meta đã quyết định loại bỏ tiêu chí này khỏi đánh giá hiệu suất. Dù vậy, công ty khẳng định 93% mã nguồn vẫn được hỗ trợ bởi AI và khuyến khích kỹ sư tiếp tục sử dụng công cụ này.
DAIR.AI@dair_aiBài báo giới thiệu chỉ số RAE giúp đánh giá chính xác khả năng sử dụng kỹ năng thực tế của các LLM Agent, thay vì chỉ dựa vào các chỉ số tổng hợp vốn thường che giấu những hạn chế trong quá trình truy xuất.
Qwen và Taobao Tmall giới thiệu E-Commerce Bench, thử thách mô hình AI quản lý cửa hàng trực tuyến trong 365 ngày với vốn khởi điểm 100.000 NDT, bao gồm hơn 6.800 mặt hàng và 576 nhà cung cấp.
Alexandr Wang (Scale AI /Meta AI )@alexandr_wang· 2 nguồnTheo chỉ số Artificial Analysis, Meta Muse Spark 1.3 đạt 68 điểm, ngang bằng với hiệu suất của Claude Code kết hợp cùng Opus 5, khẳng định vị thế cạnh tranh mạnh mẽ trong lĩnh vực lập trình tự động.
Alexandr Wang (Scale AI /Meta AI )@alexandr_wangAlexandr Wang giới thiệu Muse Spark 1.3 thông qua trải nghiệm thực tế của người dùng: tạo thành công một trò chơi đi cảnh chủ đề cướp biển mà không gặp lỗi ngay lần đầu. Đây được đánh giá là mô hình lập trình nhanh, chi phí thấp và cực kỳ hiệu quả.
Alexandr Wang (Scale AI /Meta AI )@alexandr_wangNgười dùng @SPAC89 đã thử nghiệm so sánh Muse Spark 1.3 Ultra và Fable 5.1 trong 2 giờ với cùng một yêu cầu: AI phải tự lặp lại quy trình cải thiện cho đến khi đạt điểm đánh giá từ 9.5/10 trở lên.
Artificial Analysis@ArtificialAnlys· 2 nguồnMô hình Realtime TTS-2 mới của Inworld vừa đạt 1.123 điểm Elo, vượt qua Cartesia Sonic 3.6 để dẫn đầu bảng xếp hạng Controlled Voice Arena và giữ vị trí thứ hai trong Provider Voice Arena.
ASPIRE là bộ tiêu chuẩn mới giúp đánh giá khả năng tự học của AI khi chỉ nhận mục tiêu định hướng thay vì các nhiệm vụ cụ thể, buộc mô hình phải tự xác định cách thức cải thiện và đánh giá hiệu quả của chính mình.
Nghiên cứu đề xuất phương pháp mới đánh giá rủi ro danh mục bằng cách sử dụng đặc trưng phân phối từ mô hình ngôn ngữ thay vì hiệp phương sai truyền thống, giúp tối ưu hóa danh mục mà không cần dữ liệu tương quan phức tạp.
Nghiên cứu đề xuất giao thức kiểm tra mới giúp phân biệt liệu AI Agent thực sự hiểu quy trình chuyên biệt hay chỉ đang đoán mò, thông qua việc tách biệt hướng dẫn nhiệm vụ khỏi các dữ liệu nội bộ.
Nghiên cứu giới thiệu AM-Bench để đánh giá liệu LLM hiểu bố cục không gian hay chỉ đơn thuần là chuyển đổi mô tả thành mã nguồn. Kết quả cho thấy khả năng tư duy không gian thực sự khác biệt đáng kể giữa các mô hình, vượt xa khả năng viết code đơn thuần.