Cloudflare ra mắt công cụ AEO: Tối ưu hóa website để AI 'đề xuất' nội dung của bạn

Khách hàng tiếp theo của bạn có thể sẽ không tìm thấy bạn thông qua công cụ tìm kiếm. Thay vào đó, họ sẽ hỏi một trợ lý AI: "làm thế nào để tôi thực hiện X?"; "lựa chọn nào là tốt nhất cho người như tôi?"; "hãy xử lý việc đó giúp tôi" và một tác nhân (agent) sẽ tìm câu trả lời, cân nhắc các lựa chọn và hành động thay cho họ. Ngày càng có nhiều trường hợp khoảnh khắc quyết định việc khách hàng có chọn bạn hay không lại diễn ra ngay bên trong phản hồi của một mô hình AI — trước cả khi con người nhìn thấy trang chủ của bạn.

Đối tượng người dùng là các tác nhân (agentic audience) này đã xuất hiện: theo thống kê của chúng tôi, hiện nay chưa đến một nửa số yêu cầu trang HTML đến từ con người. Không phải tất cả các cỗ máy đó đều là tác nhân hành động thay cho một cá nhân, nhưng tỷ trọng này đang tăng nhanh, và các công cụ trả lời (answer engines), trợ lý mua sắm cùng các công cụ nghiên cứu sẽ định hình doanh nghiệp nào được tìm thấy và được đề xuất. Khả năng khám phá (discoverability) từng có nghĩa là xếp hạng trên trang kết quả. Giờ đây, nó có nghĩa là được tìm thấy, được đọc và được các tác nhân dẫn dắt khách hàng của bạn tin tưởng đề xuất.

Các chỉ số cũ như lượt nhấp chuột của con người và lượt xem trang không còn phản ánh đầy đủ bức tranh toàn cảnh. Chúng tôi đã dành thời gian trò chuyện với các chủ sở hữu trang web đang nhìn vào nhật ký truy cập đầy rẫy các bot AI, mà hoàn toàn không biết liệu những bot đó có khả năng sử dụng trang web của họ hay đề xuất sản phẩm và dịch vụ của họ cho người dùng hay không. Chúng tôi đã nghe thấy hai câu hỏi chính:

Để giúp các chủ sở hữu trang web trả lời những câu hỏi này, chúng tôi đã tích hợp công việc trước đây của mình về Agent Readiness (Sẵn sàng cho tác nhân) vào bảng điều khiển Cloudflare, đồng thời bổ sung thêm công cụ Answer Engine Optimization (AEO) mới. Các công cụ này coi các tác nhân là nhóm người dùng cốt lõi cho trang web của bạn, cho bạn thấy cách một tác nhân nhìn nhận trang web đó và tần suất bạn được đề xuất.

Cơ hội là rất lớn và rào cản thì thấp, bởi vì hầu hết các trang web vẫn chưa được xây dựng cho nhóm người dùng này. Cũng giống như SEO thời kỳ đầu đã ưu tiên các trang web được xây dựng cho công cụ tìm kiếm, giờ đây các trang web được xây dựng cho tác nhân sẽ được đền đáp. Những trang web dễ tìm, dễ đọc và đáng tin cậy chính là những trang mà các tác nhân sẽ đề xuất.

Chẩn đoán: trang web của bạn đã sẵn sàng cho các tác nhân chưa?

Diagnostics (Chẩn đoán) là bước kiểm tra kỹ thuật trong Agent Readiness. Nó quét trang web của bạn theo cách mà một tác nhân đọc: nó xác định xem tác nhân có được phép truy cập hay không, có thể khám phá nội dung của bạn hay không, lấy một bản sao sạch mà máy có thể đọc được và tìm các giao diện mà nó có thể gọi.

Trong khi con người chỉ tải trang chủ của bạn, một tác nhân sẽ dựa vào robots.txt, sơ đồ trang web (sitemap), tiêu đề phản hồi (response headers), phiên bản Markdown của nội dung và siêu dữ liệu (metadata) đã xuất bản để xác thực và sử dụng các công cụ.

Diagnostics chạy các kiểm tra đó dựa trên tên máy chủ (hostname) và tổng hợp kết quả thành một chế độ xem duy nhất về mức độ sẵn sàng cho tác nhân, từ "Chưa sẵn sàng" (Not Ready) đến hoàn toàn tương thích với tác nhân (agent-native). Mỗi lần kiểm tra sẽ trả về kết quả đạt, không đạt hoặc trung tính, kèm theo ghi chú về lý do tại sao nó quan trọng và dấu vết bằng chứng hiển thị chính xác yêu cầu và phản hồi mà chúng tôi đã ghi nhận.

Các kiểm tra được nhóm theo mức độ nỗ lực, vì vậy bạn biết mình nên bắt đầu từ đâu:

Mỗi cải tiến được đề xuất đều đi kèm với bước tiếp theo. Khi có một tính năng của Cloudflare có thể hỗ trợ, sẽ có một liên kết "Thiết lập trong Cloudflare" dẫn thẳng đến cài đặt đó, chẳng hạn như bật Markdown cho tác nhân hoặc quản lý robots.txt. Đối với mọi thứ khác, có một nút "Sao chép gợi ý tác nhân" (Copy Agent Prompt) đề xuất những gì tác nhân lập trình của bạn cần xây dựng. Hãy thực hiện thay đổi, quét lại và xem dấu kiểm chuyển sang màu xanh.

AEO: các trợ lý AI có đang đề xuất bạn không?

Diagnostics cho bạn biết liệu các tác nhân có thể đọc trang web của bạn hay không. Tab AEO cho bạn biết điều gì xảy ra tiếp theo: khi một khách hàng đặt câu hỏi cho trợ lý AI trong danh mục của bạn, nó có đề xuất bạn hay đối thủ cạnh tranh? Bạn không thể tra cứu điều này giống như xếp hạng tìm kiếm. Không có số lượt hiển thị và không có báo cáo về lượt nhấp bị bỏ lỡ, vì vậy khi một đối thủ cạnh tranh được nêu tên thay vì bạn, cơ hội bán hàng đã mất đi mà không có gì thông báo cho bạn biết điều đó đã xảy ra.

Chúng tôi suy luận ngành (ví dụ: sức khỏe và thể hình) và danh mục (ví dụ: đồ thể thao) của bạn từ trang web, sau đó chúng tôi thăm dò các trợ lý hàng đầu (hiện nay là Claude của Anthropic và GPT của OpenAI) bằng các câu lệnh (prompts) khách hàng tiềm năng để xem cách chúng phản hồi. Chúng tôi cấu trúc các câu lệnh này để mô phỏng việc khám phá trong thế giới thực, yêu cầu đề xuất, so sánh sản phẩm và lời khuyên chung trong danh mục của bạn. Bằng cách quan sát cách các mô hình trả lời những truy vấn thực tế này, bạn sẽ nhận được các chỉ số như:

Để đánh giá cách một mô hình AI nhận thức về sự hiện diện trên thị trường của bạn, chúng tôi xây dựng một điểm chuẩn (benchmark) trên mỗi ngành và danh mục trước khi chấm điểm một trang web cụ thể. Chúng tôi truy vấn các trợ lý AI bằng các câu lệnh tiềm năng trong danh mục đó — mà không chỉ định thương hiệu của bạn — và ghi lại những trang web nào được trích dẫn, vị trí xuất hiện và mức độ nổi bật của chúng.

Thay vì truy vấn lại các mô hình mỗi khi chủ sở hữu trang web chạy quét, chúng tôi chạy bảng đánh giá này một lần cho mỗi danh mục và sử dụng lại dữ liệu cơ sở trên tất cả các tài khoản trong miền đó. Việc tính toán trước tập dữ liệu này mang lại ba lợi ích chính:

Các trợ lý AI hiếm khi trả lời cùng một câu hỏi theo cùng một cách hai lần. Để giải quyết sự khác biệt này, chúng tôi sử dụng Cloudflare AI Gateway để nhắc mỗi trợ lý nhiều lần trên các mô hình khác nhau. Sau đó, chúng tôi đọc các phản hồi mà khách hàng sẽ thấy — văn bản trả lời cùng với các nguồn mà mỗi trợ lý đã trích dẫn — và trích xuất nhiều tín hiệu từ đó.

Chúng tôi đánh giá không chỉ việc trang web của bạn có được đề cập hay không, mà còn liệu bạn có được trích dẫn như một nguồn tin, các trích dẫn của bạn xuất hiện sớm như thế nào trong câu trả lời và bao nhiêu phần nội dung của câu trả lời cuối cùng được quy cho bạn. Ở những nơi cần sự đánh giá thực sự, Workers AI sẽ đảm nhận phần việc nặng nhọc, chạy nguyên bản trên cơ sở hạ tầng của chúng tôi để đọc từng câu trả lời và chấm điểm cách các trích dẫn và đề cập của bạn xuất hiện. Chúng tôi cũng sử dụng phân tích văn bản chính xác thay vì để mô hình tự chấm điểm đầu ra của chính nó. Tổng hợp lại, điều này chuyển đổi hàng chục phản hồi đơn lẻ thành các chỉ số có thể hành động. Bằng cách trừu tượng hóa quy trình truy vấn và đánh giá đa mô hình, công cụ này cung cấp các chỉ số mà không yêu cầu bạn phải tự xây dựng khung đánh giá riêng.

Bên cạnh các câu trả lời, Hoạt động của tác nhân AI (AI Operator Activity) hiển thị lưu lượng truy cập thu thập dữ liệu (crawl) và giới thiệu (referral) thực tế trên trang web của bạn, theo từng nhà vận hành (OpenAI, Google, v.v.): ai đọc nội dung của bạn, ai gửi khách truy cập quay lại và các lỗi họ gặp phải trên đường đi (403 bị chặn, 404 liên kết chết). Mô hình đáng để hành động là nhà vận hành thu thập dữ liệu hàng nghìn trang của bạn nhưng không giới thiệu ai, sử dụng công sức của bạn mà không gửi khách hàng quay lại.

Vì những con số này dành riêng cho trang web của bạn, bạn có thể thử nghiệm, chạy lại quá trình quét và đo lường tác động đối với chính những câu hỏi mang lại doanh thu cho bạn.

Gặp gỡ đối tượng khán giả khác của bạn

Cho đến nay, việc đánh giá các tác nhân đồng nghĩa với việc phỏng đoán: lọc nhật ký (grep logs) để suy luận ai đã truy cập, hoặc đưa một câu lệnh vào chatbot và quan sát xem nó có đề cập đến bạn hay không. Nhưng với Agent Readiness và AEO, bạn có thể nhận được dữ liệu cần thiết để hành động. Và vì các yêu cầu thực sự đi qua Cloudflare, các công cụ này đo lường thay vì ước tính ở những nơi có thể, và sẽ cải thiện theo thời gian.

Giúp bạn thấy ai đang tiếp cận trang web của mình và quyết định cách tương tác theo điều kiện của riêng bạn là điều chúng tôi luôn làm. Các tác nhân chỉ là đối tượng khán giả mới nhất, và những doanh nghiệp giúp các tác nhân dễ dàng tìm thấy, hiểu và tin tưởng chính là những doanh nghiệp được đề xuất. Agent Readiness là nơi bạn tìm hiểu xem mình có phải là một trong số đó hay không, và phải làm gì nếu chưa đạt được điều đó.

Bạn đã sẵn sàng tìm hiểu xem các tác nhân AI có đang dẫn khách hàng đến với bạn không? Hãy truy cập tab Overview trong bảng điều khiển của bạn để giúp trang web của bạn sẵn sàng cho tác nhân (Agent Ready) và yêu cầu quyền truy cập sớm vào AEO Visibility.

Bạn đang xây dựng trên nền tảng web mở, sẵn sàng cho tác nhân? Hãy mở tab Agent Readiness trong bảng điều khiển Cloudflare của bạn và cho chúng tôi biết bạn đang xây dựng những gì trên Cloudflare Developer Discord.