Databricks ra mắt Governance Hub: Giải pháp quản trị thông minh toàn diện cho tài sản dữ liệu

Trưởng bộ phận FinOps của bạn cần dễ dàng đi sâu vào chi phí Databricks và xác định yếu tố nào đang thúc đẩy chi phí, mà không cần phải duy trì hàng tá truy vấn và bảng điều khiển. Nhóm quản trị dữ liệu của bạn đã tự xây dựng các công cụ để theo dõi phạm vi phân loại, nhưng chúng đã trở nên lỗi thời. Nhóm triển khai AI của bạn cần hiểu những mô hình và tác nhân (agent) nào đang được các nhà phát triển sử dụng.

Đây là những cuộc trò chuyện mà chúng tôi liên tục nghe từ khách hàng. Các nhóm chịu trách nhiệm quản trị hệ thống Databricks trên hàng trăm workspace ở nhiều khu vực thường không thể truy cập vào những thông tin chi tiết mà họ cần. Và ngay cả khi có thể, dữ liệu vẫn bị phân tán trên các bảng hệ thống, các chế độ xem cấp workspace và các công cụ của bên thứ ba. Đây chính là lúc Governance Hub phát huy tác dụng. Đây là chế độ xem tập trung ở cấp tài khoản về tình trạng dữ liệu, mức độ sử dụng AI và chi phí, đi kèm với các đề xuất được ưu tiên trên AWS, Azure và GCP. Hiện đã có phiên bản Beta.

Được xây dựng cho những nhóm cần nó nhất. Governance Hub được thiết kế cho các nhóm nền tảng và quản trị, những người chịu trách nhiệm quản trị trên toàn bộ phạm vi của họ, cho phép họ đi sâu vào những gì quan trọng mà không bị giới hạn bởi một workspace duy nhất. Nó cũng hỗ trợ các quản trị viên cần giám sát tài khoản, ủy quyền và duy trì sự tuân thủ của tổ chức mà không trở thành nút thắt cổ chai.

Phát hiện các lỗ hổng siêu dữ liệu (metadata) ẩn giấu trong toàn bộ hệ thống của bạn

Trước khi có Governance Hub, việc biết bảng nào đang thiếu thẻ (tag), quyền sở hữu hoặc tài liệu đồng nghĩa với việc bạn phải tự truy vấn các bảng hệ thống, hoặc phải nhận ra vấn đề một cách khó khăn khi một cuộc kiểm toán hoặc yêu cầu truy cập bị đình trệ. Giờ đây, trang Data cho bạn cái nhìn tổng quan: bạn có bao nhiêu tài sản, bao nhiêu phần trăm đã được gắn thẻ, xác định quyền sở hữu và phân loại, và những tài sản nào đang bị tụt hậu. Sức mạnh thực sự nằm ở khả năng đi sâu vào chi tiết (drill-down). Nhấp vào kho tài sản để xem chính xác bảng và lược đồ nào đang thiếu các thẻ hoặc mô tả bắt buộc, và nơi để bắt đầu khắc phục. Nhấp vào chất lượng dữ liệu để làm nổi bật các metastore không lành mạnh hoặc thiếu tài liệu. Quản lý các thẻ được quản trị: tạo chính sách, chỉnh sửa giá trị, cấp quyền, tất cả mà không cần rời khỏi trang.

Xem thông tin chi tiết về quyền truy cập theo Principal

Việc trả lời câu hỏi "Người dùng này thực sự có thể truy vấn những gì?" trước đây đồng nghĩa với việc phải hợp nhất dữ liệu từ hàng chục nguồn, giải quyết thủ công các tư cách thành viên nhóm và truy vết quyền sở hữu trên từng đối tượng bảo mật (securable). Khi tài khoản của bạn phát triển, câu hỏi này trở nên khó trả lời hơn nhiều và cũng quan trọng hơn nhiều.

Access Insights thay thế điều đó bằng một chế độ xem tập trung vào principal duy nhất. Chọn bất kỳ người dùng, nhóm hoặc service principal nào để xem mọi thứ họ có thể truy cập trên tài khoản của bạn, bao gồm các quyền được cấp trực tiếp, quyền truy cập kế thừa thông qua tư cách thành viên nhóm và các đối tượng mà họ sở hữu.

Lọc theo catalog hoặc đặc quyền để trả lời các câu hỏi thực tế trong vài giây: gỡ lỗi lý do tại sao người dùng cuối có thể hoặc không thể truy cập một bảng, xem xét quyền truy cập của một nhóm trước khi giới thiệu nhà cung cấp, kiểm toán những gì một service principal có thể truy cập hoặc xác định mọi thứ mà một nhân viên sắp nghỉ việc sở hữu trước khi thực hiện quy trình offboarding.

Access Insights trong Governance Hub giúp bạn trả lời những câu hỏi này và nhiều câu hỏi khác thông qua một giao diện duy nhất.

Phát hiện sớm các bất ngờ về chi phí AI

Việc áp dụng AI đang tăng tốc và cùng với đó là câu hỏi về cách nó thực sự được sử dụng trong toàn tổ chức. Unity AI Gateway cung cấp một bảng quản trị duy nhất để quản lý việc sử dụng, quyền truy cập và chi phí trên các mô hình, tác nhân, công cụ và MCP. Cho dù tổ chức của bạn đang sử dụng các mô hình do Databricks lưu trữ hay các mô hình được lưu trữ bên ngoài, AI Gateway đều cung cấp khả năng quản trị thống nhất trên tất cả lưu lượng truy cập AI của bạn.

Phân khúc AI trong Governance Hub cung cấp khả năng quan sát chi tiết lưu lượng truy cập qua Unity AI Gateway. Trang AI theo dõi mức tiêu thụ token, hoạt động của mô hình, chi phí theo người dùng và phạm vi bảo vệ (guardrail) tại một nơi. Xem mô hình nào hoạt động tích cực nhất, người dùng nào đang thúc đẩy chi phí và liệu ngân sách AI của bạn có đang đi đúng hướng hay không. Khi một người dùng vượt quá ngưỡng của họ, thông tin đó sẽ được hiển thị ngay lập tức.

Tìm ra các khoản chi phí chưa được gắn thẻ mà bạn không biết

Trang Cost cung cấp cho bạn chi phí trong 30 ngày, từ đầu tháng đến nay và mức trung bình hàng ngày, mỗi chỉ số được so sánh với kỳ trước. Nhưng một trong những thông tin chi tiết có giá trị nhất là chi phí đã gắn thẻ: bao nhiêu phần trăm chi phí của bạn thực sự được phân bổ? Nhấp qua, và Governance Hub sẽ tự động lọc các tài nguyên chưa được gắn thẻ, làm nổi bật các khoản chi phí vốn vô hình đối với các quy trình tính phí và lập ngân sách của bạn.

Từ bất kỳ ô nào, hãy mở Explorer để phân tách theo sản phẩm, workspace, tài nguyên hoặc thẻ. Đi từ KPI cấp cao đến các chi tiết cụ thể: các job, cluster, endpoint và warehouse hàng đầu trong workspace của bạn, chỉ trong hai lần nhấp chuột.

Tận dụng Genie để quản trị tự động, dựa trên tác nhân (agentic)

Governance Hub được tích hợp với Genie, vì vậy bạn có thể vượt xa các chế độ xem được xây dựng sẵn và bảng điều khiển tĩnh. Hãy đặt các câu hỏi như "Tại sao chi phí lại tăng đột biến" hoặc "Hiển thị cho tôi các bảng có dữ liệu nhạy cảm thiếu chính sách che giấu (masking policies)", và nhận câu trả lời cùng các đề xuất dựa trên dữ liệu quản trị thực tế của bạn. Không cần SQL. Sắp tới, Genie thậm chí sẽ có thể thực hiện các hành động thay cho bạn - cấu hình chính sách, thiết lập cảnh báo và triển khai các đề xuất.

Genie hiểu ngữ cảnh của từng phân khúc (Dữ liệu, AI và Chi phí), vì vậy cho dù bạn đang điều tra sự tăng đột biến trong việc sử dụng token hay truy tìm các tài sản chưa được phân loại, bạn đều có thể nhận được câu trả lời trong vài giây thay vì phải viết truy vấn.

Bắt đầu

Quản trị viên tài khoản có thể kích hoạt Governance Hub từ trang Previews trong Account Console. Quản trị viên tài khoản có toàn quyền truy cập; quản trị viên workspace xem được Cost và AI cho workspace của họ; quản trị viên metastore xem được Data cho metastore của họ. Governance Hub tôn trọng các quyền hiện có: không cần cấu hình thêm các kiểm soát truy cập mới.

Chúng tôi chỉ mới bắt đầu. Các tính năng sắp ra mắt bao gồm thông tin chi tiết về hiệu suất, bảo mật, các đề xuất có thể thực hiện được và có thể ủy quyền, cùng các khả năng tác nhân (agentic) để quản trị ở quy mô lớn.

Kích hoạt Governance Hub trong Account Console của bạn ngay hôm nay