Messaging & ML connectors

OpenMetadata không chỉ quản lý dữ liệu “tĩnh” — nó còn lập danh mục luồng streaming và mô hình machine learning.

Ghi chú

Tổng hợp từ Messaging Services và ML Model Services của OpenMetadata.

Messaging (streaming)

• Connector: Apache Kafka, Amazon Kinesis, Redpanda.
• Thu thập Topic: schema thông điệp, partition, cấu hình.
• Đưa dữ liệu thời gian thực vào cùng danh mục với dữ liệu batch.

ML Model

• Connector: MLflow, Amazon SageMaker.
• Thu thập ML Model: phiên bản, tham số, đặc trưng (features), dashboard hiệu năng.
• Liên kết mô hình với dữ liệu huấn luyện → truy nguồn gốc mô hình.

Vì sao đáng quản lý

Loại	Giá trị khi vào danh mục
Topic	Biết schema sự kiện, ai tiêu thụ, lineage streaming
ML Model	Truy mô hình dùng dữ liệu nào; quản trị & tuân thủ AI

Mẹo

Đưa Topic và ML Model vào danh mục giúp mở rộng lineage sang cả streaming và AI — bức tranh dữ liệu trọn vẹn hơn nhiều nền tảng chỉ lo bảng/CSDL.

Tiếp theo

• Search & Metadata connectors
• Metadata Ingestion Workflow & Filters