DataValue — Nền tảng Dữ liệu & AI mở

DataValue là nền tảng Dữ liệu & AI mở của BSD Insight — một Open Data Stack for AI lắp ghép từ các thành phần mã nguồn mở tốt nhất, thay vì khóa cứng vào một hãng. Mục tiêu: đưa dữ liệu từ hệ thống vận hành thành insight → trí tuệ → hành động, trên nền tảng bạn sở hữu và mở rộng được.

flowchart LR
  SRC["Nguồn<br/>Odoo · ERP · CRM · DB · SaaS"] --> AB["Airbyte<br/>Nạp (EL)"]
  AB --> CH["ClickHouse<br/>Lưu trữ"]
  CH --> DBT["dbt<br/>Biến đổi"]
  DBT --> CUBE["Cube<br/>Ngữ nghĩa"]
  CUBE --> BI["Superset / BI<br/>Phân tích"]
  CUBE --> AI["AI · RAG<br/>Suy luận"]
  AI --> N8N["n8n<br/>Hành động"]

Xuyên suốt còn có ba lớp nền: Dagster (điều phối pipeline), OpenMetadata (quản trị & catalog dữ liệu) và Langfuse (quan sát ứng dụng LLM).

Kiến trúc theo lớp

Lớp	Thành phần	Nhiệm vụ
Nạp dữ liệu (EL)	Airbyte	Đưa & sao chép dữ liệu từ nguồn vào nền tảng
Lưu trữ & xử lý	ClickHouse	Kho phân tích cột, truy vấn nhanh
Biến đổi (T)	dbt	Mô hình hóa bằng SQL, kiểm thử, lineage
Ngữ nghĩa	Cube	Định nghĩa chỉ số/nghiệp vụ dùng chung
Phân tích	Superset	Dashboard & khám phá dữ liệu
Điều phối	Dagster	Lập lịch & quản lý pipeline
Quản trị	OpenMetadata	Catalog, lineage, chất lượng, quyền
AI & Agent	Langfuse · LangGraph · RAG	Suy luận trên dữ liệu tin cậy
Tự động hóa	n8n	Đưa trí tuệ trở lại quy trình nghiệp vụ

Tài liệu theo thành phần

Airbyte — Data ingestion (EL) Nạp & sao chép dữ liệu: Source/Destination, Full Refresh, Incremental, CDC, schema, lịch & giám sát.

ClickHouse — Analytical foundation Kho phân tích dạng cột (OLAP): tách operational khỏi analytical, OLTP vs OLAP, compression, aggregation, near-real-time.

dbt — Data transformation Từ raw Odoo data → Trusted Business Data Model: staging → intermediate → mart, testing, lineage, version control.

Cube — Semantic & Metrics Layer Define Once — Use Everywhere: Measures/Dimensions/Relationships, One Business Definition, MCP cho AI Agent, caching.

Superset — BI & Data Exploration Dashboard, Explore self-service, visualization, cross-filter & drill-down, SQL Lab, embedded analytics, MCP; giảm BI vendor lock-in.

AI & Agentic — Reasoning & Action Reasoning trên Cube + Knowledge/RAG, AI Agent & LangGraph, reasoning ≠ action (n8n), human-in-the-loop, closed learning loop, Langfuse, model neutrality.

n8n — Automation & Business Action Đưa intelligence trở lại quy trình: triggers/actions, AI Agent = Reason / n8n = Execute, human-in-the-loop, AI guardrails, decision-to-action traceability.

Dagster — Data Orchestration Asset-centric orchestration, dependency-driven, sensors, partitions & backfills, asset checks & freshness, observability (Data Control Plane).

OpenMetadata — Governance & Catalog Catalog & discovery, business glossary, lineage (root cause & impact), ownership/domain/data product, quality & trust — Metadata Fabric xuyên suốt.

Community vs Enterprise

DataValue có hai đường: bản Community (mã nguồn mở, tự vận hành) và bản Enterprise do BSD Insight đóng gói — thêm tích hợp sẵn, bảo mật, vận hành và hỗ trợ. Tài liệu này mô tả cách các thành phần phối hợp; phần triển khai theo doanh nghiệp do BSD tư vấn riêng.

🤝 BSD Insight — tư vấn & triển khai DataValue Dựng nền Data & AI Platform mở cho doanh nghiệp bạn: từ Odoo → Airbyte → ClickHouse → dbt → Cube → BI/AI. Đặt lịch tư vấn.