数据平台
  1. 首页
  2. 数据平台

列表

OpenLineage 与列级数据血缘深度实战：从 SQL AST 作用域解析到 Marquez 图存储的工程全解

OpenLineage 与列级数据血缘深度实战：从 SQL AST 作用域解析到 Marquez 图存储的工程全解

深入解析列级数据血缘的工程落地：OpenLineage 的 Run/Job/Dataset/Facet 事件模型、columnLineage facet 结构、SQL 作用域与别名消解的列依赖解析算法（sqlglot 实现）、CTE/UNION/JOIN 合并列处理与降级策略、Spark/Flink/dbt/Airflow 跨引擎统一上报，以及 Marquez 的 Dataset 版本化图存储与递归 CTE 血缘遍历。
数据库技术 2026年09月30日
语义层与 MetricFlow 深度实战：从语义图建模、扇出去重到时间脊与指标 SQL 生成的工程全解

语义层与 MetricFlow 深度实战：从语义图建模、扇出去重到时间脊与指标 SQL 生成的工程全解

本文深入解析语义层与 MetricFlow 的工程实现：语义图（Semantic Model / Entity / Measure）建模、五种度量代数类型、多跳 Join 中的扇出陷阱与「先聚合后连接」查询规划原则、时间脊补零机制，以及指标 SQL 生成的完整链路，并给出五条生产落地判断。
数据库技术 2026年09月30日
Apache Superset 深度工程实战：从语义层指标编译、SQL AST 转译到异步查询与缓存失效的生产级全链路

Apache Superset 深度工程实战：从语义层指标编译、SQL AST 转译到异步查询与缓存失效的生产级全链路

把 Apache Superset 当作 SQL 编译与执行代理来拆解：语义层如何用虚拟数据集与指标表达式收口口径并规避扇出陷阱；sqlglot AST 如何完成跨方言转译与行级安全子句的确定性注入；SQL Lab 如何借 Celery 独立队列与结果后端做异步执行与取消；缓存键如何由 QueryContext 归一化签名以保证租户隔离与命中率。附虚拟数据集 SQL、RLS AST 注入与缓存键 Python 代码，以及连接池、Jinja 模板注入、ETL 主动失效缓存等生产落地清单。
数据库技术 2026年10月04日