sanfeng
Go/Java 后端开发
某TOP3 OTA公司数据平台项目
平台包括三部分
数据治理平台:
整合公司的各业务数据,实现对元数据管理及数据血缘追踪、并对业务数据清洗生成对应业务的指标数据提供给自助查询平台使用。同时提供通用共享接口,可以方便在各业务部门间共享数据。提供最细粒度的数据控制(行记录级别).
自助分析平台:
实现对各业务指标的探索式分析,支持表格、图例、下钻、透视各种展现形式,支持跨业务间的指标聚合转换。
ETL调度平台:
基于apache airflow,由平台定义任务规则后,自动生成airflow调度任务执行,通过对任务规则的分析来追踪数据血缘提供给数据治理平台。
项目案例
ChatFlow低代码平台
统一推荐系统
浙公网安备33011802001633号
浙ICP备1805484号-2