数据平台专员(质量管理)

你将做什么

• 在 GCP 内使用 Dataform 或 BigQuery 存储过程等工具,构建、部署和维护自动化数据质量规则和测试。
• 创建监控、警报和记分卡仪表板,及早发现数据异常、架构变更和质量下降。
• 使用高级 SQL 进行根本原因分析,追踪数据事件并与数据工程师和系统负责人协调修复。
• 帮助管理 BigQuery 平台环境,涵盖查询性能、成本控制和可靠的转换管道。
• 为数据接入、转换和异常处理建立治理护栏。
• 使用 Cloud Composer、Knowledge Catalogue 或 Cloud Functions 等原生 GCP 工具来编排质量检查并修复管道故障。
• 在新数字和分析项目中,担任 Data Quality by Design 框架的技术执行臂膀。
• 与项目团队合作审查数据模型和集成,在数据被使用之前将质量测试编码到管道中。
• 在 GCP Knowledge Catalog 等工具中维护技术元数据,以确保 Data Catalogue、Data Dictionary 和 Data Lineage 保持准确和可发现。