岗位职责:
1、负责数据仓库、数据集市及实时数据流的 SQL 建模、开发、性能调优与运维;
2、基于 Google Cloud Platform(GCP)构建与维护可扩展的云原生数据解决方案,包括 BigQuery、Cloud SQL、Pub/Sub、Dataflow、Cloud Composer 等;
3、编写与优化复杂 SQL、存储过程、UDF,确保数据管道高效、稳定、可维护;
4、与数据治理团队协作,制定并落地数据质量、数据安全与成本优化策略;
5、参与 GCP 基础设施即代码(IaC)实践,使用 Terraform 或 Deployment Manager 自动化部署数据库与数据仓库资源;
6、监控并排查生产环境数据任务异常,利用 GCP Logging、Monitoring、Error Reporting 等工具快速定位与恢复;
7、编写技术文档与数据字典,推动代码评审、单元测试与 CI/CD 流程,保障交付质量;
8、跟踪云原生数据技术趋势,持续引入新工具与***实践,提升团队整体效率。
任职要求:
1、本科及以上学历,计算机、软件工程、信息管理等相关专业;
2、3 年以上 SQL 开发经验,精通标准 SQL 及至少一种主流数据库(MySQL / PostgreSQL / SQL Server);
3、熟悉 GCP 核心数据产品(BigQuery、Cloud SQL、Pub/Sub、Dataflow、Cloud Storage)并有实际项目落地经验;
4、熟练掌握 SQL 性能调优技巧,熟悉执行计划、索引设计、分区与分片策略;
5、了解维度建模理论,有数据仓库或数据集市设计经验者优先;
6、熟悉 Python / Shell 或其他脚本语言开发能力优先,
7、熟悉 Git、Jenkins、Docker 等 DevOps 工具链,有 IaC 思维与实践经验;
8、良好的沟通与团队协作能力,能够独立承担模块设计与跨部门技术交流;
9、具备英文技术文档读写能力,可阅读 GCP 官方文档与社区***实践。
加分项:
1、拥有 Google Cloud 专业认证(Professional Data Engineer 或 Cloud Developer);
2、熟悉实时流处理(Kafka、Dataflow Streaming、Spark Structured Streaming);
3、有 Terraform、dbt、Apache Airflow 等数据工程工具使用经验;
4、参与过金融、电商、物联网等大数据量场景的数据平台建设项目。