数据工程师（数据集成与平台开发方向）(J11575)

职位描述
1、负责业务系统数据接入，对接 ERP、PLM、CRM、SRM 等系统，搭建离线和实时数据同步管道，保障数据准时入湖

2、开发和维护 ETL 任务，编写数据清洗、转换、加载脚本，处理数据格式统一、异常值清洗、增量同步

3、基于 Flink 开发实时数据处理和实时指标计算任务

4、负责 Flink、Spark、Kafka、Doris、Iceberg 等大数据组件的环境搭建、部署、版本管理和日常排障

5、对外提供数据 API 和数据订阅推送，对接 BI 工具和 AI 应用

6、搭建数据质量监控规则，处理数据延迟、数据丢失、重复数据问题

7、协调外包开发资源，跟进交付质量

任职条件
1、本科及以上，计算机、软件工程相关专业

2、5 年以上数据开发或数据平台运维经验

3、SQL 熟练，Oracle、MySQL、PostgreSQL 能写复杂查询和存储过程

4、会 Python 写数据清洗、对账脚本

5、用过 DataX、Kettle、Flink CDC 至少两种，做过实时或离线数据同步

6、熟悉 Flink 或 Spark 实时处理作业

7、能独立完成大数据组件环境搭建部署和排错

加分项：

1、做过湖仓一体或阿里云 MaxCompute/DataWorks

2、用过 Doris、StarRocks 等 OLAP 引擎

3、有制造业、半导体、汽车行业数据集成经验

4、用过 Dify / 豆包搭过数据相关 AI 工具