岗位描述
1.负责数据工程平台的技术选型、模块设计与开发,负责数据接入、数据同步、ETL、数据清洗、数据治理、数据质量管理、数据集生产等核心服务与底层组件开发、重构及性能优化,保障高质量数据集输出。
2.参与数据类需求分析、方案设计与技术评审,负责分布式数据服务、数据微服务、数据接口开发与数据库设计,确保平台高并发、高可用、可扩展,满足数据要素运营、内部子公司数据汇聚、外部数据接入等业务场景。
3.跟进数据平台研发、测试、部署、上线全流程,快速定位并解决数据链路异常、数据同步延迟、大数据量性能瓶颈、分布式数据服务故障等问题,保障数据服务 7×24 小时稳定运行。
4.负责数据安全、权限管控、数据脱敏、接口审计、数据分类分级等能力实现,确保平台符合等保、数据合规、CMA/CNAS、TC609 等相关要求。
5.跟踪大数据、数据治理、云原生等技术趋势,推动数据平台能力迭代与技术升级,完成上级安排的其他研发工作。
岗位要求
1.本科及以上学历,计算机、软件工程、大数据等相关专业,2 年及以上后端 / 数据开发经验。有数据平台、数据治理、数据中台、数据集生产经验优先。
2.精通 Java 或 Python 至少一门后端语言,熟练使用对应主流开发框架,具备扎实编程基础与良好编码规范。
3.熟练使用 MySQL、PostgreSQL、Redis 等数据库,精通 SQL 优化、索引优化、事务处理,能解决高并发、大数据量性能问题。
4.精通微服务架构,掌握服务拆分、服务治理、接口设计,使用过 Spring Cloud / Spring Cloud Alibaba / Dubbo 等至少一种微服务框架。
5.熟悉 RESTful /gRPC 接口设计,了解消息队列、分布式锁、分库分表、高可用架构等核心技术。
6.熟悉大数据技术栈:Kafka、ELK、时序数据库、数据同步、ETL、数据清洗、数据治理流程,有数据工程平台开发经验优先。
7.了解 Docker、K8s、CI/CD,具备服务部署与问题排查能力。
8.具备数据安全、沙箱、隐私计算、数据集治理相关经验者优先。
9.学习能力强,责任心强,具备良好沟通协作与抗压能力。
10.不存在影响聘用的有关情况。