大数据开发工程师

岗位职责
1. 负责公司数据平台的开发与维护，支持业务数据需求。
2. 设计并优化数据模型，确保数据存储与处理的高效性和稳定性。
3. 开发和管理数据管道，确保数据的准确性、完整性和及时性。
4. 参与数据集成与清洗工作，支持数据分析和业务决策。
5. 配合数据分析团队，提供技术支持并优化数据查询性能。
6. 研究和探索大数据相关技术，提升数据处理效率和平台性能。
7. 编写相关技术文档，确保数据开发工作的规范性和可持续性。

岗位要求
1. 计算机科学、信息技术或相关专业背景，具有数据开发相关经验。
2. 熟悉关系型数据库（如MySQL、PostgreSQL）和分布式数据库（如Hive、HBase）。
3. 精通SQL及数据建模，具备优化复杂查询的能力。
4. 熟悉大数据技术栈（如Hadoop、Spark、Kafka等），有实际项目经验者优先。
5. 掌握至少一种编程语言（如Python、Java、Scala），并能应用于数据处理任务。
6. 具备良好的问题解决能力和逻辑思维能力，有较强的团队协作精神。
7. 对数据质量和数据治理有一定理解，能够设计和实施相关方案。