岗位描述
岗位职责
1. 数据平台建设与运维
1) 了解开源大数据平台的架构设计和基本运维,保障数据处理的稳定性和高效性。
2) 搭建并维护数据仓库、数据湖,设计ETL流程,确保数据采集、清洗、存储的准确性与时效性。
2. 数据分析与模型开发
1) 基于业务需求(如良率改善、缺陷关联分析等),设计数据挖掘模型与算法,并完成工程代码实现。
2) 开发BI可视化工具,将分析结果转化为直观的业务报告。
3. 数据治理与质量管控
1) 制定数据标准、元数据管理规范,监控数据质量,确保数据一致性与完整性。
2) 推动数据安全策略落地,保障敏感数据合规使用。
4. 跨部门协作与沟通
1) 协同业务部门理解数据需求,提供定制化分析解决方案。
2) 培训一线团队使用数据分析工具,提升数据应用能力。
岗位要求
1. 统招本科及以上学历,计算机、统计学、数学、数据科学相关专业(硕士优先)。
2. 2年以上大数据开发或分析经验
技术能力
1. 核心技术栈
1) 精通SQL,熟练掌握至少一门编程语言(Java/Python)。
2) 深入理解分布式系统原理,具备Hadoop/Spark/Flink/Kafka/hudi/paimon等组件开发调优经验。熟悉starrocks/doris/greenplum等mpp数据库,熟悉oracle/mysql/hana等数据库,有大数据平台运维经验者优先。
2. 数据分析能力
1) 熟悉常用数据挖掘算法(聚类、回归、关联分析等),熟练使用Python/R/SPSS等工具。
2) 熟练掌握一种数据可视化技术(如FineReport/Fine BI/Tableau/Power BI)。
3. 数据架构经验
1) 熟悉数据仓库建模,有实时数仓建设经验者优先。