软件开发工程师-大数据

【职位描述】

1.负责大数据平台、数据仓库、核心模块的详细设计、研发、测试、优化及维护等工作，

2.完成ETL开发、数据治理与分析平台的构建，负责数据清洗、加工、转换、加载工作；

3.分析数据产品需求，进行数据建模和相关设计、编码，配合业务端实现数据提取与分析；

4.建设基于Hadoop/Spark的大数据离线、实习处理平台；参与实时/离线数据管道的开发与维护，处理结构化和非结构化数据；

5.为大数据的全生命周期提供服务，覆盖数据产生、传输、建模、统计分析等全流程。协助数据分析结果的应用实施，跟踪实施效果，并进行评估和优化。

【任职要求】

1.计算机科学与技术、软件工程、通信工程、信息安全、电子信息等专业硕士及以上学历；

2.熟悉数据仓库各类建模理论，具备大型数据仓库架构设计及ETL开发经验优先；

3.熟悉Hadoop生态环境及其架构，熟悉hive、spark、kafka、MapReduce、flink等大数据技术框架技术；

4.熟练掌握至少一种主流编程语言（Java/Python/Go/C++等），对JVM有深入理解，具备优秀的代码开发能力；

5.熟练Linux、Shell，能通过常用指令进行基本的系统维护和问题排查；

6.熟练掌握至少一种数据库，如Oracle、MySQL、国产数据库等，有较好的SQL编码能力。

7.具有良好的沟通能力和团队合作精神，责任心强、工作严谨、有钻研精神。

招聘方式

1.事业编制：27应届硕士研究生及以上学历。

2.解决北京户口，事业编薪资待遇，工作地点：北京。