岗位描述
岗位职责
一、岗位简介
本岗位聚焦公司面向AI及智能体的海量数据的采集、存储、清洗、计算与建模,负责大数据平台的搭建、迭代与维护,支撑业务数据分析、数据挖掘、智能决策等核心场景。依托主流大数据技术框架,保障数据系统的稳定性、高效性与可扩展性,为公司海内外业务的数据化运营、智能化升级提供底层技术支撑,适配计算机、大数据、软件工程等技术类专业应届生。
二、工作职责
1、参与大数据平台的开发、迭代与日常维护,负责海量结构化、非结构化数据的采集、同步、清洗、转换和入库工作,保障数据链路稳定运行。
2、基于Hadoop、Spark、Flink、等主流大数据框架,进行离线计算、实时计算任务的开发与优化,提升数据计算效率,降低任务运行成本。
3、搭建和优化数据仓库、数据集市,梳理数据分层体系,统一数据规范与口径,支撑业务数据分析、报表统计、数据挖掘等各类数据应用需求。
4、排查大数据集群运行过程中的故障、性能瓶颈,持续优化集群资源利用率、任务运行稳定性与数据处理时效性。
5、配合数据分析师、业务团队的数据需求,完成数据接口开发、数据模型优化工作,赋能海内外业务数据化、精细化运营。
6、跟进大数据行业新技术、新框架,参与技术调研与落地,推动团队大数据技术体系升级迭代。
岗位要求
1、学历专业:2027届本科及以上应届生,大数据、计算机科学与技术、软件工程、人工智能、信息与计算科学等计算机相关专业优先。
2、技术基础:掌握Java/Python等任意一种主流开发语言;了解AI编程、熟悉SQL语法,具备数据库基础认知;了解Linux常用命令及服务器基础操作。
3、专业技能:了解AI编程、智能体开发、Hadoop、Hive、Spark、Flink、Kafka等主流大数据生态组件的原理与基础使用,有相关项目实战、课程设计、实习经历者优先。
4、能力素质:具备扎实的计算机基础知识,熟悉数据结构、算法、数据库原理;逻辑严谨,具备较强的问题排查能力、自主学习能力和团队协作能力。
5、其他:对大数据技术有浓厚兴趣,乐于钻研新技术,有大数据项目开发、数据仓库搭建、集群运维相关经验者优先,无全职工作经验要求。