岗位描述
岗位职责:
1、负责数据采集、清洗、存储及计算的后端架构开发(Java/Python)。完成数据平台开发,实现数据采集、数据血缘、数据生产、模型训练、评测等数据闭环流水线业务功能实现。
2、优化大规模数据处理链路(TB~PB级),提升数据筛选、加工与回流效率;
3、设计和实现具身业务相关的基础设施/工具链等,结合业务落地,满足使用要求。
任职资格:
1、研究生及以上学历,计算机科学、软件工程、自动化或相关专业;
2、熟练掌握 Java、Python 其中一门语言;
3、熟悉 Kafka等消息队列,具有高吞吐数据管道建设经验;
4、熟悉对象存储(如 AWS S3, MinIO)及相关文件系统操作;
5、使用AI进行辅助开发、测试提效。