岗位描述(节选)
1、基于 Spark 等核心计算引擎参与公司 AGI预训练 数据采集、去重等核心链路的重构,从引擎层设计适配方案支撑 AGI 数据处理;
2、负责 Spark、Celeborn、Hive 等离线计算引擎的维护、性能优化与稳定性保障;
【任职要求】
任职资格
1、具备扎实大数据基础,熟悉 Spark 或其他分布式计算核心原理(RDD、DAG、Shuffle 等),能独立做任务调优与问题排查;
2、掌握 Java/C++/Python 至少一门编程语言,代码能力优秀;
3、对 AGI 数据处理领域有兴趣,学习能力强,具备良好沟通协作能力。
加分项
1、参与过 AGI / 大模型训练数据链路相关项目;
2、了解 Spark 等组件源码或有开源社区贡献经验。
本站当前在招 22528 个上海岗位(全城各职能合计),其中 2290 个公开标注了薪资。按这些标注统计:月薪(税前)主流区间 8.4K ~ 20K(25~75 分位),中位约 12K,最低 0.8K、最高 120K。
在招岗位较多的企业:字节跳动 2648 个米哈游 643 个智元机器人 543 个蔚来 492 个得物 447 个
统计口径:求职者营地实时在招岗位的公开薪资标注,未标注者不计入;区间为 25~75 分位,非薪酬承诺。