任职要求
1、本科以上学历,3年以上工作经验;
2、精通java/python至少一种开发语言;熟练掌握 SQL,具备良好的数据仓库理论基础和数据建模能力(如维度建模)
3、熟悉 spark on k8s, 大数据平台组件,有两年以上实际项目经验;对 Spark 的核心原理(如 RDD、DataFrame/Dataset、Catalyst 优化器、内存管理、Shuffle 机制)有深入理解
4、熟悉 Kubernetes 的核心概念(Pod, Deployment, Service, PVC/PV 等),具备 Spark on Kubernetes 的部署、配置、运维和问题排查经验。
5、了解并具备使用主流 AI大模型工具进行数据处理、增强、质量校验或代码生成的经验;有将 LLM 集成到数据工作流中的实践经验者优先
6、良好的学习能力、沟通能力、适应能力、责任心强,能在压力下独立解决问题,具有主人翁精神。