公司介绍
我们服务的客户是一家财富中国500强的知名电商公司
岗位职责
- 负责大数据组件HDFS/YARN/Spark/Hudi的等开源组件二次开发和优化工作
- 跟踪最新技术的发展，并且把前沿的技术引入公司，在生产上发挥效率
- 负责处理大数据平台稳定性等问题，为数据的各个使用场景提供可靠的技术支持
- 提升平台的整体高效和稳定运行，降低平台的整体运营成本；包括用技术手段提升存储和计算的效率
- 负责公司数据湖和增量计算场景的落地，优化数仓架构的流程和体系
岗位要求
- 本科以上学历、计算机软件相关专业
- 扎实的Java/Scala语言基础，对JVM运行机制有深入了解
- 熟悉Hadoop、Spark源码和原理，有patch源码经验者优先
- 有大规模集群优化的经验者优先
- 善于思考，能独立分析和解决疑难问题
工作地点：广州市海珠区
福利 ...
