1、 负责Hadoop大数据平台架构设计和软件技术选型、参与技术发展路线的设计和实践,以及大数据平台相关标准制定等工作; 2、 负责Hadoop/Spark/HBASE相关组件功能和性能优化设计和实施落地工作; 3、深度优化HADOOP平台算框架/存储技术,提升集群吞吐并降低成本; 4、hadoop和其他各业务线系统的日常监控、数据备份、数据监控、报警、故障处理; 5、 研究大数据技术发展动态,研究新型计算框架,并能够提出优化解决方案。
1、全日制大学本科及以上学历。 2、熟悉Hadoop生态圈组件(例如HDFS、YARN、Zookeeper、HBase、Hive、Spark、Kafka、Flink等),有源码改造经验者优先。 3、熟练使用Python和Java,有相关开发经验。 4、良好的沟通合作能力,热爱技术并善于钻研,主动思考,有敏锐的解决问题的思路。