Title: 高级分布式hadoop开发工程师
基本要求:
1、本科或以上;一年以上工作经验
工作描述:
基于Hadoop 2.0(YARN)开发mapreduce程序和基于hservice的流计算实时任务,完成业务部门的各种搜索业务和数据的需求,完成需求评估到上线的一系列开发流程,能解决实际线上生产系统(hadoop,hbase,zookeeper,redis以及各种生产任务等)的各种问题;维护线上任务的稳定产出;跟踪hadoop社区新动态,设计开发自有离线数据计算平台等;
职位要求:
1、有扎实的计算机理论基础, 对数据结构及算法有较强的功底;
2、java语言或C++熟练, 知道如何写高效的工业级代码,兼有者更佳
3、对分布式系统原理有较深的理解,理解数据库和nosql相关理论;
4、熟悉MapReduce及Hadoop的使用,能解决Hadoop/YARN的复杂问题;
5. 熟悉 HBase 实践以及底层实现,能通过阅读源码和修改代码解决HBase实际问题;
6、对分布式开源项目(Zookeeper,Hive,tez,oozie,redis等)有技术兴趣,能跟踪hadoop 社区发展方向;
7、性格坚韧,有抗压能力,有责任心; 对技术有热情,能自我驱动, 通过学习解决困难问题;
8、良好的分析及解决问题的能力,良好的团队合作精神;愿意来杭州工作,不排斥业务开发;