职位要求
职位描述
1、数据平台及相关的应用组件开发,调优及维护;
2、数据服务对外业务逻辑开发、调优及维护;
3、大数据环境下的软件开发,数据应用分析;
技能要求:
1、计算机及相关专业本科及以上学历,3年以上大数据开发经验;
2、精通Spark(或map/reduce)大数据平台架构
3、编程基础扎实,熟悉io、多线程、集合等基础框架,熟悉分布式、缓存、消息、搜索等机制
4、熟悉Kafka、Hive等数据收集或消息队列系统的使用及维护
5、熟悉Java语言开发。熟悉Python或者shell语言者优先;
6、对HDFs Yarn Hbase Hive Spark相关组件的性能优化和补丁跟踪等有实际经验优