大数据开发

岗位职责：

1、与业务需求部门进行有效沟通，进行需求分析设计；

2、负责数据类项目开发及运维；

3、负责搭建基于HADOOP大数据平台环境进行管理工作；

4、负责实时大数据应用需求开发；

5、负责大数据平台公共/基础功能封装与实现；

6、负责基于大数据平台进行数据分析、接入、加工、清洗、处理程序的开发；

7、负责数据仓库建设、设计、优化和落地；

8、对业务与产品的数据分析需求给予实现与支持。

任职要求：

1、 本科及以上学历，计算机相关专业；

2、4年以上大数据开发经验，有大数据实时数据处理项目经验优先；

3、 熟悉大数据平台的整体技术架构，如HIVE 、HBASE、KAFKA、SPARK 、Flink、Strom、HADOOP、HDFS、HUE等；

4、熟悉大数据平台的架构设计（Flink + Hbase + Kafka）；

5、熟悉linux系统命令，具备shell脚本编写能力。