数据开发工程师

职位描述：
　工作内容：
　1、搭建维护hadoop、hbase、spark等集群并进行必要的troubleshooting，保障系统正常运行；
　2、提高集群的使用效率及稳定性，并对整个系统做合理分离，满足各种应用场景的使用；
　3、构建集群监控体系、可视化体系、调度系统，保障集群安全和数据安全；
　4、数据使用开发平台;
　5、各个业务线的数据接入及数据一致性建设
　任职要求：
　1、计算机相关专业统招本科以上学历；
　2、熟悉linux平台及shell/python/perl脚本开发；
　3、熟悉hadoop系统，对hdfs、hbase、hive等分布式体系有丰富的研究及实践；
　4、熟练书写常见的sql语句，并对常见的数据接入技术架构flume，kafka，sqoop等有丰富的经验；
　5、对服务器集群有较深的理解；
　6、有强烈的责任心和学习能力；