大数据开发

岗位要求：
1、3年以上javaPython开发经验，2年以上大数据开发经验；本科以上学历计算机、数学、信息管理相关专业；
2、熟悉hadoop大数据生态圈大部分框架的搭建、应用、优化（如Spark、Mapreduce 、Sqoop、Kafka 、Hdfs、Hive、hbase等）；
3、熟练使用Linux、Unix等操作系统具备编写shell的能力；熟悉SQL和noSQL数据库的设计和开发
4、深刻理解大数据处理（流计算，分布式计算，分布式文件系统，分布式存储等）相关技术和实现方法；
5、熟悉主数据、元数据、数据质量等企业数据管理相关的体系和方法；
6、熟悉使用ETL工具的使用优先；具有统计学、数据挖掘、机器学习理论优先；有丰富的java开发经验和互联网背景优先；
7、强烈的主动性与工作责任心，对所负责工作有owner意识，并能自我驱动不断成长；