职责:
  1.有工作能力,工作踏实认真,以及较强的团队协作精神。
  2.负责日志大数据平台的搭建和规划;
  3.在总体架构设计下,完成日志大数据产品的设计、搭建、维护和调优,技术文档的编写与维护;
  4.参与业务日志的大数据分析;
  5.及时反馈开发中遇到的难点问题,沟通并寻求解决方案,按阶段有计划地完成开发任务
  任职资格:
  1、计算机等相关专业本科以上学历,2年以上开发经验;
  2、熟悉 linux 操作系统,熟悉 shell 脚本语言,精通 Java,有较强的开发能力;
  2、熟练使用SQL,熟悉Mysql、MongoDB、Hive等数据库技术的基本操作及原理;
  3、熟悉Hadoop/Spark生态系统组件的使用,至少有1年的Spark(Core/Streaming/SQL)开发经验;
  4、熟悉Elastic产品线(如 Elasticsearch、Kafka、Kibana、Logstash)的使用方法,了解常见优化方案,熟悉Elasticsearch部署、监控及性能调优;
  5、熟悉数据挖掘、机器学习、网络数据分析等技术优先;