工作职责：
1、利用大数据相关组件实现海量的搜集和存储；
2、利用大数据相关组件实现数据清洗，转换等工作；
3、利用大数据相关组件实现数据可视化以及海量数据下的多维钻取分析；
4、整合大数据相关组件，构建数据沙盒，支撑多租户的数据分析；
5、组件性能调优；
任职资格：
1、3年以上相关工作经验，至少熟练掌握Java，Scala，Python中的一种或多种；
2、熟悉Spark，Flink，Mapreduce等分布式计算框架。
3、熟悉 Storm，SparkStreaming等流处理框架。
4、熟悉MPP和搜索引擎，例如Impala，Presto，Elasticsearch等；
5、熟悉熟悉分布式存储系统，例如HDFS，Ceph等。