职位描述
职位描述:
岗位职责:
1、负责数据的采集、清洗、过滤、入库、分析、挖掘的开发工作;
2、负责大数据产品、技术平台、数据接口的开发;
任职要求:
1、熟悉java,熟悉shell,可熟练使用linux开发环境;
2、熟悉hadoop/hbase/hive/spark/storm/elasticsearch/kafka/redis等开源系统,具备相关大数据系统的使用和开发经验优先;
3、具备对多源异构数据的采集处理经验,有大规模海量数据挖掘与机器学习相关工作经验优先;
4、熟悉主流关系型数据库的使用和优化,熟练掌握sql;
5、良好的沟通和学习能力。