技术:1、本科及以上学历,计算机相关专业。具备扎实的大数据开发知识储备,具有大数据清洗和批量加工处理的项目经历或实操经验,必需;
2、两年以上的大数据开发经验,精通SQL,理解Hive/Postgre sql/ Oracle基本原理和调优更佳;
3、熟练掌握Oracle存储过程,以及Python/shelll脚本编程;
4、动手搭建部署过Hadoop,Spark集群,加分项;
5、思路清晰,思维敏捷,良好的沟通表达能力、文档编写能力;能承担一定的工作压力。
职责:1.负责客户、员工、企业工商等主数据的唯一性识别及相关信息整合加工的数据开发;
2.负责对接各主数据管理系统,提供大数据支持,为各集市层、下游应用系统提供主数据服务;
3.负责主数据相关的数据统计和分析挖掘;
4.负责主数据数据质量相关的日常监控、异常排查和质量提升。
考察点:大数据开发经验,理解思考能力,主动独立完成任务的能力