职位描述
工作职责:
1、设计、开发和维护高效的数据通道和数据仓库。
2、协助项目经理、需求分析师和其他业务团队理解数据需求并提供相应的数据解决方案。
3、优化现有的数据处理流程,提升数据处理效率和质量。
4、完成不同源端数据的集成采集,保证数据的时效性及完整性。
5、制定和实施数据管理和安全策略。
6、 大数据相关组件调优,确保系统链路高效、稳定运行。
任职资格:
1、本科以上学历,计算机科学、信息技术或相关专业优先。
2、至少4年以上数据工程、数据开发或相关领域的工作经验。
3、熟练掌握SQL及大数据相关数据库SQL(如MySQL、HiveSQL、Clickhouse等)。
4、具备使用编程语言(如Python, Java等)进行数据处理和脚本编写的能力。
5、了解大数据技术和工具(如hadoop ,flink,kafka,hbase,Clickhouse等)。
6、良好的沟通能力和团队合作精神,优秀的问题解决能力和逻辑思维能力。