大数据开发-数据仓库集市方向
岗位职责:
1.基于大数据平台进行数仓和数据集市建设,包括ETL开发、数据主题建设等
2.数据治理工作,包括数据标准整理,统一指标规范等
3.根据业务或各类数据应用的需求进行数据研发,以数据驱动业务不断发展
4.完成公司安排的其它任务
岗位要求:
1.5年以上数据仓库或数据集市建设经验,熟悉数仓分层架构和数据仓库建模理论;对银行业务熟悉,有银行业数仓或数据集市建设经验者优先考虑
2.熟悉hadoop、hive、spark、hbase等大数据,具备大数据平台下的离线数据处理经验;
3.能够熟练使用hiveSQL进行数据清洗加工;熟悉一种或多种开源调度工具,如Azkaban、Airflow、DophinScheduler等
4.了解数据治理技术,包括但不仅限于 元数据管理,数据质量管理,数据安全等
5.具备优良的业务分析沟通能力,主动推进项目进度的意识和能力,具有良好的团队协作能力,能快速迭代和解决问题
6.做过银行反洗钱报送、EAST报送或其他报送类数据开发优先考虑