崗位職責:
1、參與近百個源系統數據入倉大數據平臺的ETL實施,ETL性能優化、技術攻關等。
2、ETL開發,包括需求溝通、入倉建模、ETL開發、數據驗證、上線部署。
3、參與大數據平臺與各上下游關聯系統數據對接入倉、出倉配置開發。
4、參與ETL生產保障,ETL開發的數據質量、數據一致性及穩定性保障等底層數據的維護和建設。
崗位要求:
1、本科學歷,計算機等相關專業。
2、具有oracle、mysql等一種或多種主流數據庫的開發經驗;有銀行、金融從業經驗者優先。
3、熟悉kafka、flink工作原理、開發、配置調優,了解Hadoop、Hive、Habse、Spark。
4、熟悉常用的Linux指令,熟悉shell、python腳本語言,進行功能開發。
5、熟悉ETL工具如informatica、datax的使用。
6、了解數倉理論體系,對數據加載策略、數據處理、數據流有深刻的認識。
7、工作積極主動,具備較強的溝通能力;具有良好的學習能力和團隊合作精神。