崗位職責(zé):
1、負(fù)責(zé)大數(shù)據(jù)平臺行業(yè)數(shù)據(jù)管理集成架構(gòu)設(shè)計(jì);
2、負(fù)責(zé)客戶數(shù)據(jù)中臺/數(shù)據(jù)平臺/數(shù)據(jù)湖架構(gòu)設(shè)計(jì);
3、負(fù)責(zé)數(shù)據(jù)質(zhì)量管理、元數(shù)據(jù)管理、數(shù)據(jù)標(biāo)準(zhǔn)管理、數(shù)據(jù)交換等系統(tǒng)架構(gòu)設(shè)計(jì);
4、協(xié)同業(yè)務(wù)分析完成架構(gòu)設(shè)計(jì)目標(biāo)。
專業(yè)知識:
1、熟悉主數(shù)據(jù)、數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)質(zhì)量等企業(yè)數(shù)據(jù)治理相關(guān)的體系和方法;
2、邏輯模型和物理模型建模、中間層模型理論以及多維模型的設(shè)計(jì);
3、 精通hadoop平臺所有組件原理,熟悉掌握主流數(shù)據(jù)庫,有豐富的二次開發(fā)實(shí)戰(zhàn)經(jīng)驗(yàn);
4、 至少掌握三個(gè)大數(shù)據(jù)組件spark、ES、flink、redis、solr、storm技術(shù)原理和應(yīng)用場景;
5、精通至少1門編程語言,Java/Python/SQL/Scala等。
業(yè)務(wù)技能:
1、有3年以上大型公司數(shù)據(jù)中臺、數(shù)據(jù)倉庫、數(shù)據(jù)治理項(xiàng)目架構(gòu)設(shè)計(jì)及實(shí)施經(jīng)驗(yàn);
2、熟悉大數(shù)據(jù)技術(shù)方案規(guī)劃,包括ETL設(shè)計(jì)、數(shù)據(jù)開發(fā)規(guī)劃、數(shù)據(jù)架構(gòu);
3、熟悉離線處理、流計(jì)算、大數(shù)據(jù)實(shí)時(shí)檢索、大數(shù)據(jù)交互查詢場景化應(yīng)用方案;
4、對數(shù)據(jù)標(biāo)準(zhǔn)質(zhì)量、模型、元數(shù)據(jù)管理的在行業(yè)場景的落地應(yīng)用有深入研究;
5、對于實(shí)時(shí)數(shù)據(jù)倉庫建設(shè)、非結(jié)構(gòu)化數(shù)據(jù)管理方案有深入應(yīng)用的優(yōu)先。