崗位職責(zé):
1、參與數(shù)據(jù)倉庫的架構(gòu)設(shè)計(jì)、模型開發(fā)和ETL(Extract, Transform, Load)流程的開發(fā)。這包括使用Kimball的維度建模方法進(jìn)行數(shù)據(jù)倉庫設(shè)計(jì),確保數(shù)據(jù)組織合理、準(zhǔn)確和穩(wěn)定?。
2、負(fù)責(zé)大數(shù)據(jù)平臺(tái)的海量數(shù)據(jù)處理、數(shù)據(jù)計(jì)算和數(shù)據(jù)開發(fā),包括使用Hadoop、Hive、Spark、Flink、Kafka等技術(shù)進(jìn)行數(shù)據(jù)處理和優(yōu)化,確保數(shù)據(jù)的性能和穩(wěn)定性?。
3、參與數(shù)據(jù)治理工作,提升數(shù)據(jù)易用性和數(shù)據(jù)質(zhì)量,與數(shù)據(jù)工具團(tuán)隊(duì)緊密合作,確保數(shù)據(jù)的準(zhǔn)確性和安全性?。
?4、理解并抽象業(yè)務(wù)需求,為業(yè)務(wù)部門提供數(shù)據(jù)支持,搭建業(yè)務(wù)分析模型或指標(biāo)體系,參與報(bào)表需求調(diào)研和開發(fā)工作?。
?5、負(fù)責(zé)企業(yè)級(jí)數(shù)據(jù)倉庫的設(shè)計(jì)、規(guī)劃、建設(shè)和實(shí)施,維護(hù)大數(shù)據(jù)平臺(tái),解決相關(guān)問題,保障平臺(tái)正常運(yùn)行?。
?崗位要求?:
1、計(jì)算機(jī)科學(xué)、數(shù)學(xué)或統(tǒng)計(jì)學(xué)等相關(guān)專業(yè)的本科及以上學(xué)歷?。
2、具有3年以上數(shù)據(jù)倉庫領(lǐng)域的經(jīng)驗(yàn),熟悉數(shù)據(jù)倉庫模型設(shè)計(jì)與ETL開發(fā),有海量數(shù)據(jù)處理經(jīng)驗(yàn)。
3、精通SQL,熟悉Hive SQL,熟練使用Python、Shell等腳本語言;熟悉AWS大數(shù)據(jù)平臺(tái)和Flink優(yōu)先?。
4、具備SQL性能調(diào)優(yōu)經(jīng)驗(yàn),能夠解決數(shù)據(jù)處理中的性能問題;對云計(jì)算和數(shù)據(jù)服務(wù)有深入理解?。
5、具備良好的溝通能力和團(tuán)隊(duì)協(xié)作精神,能夠與業(yè)務(wù)團(tuán)隊(duì)緊密合作,理解業(yè)務(wù)背景并提供技術(shù)支持?。
6、對新技術(shù)保持敏感,具備強(qiáng)烈的求知欲和進(jìn)取心,能夠不斷學(xué)習(xí)和應(yīng)用新技術(shù)以滿足系統(tǒng)需求?