職位職責(zé):
1.負(fù)責(zé)收集各部門數(shù)據(jù)提取和數(shù)據(jù)分析相關(guān)需求,設(shè)計(jì)技術(shù)方案;
2.負(fù)責(zé)數(shù)據(jù)源調(diào)研、ETL設(shè)計(jì)與開發(fā)、作業(yè)調(diào)度配置,以及數(shù)據(jù)處理相關(guān)運(yùn)維工作;
3.大數(shù)據(jù)相關(guān)的數(shù)據(jù)開發(fā)工作,建設(shè)支持業(yè)務(wù)系統(tǒng)的數(shù)據(jù)應(yīng)用;
4.負(fù)責(zé)相關(guān)技術(shù)文檔的撰寫等工作。
任職要求:
1.本科及以上學(xué)歷;
2.計(jì)算機(jī)相關(guān)專業(yè);
3.工作經(jīng)驗(yàn): 5~10年,2年以上大數(shù)據(jù)開發(fā)經(jīng)驗(yàn);
4.熟悉大數(shù)據(jù)應(yīng)用平臺(tái)的開發(fā)工作,熟悉Java、Python、Scala等編程語言的其中一種,熟練掌握shell腳本進(jìn)行開發(fā);
5.具備Hadoop、Hive、Spark等主流大數(shù)據(jù)技術(shù)棧的開發(fā)、監(jiān)控、性能調(diào)優(yōu)與應(yīng)用項(xiàng)目經(jīng)驗(yàn);
6.掌握數(shù)據(jù)倉庫建模及ETL設(shè)計(jì)開發(fā),有較為系統(tǒng)的海量數(shù)據(jù)性能處理經(jīng)驗(yàn);
7.掌握以下至少一種數(shù)據(jù)庫:Oracle、Mysql、Sqlserver、Doris,具備數(shù)據(jù)庫開發(fā)、存儲(chǔ)過程開發(fā)、sql調(diào)優(yōu)經(jīng)驗(yàn)。