職位描述:
1、構建大數(shù)據(jù)平臺,完成數(shù)據(jù)采集、復雜數(shù)據(jù)清洗、存儲等開發(fā)工作;
2、參與項目統(tǒng)一的數(shù)據(jù)倉庫數(shù)據(jù)開發(fā);
3、基于Flink/Sparkstreaming引擎實現(xiàn)流式和批式?體化的數(shù)據(jù)融合處理
3、負責與企業(yè)級數(shù)據(jù)倉庫建設和管理,包括但不限于數(shù)據(jù)質(zhì)量、數(shù)據(jù)模型、數(shù)據(jù)安全相關標準的制定;
4、數(shù)據(jù)模型設計與ETL開發(fā),系統(tǒng)性的數(shù)據(jù)解決方案,產(chǎn)出數(shù)據(jù)產(chǎn)品;
5、和數(shù)據(jù)分析師團隊及需求部門進行有效溝通,報告項目進度及解決問題等;"
職位要求:
1、本科及以上學歷,計算機、軟件工程、通信工程、自動化等相關專業(yè),3年以上工作經(jīng)驗,條件優(yōu)秀可適當放寬學歷限制;
2、精通計算機原理,熟練掌握Java/scala/python等開發(fā)語言,熟悉常用設計模式;
3、精通離線數(shù)據(jù)分析,熟練掌握Hadoop、Hive、flume、SparkCore、SparkSql、Sqoop、Azkaban等技術并具有相關項目經(jīng)驗;
4、精通SQL語法,并具備SQL分析調(diào)優(yōu)能力;
5、熟悉實時數(shù)據(jù)計算,熟練掌握Kafka、SparkStreaming/Flink、Kudu、Impala、Hbase等技術框架;
6、熟悉Mysql,HBase、ES、Clickhouse等數(shù)據(jù)庫;
7、熟悉shell/python等腳本語言;熟悉微服務框架開發(fā),實時數(shù)倉經(jīng)驗者優(yōu)先。"
職位福利:五險一金