職位描述
負(fù)責(zé)大數(shù)據(jù)平臺系統(tǒng)的需求分析、方案設(shè)計(jì)、特性開發(fā)、持續(xù)構(gòu)建(CI/CD)等工作:
1、構(gòu)筑領(lǐng)先業(yè)界一代的智能化、高吞吐、高彈性的實(shí)時(shí)流計(jì)算、離線批計(jì)算框架;
2、實(shí)現(xiàn)一站式的數(shù)據(jù)編排平臺,將集成、流、批、策略、AI、模型驅(qū)動開發(fā)整合;增強(qiáng)數(shù)據(jù)治理能力,構(gòu)筑運(yùn)營商數(shù)據(jù)中臺;
3、構(gòu)建統(tǒng)一的數(shù)據(jù)訪問層,通過實(shí)現(xiàn)標(biāo)準(zhǔn)SQL的JDBC驅(qū)動,構(gòu)筑數(shù)據(jù)分析開放生態(tài);
4、開發(fā)大數(shù)據(jù)云。
崗位要求
1、熟練掌握C/C++、Java、Scala、Shell等開發(fā)語言一種或多種,并具備實(shí)踐經(jīng)驗(yàn);
2、了解軟件工程、敏捷開發(fā)、設(shè)計(jì)模式、數(shù)據(jù)結(jié)構(gòu)與算法等知識;
3、熟練掌握一個(gè)或多個(gè)大數(shù)據(jù)主流技術(shù)框架的原理及應(yīng)用,如Hadoop、Flink、Spark、HBase、Kafka、Redis、Zookeeper等;
4、了解ETL、數(shù)據(jù)治理、元數(shù)據(jù)、流計(jì)算、批計(jì)算、數(shù)據(jù)倉庫,數(shù)據(jù)查詢等大數(shù)據(jù)知識原理并有實(shí)踐經(jīng)驗(yàn)者優(yōu)先。