崗位職責(zé):

1、大數(shù)據(jù)平臺(tái)搭建與維護(hù)；?

2、大數(shù)據(jù)處理與分析；?

3、數(shù)據(jù)倉(cāng)庫(kù)建設(shè)；?

4、大數(shù)據(jù)應(yīng)用軟件開發(fā)；

5、撰寫產(chǎn)品及解決方案文檔，組織內(nèi)外部培訓(xùn)；

6、完成上級(jí)交辦的其他能力范圍內(nèi)工作。

崗位要求：

1、掌握離線、實(shí)時(shí)計(jì)算開發(fā)能力，熟悉并能夠熟練運(yùn)用數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)方法，具有實(shí)際的數(shù)據(jù)模型設(shè)計(jì)及ETL開發(fā)經(jīng)驗(yàn)，能夠高效完成數(shù)據(jù)處理流程的設(shè)計(jì)和實(shí)現(xiàn)。?

2、深入掌握Hadoop生態(tài)相關(guān)的技術(shù)及開發(fā)，包括Flink、Hiveonspark、Doris、CDH、REDIS、Dolphinscheduler、kafka等，具備基于分布式存儲(chǔ)與計(jì)算平臺(tái)進(jìn)行應(yīng)用開發(fā)和性能優(yōu)化的豐富經(jīng)驗(yàn)，能夠充分發(fā)揮大數(shù)據(jù)平臺(tái)的性能優(yōu)勢(shì)。?

3、熟練掌握至少一門編程語言，如Python、Java、Scala等，具備良好的編程習(xí)慣和代碼質(zhì)量意識(shí)，能夠運(yùn)用編程語言高效實(shí)現(xiàn)大數(shù)據(jù)處理算法和業(yè)務(wù)邏輯；同時(shí)具備軟件開發(fā)能力，能夠參與大數(shù)據(jù)相關(guān)軟件的需求分析、架構(gòu)設(shè)計(jì)和代碼實(shí)現(xiàn)，熟悉軟件開發(fā)流程和規(guī)范，有良好的代碼管理和版本控制意識(shí)。?

4、熟悉集群環(huán)境的日常運(yùn)維管理，能夠熟練處理CDH、FLINK、Dolphinscheduler、Doris集群等環(huán)境中出現(xiàn)的各種問題，確保集群的穩(wěn)定運(yùn)行。?

5、具備扎實(shí)的關(guān)系型數(shù)據(jù)庫(kù)開發(fā)能力，熟練掌握SQL語言，能夠進(jìn)行復(fù)雜的數(shù)據(jù)庫(kù)查詢、優(yōu)化、存儲(chǔ)過程編寫；熟悉至少一種主流關(guān)系型數(shù)據(jù)庫(kù)（如MySQL、Oracle、SQLServer）的架構(gòu)設(shè)計(jì)、性能調(diào)優(yōu)和日常維護(hù)，能夠處理數(shù)據(jù)的增刪改查及事務(wù)管理等。