崗位職責(zé):
1、負(fù)責(zé)數(shù)據(jù)的開發(fā)和維護(hù),包括實(shí)時(shí)&離線任務(wù)的開發(fā),參與核心代碼編寫,并正對(duì)重難點(diǎn)問題進(jìn)行技術(shù)攻關(guān)和優(yōu)化。
2、數(shù)據(jù)采集和處理,將各個(gè)業(yè)務(wù)系統(tǒng)的數(shù)據(jù),采集到數(shù)據(jù)倉(cāng)庫(kù)。將各種采集任務(wù)流程化,開發(fā)工作流并維護(hù)數(shù)據(jù)調(diào)度,以確保數(shù)據(jù)質(zhì)量的可靠性。
3、報(bào)表開發(fā),處理數(shù)據(jù)相關(guān)業(yè)務(wù)的日常數(shù)據(jù)分析,開發(fā)報(bào)表、標(biāo)簽和應(yīng)用專題等,并將結(jié)果數(shù)據(jù)可視化展示。
4、數(shù)據(jù)遷移與維護(hù),在保證數(shù)據(jù)完整和業(yè)務(wù)邏輯完整的前提下,將vertica數(shù)據(jù)倉(cāng)庫(kù)開發(fā)的各個(gè)數(shù)據(jù)對(duì)象遷移至云原生hash data數(shù)據(jù)倉(cāng)庫(kù),并維護(hù)新的數(shù)據(jù)倉(cāng)庫(kù)。
崗位要求:
1、學(xué)歷大專及以上,計(jì)算機(jī)相關(guān)專業(yè),3年以上的大數(shù)據(jù)開發(fā)工作經(jīng)驗(yàn),有海量數(shù)據(jù)開發(fā)經(jīng)驗(yàn)者優(yōu)先考慮。
2、掌握J(rèn)ava、Python、Scala等至少一種開發(fā)語(yǔ)言,熟悉大數(shù)據(jù)處理相關(guān)工具如Hadoop、Flink、Hive、Spark、Kafka、Redis等,夠運(yùn)用FlinkAPI進(jìn)行數(shù)據(jù)分析。
3、熟悉且掌握主流數(shù)據(jù)庫(kù)如MySQL、Oracle,并熟悉Linux/Unix系統(tǒng)環(huán)境操作和腳本語(yǔ)言,具備良好的動(dòng)手能力。
4、有Java開發(fā)經(jīng)驗(yàn),熟悉springboot相關(guān)框架,有BI報(bào)表落地項(xiàng)目經(jīng)驗(yàn)者尤佳。
5、具備良好的理解能力,對(duì)數(shù)據(jù)敏感,具備基礎(chǔ)的數(shù)據(jù)分析方法。具備較強(qiáng)的數(shù)據(jù)分析和問題解決能力,溝通和理解能力較好,熟悉并掌握數(shù)據(jù)合規(guī)要求。