崗位職責(zé)

1.負(fù)責(zé)各種網(wǎng)絡(luò)數(shù)據(jù)的采集、清洗與整合，確保數(shù)據(jù)的質(zhì)量和可用性；

2.負(fù)責(zé)大數(shù)據(jù)的分布式存儲和管理，運(yùn)用技術(shù)手段優(yōu)化數(shù)據(jù)存儲結(jié)構(gòu)；

3.參與大數(shù)據(jù)項(xiàng)目的開發(fā)工作，同時負(fù)責(zé)項(xiàng)目的維護(hù)和更新；

4.負(fù)責(zé)編寫部分設(shè)計(jì)、開發(fā)文檔，為項(xiàng)目提供清晰的指導(dǎo)和記錄；

5.提供技術(shù)支持，包括但不限于數(shù)據(jù)分析、數(shù)據(jù)挖掘和大數(shù)據(jù)技術(shù)應(yīng)用；

6.基于Hive、Spark、Hadoop等計(jì)算架構(gòu)進(jìn)行大數(shù)據(jù)開發(fā)工作，掌握ETL數(shù)據(jù)流程設(shè)計(jì)，以及參與數(shù)字化平臺的搭建等。

崗位要求

1.計(jì)算機(jī)科學(xué)、軟件工程或相關(guān)領(lǐng)域本科以上學(xué)歷，有3年以上的大數(shù)據(jù)分析開發(fā)經(jīng)驗(yàn)；

2.熟悉大數(shù)據(jù)Hadoop生態(tài)系統(tǒng)，熟練使用主流大數(shù)據(jù)平臺進(jìn)行數(shù)據(jù)處理；

3.熟悉分布式系統(tǒng)的基礎(chǔ)知識；

4.熟悉Java、Python或Scala語言，有扎實(shí)的開發(fā)功底；

5.熟悉Spark、Hadoop、Hbase、Flink、Kafka等大數(shù)據(jù)處理框架；

6.熟悉常見企業(yè)數(shù)倉設(shè)計(jì)模型和數(shù)據(jù)中臺架構(gòu)。

五險+雙休，帶薪年假