更新于 2月18日

高級(jí)大數(shù)據(jù)開發(fā)工程師

1-1.6萬
  • 北京海淀區(qū)
  • 5-10年
  • 大專
  • 全職
  • 招3人

職位描述

數(shù)據(jù)開發(fā)JavaHadoopFlinkSparkHDFSMapReduceMongoDBPrometheusGrafana
崗位職責(zé):
1. 負(fù)責(zé)分布式大數(shù)據(jù)平臺(tái)架構(gòu)建設(shè).數(shù)據(jù)建模和數(shù)據(jù)應(yīng)用后端開發(fā)。
2. 負(fù)責(zé)大數(shù)據(jù)相關(guān)組件OLAP引擎.實(shí)時(shí)計(jì)算,文件存儲(chǔ)等相關(guān)研究和開發(fā)。
3. 負(fù)責(zé)大數(shù)據(jù)系統(tǒng)及組件的性能.效率.穩(wěn)定性分析與優(yōu)化。
崗位要求:
1. 深入了解Hadoop生態(tài)系統(tǒng),包括HDFS、MapReduce、YARN等組件,并能夠在大規(guī)模數(shù)據(jù)處理任務(wù)中使用Hadoop。
2. 熟悉Apache Flink流式處理框架,具有實(shí)際項(xiàng)目經(jīng)驗(yàn),能夠設(shè)計(jì)和優(yōu)化Flink作業(yè)以實(shí)現(xiàn)高性能的實(shí)時(shí)數(shù)據(jù)處理。
3. 掌握Kafka的工作原理及項(xiàng)目使用經(jīng)驗(yàn)。
4. 熟悉MongoDB數(shù)據(jù)庫的基本原理和操作,能夠設(shè)計(jì)和優(yōu)化MongoDB的數(shù)據(jù)模型,并編寫高效的查詢語句。
5. 能夠使用prometheus、Grafana等工具進(jìn)行數(shù)據(jù)可視化和監(jiān)控的能力,能夠創(chuàng)建儀表盤、報(bào)警規(guī)則并進(jìn)行數(shù)據(jù)分析。
6. 熟練掌握Shell腳本編程,能夠編寫自動(dòng)化任務(wù)和維護(hù)腳本以支持?jǐn)?shù)據(jù)處理和簡(jiǎn)單系統(tǒng)運(yùn)維工作。
7. 掌握java、Scala編程語言并具有相關(guān)項(xiàng)目經(jīng)驗(yàn),能夠編寫高質(zhì)量的代碼以支持?jǐn)?shù)據(jù)處理。

工作地點(diǎn)

聯(lián)通云

職位發(fā)布者

邵喜鳳/人事經(jīng)理

當(dāng)前在線
立即溝通
公司Logo山郵數(shù)字科技(山東)有限公司
山郵數(shù)字科技(山東)有限公司(以下簡(jiǎn)稱山郵數(shù)字科技)是山東省郵電工程有限公司的全資子公司,注冊(cè)資本2000萬,是一家集信息化咨詢服務(wù)、軟件開發(fā)服務(wù)、系統(tǒng)集成服務(wù)和信息化運(yùn)營服務(wù)于一體的高科技服務(wù)型企業(yè)。母公司山東省郵電工程有限公司始建于1956年,2008年改組為資產(chǎn)多元化的股份有限公司,山郵數(shù)字科技秉承母公司“依法經(jīng)營、科學(xué)管理、安全生產(chǎn)、強(qiáng)化環(huán)保、精心施工、創(chuàng)優(yōu)工程、業(yè)主滿意、持續(xù)改進(jìn)”的管理方針,時(shí)刻以業(yè)主的需求作為關(guān)注焦點(diǎn),主動(dòng)擁抱科技,擁抱創(chuàng)新,致力于通過數(shù)字化轉(zhuǎn)型持續(xù)為客戶創(chuàng)造價(jià)值。山郵數(shù)字科技立足山東,服務(wù)全國,聚焦數(shù)字政府、數(shù)字產(chǎn)業(yè)、數(shù)字信息、數(shù)字惠民等重點(diǎn)領(lǐng)域,提供從咨詢服務(wù)、產(chǎn)品平臺(tái)研發(fā)、系統(tǒng)集成到IT外包服務(wù)的整體信息化解決方案。面向電信運(yùn)營商、政府、醫(yī)療、農(nóng)業(yè)、環(huán)保、教育、能源、公安、金融、交通、制造等行業(yè)客戶,專業(yè)從事自助服務(wù)、人社、醫(yī)療、移動(dòng)支付、鐵路等領(lǐng)域的系統(tǒng)、設(shè)備、核心部件和相關(guān)行業(yè)應(yīng)用軟件的研發(fā)。公司實(shí)行現(xiàn)代化、規(guī)范化管理,部門在技術(shù)和應(yīng)用上不斷創(chuàng)新和突破,技術(shù)實(shí)力遙遙領(lǐng)先同行。通過標(biāo)準(zhǔn)、快捷、多元化的服務(wù)及產(chǎn)品,將國際高水準(zhǔn)的設(shè)計(jì)及管理軟件帶給客戶,并為客戶提供一流的技術(shù)服務(wù)支撐。
公司主頁