更新于 1月4日

大數(shù)據(jù)開發(fā)工程師

1萬-1.5萬
  • 濟南歷下區(qū)
  • 3-5年
  • 本科
  • 全職
  • 招1人

職位描述

SqlPythonHadoopSparkJavaFlink
崗位職責(zé):
1. 負責(zé)設(shè)計和開發(fā)大數(shù)據(jù)處理系統(tǒng),包括數(shù)據(jù)采集、清洗、存儲、處理和分析等各個環(huán)節(jié)。
2. 維護現(xiàn)有的大數(shù)據(jù)平臺,確保系統(tǒng)的穩(wěn)定性和高可用性。
3. 對大數(shù)據(jù)處理流程進行性能調(diào)優(yōu),提升數(shù)據(jù)處理效率。
4. 參與數(shù)據(jù)倉庫的設(shè)計與實現(xiàn),構(gòu)建高效的數(shù)據(jù)模型以支持業(yè)務(wù)需求。
5. 制定并實施數(shù)據(jù)質(zhì)量管理策略,確保數(shù)據(jù)的準(zhǔn)確性和一致性。
6. 持續(xù)關(guān)注大數(shù)據(jù)領(lǐng)域的新技術(shù)和新工具,評估其適用性并引入到項目中。
7. 編寫相關(guān)的設(shè)計文檔和技術(shù)文檔,保證項目的可維護性和可擴展性。

任職要求:
1、本科以上學(xué)歷,計算機相關(guān)專業(yè)。
2、3-5年的大數(shù)據(jù)開發(fā)相關(guān)工作經(jīng)驗。
3、熟練掌握Hadoop生態(tài)組件,如HDFS、MapReduce、YARN等;
4、熟悉實時計算框架,如Spark、Flink、Storm等。
5、熟練使用SQL,有較強的數(shù)據(jù)庫操作能力,熟悉Hive、HBase、MySQL等數(shù)據(jù)庫。
6、掌握Python或Java等編程語言。;
7、了解數(shù)據(jù)倉庫設(shè)計原理及方法論,有ETL工具使用經(jīng)驗者優(yōu)先,如Kafka、Flume等。
8、具備良好的溝通能力和團隊協(xié)作精神,強烈的責(zé)任心和抗壓能力,能夠獨立解決問題。

有政府項目工作經(jīng)驗優(yōu)先

工作地點

奧盛大廈2號樓2號樓2506

職位發(fā)布者

尹先生/人資經(jīng)理

昨日活躍
立即溝通
公司Logo微圖軟件
山東微圖軟件信息股份有限公司正式組建于2013年,(集團)公司總部位于泉城濟南 CIIIC的——山東大數(shù)據(jù)產(chǎn)業(yè)基地,公司是國家高新技術(shù)企業(yè)、軟件企業(yè)、經(jīng)?。ㄊ校┡鷾?zhǔn)設(shè)立的數(shù)字應(yīng)急技術(shù)中心、三維仿真技術(shù)中心和院士專家工作站。公司在天津、新加坡分別設(shè)有“空間信息大數(shù)據(jù)”與“空間視覺識別”兩個博士科研工作點。微圖旗下包含“工業(yè)化工安全”與“教育后勤能源”兩大核心產(chǎn)業(yè)板塊,以物聯(lián)網(wǎng)(IOT)、大數(shù)據(jù)(BD)和空間信息(3S)等新一代信息技術(shù)為依托,本著“聚焦打造細分行業(yè)——專家智庫型品牌企業(yè)”的戰(zhàn)略目標(biāo),瞄準(zhǔn)高端化工企業(yè)智能工廠、智慧安全;教育后勤智慧能源建設(shè),依托多年積累的人才優(yōu)勢、技術(shù)市場優(yōu)勢,以及對細分行業(yè)的深度認(rèn)知,凝聚產(chǎn)業(yè)生態(tài)鏈資源,在行業(yè)內(nèi)擁有了良好的口碑和品牌基礎(chǔ)。在“工業(yè)物聯(lián)網(wǎng)與大數(shù)據(jù)”領(lǐng)域,微圖在國內(nèi)較早從事高危行業(yè)安全、應(yīng)急、環(huán)保信息化產(chǎn)品研發(fā)和解決方案設(shè)計,并積極投身“智能工廠”建設(shè)及“企業(yè)、園區(qū)上云”戰(zhàn)略,不斷研發(fā)面向企業(yè)的SSaaS云服務(wù)及工業(yè)安全大數(shù)據(jù)產(chǎn)品,應(yīng)用于企業(yè)安健環(huán)(HSE)、生產(chǎn)過程管理(MES)、作業(yè)現(xiàn)場管控與巡檢等領(lǐng)域。公司是中石化安全研究院、安監(jiān)總局?;分行?、中國石化聯(lián)合會、省危險品物流安全重點實驗室等科研機構(gòu)的長期合作單位;是浪潮集團“工業(yè)互聯(lián)網(wǎng)”推進計劃的戰(zhàn)略簽約單位。公司多項安全??急軟硬件產(chǎn)品和技術(shù)已廣泛應(yīng)用于國內(nèi)“數(shù)字企業(yè)”、“智能工廠”與“智慧園區(qū)”建設(shè)中,并取得良好示范效應(yīng)。在“教育后勤能源物聯(lián)網(wǎng)”領(lǐng)域,微圖在國內(nèi)率先將三維 GIS、物聯(lián)網(wǎng)與數(shù)字管網(wǎng)及后勤能源管理深度融合,基于公司的自主三維 GIS引擎,創(chuàng)新3DGIS+Iot/BD業(yè)務(wù)模式,完成了從“天-地-空”一體化空間數(shù)據(jù)采集、數(shù)據(jù)加工、到產(chǎn)品研發(fā)、系統(tǒng)融合、大數(shù)據(jù)挖掘應(yīng)用的頂層整體解決方案設(shè)計與全技術(shù)流程打造,構(gòu)建完成了基于“時空一張圖”和“智慧管網(wǎng)”的綠色、智慧能源管理新模式,先后在南京理工、西南交大、南京林業(yè)等國內(nèi)眾多高校的后勤能源部門得到良好的示范應(yīng)用。公司目前擁有一支近百人組成的企業(yè)運營、產(chǎn)品研發(fā)與技術(shù)運維團隊,并不斷連接產(chǎn)業(yè)鏈資源,持續(xù)積極構(gòu)建以“微圖”為核心的生態(tài)價值鏈。聘請中科院、北師大、武漢大學(xué)、山東大學(xué)等知名專家、教授組建公司的科學(xué)家團隊,并與高校、科研院所結(jié)成戰(zhàn)略合作關(guān)系,共建重點實驗室和合作基地,走出一條產(chǎn)學(xué)研用相結(jié)合的企業(yè)創(chuàng)新發(fā)展之路。公司憑借多年專業(yè)的知識儲備和高技術(shù)融合實力,目前已完成近五十項領(lǐng)先的著作權(quán)和專利儲備,其中有多項核心技術(shù)被國家和省、市列為重點支持計劃。先后獲批省優(yōu)秀軟件企業(yè)、創(chuàng)新型企業(yè)、5150人才企業(yè)等榮譽稱號,并在業(yè)內(nèi)率先通過了ISO全體系認(rèn)證、CMMI軟件成熟度認(rèn)證,擁有信息系統(tǒng)集成資質(zhì)、測繪地理信息資質(zhì)和 AAA級信用等級評價資質(zhì)。公司是中國應(yīng)急產(chǎn)業(yè)聯(lián)盟、中國大數(shù)據(jù)協(xié)同創(chuàng)新聯(lián)盟、山東省電子學(xué)會、軟件行業(yè)協(xié)會、物聯(lián)網(wǎng)協(xié)會、地理信息聯(lián)盟的成員和理事、常務(wù)理事單位。本著“致力于創(chuàng)造智慧、安全、健康、綠色企業(yè)生存發(fā)展新環(huán)境”的愿景和“立足山東、服務(wù)全國”的企業(yè)發(fā)展戰(zhàn)略,全面跟蹤并引導(dǎo)行業(yè)發(fā)展方向,始終站在數(shù)字科技前沿,緊抓物聯(lián)網(wǎng)、云計算、大數(shù)據(jù)等新一代信息技術(shù),迎合“互聯(lián)網(wǎng)+”和“新舊動能轉(zhuǎn)化”發(fā)展趨勢,牽手行業(yè)合作伙伴,為用戶提供技術(shù)領(lǐng)先、應(yīng)用便捷的行業(yè)全面解決方案。選擇微圖,您更專業(yè);微圖,期待與您合作共贏。
公司主頁