更新于 今天

高級(jí)大數(shù)據(jù)工程師

1.3萬(wàn)-1.5萬(wàn)
  • 上海長(zhǎng)寧區(qū)
  • 3-5年
  • 本科
  • 全職
  • 招1人

職位描述

數(shù)據(jù)庫(kù)開(kāi)發(fā)
崗位職責(zé):
1、負(fù)責(zé)空間數(shù)據(jù)的處理、分析與挖掘,利用PostGIS等工具實(shí)現(xiàn)高效的空間數(shù)據(jù)查詢與計(jì)算。
2、設(shè)計(jì)和優(yōu)化大數(shù)據(jù)處理流程,使用Spark等大數(shù)據(jù)處理框架對(duì)海量數(shù)據(jù)進(jìn)行處理和分析。
3、參與數(shù)據(jù)倉(cāng)庫(kù)的建設(shè)和維護(hù),確保數(shù)據(jù)的準(zhǔn)確性和完整性。
4、對(duì)PostgreSQL數(shù)據(jù)庫(kù)進(jìn)行性能優(yōu)化,提升查詢效率和系統(tǒng)穩(wěn)定性。
5、熟練掌握Shell腳本編寫(xiě),能夠編寫(xiě)自動(dòng)化腳本進(jìn)行數(shù)據(jù)處理和系統(tǒng)維護(hù)任務(wù)。
6、與團(tuán)隊(duì)合作,為業(yè)務(wù)部門提供數(shù)據(jù)支持和決策依據(jù)。
任職要求:
教育背景:計(jì)算機(jī)科學(xué)、地理信息系統(tǒng)(GIS)或相關(guān)專業(yè)本科及以上學(xué)歷。
技能要求:
1、熟練掌握PostGIS的空間函數(shù)用法,能夠使用ST_AsGeoJSON、ST_Buffer、ST_Area等函數(shù)進(jìn)行空間數(shù)據(jù)的轉(zhuǎn)換、緩沖區(qū)分析和面積計(jì)算。
2、熟悉PostGIS的拓?fù)潢P(guān)系函數(shù),如ST_Contains、ST_Within、ST_Intersects等,能夠進(jìn)行空間關(guān)系的判斷和分析。
3、具備PostgreSQL數(shù)據(jù)庫(kù)優(yōu)化能力,能夠通過(guò)索引優(yōu)化、查詢優(yōu)化、參數(shù)調(diào)優(yōu)等手段提升數(shù)據(jù)庫(kù)性能。
4、熟悉數(shù)據(jù)庫(kù)的高可用性和災(zāi)難恢復(fù)策略,能夠確保數(shù)據(jù)庫(kù)系統(tǒng)的穩(wěn)定運(yùn)行。
5、具備大數(shù)據(jù)處理經(jīng)驗(yàn),熟悉Spark框架,能夠使用Scala進(jìn)行Spark應(yīng)用開(kāi)發(fā)。
6、了解Hadoop生態(tài)系統(tǒng),包括HDFS、YARN等組件,能夠進(jìn)行大規(guī)模數(shù)據(jù)的分布式存儲(chǔ)和計(jì)算。
7、熟悉SQL語(yǔ)言,具備良好的數(shù)據(jù)庫(kù)設(shè)計(jì)和優(yōu)化能力,能夠高效地進(jìn)行數(shù)據(jù)查詢和處理。
工作經(jīng)驗(yàn):3-5年以上相關(guān)工作經(jīng)驗(yàn),有空間數(shù)據(jù)處理、大數(shù)據(jù)項(xiàng)目實(shí)施以及PostgreSQL數(shù)據(jù)庫(kù)優(yōu)化經(jīng)驗(yàn)者優(yōu)先。
其他要求:
1、具備良好的溝通能力和團(tuán)隊(duì)合作精神,能夠與不同部門的人員進(jìn)行有效溝通。
2、具有較強(qiáng)的學(xué)習(xí)能力和問(wèn)題解決能力,能夠快速掌握新技術(shù)和新工具。
3、對(duì)數(shù)據(jù)敏感,具備較強(qiáng)的數(shù)據(jù)分析和挖掘能力,能夠從數(shù)據(jù)中發(fā)現(xiàn)有價(jià)值的信息。

工作地點(diǎn)

聯(lián)通大廈1

職位發(fā)布者

王立旭/人事經(jīng)理

今日活躍
立即溝通
公司Logo安徽聞天信息技術(shù)有限公司
安徽聞天信息技術(shù)有限公司(簡(jiǎn)稱安徽聞天),成立于2016年,公司坐落于合肥市政務(wù)區(qū)中僑中心,毗鄰合肥市政府政務(wù)辦公核心地帶,是一家集軟件產(chǎn)品研發(fā)、技術(shù)咨詢、實(shí)施、技術(shù)服務(wù)為一體的互聯(lián)網(wǎng)(+)軟件技術(shù)服務(wù)公司。公司總部目前在安徽合肥,同時(shí)在上海設(shè)有分公司。截止2024年共有在職員工120余人,其中技術(shù)研發(fā)人員90多人,目前安徽聞天研發(fā)人員平均年齡27歲,本科及以上學(xué)歷占比超過(guò)80%,公司核心管理人員平均擁有10年以上的行業(yè)從業(yè)經(jīng)歷,具備豐富的大型互聯(lián)網(wǎng)公司的業(yè)務(wù)和管理經(jīng)驗(yàn)。公司成立至今已獲得國(guó)家級(jí)高新技術(shù)企業(yè)、軟件企業(yè)、軟件行業(yè)協(xié)會(huì)會(huì)員、ISO9001質(zhì)量管理認(rèn)證、CMMI3認(rèn)證、ISO14001環(huán)境管理體系認(rèn)證等權(quán)威資格證書(shū),并取得多款軟件產(chǎn)品的著作權(quán)證書(shū)。安徽聞天專注于SaaS行業(yè)的聚焦和發(fā)展,同時(shí)經(jīng)過(guò)多年的努力,已為智慧交通、能源、司法、教育、金融、商貿(mào)等眾多行業(yè)提供信息化服務(wù),致力于為用戶提供各領(lǐng)域?qū)I(yè)的一體化解決方案。
公司主頁(yè)