崗位職責(zé)
一. 數(shù)據(jù)提取與整合
1、負(fù)責(zé)從客戶的MES(制造執(zhí)行系統(tǒng))及其他數(shù)據(jù)源中提取原始數(shù)據(jù),并進(jìn)行清洗、轉(zhuǎn)換和整合。
2、確保數(shù)據(jù)完整性和一致性,為APS(Advanced Planning and Scheduling) 產(chǎn)品的機(jī)器學(xué)習(xí)建模與最佳規(guī)劃提供高質(zhì)量數(shù)據(jù)。
二. ETL流程設(shè)計(jì)與優(yōu)化
1、設(shè)計(jì)、開發(fā)并部署高效穩(wěn)定的ETL數(shù)據(jù)管道,支持大規(guī)模數(shù)據(jù)處理。
2、不斷優(yōu)化數(shù)據(jù)提取和處理性能,減少數(shù)據(jù)傳輸延遲和系統(tǒng)資源消耗。
三. 數(shù)據(jù)質(zhì)量與安全管理
1、實(shí)施數(shù)據(jù)校驗(yàn)與監(jiān)控機(jī)制,識別并修復(fù)數(shù)據(jù)質(zhì)量問題。
2、確保數(shù)據(jù)傳輸和存儲符合公司與客戶的安全與合規(guī)要求。
四. 技術(shù)支持與協(xié)作
1、配合FAE和PM團(tuán)隊(duì),協(xié)助分析與解決ETL相關(guān)技術(shù)問題。
2、與研發(fā)和算法團(tuán)隊(duì)合作,支持機(jī)器學(xué)習(xí)模型的數(shù)據(jù)需求及開發(fā)迭代。
五. 文檔與報(bào)告
1、撰寫和維護(hù)ETL流程的技術(shù)文文件與操作手冊。
2、定期提供數(shù)據(jù)處理進(jìn)度報(bào)告,分析數(shù)據(jù)處理結(jié)果并提出改進(jìn)建議。
任職要求
一. 教育背景:信息技術(shù)、計(jì)算器科學(xué)、數(shù)據(jù)科學(xué)、工業(yè)工程或相關(guān)專業(yè)本科及以上學(xué)歷。
二. 經(jīng)驗(yàn)要求:
1、至少3年以上ETL開發(fā)與實(shí)施經(jīng)驗(yàn),熟悉MES數(shù)據(jù)結(jié)構(gòu)與工業(yè)軟件數(shù)據(jù)流者優(yōu)先。
2、熟悉制造業(yè)流程,具備數(shù)據(jù)處理自動化項(xiàng)目經(jīng)驗(yàn)者更佳。
三. 技能要求:
1、精通SQL及數(shù)據(jù)庫(如PostgreSQL、Oracle、MySQL等),能夠進(jìn)行高效查詢與調(diào)優(yōu)。
2、熟悉ETL工具和技術(shù)(如Informatica、Talend、SSIS,或開源解決方案)。
四. 軟性條件:
1、注重細(xì)節(jié),具備優(yōu)秀的邏輯思維和問題解決能力。
2、良好的團(tuán)隊(duì)協(xié)作能力與客戶溝通能力。
3、能適應(yīng)快節(jié)奏工作環(huán)境,并具備一定的抗壓能力。
北京 - 通州
北京 - 朝陽
北京 - 西城
北京 - 朝陽
北京 - 海淀
北京 - 朝陽