工作職責(zé)
1、負(fù)責(zé)相關(guān)數(shù)據(jù)平臺的開發(fā)工作(包括但不限于調(diào)研、標(biāo)準(zhǔn)設(shè)計、數(shù)據(jù)倉庫設(shè)計、數(shù)據(jù)集成和數(shù)據(jù)加工開發(fā)、數(shù)據(jù)質(zhì)量管理及優(yōu)化、數(shù)據(jù)報表及可視化開發(fā)、數(shù)據(jù)資產(chǎn)管理、數(shù)據(jù)平臺管理、相關(guān)文檔編寫,以及平臺和數(shù)據(jù)相關(guān)的技術(shù)咨詢等)。
2、對低級別工作人員的工作進行指導(dǎo),并對工作完成質(zhì)量進行監(jiān)督。
3、參與對接業(yè)務(wù)需求,負(fù)責(zé)日常需求開發(fā)
任職資格
1、熟悉基本的Linux使用和操作,具有腳本開發(fā)經(jīng)驗(shell、python、perl等)
2、熟練主流關(guān)系型數(shù)據(jù)庫(如mysql、postgresql、sql server、db2、oracle等)
3、熟悉數(shù)據(jù)倉庫分層設(shè)計及維度建模理論,3年以上數(shù)據(jù)類項目建設(shè)經(jīng)驗,有至少一個完整項目的實施經(jīng)驗
4、熟悉ETL及數(shù)據(jù)集成開發(fā),并至少有一種開發(fā)數(shù)據(jù)集成、開發(fā)工具(如Kettle、Talend、Datastage、Informatic、DataWorks、Dataphin等)的項目使用經(jīng)驗,如果是基于大數(shù)據(jù)的數(shù)據(jù)集成或開發(fā)工具(如DataWorks、Dataphin等)將優(yōu)先考慮
5、熟悉常見的大數(shù)據(jù)或NoSql存儲(如Greenplum、Teradata、TiDB、Hive、HBase、Clickhouse、Druid、ElasticSearch等),并至少有其中一種的項目使用經(jīng)驗
6、熟悉常見的大數(shù)據(jù)計算工具開發(fā)方式(如MR、Spark、Flink),并至少有其中一種的實際項目開發(fā)經(jīng)驗,較好的性能調(diào)優(yōu)
7、溝通順暢,具備較強的業(yè)務(wù)溝通、需求分析和文檔編寫能力,有團隊意識,有責(zé)任感;
8、具備較強的自我學(xué)習(xí)能力、有較強分析問題的能力。
9、會阿里云dataworks,hive,DB2遷移hive(卡遷移hive,遷移阿里云卡dataworks)