第1篇 etl工程師崗位職責職位要求
崗位職責:
1、根據概要設計,進行詳細設計的文檔編寫;
2、負責etl過程的設計/開發(fā)實施、單元測試;
3、負責項目中etl相關需求調研、源數據調研、整體設計;
4、負責項目中環(huán)境安裝及配置。
5、維護和升級現(xiàn)有etl任務和存儲過程,快速定位并修復現(xiàn)有系統(tǒng)缺陷
職位要求:
1、 大專及以上學歷,計算機相關專業(yè),3年以上 etl 工作經驗。
2、 熟悉etl開發(fā)流程,有hadoop和etl工作經驗;有從傳統(tǒng)數據庫抽取數據到hive數據倉庫經驗,了解sqoop應用原理者優(yōu)先。
3、 熟悉主流數據庫sql server、oracle、db2、mysql等;熟悉開源的etl工具。
4、有海量數據處理工作經驗,數據分析和挖掘經驗者優(yōu)先;
5、做過數據倉庫、ods項目,對數據治理、數據標準及元數據有很好理念及實施經驗的優(yōu)先;
6、熟練使用腳本語言:如perl、python、shell等任意一種以上;
7、熟悉linux系統(tǒng)指令和性能優(yōu)化;
8、善于學習新技術,對新技術有較強的接受能力;工作認真細致,愿意于人交流溝通。
9、有大型數據倉庫系統(tǒng)研發(fā)、設計經驗者優(yōu)先;
10、熟悉 java 語言或 hadoop 技術者優(yōu)先;
崗位要求:
學歷要求:大專
語言要求:不限
年齡要求:不限
工作年限:3-4年經驗
第2篇 數據倉庫etl開發(fā)工程師崗位職責
數據倉庫etl資深開發(fā)工程師 1.5年以上做bi、數據倉庫etl開發(fā)方向,行業(yè)不限;
2.過去做北京汽車項目;
3.英語能基本讀寫;
4.開發(fā)經驗豐富,能迅速完成交辦相關工作;
5.溝通能力良好,具備團隊合作精神,能適應一定壓力開展工作。 1.5年以上做bi、數據倉庫etl開發(fā)方向,行業(yè)不限;
2.過去做北京汽車項目;
3.英語能基本讀寫;
4.開發(fā)經驗豐富,能迅速完成交辦相關工作;
5.溝通能力良好,具備團隊合作精神,能適應一定壓力開展工作。
第3篇 etl數據工程師崗位職責
etl數據開發(fā)工程師 etl數據開發(fā)工程師
崗位職責:
1、負責大數據、bi系統(tǒng)相關模塊的實施,項目管理工作,包括但不限于需求管理、項目規(guī)劃、過程實施、上線驗收、交付運營等;
2、依據業(yè)務場景、分析需求提供技術、業(yè)務解決方案并加以實現(xiàn);
3、與技術部門對接,解決數據建模、報表和報告在系統(tǒng)開發(fā)遇到的問題;
4、協(xié)助項目經理進行項目交付或協(xié)助商務開展售前支持或poc工作。
任職資格:
1、本科及以上學歷,計算機、統(tǒng)計學、應用數學等相關專業(yè);
2、熟悉hadoop平臺,2年以上hive、sqoop開發(fā)經驗;
3、了解bi系統(tǒng),有數據管理經驗,有維度建模相關經驗;
4、3年以上相關工作經驗,有銀行或金融數據分析經驗者優(yōu)先;
5、熟悉db2、oracle等數據庫及sql數據查詢,熟悉hadoop者優(yōu)先;
6、熟悉linux開發(fā)環(huán)境和shell腳本;
7、具備銀行項目設計、開發(fā)、優(yōu)化等經驗者加分;
8、優(yōu)秀的業(yè)務理解能力、邏輯性和溝通能力,能跨部門合作溝通。
etl數據開發(fā)工程師
崗位職責:
1、負責大數據、bi系統(tǒng)相關模塊的實施,項目管理工作,包括但不限于需求管理、項目規(guī)劃、過程實施、上線驗收、交付運營等;
2、依據業(yè)務場景、分析需求提供技術、業(yè)務解決方案并加以實現(xiàn);
3、與技術部門對接,解決數據建模、報表和報告在系統(tǒng)開發(fā)遇到的問題;
4、協(xié)助項目經理進行項目交付或協(xié)助商務開展售前支持或poc工作。
任職資格:
1、本科及以上學歷,計算機、統(tǒng)計學、應用數學等相關專業(yè);
2、熟悉hadoop平臺,2年以上hive、sqoop開發(fā)經驗;
3、了解bi系統(tǒng),有數據管理經驗,有維度建模相關經驗;
4、3年以上相關工作經驗,有銀行或金融數據分析經驗者優(yōu)先;
5、熟悉db2、oracle等數據庫及sql數據查詢,熟悉hadoop者優(yōu)先;
6、熟悉linux開發(fā)環(huán)境和shell腳本;
7、具備銀行項目設計、開發(fā)、優(yōu)化等經驗者加分;
8、優(yōu)秀的業(yè)務理解能力、邏輯性和溝通能力,能跨部門合作溝通。
第4篇 中級etl工程師崗位職責
1. 負責數據倉庫/數據集市etl設計開發(fā);
2. 負責與業(yè)務部門數據需求的溝通與確認;
任職資格:
1. 三以上工作經驗;
2. 熟悉主流etl開發(fā)工具,如:ssis 、kettle、datastage等;
3. 熟練掌握主流數據庫的使用,如:sql server、mysql、oracle,對sql查詢優(yōu)化有豐富的經驗;
4. 熟悉主流報表工具,如:tableau、powerbi、cognos;
5. 良好的溝通技能,清晰的邏輯思維能力;
6. 工作認真仔細,積極主動,具備較強的自主學習、自我總結能力。
第5篇 etl實施工程師崗位職責
崗位職責:
1.根據客戶需求完成oracle bi產品的實施工作;
2.與項目團隊配合,按要求完成任務;
3.主要進行etl、培訓、技術支持等工作;
4.配合業(yè)務人員,參與新項目的售前 ;
崗位要求:
1. 有兩年以上數據庫存儲過程開發(fā)經驗;
2. 熟練掌握一種etl工具,例如:informatica、odi、kettle;
3. 熟練linux的命令和操作, 服務器的管理,熟悉websphere,weblogic,tomact中間件;
4. 熟練使用主流bi報表工具,如obiee、cognos、tableau等,至少一年以上報表開發(fā)經驗;
5. 獨立完成過一套報表開發(fā)者優(yōu)先;
6. 有python、hadoop經驗優(yōu)先。
第6篇 etl高級工程師崗位職責及相關職位要求
etl高級工程師職位要求
1、計算機、數學或統(tǒng)計等專業(yè),本科以上學歷;
2、精通sql語言;熟悉數據倉庫設計、建模;
3、精通python,能夠編寫腳本處理、分析數據;
4、熟悉批量離線式分布式并行計算技術(如hadoop、mapreduce、hive、spark等)
5、熟悉sqlserver、mysql數據庫;了解redis等非關系型數據庫;
6、熟悉至少一種常用etl工具(如kettle、ssis、gobblin);了解常用報表工具(如reporting services以及各類開源報表);
7、了解常用數據挖掘方法(回歸、決策樹、聚類等)。
etl高級工程師崗位職責
1、負責國際網站后臺數據倉庫搭建、維護;
2、運用各類大數據工具設計etl流程,消費生產環(huán)境埋點、日志等數據;
3、日常數據監(jiān)控以及數據預警,異常數據解讀挖掘,并與業(yè)務同事溝通解決方案;
4、分析用戶的特征和行為數據,挖掘不同類型用戶的行為特性,為實際的業(yè)務運營提供數據支持;
5、從數據分析結果中尋找insight和商業(yè)價值,并以簡明扼要的形式傳導到其他部分,指導實際的業(yè)務運營;
6、處理國際網站的臨時數據需求,并對于常用重要需求轉化成數據產品。