當前位置:一號簡歷網 >

職責 >工程師職責 >

ETL工程師崗位職責

ETL工程師崗位職責

ETL工程師是做什麼的?本文提供ETL工程師的崗位職責例子,包括詳細的工作內容及任職要求。

崗位職責

ETL工程師崗位職責

1、現有數據倉庫維護工作,SQL編寫;

2、負責數據倉庫的數據模型設計,新數據應用需求開發,包括ETL,存儲過程等;


任職要求:

1、本科及以上學歷,計算機、數理統計等專業優先;

2、2年及以上工作經驗;1年以上數據分析開發工作;

3、熟悉關係數據庫原理,熟悉sql server、Oracle等數據庫,具有良好的SQL語言技能,精通存儲過程、函數;

4、熟練使用主流的數據庫分析、設計工具,能獨立完成數據倉庫的架構設計、ETL數據整合方案的實現;

5、精通數倉的ETL、建模、報表開發的能力;

6、精通一門編程語言的優先;(C# 或者 JAVA)

7、對數據分析和數據挖掘有濃厚興趣者優先考慮。

崗位職責:
1.負責數據收集整理分析,對多種數據源進行深度分析,利用ETL工具或者開發程序完成數據抽取、清洗、轉換、裝載
2.負責ETL流程的優化及解決ETL相關技術問題,開發Kettle處理插件並能根據業務需求修改Kettle源碼




崗位要求:
1.熟練掌握java語言,至少一年以上開發經驗
2.熟悉Linux或Unix操作系統,掌握常用命令
3.熟練掌握腳本語言shell、perl、python至少一種
4.熟悉Oracle、SQLServer、Mysql等數據庫,有較好的SQL性能調優經驗者優先
5.一年以上ETL項目開發和實施工作經驗,熟練掌握ETL工具
6.有互聯網公司或海量數據處理工作經驗,數據分析和挖掘經驗者優先
工作內容:
1、參與數據平台相關應用項目的ETL設計、開發、維護工作;
2、參與ETL調度架構的開發優化工作;
4、與團隊內部以及需求部門進行有效溝通,跟進項目進度以及解決相關數據問題;
5、完成上級主管分配的工作任務,並達到公司制度規定的考核要求;
6、參與Informatica服務工作,包括Informatica性能調優,服務的安裝發佈,及Informatica工具的相關培訓。
崗位職責:
1、 參與數據平台的定義,規劃,設計和項目監督;
3、 與技術部和基礎設施團隊協助,完成數據倉庫的建設與推進;
4、 協助經理從技術層面完成所有的技術實施架構,包括hadoop大數據平台、數據倉庫、數據模型、etl、olap、報表平台、元數據管理、主數據管理、分佈式數據平台等;
5、 參與建立和維護技術規範、流程、文檔,確保和項目需求保持同步;
6、 參與Informatica服務工作,包括Informatica性能調優,服務的安裝發佈,及客户現場培訓。
任職資格:
1、 本科及以上學歷,特別優秀者可放寬到大專學歷。
2、 精通ETL開發實施流程和原理,有豐富的實際大型數據倉庫的ETL開發和ETL流程優化經驗;
3、 熟練使用一種以上常用的數據倉庫工具:ETL工具如Datastage,Informatica等和報表工具如Cognos、BO等;
5、 掌握主流傳統數據庫,精通SQL,有一定的SQL編寫和優化調優經驗;
4、 熟練使用Linux/AIX系統,熟練使用Shell等腳本語言;
6、 具有主數據管理經驗者優先;
7、 具有豐富的數據統計及分析經驗,能夠準確把握企業用户需求;
8、性格積極樂觀、誠信、有較強的語言表達能力,具備強烈的進取心、求知慾及團隊合作精神。

ETL工程師


職位描述:

負責數據倉庫/數據集市ETL設計開發;負責與業務部門數據需求的溝通與確認;

任職資格:

三以上工作經驗;熟悉主流ETL開發工具,如:SSIS 、Kettle、Datastage等;熟練掌握主流數據庫的使用,如:SQL Server、Mysql、Oracle,對SQL查詢優化有豐富的經驗;熟悉主流報表工具,如:Tableau、PowerBi、Cognos;良好的溝通技能,清晰的邏輯思維能力;工作認真仔細,積極主動,具備較強的自主學習、自我總結能力。

加分項:

熟練使用HIVE/HBASE/Sqoop等大數據框架具有Hadoop、Spark、Springboot與SpringMVC等大數據開發經驗的優先。

  • 文章版權屬於文章作者所有,轉載請註明 https://yhjlw.com/zh-mo/zhize/gongchengshi/60xx6.html
專題