etl崗位職責(zé)（精選9篇）

etl崗位職責(zé) 篇1

　　etl高級工程師職位要求

　　1、計算機、數(shù)學(xué)或統(tǒng)計等專業(yè)，本科以上學(xué)歷；

　　2、精通sql語言；熟悉數(shù)據(jù)倉庫設(shè)計、建模；

　　3、精通python，能夠編寫腳本處理、分析數(shù)據(jù)；

　　4、熟悉批量離線式分布式并行計算技術(shù)（如hadoop、mapreduce、hive、spark等）

　　5、熟悉sqlserver、mysql數(shù)據(jù)庫；了解redis等非關(guān)系型數(shù)據(jù)庫；

　　6、熟悉至少一種常用etl工具（如kettle、ssis、gobblin）；了解常用報表工具（如reporting services以及各類開源報表）；

　　7、了解常用數(shù)據(jù)挖掘方法（回歸、決策樹、聚類等）。

　　etl高級工程師崗位職責(zé)

　　1、負責(zé)國際網(wǎng)站后臺數(shù)據(jù)倉庫搭建、維護；

　　2、運用各類大數(shù)據(jù)工具設(shè)計etl流程，消費生產(chǎn)環(huán)境埋點、日志等數(shù)據(jù)；

　　3、日常數(shù)據(jù)監(jiān)控以及數(shù)據(jù)預(yù)警，異常數(shù)據(jù)解讀挖掘，并與業(yè)務(wù)同事溝通解決方案；

　　4、分析用戶的特征和行為數(shù)據(jù)，挖掘不同類型用戶的`行為特性，為實際的業(yè)務(wù)運營提供數(shù)據(jù)支持；

　　5、從數(shù)據(jù)分析結(jié)果中尋找insight和商業(yè)價值，并以簡明扼要的形式傳導(dǎo)到其他部分，指導(dǎo)實際的業(yè)務(wù)運營；

　　6、處理國際網(wǎng)站的臨時數(shù)據(jù)需求，并對于常用重要需求轉(zhuǎn)化成數(shù)據(jù)產(chǎn)品。

etl崗位職責(zé) 篇2

　　職位描述：

　　1、負責(zé)公司數(shù)據(jù)平臺項目的etl設(shè)計、實現(xiàn)以及優(yōu)化。

　　2、負責(zé)etl流程優(yōu)化，關(guān)鍵問題解決、團隊技術(shù)與引導(dǎo)和前瞻性技術(shù)研究；

　　3、參與數(shù)據(jù)倉庫數(shù)據(jù)模型設(shè)計，進行數(shù)據(jù)質(zhì)量監(jiān)測、校驗和提升；

　　4、使用etl技術(shù)對醫(yī)院信息系統(tǒng)數(shù)據(jù)進行提取、清洗、轉(zhuǎn)換和整合；

　　崗位要求：

　　1、至少三年以上etl數(shù)據(jù)開發(fā)經(jīng)驗；計算機相關(guān)專業(yè)本科以上學(xué)歷，熟悉數(shù)據(jù)分析與數(shù)據(jù)挖掘理論；

　　2、熟悉dw實施方法論和常規(guī)etl構(gòu)架，有整體etl開發(fā)經(jīng)驗，深刻理解元數(shù)據(jù)管理；

　　3、熟練掌握oracle、sql server、mysql、postgresql等至少兩種主流數(shù)據(jù)庫的使用；

　　4、熟練掌握ssis、kettle、informatica等至少一種etl工具的使用；

　　5、精通sql、存儲過程、函數(shù)的使用，具備編寫、優(yōu)化復(fù)雜sql的`能力；

　　6、對數(shù)字，數(shù)據(jù)敏感，具備良好的邏輯思維能力；

　　7、具備專業(yè)的業(yè)務(wù)研究、分析能力，能夠獨立開展業(yè)務(wù)調(diào)研、數(shù)據(jù)分析、數(shù)據(jù)建模、報告編寫工作；

　　8、有醫(yī)療衛(wèi)生數(shù)據(jù)平臺開發(fā)、實施經(jīng)驗優(yōu)先；

　　9、能適應(yīng)長期出差。

etl崗位職責(zé) 篇3

　　職位描述：

　　崗位職能：

　　1.基于公司數(shù)據(jù)建設(shè)需要，完成數(shù)據(jù)平臺構(gòu)建、數(shù)據(jù)內(nèi)容開發(fā)等工作。包括：數(shù)據(jù)平臺基礎(chǔ)設(shè)施建設(shè)、數(shù)據(jù)采集、etl、數(shù)倉及數(shù)據(jù)集市、數(shù)據(jù)應(yīng)用產(chǎn)品等開發(fā)工作；

　　2.充分理解需求文檔，基于此進行自測，交付高質(zhì)量的`開發(fā)代碼和數(shù)據(jù)內(nèi)容；

　　3.工作中對數(shù)據(jù)平臺基礎(chǔ)設(shè)施、數(shù)據(jù)內(nèi)容建設(shè)等工作主動深度思考，提升效能并積極建言、促進組織和系統(tǒng)發(fā)展；

　　4.其他根據(jù)部門需要安排事宜；

　　崗位要求：

　　1.信息技術(shù)類、數(shù)學(xué)、統(tǒng)計學(xué)、計量經(jīng)濟學(xué)類專業(yè)，研究生及以上學(xué)歷。優(yōu)秀候選人學(xué)歷可以放寬至本科，工作年限5年以上；

　　2.熟悉數(shù)據(jù)倉庫模型設(shè)計和精通etl開發(fā)經(jīng)驗，掌握3nf，kimball的維度建模設(shè)計方法，具備海量數(shù)據(jù)加工處理（etl）相關(guān)經(jīng)驗；

　　3.掌握至少一種數(shù)據(jù)庫開發(fā)技術(shù)：oracle、teradata、db2、mysql等，精通并靈活運用sql實現(xiàn)海量數(shù)據(jù)etl加工處理；

　　4.熟悉linux系統(tǒng)常規(guī)shell處理命令，靈活運用shell做的文本處理和系統(tǒng)操作；

　　5.有從事分布式數(shù)據(jù)存儲與計算平臺應(yīng)用開發(fā)經(jīng)驗，熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實踐經(jīng)驗著優(yōu)先，重點考察hdfs、hive（hql)、hbase；

　　6.熟練掌握一門或多門編程語言，并有大型項目建設(shè)經(jīng)驗者優(yōu)先，重點考察python、perl、java；

　　7.熟悉數(shù)據(jù)倉庫領(lǐng)域知識和技能者優(yōu)先，包括但不局限于：數(shù)據(jù)開發(fā)測試工具與方法、數(shù)據(jù)質(zhì)量等；

　　8.良好的語言溝通與表達能力和自我驅(qū)動動力。

etl崗位職責(zé) 篇4

　　職責(zé)描述：

　　1、負責(zé)數(shù)據(jù)倉庫建模，業(yè)務(wù)數(shù)據(jù)集市建設(shè)開發(fā)

　　2、負責(zé)數(shù)據(jù)倉庫etl流程的優(yōu)化及解決etl相關(guān)技術(shù)問題、etl流程監(jiān)控，保障數(shù)據(jù)平臺架構(gòu)穩(wěn)定性

　　3、建立數(shù)據(jù)分析指標體系，不斷完善指標體系和分析模型；

　　4、通過專項分析，輸出專項分析報告

　　5、負責(zé)數(shù)據(jù)分析相關(guān)需求和數(shù)據(jù)測試的工作

　　任職要求：

　　學(xué)歷要求：

　　全日制統(tǒng)考類本科及以上學(xué)歷，計算機、通信、電子、軟件工程、統(tǒng)計學(xué)、應(yīng)用數(shù)學(xué)、數(shù)據(jù)分析等相關(guān)專業(yè)

　　專業(yè)技能：

　　1、熟悉數(shù)據(jù)倉庫各類模型建模理論，熟悉數(shù)據(jù)倉庫數(shù)據(jù)分層架構(gòu)和多維數(shù)據(jù)模型設(shè)計；

　　2、豐富的數(shù)據(jù)分析經(jīng)驗，熟練掌握sql、hql、sparksql，擅長運用其分析并完成復(fù)雜業(yè)務(wù)數(shù)據(jù)查詢

　　3、掌握至少一種數(shù)據(jù)庫開發(fā)技術(shù)：mysql/oracle/db2等，靈活運用sql實現(xiàn)海量數(shù)據(jù)etl加工處理；

　　4、熟悉hadoop生態(tài)（如：hdfs/mapreduce/hive/hbase等），并有相關(guān)實踐經(jīng)驗；

　　5、熟練掌握一門或多門編程語言（如：python/shell/java/c++等），并有大型項目建設(shè)經(jīng)驗者優(yōu)先；

　　素質(zhì)：

　　1、敏銳的數(shù)據(jù)觀察和分析能力，及時發(fā)現(xiàn)和分析其中隱含的變化和問題并給出建議；

　　2、良好的'溝通能力和團隊精神，較強的學(xué)習(xí)能力，能承擔(dān)一定的工作壓力。

　　經(jīng)驗：

　　至少2年以上數(shù)據(jù)倉庫（離線&實時）模型設(shè)計開發(fā)、etl設(shè)計開發(fā)的相關(guān)經(jīng)驗，有通信運營商o域/b域大數(shù)據(jù)、智慧城市大數(shù)據(jù)的數(shù)據(jù)倉庫、etl設(shè)計研發(fā)經(jīng)驗者優(yōu)先'

etl崗位職責(zé) 篇5

　　職位描述：

　　工作職責(zé):

　　1、負責(zé)數(shù)據(jù)平臺的etl設(shè)計開發(fā)、工作流調(diào)度設(shè)計、存儲過程開發(fā)、自定義函數(shù)開發(fā)。

　　2、負責(zé)各業(yè)務(wù)系統(tǒng)數(shù)據(jù)源業(yè)務(wù)調(diào)研、數(shù)據(jù)調(diào)研、準確性完整性驗證。

　　3、負責(zé)項目中與第三方系統(tǒng)基于數(shù)據(jù)庫的'數(shù)據(jù)對接、數(shù)據(jù)預(yù)處理、數(shù)據(jù)清洗、數(shù)據(jù)處理、數(shù)據(jù)導(dǎo)入、數(shù)據(jù)校驗相關(guān)開發(fā)工作。

　　4、負責(zé)數(shù)據(jù)平臺的etl相關(guān)軟件和工具的研發(fā)和改進。

　　5、負責(zé)數(shù)據(jù)平臺日常管理、跑批、維護、監(jiān)控、處理臨時數(shù)據(jù)需求。

　　任職資格:

　　1、本科計算機相關(guān)專業(yè)，5年工作經(jīng)驗

　　2、具備3年或以上etl數(shù)據(jù)處理相關(guān)開發(fā)經(jīng)驗

　　3、擁有3年以上sql開發(fā)

　　4、掌握hadoop?hive-hql?基礎(chǔ)技能

etl崗位職責(zé) 篇6

　　職位描述：

　　工作職能：

　　1、負責(zé)海量數(shù)據(jù)的etl處理。

　　技能要求：

　　1、熟悉oracle數(shù)據(jù)庫及sql開發(fā)；

　　2、精通java、shell；

　　3、掌握hadoop、hive、kafka、elasticsearch、flink或多項大數(shù)據(jù)開發(fā)技術(shù)；

　　4、有flink相關(guān)開發(fā)經(jīng)驗優(yōu)先。

　　福利待遇：

　　雙休五險一金法定節(jié)假日健身房出國旅游

　　免費體檢帶薪年假年終獎

etl崗位職責(zé) 篇7

　　職位描述：

　　崗位職責(zé)：

　　1、負責(zé)項目實施過程中所對接的第三方系統(tǒng)的數(shù)據(jù)處理及質(zhì)量分析，并完成項目實施過程中的etl工作；

　　2、熟練掌握etl設(shè)計過程，參與大數(shù)據(jù)平臺架構(gòu)的設(shè)計、開發(fā)、流程優(yōu)化及解決etl相關(guān)技術(shù)問題；

　　3、與用戶和項目組進行有效溝通，采集項目需求，并提出相應(yīng)的解決方案；

　　4、負責(zé)監(jiān)控etl并解決出現(xiàn)的問題及性能調(diào)優(yōu)，協(xié)助完成bi數(shù)據(jù)建模；

　　5、根據(jù)規(guī)范，完成項目相關(guān)設(shè)計開發(fā)文檔的'整理與編寫；

　　任職要求：

　　1、統(tǒng)招全日制本科及以上學(xué)歷，具備大數(shù)據(jù)處理經(jīng)驗尤佳；

　　2、熟悉etl工具，具有一定項目經(jīng)驗，負責(zé)監(jiān)控etl并解決出現(xiàn)的問題及性能調(diào)優(yōu)；

　　3、熟悉hive和hadoop；

　　4、具備一定的編程能力，熟悉至少一種常用編程語言，java尤佳；

　　5、掌握關(guān)系數(shù)據(jù)庫常見用法，熟悉常見軟件的安裝，參與過項目的etl工具開發(fā)項目的完整分析、設(shè)計、開發(fā)流程者優(yōu)先；

　　6、具備較強的自我學(xué)習(xí)能力、有較強分析問題的能力、人際溝通能力、團隊協(xié)作能力和工作責(zé)任感；

etl崗位職責(zé) 篇8

　　職位描述：

　　崗位職責(zé)：

　　1、數(shù)倉開發(fā)、etl開發(fā)；

　　2、銀行業(yè)數(shù)據(jù)模型的設(shè)計輔助、mapping和落地等；

　　3、shell腳本開發(fā)維護；

　　4、銀行業(yè)務(wù)系統(tǒng)的數(shù)據(jù)調(diào)研和分析；

　　任職要求：

　　1、本科及以上學(xué)歷，計算機或相關(guān)專業(yè)；

　　2、2年以上oracle、db2等數(shù)據(jù)庫開發(fā)經(jīng)驗，熟悉數(shù)據(jù)庫體系結(jié)構(gòu)；

　　3、精通pl/sql編程，精通存儲過程開發(fā)；

　　4、熟悉linux操作系統(tǒng)；

　　5、熟悉etl調(diào)度工具和前端工具；

　　6、軟件基礎(chǔ)理論知識扎實，具備良好的.數(shù)據(jù)結(jié)構(gòu)、算法功底，有一定獨立分析、技術(shù)研究能力；

　　7、良好的溝通能力、團隊合作精神、樂于；

　　8、具備較強的自學(xué)能力，有一點抗壓能力，能夠接受出差性質(zhì)的工作。

　　如有以下技術(shù)背景優(yōu)先考慮：

　　1、有銀行業(yè)系統(tǒng)開發(fā)經(jīng)驗；

　　2、參與過數(shù)倉項目開發(fā)、實施；

　　3、有數(shù)據(jù)治理項目經(jīng)驗的。

etl崗位職責(zé) 篇9

　　職位描述：

　　工作職責(zé):

　　1、根據(jù)公司數(shù)據(jù)分析需求進行基于hadoop平臺的項目開發(fā)；

　　2、根據(jù)需求進行數(shù)據(jù)倉庫模型設(shè)計，熟練使用kettle工具進行etl程序的開發(fā)；包括實時數(shù)據(jù)加工，計算，etl，管理，監(jiān)控等；

　　3、負責(zé)針對源系統(tǒng)進行數(shù)據(jù)抽取、處理、分析等相關(guān)工作，及項目中涉及到的數(shù)據(jù)庫創(chuàng)建、維護及提供數(shù)據(jù)接口工作；

　　4、負責(zé)設(shè)計并優(yōu)化基于hive的數(shù)據(jù)倉庫的'建設(shè)；

　　5、制定數(shù)據(jù)庫備份和恢復(fù)策略及工作流程與規(guī)范。

　　6、能出具消費品品牌制造行業(yè)應(yīng)用的數(shù)據(jù)分析技術(shù)解決方案，并落地。

　　任職資格:

　　1.從事數(shù)據(jù)倉庫領(lǐng)域至少2年以上，熟悉數(shù)據(jù)倉庫模型設(shè)計與etl開發(fā)經(jīng)驗，具備海量數(shù)據(jù)加工處理相關(guān)經(jīng)驗；

　　2.熟悉數(shù)據(jù)倉庫領(lǐng)域知識和技能者優(yōu)先，包括但不局限于：元數(shù)據(jù)管理、數(shù)據(jù)開發(fā)測試工具與方法、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理；

　　3.有從事分布式數(shù)據(jù)存儲與計算平臺應(yīng)用開發(fā)經(jīng)驗，熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實踐經(jīng)驗著優(yōu)先，重點考察hive、hdfs、hbase;

　　4.熟練掌握kettlesqoop、datax、airflow等;

　　5.有消費品品牌制造、零售行業(yè)經(jīng)驗，尤其快消品行業(yè)和財務(wù)領(lǐng)域數(shù)據(jù)項目經(jīng)驗者優(yōu)先;

　　6.熟悉分布式計算presto/imapa優(yōu)先;

　　7.有實時計算方面的經(jīng)驗的優(yōu)先。