ETL工程師崗位職責(zé)優(yōu)秀(通用13篇)
ETL工程師崗位職責(zé)優(yōu)秀 篇1
1、參與數(shù)據(jù)平臺相關(guān)應(yīng)用項(xiàng)目的ETL設(shè)計(jì)、開發(fā)、維護(hù)工作;
2、參與ETL調(diào)度架構(gòu)的開發(fā)優(yōu)化工作;
4、與團(tuán)隊(duì)內(nèi)部以及需求部門進(jìn)行有效溝通,跟進(jìn)項(xiàng)目進(jìn)度以及解決相關(guān)數(shù)據(jù)問題;
5、完成上級主管分配的工作任務(wù),并達(dá)到公司制度規(guī)定的考核要求;
6、參與Informatica服務(wù)工作,包括Informatica性能調(diào)優(yōu),服務(wù)的安裝發(fā)布,及Informatica工具的相關(guān)培訓(xùn)。
ETL工程師崗位職責(zé)優(yōu)秀 篇2
1、 參與數(shù)據(jù)平臺的定義,規(guī)劃,設(shè)計(jì)和項(xiàng)目監(jiān)督;
3、 與技術(shù)部和基礎(chǔ)設(shè)施團(tuán)隊(duì)協(xié)助,完成數(shù)據(jù)倉庫的建設(shè)與推進(jìn);
4、 協(xié)助經(jīng)理從技術(shù)層面完成所有的技術(shù)實(shí)施架構(gòu),包括hadoop大數(shù)據(jù)平臺、數(shù)據(jù)倉庫、數(shù)據(jù)模型、etl、olap、報(bào)表平臺、元數(shù)據(jù)管理、主數(shù)據(jù)管理、分布式數(shù)據(jù)平臺等;
5、 參與建立和維護(hù)技術(shù)規(guī)范、流程、文檔,確保和項(xiàng)目需求保持同步;
6、 參與Informatica服務(wù)工作,包括Informatica性能調(diào)優(yōu),服務(wù)的安裝發(fā)布,及客戶現(xiàn)場培訓(xùn)。
ETL工程師崗位職責(zé)優(yōu)秀 篇3
1.負(fù)責(zé)數(shù)據(jù)收集整理分析,對多種數(shù)據(jù)源進(jìn)行深度分析,利用ETL工具或者開發(fā)程序完成數(shù)據(jù)抽取、清洗、轉(zhuǎn)換、裝載
2.負(fù)責(zé)ETL流程的優(yōu)化及解決ETL相關(guān)技術(shù)問題,開發(fā)Kettle處理插件并能根據(jù)業(yè)務(wù)需求修改Kettle源碼
ETL工程師崗位職責(zé)優(yōu)秀 篇4
職責(zé):
1、參與數(shù)據(jù)倉庫建設(shè),負(fù)責(zé)數(shù)據(jù)倉庫模型設(shè)計(jì);
2、開發(fā)高質(zhì)量可擴(kuò)展的底層數(shù)據(jù)倉庫體系;
3、負(fù)責(zé)數(shù)據(jù)倉庫系統(tǒng)與業(yè)務(wù)系統(tǒng)的接口設(shè)計(jì)和確認(rèn)工作;
4、負(fù)責(zé)數(shù)據(jù)平臺相關(guān)的管理工作,如數(shù)據(jù)研發(fā)規(guī)范、數(shù)據(jù)質(zhì)量及穩(wěn)定性保證等建設(shè);
5、參與公司各個(gè)業(yè)務(wù)線BI、數(shù)據(jù)產(chǎn)品與應(yīng)用的數(shù)據(jù)研發(fā),發(fā)覺數(shù)據(jù)潛在價(jià)值。
崗位要求:
1.大學(xué)本科及以上學(xué)歷,計(jì)算機(jī)、經(jīng)濟(jì)、金融、數(shù)學(xué)專業(yè)背景,有3年以上工作經(jīng)驗(yàn);
2.熟悉數(shù)據(jù)倉庫建模理論,以及數(shù)倉數(shù)據(jù)層級關(guān)系,具備大型數(shù)倉邏輯模型和物理模型設(shè)計(jì)經(jīng)驗(yàn);
3.熟悉一種ETL開發(fā)工具(sqoop,datax等), 熟悉ETL開發(fā)實(shí)施流程和原理;
4.掌握CDH版的hadoop環(huán)境,掌握hiveQL,有調(diào)優(yōu)經(jīng)驗(yàn);
5.有一定的編程語言基礎(chǔ),不限制于java,python,shell等;
6.有元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理工作經(jīng)驗(yàn)的優(yōu)先考慮;
7.工作認(rèn)真,負(fù)責(zé),仔細(xì),有良好的團(tuán)隊(duì)合作精神。
ETL工程師崗位職責(zé)優(yōu)秀 篇5
職責(zé):
1. 針對業(yè)務(wù)問題進(jìn)行分析,深入了解業(yè)務(wù)需求,為業(yè)務(wù)部門提供數(shù)據(jù)支持;
2. 搭建業(yè)務(wù)分析模型或業(yè)務(wù)分析指標(biāo)體系,統(tǒng)一數(shù)據(jù)指標(biāo)分析口徑;
3. 參與報(bào)表需求調(diào)研和需求分析;
4. 參與報(bào)表開發(fā)工作;
5. 參與ELT相關(guān)的設(shè)計(jì)方案和開發(fā);
崗位要求
1.4年及以上BI開發(fā)經(jīng)驗(yàn);
2.熟悉數(shù)據(jù)倉庫建模理論,有建模經(jīng)驗(yàn);
3.熟悉掌握SQL語言嗎,熟悉PL/SQL編程,熟練掌握存儲過程開發(fā);
4.具有較強(qiáng)的業(yè)務(wù)理解能力,溝通能力;
5.熟悉常用ETL技術(shù);
6.熟悉Hive、HBase、Spark等大數(shù)據(jù)者優(yōu)先;
ETL工程師崗位職責(zé)優(yōu)秀 篇6
職責(zé):
1.參與傳統(tǒng)數(shù)倉和大數(shù)據(jù)數(shù)倉日常開發(fā)工作;
2.參與大數(shù)據(jù)倉庫設(shè)計(jì)、規(guī)劃和開發(fā);
3.參與日常工作的優(yōu)化,提出建設(shè)性意見;
4.負(fù)責(zé)管理項(xiàng)目,負(fù)責(zé)板塊內(nèi)的資源協(xié)調(diào)、進(jìn)度管理、交付管理;
5.參與數(shù)據(jù)倉庫、數(shù)據(jù)集市體系架構(gòu)的設(shè)計(jì)、規(guī)劃與開發(fā), 參與大數(shù)據(jù)、ETL開發(fā),sql性能優(yōu)化。
任職要求:
1.全日制本科,計(jì)算機(jī)等相關(guān)專業(yè)。3年以上數(shù)倉開發(fā)經(jīng)驗(yàn),有銀行、金融從業(yè)經(jīng)驗(yàn)者優(yōu)先。
2.2年以上項(xiàng)目管理經(jīng)驗(yàn),具備PMP證書優(yōu)先.
3.熟悉oracle/hive/spark,熟悉數(shù)據(jù)處理和性能優(yōu)化,有UDF自定義函數(shù)、MR開發(fā)經(jīng)驗(yàn)優(yōu)先;
4.熟悉常用ETL工具,熟悉常用的Linux指令,熟悉shell/python任意一種腳本語言。
ETL工程師崗位職責(zé)優(yōu)秀 篇7
職責(zé):
1. 對信息化項(xiàng)目進(jìn)行立項(xiàng)評估管理、跟蹤項(xiàng)目執(zhí)行進(jìn)度與狀態(tài)、項(xiàng)目過程變更管理、評估信息化項(xiàng)目上線后的實(shí)際產(chǎn)出效果;
2. 對接業(yè)務(wù)部門,對信息化需求進(jìn)行需求調(diào)研、整理、分析、原型設(shè)計(jì)、評估需求合理性可行性,提出系統(tǒng)解決方案;
3. 對信息系統(tǒng)建設(shè)進(jìn)行優(yōu)先級及版本統(tǒng)一協(xié)調(diào)、規(guī)劃;
4. 與跨體系開發(fā)團(tuán)隊(duì)、供應(yīng)商對接需求、審核解決方案、管理項(xiàng)目/SR的執(zhí)行情況、推動(dòng)項(xiàng)目/SR的落地;
5. 統(tǒng)籌、指導(dǎo)用戶完成驗(yàn)收測試及系統(tǒng)上線切換工作;
6. 完善信息系統(tǒng)建設(shè)相關(guān)的流程規(guī)范、并推動(dòng)流程規(guī)范的實(shí)施。
任 職 資 格
1. 精通需求分析的方法;
2. 具備對需求合理性準(zhǔn)確的把握能力;
3. 具備2年及以上的開發(fā)經(jīng)驗(yàn);有3年以上的需求分析經(jīng)驗(yàn);
4. 具備良好的項(xiàng)目評估、項(xiàng)目管理經(jīng)驗(yàn);
5. 具備快速理解業(yè)務(wù),以IT角度對業(yè)務(wù)進(jìn)行抽象的能力,善于理解和溝通,邏輯思維能力好;
6. 對新技術(shù)感興趣,對新事物感興趣,把握新技術(shù)前沿應(yīng)用;
7. 至少5年以上同類工作經(jīng)驗(yàn)。
ETL工程師崗位職責(zé)優(yōu)秀 篇8
職責(zé):
1、負(fù)責(zé)業(yè)務(wù)數(shù)據(jù)建模、數(shù)據(jù)分析及關(guān)鍵機(jī)器學(xué)習(xí)算法的設(shè)計(jì)與實(shí)現(xiàn)
2、編寫算法設(shè)計(jì)各階段的相關(guān)文檔,撰寫相關(guān)專利;
3、負(fù)責(zé)基于大數(shù)據(jù)平臺的相關(guān)算法實(shí)現(xiàn)及優(yōu)化
崗位要求:
1、本科學(xué)歷及以上,計(jì)算機(jī)、醫(yī)學(xué)統(tǒng)計(jì)或相關(guān)專業(yè)
2、數(shù)學(xué)基礎(chǔ)扎實(shí),在數(shù)據(jù)挖掘、機(jī)器學(xué)習(xí)算法研究有較為豐富的知識積累和一定的實(shí)際項(xiàng)目經(jīng)驗(yàn)。
3、熟悉大數(shù)據(jù)存儲與分析基礎(chǔ)理論和算法,有智能數(shù)據(jù)挖掘系統(tǒng)開發(fā)經(jīng)驗(yàn)者優(yōu)先;
4、有醫(yī)療數(shù)據(jù)分析經(jīng)驗(yàn)優(yōu)先
5、樂于接受挑戰(zhàn),學(xué)習(xí)能力強(qiáng),勤奮肯干,有責(zé)任心
ETL工程師崗位職責(zé)優(yōu)秀 篇9
職責(zé):
1.依據(jù)項(xiàng)目需求建構(gòu)數(shù)據(jù)萃取與轉(zhuǎn)換流程
2.挖掘數(shù)據(jù)特征,進(jìn)行數(shù)據(jù)和特征融合
3.搭建數(shù)學(xué)模型,并對模型進(jìn)行檢驗(yàn)評估
職位要求:
1、計(jì)算機(jī)、數(shù)學(xué)、統(tǒng)計(jì)、人工智能等相關(guān)專業(yè)的碩士或以上學(xué)歷;
2、二年以上數(shù)據(jù)挖掘、機(jī)器學(xué)習(xí)相關(guān)工作經(jīng)驗(yàn),熟悉python、spark、pandas、sklearn等數(shù)據(jù)分析工具者優(yōu)先;
3、熟練掌握貝葉斯、隨機(jī)森林、深度學(xué)習(xí)等機(jī)器學(xué)習(xí)算法;
4、突出的分析問題和解決問題能力,自我驅(qū)動(dòng),并且具備較強(qiáng)的學(xué)習(xí)能力、創(chuàng)新應(yīng)用能力及溝通協(xié)調(diào)能力,有良好的團(tuán)隊(duì)合作意識;
5、有國際背景或能熟練使用英文溝通者優(yōu)先
ETL工程師崗位職責(zé)優(yōu)秀 篇10
職責(zé):
根據(jù)管理決策分析的需求,負(fù)責(zé)數(shù)據(jù)庫模型的設(shè)計(jì),數(shù)據(jù)庫結(jié)構(gòu)優(yōu)化及技術(shù)指導(dǎo);
負(fù)責(zé)數(shù)據(jù)庫運(yùn)維自動(dòng)化方面的研究和踐行實(shí)施,確保數(shù)據(jù)庫的配置管理;
負(fù)責(zé)設(shè)計(jì)和優(yōu)化數(shù)據(jù)庫建設(shè)方案,參與系統(tǒng)架構(gòu)的規(guī)劃、設(shè)計(jì)、實(shí)施;
負(fù)責(zé)數(shù)據(jù)庫系統(tǒng)運(yùn)維流程、開發(fā)規(guī)范和安全策略的制定;
負(fù)責(zé)分析和管理數(shù)據(jù)庫的安全,監(jiān)控對數(shù)據(jù)庫的訪問;
負(fù)責(zé)數(shù)據(jù)庫備份與恢復(fù)策略制定,年度恢復(fù)演練的執(zhí)行;
履行上級主管授予的其它職責(zé);
崗位要求:
本科及以上學(xué)歷,計(jì)算機(jī)或相關(guān)專業(yè),5年及以上數(shù)據(jù)庫運(yùn)維的工作經(jīng)驗(yàn);
具備OCM證書或相當(dāng)水平的資格認(rèn)證。
精通數(shù)據(jù)庫性能調(diào)優(yōu),SQL優(yōu)化,服務(wù)器優(yōu)化;
熟悉Oracle、MySQL數(shù)據(jù)庫技術(shù)以及高可用系統(tǒng)的設(shè)計(jì)、配置和管理;
熟悉各種操作系統(tǒng)及各種平臺下主流數(shù)據(jù)庫系統(tǒng)的安裝與日常維護(hù);
熟悉Linux操作系統(tǒng)管理與維護(hù);
具有良好的客戶服務(wù)和團(tuán)隊(duì)合作意識,有較強(qiáng)的責(zé)任感和執(zhí)行力;
具有較強(qiáng)的溝通表達(dá)、歸納總結(jié)的能力,良好的文檔撰寫能力;
具有較強(qiáng)的數(shù)據(jù)安全和保密意識;
ETL工程師崗位職責(zé)優(yōu)秀 篇11
1、熟悉CNC加工經(jīng)驗(yàn),能看懂三視圖;
2、有CNC架車、架機(jī)經(jīng)驗(yàn)、了解3軸、4軸駕車內(nèi)容、注意事項(xiàng)及其原理;
3、熟悉法蘭克、兄弟、北京精雕等操作、調(diào)試系統(tǒng),了解CNC相關(guān)刀具加工特性佳;
4、熟練運(yùn)用UG編程軟件、了解探針編程;
ETL工程師崗位職責(zé)優(yōu)秀 篇12
1.負(fù)責(zé)公司內(nèi)部員工電腦的技術(shù)支持(如解決網(wǎng)絡(luò)、系統(tǒng)及硬件故障、病毒查殺、辦公軟件排錯(cuò)等)
2.負(fù)責(zé)公司各類終端機(jī)、打印機(jī)、掃描儀等外設(shè)的維護(hù);
3.負(fù)責(zé)公司業(yè)務(wù)系統(tǒng)的維護(hù)及更新;
4.負(fù)責(zé)公司下屬門店IT設(shè)備的安裝、部署以及網(wǎng)絡(luò)的開通和調(diào)試;
ETL工程師崗位職責(zé)優(yōu)秀 篇13
職責(zé):
1、參與數(shù)據(jù)ETL和數(shù)據(jù)倉庫治理;
2、參與大數(shù)據(jù)分析和挖掘,個(gè)性化推薦等系統(tǒng)的設(shè)計(jì)和開發(fā);
3、負(fù)責(zé)數(shù)據(jù)挖掘、自然語言處理及預(yù)測等相關(guān)模型、算法的設(shè)計(jì)與開發(fā);
4、參與BI等系統(tǒng)基礎(chǔ)數(shù)據(jù)支撐開發(fā);
5、參與用戶畫像、用戶行為評分、行業(yè)指數(shù)、銷售預(yù)測等功能模塊的開發(fā);
6、參與爬蟲等外部相關(guān)數(shù)據(jù)爬取。
任職要求:
1、熟悉概率論和統(tǒng)計(jì)方法;
2、掌握統(tǒng)計(jì)學(xué)習(xí)方法和機(jī)器學(xué)習(xí)算法者優(yōu)先;
3、掌握J(rèn)AVA,理解MapReduce開發(fā)思維,能獨(dú)立開發(fā)分布式計(jì)算;熟悉Shell、R、MATLAB、Octive、Python等腳本語言或應(yīng)用開發(fā)者優(yōu)先;
4、熟悉關(guān)系型數(shù)據(jù)庫MySQL等,了解NoSQL;
5、具備工程化思維,思考數(shù)據(jù)業(yè)務(wù)能夠全面謹(jǐn)慎;
6、具備快速學(xué)習(xí)的能力和業(yè)務(wù)理解力,對數(shù)據(jù)開發(fā)有濃厚的興趣,具備理解和整合算法的能力。