數據倉庫工程師的具體職責文本(精選16篇)
數據倉庫工程師的具體職責文本 篇1
職責:
1、學習并理解勵步云學業務及系統,根據業務部門需求對公司各項業務數據進行統計分析,出具相關報表;
2、進行數據倉庫設計、模型開發、數據質量校驗,報表開發;
3、進行數據差異分析,找出統計口徑、數據錯誤、操作錯誤等造成的差異原因;
4、進行數據查詢優化,解決跑數性能問題。
任職資格:
1、本科以上學歷,數學、統計、計算機相關專業優先;
2、3年以上互聯網相關行業數據開發經驗;
3、精通數據倉庫建設思路,并有相關實施經驗,特別是通用匯總層建設經驗;
4、較強的數據開發能力,熟悉Hadoop相關技術,深刻理解MapReduce原理和過程;
5、精通Hive SQL,進行數據處理及模型開發;
6、有較強的學習能力,能快速學習和理解業務知識及數據需求;
數據倉庫工程師的具體職責文本 篇2
職責:
1、負責數據倉庫(HADOOP)ETL工作以及數據運營;
2、負責數據產品的業務需求梳理、數據開發以及維護;
3、負責數據倉庫的維度建模以及設計相關的腳本調度;
4、負責維度模型的數據處理的腳本開發,程序開發以及接口對接。
職位要求:
1. 本科以上學歷,信息管理、計算機相關專業,兩年以上ETL、數據倉庫和大數據相關經驗;
2. 熟悉數據倉庫架構,了解HADOOP等大數據平臺;
3. 有ORACLE\DB2等大型的數據倉庫的開發經驗;
4. 能夠用HIVE的SQL,HADOOP的MAPREDUCE和SPARK去處理數據;
5. 熟悉關系數據庫,并有HIVE的SQL的開發經驗;
6. 熟悉Linux的shell編程;
7. 有銀行和運營商相關的大數據或者數據倉庫相關經驗的優先
8. 熱愛技術工作,具有較強的團隊協作意識,數據安全意識;
9. 工作嚴謹、責任心強,能承受工作壓力。
數據倉庫工程師的具體職責文本 篇3
職責:
1、負責大數據平臺搭建及數據倉庫建模;
2、負責數據庫管理及數據優化;
3、利用大數據相關技術實現對數據的分析、挖掘、處理、及數據可視化等相關工作;
4、維護大數據平臺并能解決相關問題, 保障平臺正常運行;
5、學習和研究新技術以滿足系統需求。
任職資格:
1、本科及以上學歷,計算機、通信等相關專業;
2、有相關工作經驗者優先;
3、對互聯網產品有見解,關注前沿技術,有較強的學習能力、分析能力和動手能力;
4、熟悉Linux操作系統及ORACLE、MySQL及MongoDB等數據庫,了解SQL優化,熟悉ER模型和相關數據建模技術,能夠熟練使用Java或Python、SHELL;
5、熟悉Hadoop的體系架構和運行原理,有大數據處理方面經驗
6、具有大型數據倉庫和ETL開發、HIVE經驗優先
7、個性樂觀開朗,溝通能力強,具備良好的團隊協作精神,能利用自身技術能力提升團隊整體研發效率。
數據倉庫工程師的具體職責文本 篇4
Responsibility
1、負責建設數據倉庫架構,包括元數據管理、ETL調度、數據集成、OLAP等子系統的設計和開發;
2、制定和推廣數據字典,建立完善的元數據管理規范,負責數據質量監控設計;
3、搭建和維護數據倉庫表,解決業務人員在倉庫系統流程、工具使用、數據處理等遇到的問題;
4、深入了解網易游戲、CC直播、藏寶閣、網易大神等業務,負責數據倉庫和其它業務系統接口。
5、基于對數據的理解和業務需求,對數據進行整理、分析和用戶畫像搭建。
Requirements
1、計算機相關專業本科及以上學歷,有2年以上數據倉庫、ETL工作經驗;
2、熟悉SQL、Shell等相關技術,有海量數據處理、ETL及任務調度優化、數據倉庫建模等經驗;
3、熟悉Linux環境,了解Java/Python服務端系統開發;
4、熟悉Hadoop/Spark/Hive/Hbase/Kafka/Flume等大數據技術者優先;
5、邏輯清晰、對數據敏感,良好的溝通能力和協作能力,敢于接受挑戰,能夠承受壓力;
數據倉庫工程師的具體職責文本 篇5
職責:
1、參與數據倉庫建設,負責數據倉庫模型設計;
2、開發高質量可擴展的底層數據倉庫體系;
3、負責數據倉庫系統與業務系統的接口設計和確認工作;
4、負責數據平臺相關的管理工作,如數據研發規范、數據質量及穩定性保證等建設;
5、參與公司各個業務線BI、數據產品與應用的數據研發,發覺數據潛在價值。
崗位要求:
1.大學本科及以上學歷,計算機、經濟、金融、數學專業背景,有3年以上工作經驗;
2.熟悉數據倉庫建模理論,以及數倉數據層級關系,具備大型數倉邏輯模型和物理模型設計經驗;
3.熟悉一種ETL開發工具(sqoop,datax等), 熟悉ETL開發實施流程和原理;
4.掌握CDH版的hadoop環境,掌握hiveQL,有調優經驗;
5.有一定的編程語言基礎,不限制于java,python,shell等;
6.有元數據管理、數據質量管理工作經驗的優先考慮;
7.工作認真,負責,仔細,有良好的團隊合作精神。
數據倉庫工程師的具體職責文本 篇6
職責:
1. 利用數據倉庫建模及相關技術,參與數據倉庫模型的設計。
2. 參與企業級大數據倉庫項目的落地開發。
3. 參與企業級主數據管理項目的實施落地。
4. 利用hadoop生態相關技術,負責大數據中心的數據處理流程,包括數據清洗、融合、統計、挖掘等。
任職要求
1. 熟悉數據倉庫產品,對數據處理、維度建模、數據分析等有深刻認識,具備數據倉庫架構設計、模型設計、ETL設計的相關經驗、熟悉數據倉庫架構,熟悉數據倉庫項目的實施流程,有一個以上企業級數據倉庫項目設計經驗者優先;
2. 熟悉數據治理及主數據管理的理論知識,掌握主數據管理項目的實施方法和落地過程,至少參與過一個主數據管理項目的實施落地。
3. 精通JAVA、Python等編程語言;精通Oracle、Mysql等主流數據庫,精通SQL;
4. 具備基于Hadoop大數據平臺開發經驗,熟悉hadoop生態體系,熟悉Hadoop、Hbase、Hive,Spark,Impala等常用組件,進行常用的ETL開發工作;
5. 熟悉常用的數據分析及數據挖掘方法及實現;
6. 具備較強的代碼能力,有較強的數據分析能力;具備優秀的溝通能力、學習能力;
7. 相關專業碩士以上學歷,或本科學歷相關工作經驗超過2年,具有智能制造領域相關經驗或背景者優先,能力突出者可適當放寬要求。
數據倉庫工程師的具體職責文本 篇7
1. 負責部分化驗設備的周期內部比對,收集比對數據,數據有異常波動時及時采取措施予以解決一般性故障,并告知部門領導。
2. 負責樣品的收集管理登記和對外樣品的遞送、打包、郵寄。
3. 負責出口COA的制作和傳遞。
4. 負責對本部門內檢驗崗位進行測試比對,統一并矯正各駐廠檢驗室檢測標準;做好與上海AT化驗數據的比對測試。
5. 協助做好化驗設備維修保養和定期周檢工作,按要求維修保養、周檢和送檢。
6. 每月匯總和打印成品、原材料分析月報,統計原材料得分表。
7. 做好公司組織試驗部分數據的輸入與傳遞.。
數據倉庫工程師的具體職責文本 篇8
職責:
1. 維護數據庫穩定運行,持續發現和解決潛在的問題;
2. 負責數據庫的性能優化,使用新技術和新架構滿足日益增長的業務需求;
3. 負責數據庫的監控系統設計,為開發團隊提供平臺支持;
4. 負責數據庫的運維方面的相關工作,包括數據庫的安裝部署、壓力測試、備份恢復、知識庫管理等
5. 負責數據庫進行容量規劃、架構設計,提高業務高可用性和容災能力;
6. 負責數據庫相關工作的整體規劃,提供決策建議。
任職要求:
1. 計算機相關專業本科及以上,具有3年以上DB2數據庫DBA經驗;
2. 精通DB2數據庫體系結構和工作原理,有高可用架構規劃設計經驗優先;
3. 熟悉MySQL數據庫體系結構和工作原理,有高可用架構規劃設計經驗優先;
4. 熟悉TSM的運維管理,并熟悉基于TSM的數據備份和恢復;
5. 熟悉V5000、V7000等存儲的運維管理;
6. 熟悉數據庫的性能優化、SQL調優技術,對高并發數據庫的鎖和事務隔離問題有深入理解;
7. 熟悉數據庫容量規劃和分表設計方法,有海量數據庫設計和支持經驗優先;
8. 熟悉常用的數據庫備份方法;
9. 精通腳本語言,并至少能用Shell,Perl,Python等中的一種進行快速開發。
數據倉庫工程師的具體職責文本 篇9
1、勘測、研究規劃道路的線路位置;
2、研究確定道路沿線的生態環境系統和景觀保護系統,預防洪水、泥石流、沙災等災難破壞道路建設;
3、勘測、規劃、設計沿線的橋梁、隧道、涵洞的施工位置;
4、設計制定道路、橋梁、隧道、涵洞的施工規范和安全操作流程;
5、設計、計算橋梁、涵洞、隧道的結構并進行施工設計;
6、制定施工方案、施工進度計劃、施工材料及設備清單,核算施工成本;
7、管理道路施工現場,審核施工質量、監督施工進度,解決施工技術難題。
數據倉庫工程師的具體職責文本 篇10
職責:
1、根據業務部門需求進行數據的處理、分析、導出和日常維護;
2、結合公司的業務,進行一些自動化數據處理腳本的開發;
3、完成相關文檔的編寫。
職位要求:
1、熟練掌握SQL語句,能夠運用SQL進行各種數據處理;
2. 熟悉Postgresql、Mysql、Oracle、HIVE 或其他數據庫中的一項或幾項;
3、熟悉shell或python編程,能夠用腳本進行數據自動化數據處理;
4、具有良好的溝通能力和業務理解能力;
5、有過kettle,powercenter等ETL經驗加分;
6、有數據挖掘分析能力加分。
數據倉庫工程師的具體職責文本 篇11
職責:
1、負責公司服務器日常維護及監控,提供系統功能方面的服務和支持。
2、負責機房巡檢及相關故障、疑難問題排查處理;
3、負責公司辦公電腦軟硬件及其外設日常維護;
任職資格:
1、熟悉微軟windows系列操作系統,熟悉Windows Server產品,有域控管理經驗;
2、熟練掌握VMware虛擬化軟件的使用,有虛擬主機維護經驗者優先;
3、熟悉EXchange server 郵件產品,有相關的安裝配置經驗;
4、能夠熟練使用常用的服務器系統監控軟件等;
5、熟悉計算機硬件、windows操作系統及應用軟件日常故障排除;
6、工作認真、仔細,有強烈的責任感和良好的溝通能力;
7、專科及以上學歷,1年以上相關工作經驗,計算機相關專業;
8、有MCSE、RHCE等證書者優先;
數據倉庫工程師的具體職責文本 篇12
職責:
1、負責產品數據庫研發,參與系統整體架構設計;
2、根據產品目標負責相關業務的數據分析、建模、設計評審,跟進產品過程中數據庫設計;
3、負責產品模塊的數據層分析、設計、編碼、測試;
4、能夠獨立完成產品數據層開發任務,負責各類數據接口開發;
5、負責各類型數據操作處理和兼容問題; 數據庫復雜SQL開發和調優。
任職要求:
1、計算機相關專業本科及以上學歷;
2、5年以上JAVA開發經驗,有Spring Boot框架開發經驗,計算機碩士以上學歷可酌情考慮;
3、系統掌握數據庫原理和知識,精通SQL語法規則和特點,有3年以上SQL編寫經驗。熟悉主流數據庫技術,良好的數據庫基礎知識,具備良好的SQL編寫與優化能力,熟練掌握Oracle、SQLServer、MySQL、PostgreSQL等數據庫語言,能熟練應用分析函數、存儲過程;
4、熟練掌握數據庫腳本的性能調優方法,有大量數據處理或開發經驗者優先;
5、熟悉數據庫建模,熟練運用建模工具進行產品的分析和設計;
6、有較強的交流能力,能很好的理解項目需求;
7、具備良好的自學能力和獨立解決問題的能力;
8、溝通能力良好,具備團隊合作精神,能適應一定壓力開展工作。
數據倉庫工程師的具體職責文本 篇13
1.潤滑系統設計。
2.冷卻系統、節溫器等設計。
3.油底殼設計。
4.潤滑系統和冷卻系統零部件分解、測繪及零部件附圖繪制。
5.配合采購、配套完成產品研發過程中的技術協調,與相關零件設計工程師進行協調,對潤滑油品進行選型。
數據倉庫工程師的具體職責文本 篇14
職責:
1.負責MPP數據庫日常維護,業務數據收集整理,對多種數據源的進行集成;
2.負責BI平臺搭建和日常維護、需求調研、模型設計工作;
3.涉及部分ETL設計、模型設計、開發工作;
4.協助解決BI平臺運行日常問題;
5.本職位上班地點:佛山順德區。
任職資格:
1.一年以上相關工作經驗;
2.熟悉Oracle、DB2等主流數據庫,并對分布式數據庫有了解,如果熟悉MPP數據庫優先考慮;
3.掌握BI相關工具,用過如ETL工具kettle;
4.接觸并使用過前端報表開發工作;
5.良好的溝通能力和獨立工作能力,良好的團隊合作意識與責任心,良好的文檔編寫能力。
數據倉庫工程師的具體職責文本 篇15
1.必須有在芯片公司工作的經驗;
2.按照工藝設計規則、設計產品的版圖;
3.對產品版圖進行規則檢查,電路與版圖匹配檢查;
4.完成用于生產加工的產品最終設計。
數據倉庫工程師的具體職責文本 篇16
1.發動機各系統零部件的布置安裝及干涉性檢査。
2.發動機骨架數模搭建及維護。
3.配合發動機在機艙內布置做接口改動,發動機初步概念設計。