數據倉庫工程師的職責(精選19篇)
數據倉庫工程師的職責 篇1
職責:
1. 負責企業級數據倉庫架構設計、建模以及ETL開發,構建可擴展的數據倉庫解決方案;
2.負責公司日常運營報表開發維護,和業務及分析部門溝通協作,提供多層面數據服務;
3.提供完善的數據保障體系,包括元數據管理、數據質量、數據安全等;
崗位要求
1. 計算機或相關專業本科及以上學歷 ;
2. 具有豐富的數據開發經驗,對數據處理、數據建模、數據分析等有深刻認識和實戰經驗;
3. 熟悉SQL,有一定的SQL性能優化經驗;
4. 熟練掌握Java語言,MapReduce編程,腳本語言Shell/Python/Perl之一;
5. 業務理解力強,對數據、新技術敏感,對云計算、大數據技術充滿熱情;
6. 積極樂觀、誠信、有責任心;具備強烈的進取心、求知欲及團隊合作精神;
數據倉庫工程師的職責 篇2
職責:
1、負責數據倉庫架構、元數據、數據質量、血緣分析等環節的設計與實現,構建可擴展的數據倉庫和分析解決方案;
2、負責將BI、運營、產品、客服等業務部門的需求抽象成數倉模型并落地;
3、負責參與智能用戶畫像體系開發與建設;
4、負責數據工具、數據產品及其他數據需求的開發。
技能要求:
1、有數據倉庫需求調研和需求分析經驗,能根據業務需求設計數據倉庫模型,并對數據倉庫數據模型進行管理,保證數據質量,熟悉kimball架構;
2、精通sql開發,有較豐富的Hive sql性能調優經驗優先;
3、熟悉spark structured streaming、flink中至少一種流式處理計算框架,有相關開發經驗;
4、熟悉大數據存儲處理組件,包括但不限于Hive/HDFS/HBASE/presto/Druid/kylin/impala;
5、熟練掌握Linux各種命令行工具,良好的shell功底。
數據倉庫工程師的職責 篇3
職責:
1、參與數據倉庫架構設計、建模和ETL開發;
2、參與數據治理工作,提升數據易用性及數據質量,與數據工具團隊緊密合作;
3、理解并合理抽象業務需求,發揮數據價值,與業務團隊緊密合作。
任職要求:
1、計算機、數學、統計相關專業專科及以上學歷,其中2年以上數據倉庫開發經歷;
2、精通數據倉庫實施方法論、深入了解數據倉庫體系,并支撐過實際業務場景;
3、具備較強的編碼能力,熟悉sql,python,hive,spark,kafka,storm中的多項,有至少TB以上級大數據處理經驗;
4、對數據敏感,認真細致,善于從數據中發現疑點;
5、善于溝通,具備優秀的技術與業務結合能力。
6、有電力行業經驗者優先
數據倉庫工程師的職責 篇4
職責:
1. 針對業務問題進行分析,深入了解業務需求,為業務部門提供數據支持;
2. 搭建業務分析模型或業務分析指標體系,統一數據指標分析口徑;
3. 參與報表需求調研和需求分析;
4. 參與報表開發工作;
5. 參與ELT相關的設計方案和開發;
崗位要求
1.4年及以上BI開發經驗;
2.熟悉數據倉庫建模理論,有建模經驗;
3.熟悉掌握SQL語言嗎,熟悉PL/SQL編程,熟練掌握存儲過程開發;
4.具有較強的業務理解能力,溝通能力;
5.熟悉常用ETL技術;
6.熟悉Hive、HBase、Spark等大數據者優先;
數據倉庫工程師的職責 篇5
職責:
1、構建數據挖掘模型,推動業務精確營銷實踐;
2、根據業務需求開展數據分析與建模工作,提供相關的模型和算法支撐;
3、構建數據挖掘與建模解決方案,指導應用設計與開發;
任職要求:
1、具有數學統計、計算機相關專業的本科及以上學歷
2、兩年以上相關工作經驗;
3、精通各種分類、聚類、預測、關聯模型算法與原理;
4、精通SAS、MATLAB、CLEMENTINEL等主流數據挖掘工具的使用方法,并具有大型數據挖掘項目的成功實施經驗;
5、對數據與業務有足夠敏感性,具有極強的利用數據分析、挖掘,解決業務問題的能力;
6、對數據挖掘方法論有較深刻的理解,能獨立規劃數據挖掘模型解決方案并實施;
7、熟悉linux環境和命令,能編寫簡單的shell腳本。
8、熟悉MySQL、Oracle、SqlServer、PostgreSQL、NoSql、NewSql等主流數據庫,精通mysql,oracle者優先。
數據倉庫工程師的職責 篇6
職責:
1. 與客戶溝通,確定需求邊界。能根據客戶的表述進行需求文檔的編寫和需求的拆分;
2. 配合公司市場人員獲取需求;
3. 進行需求可行性研究;
4. 參與需求調研和產品定義評估,業務需求討論與設計;
5. 根據產品定義實現詳細需求分析文檔、用戶手冊編寫并協助解決測試問題;
6. 參與整個產品開發流程,與開發測試團隊一起保證最終產品發版。
任職要求:
1.計算機,軟件工程等相關專業,本科以上學歷;
2.具有2年以上軟件項目分析經驗,參與過項目(或產品)的規劃設計、需求分析工作;
3.較強的用戶需求判斷、引導、控制能力;優秀的文字表達、業務理解、交流能力;
4.團隊合作精神;
5.要求至少2年從事離散電子制造行業 MES系統相關從業經驗,熟悉業界知名MES產品優先。
數據倉庫工程師的職責 篇7
1,為客戶提供固態存儲(SSD)產品和方案的技術講解、產品演示,配合銷售人員完成銷售指標;
2,為客戶提供技術支持,解決客戶使用過程中的技術問題;
3,針對客戶反饋的深度問題,負責與產品和研發團隊溝通做出解決方案;
3,負責項目案例整理、分析、總結和共享推廣。
數據倉庫工程師的職責 篇8
1、 參與數據平臺的定義,規劃,設計和項目監督;
3、 與技術部和基礎設施團隊協助,完成數據倉庫的建設與推進;
4、 協助經理從技術層面完成所有的技術實施架構,包括hadoop大數據平臺、數據倉庫、數據模型、etl、olap、報表平臺、元數據管理、主數據管理、分布式數據平臺等;
5、 參與建立和維護技術規范、流程、文檔,確保和項目需求保持同步;
6、 參與Informatica服務工作,包括Informatica性能調優,服務的安裝發布,及客戶現場培訓。
數據倉庫工程師的職責 篇9
1. 維護和管理桌面電腦及外設連接設置,并保證電腦及外設連接設置能正常運行;
2. 對硬件故障、軟件、電子郵件和附屬設備等基本問題進行處理解決;
3. 對計算機、無線網絡設備、打印機、掃描等設備的安裝和設置;
4. 保證我司各職場PC機及外設設備的正常運行;
5. 完成直屬上級指派的其他工作任務。
數據倉庫工程師的職責 篇10
1) 從事圖像處理及模式識別項目的開發;
2) 負責識別算法的訓練、優化;
3) 協助完成項目開發和相應的文檔管理;
4)從事人工智能深度學習項目的開發;
5)數字圖像及視頻處理算法開發,應用模塊實現。
數據倉庫工程師的職責 篇11
職責:
1.負責MPP數據庫日常維護,業務數據收集整理,對多種數據源的進行集成;
2.負責BI平臺搭建和日常維護、需求調研、模型設計工作;
3.涉及部分ETL設計、模型設計、開發工作;
4.協助解決BI平臺運行日常問題;
5.本職位上班地點:佛山順德區。
任職資格:
1.一年以上相關工作經驗;
2.熟悉Oracle、DB2等主流數據庫,并對分布式數據庫有了解,如果熟悉MPP數據庫優先考慮;
3.掌握BI相關工具,用過如ETL工具kettle;
4.接觸并使用過前端報表開發工作;
5.良好的溝通能力和獨立工作能力,良好的團隊合作意識與責任心,良好的文檔編寫能力。
數據倉庫工程師的職責 篇12
職責:
1.負責VIVO公司級的數據集市和數據倉庫的設計和開發
2.負責基于用戶行為的用戶標簽探索和開發
3.負責基于業務需求的數據中間層和可視化開發
4.負責各類分類和預測模型的開發
任職資格:
1.本科學歷,數統、計算機相關專業。
2.了解hadoop\spark生態,有完整倉庫設計和開發經驗。
3.精通hql調優,shell\python,熟練使用常規機器學習算法。
數據倉庫工程師的職責 篇13
職責:
1、編制水文水資源信息化項目有關的科研報告、實施方案、投標文件等;
2、負責與客戶進行業務溝通,挖掘和把握客戶的需求;
3、在項目實施過程中,對階段成果進行功能性測試;
4、協助項目經理在項目實施過程中進行匯報、溝通;
5、帶領團隊進行需求調研,包括需求調研計劃編制、需求調研實施、系統原型設計、需求規格說明書編寫、推進需求評審等;
6、掌握軟件開發與數據庫基礎知識,輔助項目實施工作;
7、負責需求變更的跟蹤管理;
8、編制項目過程文檔,完成各類匯報與項目驗收等工作,承擔培訓及后期維護工作;
9、配合項目經理,帶領團隊針對項目中的數據進行規劃、整理,掌握行業發展現狀,了解行業動態,分析政策信息。
任職要求:
1、從事水利行業需求分析等相關經驗3年以上,最好做過2個以上大中型項目(300萬以上),熟悉軟件開發者更佳;
2、本科及以上學歷,碩士研究生優先考慮;
3、有良好的計算機基礎,了解軟件設計和開發基本原理;
4、熟悉水文、水資源、地下水、水環境等業務者優先,具備應用系統初步設計能力;
5、有較強的文檔編寫能力;
6、具備良好的系統分析、邏輯思維和抽象概括的能力;
7、具備獨立工作能力和團隊合作精神,細心、責任感強;
8、 對用戶體驗方面的理論有一定的了解和認識,并能有效運用于產品設計工作中;
9、熟悉需求調研方法,有較強的業務流程及業務模型分析設計能力。
10、優先考慮具有水利行業軟件需求分析經驗的人員。
數據倉庫工程師的職責 篇14
1負責公司設備TPM管理制度及相關文件的編制,并組織實施
2負責組織對公司設備操作人員進行有關設備知識方面的培訓、考試及操作證辦理工作,提升操作者技能;
3負責對公司設備操作點檢、保養執行過程的監督和檢查并考核;
負責設備點檢、保養問題推動處理;
4負責組織公司設備部門與制造部門設備定期碰頭會,收集問題,組織制定實施計劃并跟蹤、檢查落實情況;
5負責設備安全、維修安全管理,對過程執行情況進行監督和檢查
6持續開展TPM,減少或避免設備故障發生
數據倉庫工程師的職責 篇15
1.熟悉染色陽極制程原理及參數,具備獨立開發染色陽極調色經驗;
2.對陽極制程有獨到見解,具備獨立解決制程中常見問題能力;
3.具備制程異常FA分析能力,可獨立解決制程異常問題;
4.熟悉環保廢水工藝設計能力,可獨立完成環保新工藝的開發評估;
5.熟悉實驗室工作流程,具備獨立開發新藥水及新工藝能力,并輔助導入量產;
數據倉庫工程師的職責 篇16
1、根據生產計劃,結合庫存、在途等情況制定物料需求計劃;
2、跟進生產用料的進度,保證物料使用需求,協調物料及時到料;
3、對接生產計劃,及時協調和反饋物料異常等情況,確保生產有序進行;
4、原材料庫存控制,制定合理的庫存控制策略和具體措施,滿足生產發貨的同時不斷優化庫存結構;
5、確保物料更替有序進行,并保證生產需求和預防呆滯;
6、評估和分析物料供應風險,制定長期有效的供應策略,降低供應風險。
數據倉庫工程師的職責 篇17
職責:
1.負責數據庫安裝維護、遷移、安全管理和故障處理等日常維護;
2.負責數據庫設計支持及性能優化,推進優化工作有效實施;
3.根據業務需求,改進數據庫架構,提供高可用、高性能、可擴展的、穩定可靠的數據庫解決方案。
4.根據需求進行存儲過程和job的編寫
5.維護和開發與其他數據庫的數據交換服務
任職要求:
1、計算機相關專業專科及以上,有1年以上數據庫管理經驗;
2、熟悉ORACEL數據庫,了解數據庫引擎等架構上的體系結構等;
3、熟悉MySQL數據庫體系結構和工作原理,有過硬的存儲過程、函數、視圖編寫技能;;
4、具有一定的故障排查能力,有很好的技術敏感度和技術文檔整合能力;
5、善于學習新技術,對新技術有較強的接受能力。
6、有較好的團隊精神和良好的溝通能力,能承受一定的工作壓力,做事細心,責任心強;
數據倉庫工程師的職責 篇18
負責日常采購到貨商品檢查活動的計劃安排,并組織實施;
參與制定、修訂商品檢驗標準;
參與質量系統的建立和完善,負責相關質量文件的控制;
參與對供應商的評估,參與對供應商的考核,配合供應商進行不良品的確認,改進;
負責客訴反饋中不合格商品的確認,參與對客訴商品的原因分析、糾正措施和提出改善建議;
負責對下屬品質意識的灌輸及人員專業知識技能培訓;
總結QC每周和每月的檢驗實績,匯報每月的品質情況;
負責下屬人員的管理和績效考核 ;
負責質量目標的達成;
數據倉庫工程師的職責 篇19
職責:
1、針對具體的業務場景需求、定義數據分析及挖掘問題;
2、使用統計學分析方法、挖掘算法、構建有效且通用的數據分析模型,對數據挖掘方案進行驗證、開發、改進和優化,實現數據挖掘的功能應用;
3、搭建高擴展高性能的數據分析模型庫,作為數據分析團隊的基礎工具;
4、完成領導安排的其他工作。
任職要求:
1、計算機、統計學、數學相關專業,本科及以上學歷;
2、3年及以上相關工作經驗,985和211大學的優秀畢業生可放寬至2年以上;
3、熟悉PHM的應用背景、功能定義、系統架構、關鍵技術;
4、熟練掌握Python進行數據挖掘;會使用Java進行軟件開發者優先考慮;
5、熟悉常用數據挖掘算法(如分類、聚類、回歸、關聯規則、神經網絡等)及其原理,并具備相關項目經驗;
6、熟悉數據倉庫,熟練使用SQL語言,有良好的數據庫編程經驗;
7、具備較強的獨立解決問題的能力,勤奮敬業、主動性和責任心強。