數據倉庫工程師的工作職責(精選12篇)
數據倉庫工程師的工作職責 篇1
職責:
1. 負責數據倉庫架構設計與開發
2. 根據業務調研,設計信息模型與數據模型,負責大數據建模、ETL、數據產品及平臺的設計與開發
3. 滿足業務數據需求,設計面向業務的數據集市模型
4. 需求的溝通與數據開發項目管理
5. 基于Hadoop生態的程序設計、開發和維護
崗位要求:
1.熟悉SQL語言,至少熟悉Oracle、MySQL、SQL sever一種及以上
2.精通數據庫系統(Oracle、SQL、mysql等):精通熟悉Oracle數據庫體系結構,基礎扎實;精通熟悉DataGuardRAC等高可用技術,能順利的配置和管理dataGuard;精通熟悉Oracle的備份與恢復技術;熟悉SQL和PLSQL,能編寫日常維護需要的腳本
3. 從事過數倉邏輯模型、物理模型設計與實施等工作
4. 有使用Hive、Hbase、kettle等相關應用經驗更佳
數據倉庫工程師的工作職責 篇2
職責:
1. 負責直播業務相關數據倉庫的數據模型設計;
3. 參與數據倉庫ETL流程設計、開發和優化,解決ETL過程相關技術問題;
3. 參與項目規劃,數據采集設計,數據倉庫開發,模型開發,報表開發等;
4. 總結數據倉庫建模的方法,負責數據產品平臺化和系統化;
任職資格:
1. 2年及以上的數據倉庫/BI相關研發經驗,對數據和業務敏感,有較好的數據模型設計能力;
2. 熟悉數據倉庫各類模型建模理論,了解數據倉庫數據分層架構,多維數據模型設計;
3. 熟練使用Hadoop/Spark/Hive/HBase/Mysql,有列式數據庫/Kylin/ElasticSearch等經驗者優先;
4. 有較強的編程能力和編程經驗,至少熟悉Java/Scala/Python/PHP等其中一門編程語言;
5. 參與過大型數據倉庫架構設計、模型設計、ETL設計,具備海量數據處理、性能調優經驗;
6. 學習能力強,熱衷開源技術,有團隊觀念,具備獨立解決問題的能力;
數據倉庫工程師的工作職責 篇3
職責
1.負責數據ETL開發,優化ETL流程設計;
2.負責數據質量問題的分析、跟進、解決,進行數據質量監測、校驗和提升;
3.負責ETL開發實施文檔的編寫;
4.負責梳理公司數據倉庫/數據集市數據清單、數據映射關系,優化現有數據倉庫模型;
5.完善和梳理數據指標體系,完成和維護數據字典的工作;
6.參與數據標準的制定、數據標準管理和數據安全管理工作;
7.參與公司大數據平臺的建設,包括Sugar報表或神策接口配置,用戶畫像標簽體系的開發等
任職要求:
1.有shell或Python腳本開發經驗;
2.有傳統數據庫SQL Server和MySQL,有存儲過程編寫能力;
3.熟悉Hadoop生態相關技術并有相關實踐經驗,包括但不限于Sqoop、Hive、HBase、Kylin等開發經驗;
4.有kettle、azkaban或oozie工作流調度經驗;
5.熟悉Hive SQL或Flink SQL的開發;
6.有數據倉庫模型設計,有使用kafka+Flink Streaming實時數據處理經驗優先;
7.有Sugar、神策或Tableau使用經驗,有用戶畫像或客戶召回標簽工作經驗優先;
8.對數據挖掘和機器學習有所了解,包括常用的機器學習算法和數據建模過程的優先
數據倉庫工程師的工作職責 篇4
職責:
1、 參與數據倉庫及ETL基礎架構規劃、安全規劃制定;
2、 負責數據倉庫及ETL的開發、測試和優化,并及時解決相關技術問題;
3、 負責相關數據準確性驗證及報表等日常維護;
4、 報表性能優化:對存在性能問題的數據報表進行優化;
5、 數據運維:及時處理線上問題;
6、 完成上級交代的其他工作。
崗位要求:
1.計算機相關專業本科及以上學歷,2年以上ETL開發或數倉相關工作經驗;
2.熟練使用Oracle、MySQL、PostgreSQL等主流數據庫,具有較強的SQL編寫、優化能力,熟悉存儲過程編寫;
3.熟悉數據倉庫數據處理流程,有一定的數據建模能力;
4.具有良好的溝通理解能力,能根據業務提出的需求,快速理解并落地實施;
5.有Kettle、Greenplum開發經驗者優先。
數據倉庫工程師的工作職責 篇5
職責:
1、負責數據源導入、清洗、集成等工作,優化ETL流程并解決ETL相關技術問題;
2、負責參與數據模型體系構建及數據主題設計和開發,數據倉庫和業務數據集市的建設;
3、負責數據集市需求調研和需求分析;
4、基于阿里云Maxcompute,進行數據開發工作。
崗位要求:
1、3年或以上數據倉庫開發和模型設計經驗;
2、深入理解DW,BI相關的知識,包括:ETL、數據倉庫、OLAP、多維數據模型等;
3、熟悉MapReduce、Hive原理;
4、精通SQL,能夠熟練使用HiveSQL進行數據開發;
5、具有良好的團隊協作精神和溝通能力,較強的邏輯思維,學習能力和解決問題的能力,可承擔較大的工作壓力;
6、熟悉阿里云大數據開發平臺優先,如Maxcompute;
7、熟悉跨境電商及供應鏈業務優先。
數據倉庫工程師的工作職責 篇6
1、根據產品圖紙或實物,制定鍛造工藝和鍛模設計,實現穩定批量生產。
2、負責新產品開發、實施、產品實現的質量策劃。
3、優化鍛造工藝和模具設計,解決產品質量問題及現場生產問題。
4、根據產品要求對公司內部相關人員進行有關技術培訓。
5、對熱模鍛設備熟悉與了解
數據倉庫工程師的工作職責 篇7
1.負責焊裝車間的相關技術問題解決,任務中質量、效率確認及安全控制(常規工作點審核),持續改善以提升質量和效率;
2.與客戶進行確認后,進行質量技術文件(工作范圍、作業指導書)的編制,培訓組長及相關質檢人員;
3.負責檢驗工具及設備管理,編制工具、設備使用作業指導書,同時負責監督檢驗人員對工具設備的使用和保管;
4.協助運營經理進行團隊建設、員工培訓及發展、員工關系及技能考核;
5.負責隨時與客戶更新質量服務進度,進行客戶關系維護、提高客戶滿意度;
6.與運營經理保持良好溝通,準確傳遞并執行公司總部相關規定;
7.及時、定期反饋運營中所需的支持及問題,并持續改善、改進。
數據倉庫工程師的工作職責 篇8
1、負責核心產品的方案設計,物料選型,原理圖設計,BOM制作及PCB審評工作;
2、負責新產品射頻電路匹配調試及性能調試,以及射頻指標的驗證工作,并能對產品的相關問題進行失效分析;
3、指導和協助其他部門的相關工作,解決產品的硬件及軟件上的問題;
4、追蹤產品各項進度,保證產品順利量產,支持產線解決相關生產問題;
5、撰寫相應技術文檔,支持產品性能認證。
數據倉庫工程師的工作職責 篇9
1、負責企業數據管理,規劃,分析,架構 ,開發;
2、制定數據庫監控、備份、容災策略,確保數據庫服務的正常穩定運行和應急響應;
3、負責數據庫優化,完成數據庫定時作業,表結構等的整理;
4、負責數據模型建立,并根據業務和系統需要對數據庫進行劃分;
5、全面了解企業系統及應用邏輯和相對應的信息流動體系;
6、負責日常數據庫運維(問題處理,升級,維護,備份,數據轉移等);
7、熟悉SQL和Oracle 和MySQL數據庫架構設計,可針對系統和業務需要進行合理選型;
8、熟悉數據生命周期,并能帶領團隊實施Data Profiling, Cleaning;
9、熟悉Meta Data, Master Data相關項目;
10、負責公司服務器端虛擬化開發;
11、服務器集群建立;
12、配合研發工程師完成系統研發中數據褲和服務器層的配置、開發、優化;
13、負責搭建和帶領DBA團隊配合開發團隊完成系統研發任務;
14、根據具體業務和部門需要,與IDC進行溝通、協助完成信息中心搭建;
15、負責數據中心不同環境服務器的整體規劃和管理(具體管理、文檔、溝通);
16、負責網絡環境中AD域的規劃、開發、管理,還包括服務器設置、配置和日常監控維護;
數據倉庫工程師的工作職責 篇10
1、熟知油品各項性能指標,了解油品的潤滑機理。
2、有油品培訓、車輛、機械維修及售后服務實踐經驗者優先錄用。
3、負責對公司銷售人員及客戶進行定期的潤滑油知識培訓。
4、配合銷售人員到現場做油品技術咨詢與服務。
5、負責客戶來電詢問的有關油品及相關技術的解答。
數據倉庫工程師的工作職責 篇11
職責:
(1) 負責數據庫體系建設,并根據業務需求,設計數據庫結構,改進數據庫架構,實施數據庫分布式、集群、負載均衡方案;
(2) 負責數據庫系統的運行、監控、管理、性能調優、問題跟蹤等;
(3) 負責制定和實施數據庫系統的安全策略,數據備份、遷移、災難恢復;
(4)負責數據庫新技術的探索;
(5) 負責數據庫相關平臺和工具產品的建設。
任職要求:
(1)計算機、軟件相關行業,本科及以上學歷;
(2)兩年以上相關工作經驗,熟悉數據倉庫各類建模理論,具備大型數據倉庫架構設計,模型實際和處理性能調優等相關經驗;
(3)熟悉oracle、mysql、sqlserver等常用數據庫,有豐富的數據庫模型設計和優化經驗;
(4)有數據倉庫、BI、數據抽取等相關項目經驗優先,掌握Informatica、DataStage、KETTLE、TASKCTL等ETL及調度工具者優先;
(5)熟悉linux常規命令與工具,至少熟練使用Shell,Python,Perl等腳本語言之一;
(6)性格積極樂觀,態度踏實誠信,較強的語言表達能力;具備強烈的進取心,求知欲及團隊合作精神。
數據倉庫工程師的工作職責 篇12
職責:
1.設計并優化數據庫物理建設方案;
2.制定數據庫備份和恢復策略及工作流程與規范;
3.在項目實施中,承擔數據庫的實施工作;
4.針對數據庫應用系統運行中出現的問題,提出解決方案;
5.對空間數據庫進行分析、設計并合理開發,實現有效管理;
6.監督數據庫的備份和恢復策略的執行;
7.根據等保相關要求對數據庫進行版本升級、補丁修復、安全加固工作;
8.為應用開發、系統知識等提供技術咨詢服務。
崗位要求:
1.通信、電子工程、自動化、計算機其相關專業;
2.掌握數據庫技術的基本概念、原理、方法和技術;
3.能夠使用SQL語言實現數據庫操作;
4.具備數據庫系統安裝、配置及數據庫管理與維護的基本技能;
5.了解數據庫應用系統的生命周期及其設計、開發過程;
6.熟悉常用的數據庫管理和開發工具,具備用指定的工具管理和開發簡單數據庫應用系統的能力;
7.了解數據庫技術的最新發展。有相關數據庫專業證書者優先;
8.具有嚴謹認真的工作態度,對枯燥作業有耐心。