數據倉庫工程師崗位的工作職責(精選29篇)
數據倉庫工程師崗位的工作職責 篇1
職責:
參與數據倉庫模型設計和開發工作;
負責建立數據分析模型,設計前端報表,數據可視化開發;
負責數據平臺項目數據倉庫的管理、性能監控及優化等;
負責數據平臺的日常運維及優化
職位要求:
大學本科以上學歷,3年以上工作經驗,包含2年以上數據倉庫開發工作經驗;
精通數據倉庫建設,熟悉常用的模型設計方法;
對數據可視化有豐富的經驗,熟悉常用的數據分析方法;熟悉至少一種報表工具開發;
精通數據倉庫領域知識和技能,包括元數據管理、主數據管理、數據質量管理等;
熟練使用ETL工具如Kettle、SSIS等進行數據清洗、轉換、整合;
熟悉至少兩種關系型數據庫,如Oracle、SQL Server、PostgreSQL、MySql等主流數據庫,精通SQL Server開發和運維者優先考慮;
有完整的數據平臺建設經驗者優先;
熟悉使用Linux系統及Shell腳本開發,熟練開發Python程序者優先;
熟悉大數據開發框架者優先,如Spark,Flink等;
對新技術好奇愛學習,主動性和責任心強,對數據敏感,邏輯性強,有良好的抗壓能力;
團隊協作能力強
數據倉庫工程師崗位的工作職責 篇2
職責:
1. 負責數據倉庫建設、設計、優化和落地
2. 負責數據ETL任務開發及日常維護
3. 對數據ETL任務進行性能調優及性能瓶頸分析
4. 學習新技術,提高整個平臺的計算能力和效率
任職要求:
1. 計算機相關專業,全日制本科及以上學歷,2-5年工作經驗
2. 熟悉數據倉庫理論基礎,對數據模型建設、應用層建設有比較豐富的經驗
3. 熟練使用 SHELL或PYTHON
4. 熟悉HADOOP相關的大數據技術:HDFS, MAPREDUCE, HIVE
5. 能對HIVE進行性能分析及調優
6. 有MAPREDUCE開發經驗優先
7. 良好的溝通能力、組織協調能力、應變能力, 極強的責任心、學習能力。
數據倉庫工程師崗位的工作職責 篇3
職責:
1、基于互聯網行業特點構建企業級數據倉庫架構,建設PB級共享數據平臺;
2、負責數據平臺相關數據研發及管理工作,參與制定EDW相關規范并推動實施落地;
3、對海量數據處理的相關需求進行評估及方案設計;
4、負責數據產品如用戶畫像等模型設計;
5、了解行業前沿大數據處理方法。
任職資格:
1、8年以上數據倉庫開發及管理經驗,5年以上互聯網/電商行業經驗;
2、精通數據倉庫建設方法論,有大型數據倉庫建設項目經驗(PB級以上);
3、熟悉HADOOP、HIVE、HBASE、SPARK、FLUME等工作原理;
4、精通HiveSQL,有較豐富的HiveSQL性能調優經驗;
5、至少熟練使用Shell、Python、Perl等腳本語言之一;
6、工作認真、負責,有良好的團隊合作精神,良好的分析及溝通能力;
數據倉庫工程師崗位的工作職責 篇4
職責:
1 負責大數據平臺、數據倉庫多維模型設計
2 負責大數據平臺相關生產系統數據的抽取、清洗、轉換等工作
3 負責BI平臺設計與報表開發工作
崗位要求:
1、精通數據倉庫建模理論,有參與過2個以上的數據倉庫建設經驗;
2、精通ETL開發,熟悉數據的抽取、常用數據腳本編寫、存儲過程的編寫;
3、熟悉BI平臺,有數據報表設計和開發經驗;
4、熟悉SQL,掌握Oracle、PostgreSQL、MySql等至少一種主流關系數據庫;
5、具備良好的團隊協作精神,良好的溝通能力;
6、供應鏈、物流行業數據從業經歷者優先。
數據倉庫工程師崗位的工作職責 篇5
職責:
1、參與據倉庫的長期架構規劃,與數據開發,建設共享大數據平臺;
2、負責數據平臺相關數據管理工作,如研發規范、質量規范、保障規范的制定與推動實施落地;
3、負責來自業務團隊數據需求的研發支撐;
4、大規模數據挖掘和機器學習算法的實現和維護;
5、在線和離線海量數據分析平臺的開發;
6、負責數據倉庫的建設和維護,包括需求調研分析、軟件規劃、概念模型、設計邏輯、物理模型、數據處理(抽取、清洗、轉化)、項目實施管控等;
7、負責制定數據接入和采集規范制定。
任職要求:
1、從事數據倉庫領域工作2年以上;
2、熟悉數據建模、ETL設計與應用、報表開發等,并有實際模型設計及ETL開發經驗 ;具有良好的編程習慣和文檔編寫習慣;
3、熟悉數據倉庫領域知識和管理技能,包括但不局限于:元數據管理、數據質量、性能調優等;
4、掌握大型數據庫開發技術,如Oracle、Teradata、DB2、Mysql等等掌握至少其中一種,靈活運用SQL實現海量數據ETL加工處理;
5、了解大數據基礎架構和平臺 ,具備相關產品(Hadoop、Hive、HBase、Pig、Sqoop、Spark等)項目應用研發經驗,有MapReduce開發的實戰經驗者優先考慮;
6、熟悉linux系統;
7、熟練掌握python語言;
8、熟悉數據可視化的基本方法,有數據可視化的開發經驗優先;
9、對數據敏感,具有良好的邏輯分析、責任心強、良好的對外溝通和團隊協作能力
數據倉庫工程師崗位的工作職責 篇6
1、負責公司區域存儲服務器/虛擬化產品的售后技術支持工作;
2、負責華為存儲服務器/虛擬化產品的項目交付及維護工作;
3、負責項目建設交付及服務各階段文檔的編寫工作。
數據倉庫工程師崗位的工作職責 篇7
1、熟悉客運專線施工質量驗收暫行標準、施工技術指南及施工質量驗收補充標準,參與橋梁工程施工技術創新和新技術、新設備、新工藝的推廣、應用,督促落實新技術、新工藝的實施情況;負責橋梁工程科技信息收集、積累、開發、利用及科技資料的整理。
2、編制橋梁工程實施性施工組織設計。參與橋梁開工報告、竣工文件的編制工作。
3、負責橋梁工程的設計文件審核與匯總,對設計中存在的問題及時報請相關單位,相關部門,相關人員解決。
4、負責管段內橋梁工程的材料計劃提報。
5、負責一般性橋梁工程施工方案的制定,并報主管領導審核。
6、參加解決橋梁工程施工中的技術問題,及時向主管領導匯報施工中遇到的技術難題,參與研究、制定解決問題的方案并及時組織實施。
7、參加工程竣工驗收工作,編制施工技術總結。
數據倉庫工程師崗位的工作職責 篇8
職責:
1、負責制定數據倉庫平臺技術體系架構、數據架構及規范;
2、負責設計和實施公司業務數據的實時/離線數據ETL架構方案;
3、負責調度架構設計與開發;
4、負責數據倉庫平臺運維以及日常數據運營等管理;
5、負責關鍵技術攻關;
任職要求:
1、5年以上數據倉庫項目開發經驗,參與過數據倉庫架構設計,對ETL開發流程、調度架構有深入理解;
2、精通mysql、 oralce 、greenplum等至少一種數據庫,豐富的SQL性能調優經驗;
3、熟練使用Java、Shell、Python、Perl等至少一種腳本語言;
4、熟悉數據治理理論,數據質量、元數據管理流程和方法;
5、了解Hadoop/Hive/HBase/Spark/Storm等技術及其生態圈;
6、溝通能力好、責任心強,具有良好的團隊合作精神和敬業精神;
數據倉庫工程師崗位的工作職責 篇9
1、熟悉水性涂料、油墨(丙烯酸、聚氨酯等)、耐高溫涂料;
2.熟悉膠黏劑,有原膠合成膠經驗
3.熟悉各類材料檢驗及標準
4、具有導熱散熱復合材料研發經驗者優先;
5、本科以上學歷,化工專業優先;
6、綜合能力扎實,能熟練運用辦公軟件;
7、誠實吃苦耐勞、有責任心、團隊協作能力強。
數據倉庫工程師崗位的工作職責 篇10
職責:
1.負責MPP數據庫日常維護,業務數據收集整理,對多種數據源的進行集成;
2.負責BI平臺搭建和日常維護、需求調研、模型設計工作;
3.涉及部分ETL設計、模型設計、開發工作;
4.協助解決BI平臺運行日常問題;
5.本職位上班地點:佛山順德區。
任職資格:
1.一年以上相關工作經驗;
2.熟悉Oracle、DB2等主流數據庫,并對分布式數據庫有了解,如果熟悉MPP數據庫優先考慮;
3.掌握BI相關工具,用過如ETL工具kettle;
4.接觸并使用過前端報表開發工作;
5.良好的溝通能力和獨立工作能力,良好的團隊合作意識與責任心,良好的文檔編寫能力。
數據倉庫工程師崗位的工作職責 篇11
職責:
1 根據產品規劃或者項目要求,獨立完成業務需求和功能需求。
2 向開發工程師提供咨詢、指導、解釋業務需求。
3 整理、分析和引導客戶需求,提出解決方案、按時交付和提高客戶滿意度。
4 高質量完成上級安排的工作任務。
任職要求:
1 統招本科或以上學歷,2年以上產品需求開發、需求管理工作經驗;
2 熟練掌握Axure\Visio\PowerPoint\Excel\Word\思維導圖等工具,善于溝通。
3 掌握需求分析方法,熟悉需求管理和研發過程管理,
4 具備優秀的邏輯思維能力和文檔編寫能力;
5 郵政行業、快遞行業和金融行業優先。
6 計算機相關專業優先,如大數據專業、軟件工程專業、信息管理專業;了解基本SQL語法優先。
數據倉庫工程師崗位的工作職責 篇12
職責
1、負責客戶系統架構的設計規劃和解決方案;
2、為客戶提供技術支持和日常維護;
3、機房服務器日常巡檢
4、客戶關系的維護及拓展
5、上級安排的其他工作
任職資格
1、計算機相關專業大專以上學歷;
2、熟悉vmware等主流虛擬化產品;
3、熟悉linux和windows操作系統的安裝和維護;
4、熟悉各大硬件廠商的主流產品;
5、良好的溝通交流能力及團隊協作精神;
6、良好的自我調節能力,富有責任心和服務意識。
數據倉庫工程師崗位的工作職責 篇13
職責:
1、負責時間序列分析類算法的維護和設計實現;
2、負責海量內容和業務數據的分析和挖掘、建模,快速迭代算法,提升算法效果;
3、參與搭建和實現大數據平臺下的算法處理程序;
4、應用各種機器學習、數據挖掘技術進行數據分析與數據挖掘;
5、根據業務需求進行數學建模,設計并開發高效算法,并對模型及算法進行驗證和實現。
【職位要求】
1、20xx屆應屆畢業生,本科及以上學歷,985/211畢業院校優先考慮,計算機軟件、通訊相關專業;
2、熟悉linux操作,熟悉oracle數據庫及sql語言;
3、掌握數據分析/挖掘方法及相關算法;
4、有R語言開發能力優先;
5、有運營商數據分析,模型構建經驗優先。
數據倉庫工程師崗位的工作職責 篇14
職責:
1、 完成ETL數據處理工作;
2、 參與項目的數據庫開發工作;
3、 數據質量分析報告編寫;
4、 客戶現場項目上線技術支持。
任職要求:
1、2年以上數據庫開發(BI/DW/ETL)等相關技術經驗,熟悉主流數據庫之一:mysql、Oracle;
2、熟悉ETL開發過程和規范,了解SSIS/Kettle/Datastage/infomatica其中一種開發工具,或者了解微軟的數據倉庫工具體系;
3、熟悉SQL語言及存儲過程等編寫,有SQL調優能力更佳;
4、良好的代碼編程習慣及較強的文檔撰寫能力;
5、具備良好的溝通能力、團隊合作能力,有較強的責任心;
數據倉庫工程師崗位的工作職責 篇15
職責
1 負責房地產大數據系統的開發;
2 負責房地產相關業務算法的設計開發;
3 進行數據抽取、數據清洗、數據探索、數據建模分析等工作;
4 參與項目的技術攻堅和優化,相關系統的架構設計和評審,以及對問題的跟蹤和解決;
5 參與系統文檔的撰寫、維護.
工作要求
1、應用數學、統計學、運籌學、金融學、計算機應用等本科及以上學歷, 具有數據挖掘領域2年以上開發經驗;
2、至少掌握Python、Scala、R等語言其中一種,Python優先;
3、掌握關系型數據庫Oracle、Mysql、Postgresql的使用;
4、能夠基于開源大數據框架搭建分布式數據挖掘系統,熟悉Hadoop相關組件包括,Hdfs/HBase/Hive/ZooKeeper,熟練運用Storm/Spark/Mahout,有開發經驗者優先;
5、熟悉常見的機器學習算法如KNN、決策樹、隨機森林數、邏輯回歸、SVM等算法,熟悉常見深度學習算法CNN、LSTM和神經網絡;
6、具有以下經驗者優先:
數據倉庫工程師崗位的工作職責 篇16
職責:
1、根據業務需求完成數據庫架構設計,配合系統開發團隊提供DBA服務。
2、負責數據庫的系統安裝、配置管理以及性能監控和調優;
3、對數據庫運行狀況進行監控,及時對故障進行分析處理,記錄解決文檔;
4、提供數據庫的高可用性部署設計方案、以及負責數據庫的日常維護/管理(數據備份/恢復計劃,系統數據安全以及權限管理)
任職要求:
1、3年以上mysql DBA全面運維工作經驗,有存儲過程,觸發器,大數據量的經驗。
2、熟悉Linux系統,能獨立完成數據庫系統的部署、調優、測試和監控;
3、有mysql數據庫高負載高并發系統運維經驗;
4、具有很強的故障排查能力,有很好的技術敏感度和技術文檔整合能力;
5、熟悉MySQL數據庫設計、管理與優化,熟悉myisam和innodb引擎,熟練mysql性能優化、SQL調優技術;
6、具備基本的JAVA知識,可以協助team完成一些基本的開發工作。
7、工作踏實、責任心強,敢于獨立分析和解決問題。
8、有良好的團隊協作精神,樂于分享,共同進步。
數據倉庫工程師崗位的工作職責 篇17
職責:
1、根據公司自主產品需求,研究設計相應數據挖掘方案及算法,分析數據,設計方案,構建原型,快速實現對于數據分析、挖掘的需求;
2、深入分析汽車后服務應用數據,特別是時間序列內的連續數據,應用統計學、機器學習、數據挖掘等技術建立模型,形成診修技術分析報告或數據產品,并跟蹤產品運營落地;
3、負責診修行為、診斷過程、結果等數據與知識智推模型中的具體開發和應用。
任職要求:
1、本科以上學歷,數學、統計等相關專業背景,碩士或以上學歷優先;
2、4年以上相關工作經驗,精通SQL,熟練使用Hadoop/MongoDB/Spark進行數據處理加工;熟練掌握Python,Shell任一種腳本
3、有統計建模、機器學習(聚類、分類、回歸、貝葉期分類、神經網絡等)或數據挖掘應用的項目或研究經驗,能夠熟練運用python、R、spark任意一種進行建模;
4、具有大型電商類、網約車類、汽車后服務類等數據挖掘經驗者優先。
5、具有對時間序列進行數據挖掘經驗者優先。
數據倉庫工程師崗位的工作職責 篇18
1Develop and test RF plasma(etch PECVD)chamber hardware;
2Improve and optimize existing mechanical & electrical units in chambers;
3Qualify new materials or new design;
4優化腔體放電結構以滿足工藝要求;
5主持產品RF系統設計和開發,并配合整體項目的完成;
6產品RF plasma的仿真模擬;
7編寫相關技術文檔及技術報告。
數據倉庫工程師崗位的工作職責 篇19
職責:
1、進行用戶需求、問題溝通整理、分析;
2、參與需求調研和產品定義評估,業務需求討論與設計;根據產品定義實現詳細需求分析并形成標準文檔;與開發測試團隊一起保證最終產品發布;
3、負責原型界面繪制;
4、完成公司臨時賦予的任務;
職位要求:
1、語言表達和思維邏輯清晰、性格樂觀較外向、溝通能力強;
2、1年及以上實際需求分析或相關工作經驗;
3、熟練掌握建模工具或者Axure界面設計工具;
4、熟悉需求調研方法,較強的業務流程及業務模型分析設計能力,掌握軟件需求獲取與分析方法;
數據倉庫工程師崗位的工作職責 篇20
職責:
1) 配合業務伙伴推動思邁特數據挖掘產品的銷售,負責售前階段的客戶需求調研、需求分析,完成項目售前方>案的制作、招投標支持以及產品演示;
2) 理解客戶具體業務需求,利用思邁特數據挖掘軟件,提供明確的大數據分析應用解決方案;
3) 負責具體數據挖掘需求的落地實施工作,進行項目現場業務技術支持、與客戶進行技術溝通;
4) 整理行業案例,深入研究分析市場需求趨勢、行業知識及發展方向,并進行行業案例與解決方案的包裝和推廣;
5) 具有良好的溝通表達能力,抗壓能力強,責任心強,接受短期出差;
崗位要求:
1) 本科以上學歷,計算機、軟件、數學、統計相關專業畢業,數學功底扎實及研究生學歷者優先考慮,2年以上
數據挖掘相關工作經驗;;
2) 具備大量數據挖掘經驗,具備項目建模經驗,有自然語言處理、文本分析經驗尤佳;
3) 能快速理解客戶需求、解決方案編制、模型開發;
4) 至少熟練一門數據挖掘工具,如Python,R等,同時具有Java開發能力優先;
5) 精通數據挖掘和機器學習算法,對深度學些有一定的了解以及應用;
6) 熟悉Linux開發環境,良好的系統編程、數據結構、算法基礎、系統設計能力;
數據倉庫工程師崗位的工作職責 篇21
1.分析各工藝提供的工藝流程及設計規則,理解所用工藝器件的平面和縱向結構;
2.負責模擬及數模混合電路、電源類電路的全局/模塊級版圖規劃、版圖設計,版圖驗證、版圖指導;
3.能與模擬工程師緊密合作,完成版圖性能優化,如匹配、噪音敏感性、ESD保護設計、Latch up等可靠性設計;
4.負責項目相關文檔的撰寫,完成版圖物理驗證、包括DRC、LVS、ERC、EXT, 完成寄生參數提取;
5.能承擔高壓高性能模擬、混合信號模擬電路、大功率電源類IC產品版圖設計,tapeout等工作。
數據倉庫工程師崗位的工作職責 篇22
職責:
1、整合公司各大系統的會員、訂單等數據資料;
2、按原型開發數據產品模塊、外 部數據挖掘;
3、為公司業務需求,快速輸出定制化報表;
4、參與大數據平臺設計和實施,負責基于Hadoop生態的大數據平臺相關的應用開發;
5、進行大數據相關新技術的研究和落地。
要求:
1、本科及以上學歷,計算機相關專業,1年以上相關開發經驗;
2、有文本挖掘、爬蟲等相關經驗,熟練掌握py thon/PHP等語言,有linux環境開發經驗:3、熟悉常見的機器學習、自然語言處理相關領域的知識:包括句法/語法分析、關鍵詞抽取、情感分析、文本分類聚類、檢索、相似度算法等;
4、熟悉Hadoop, Spark, Tensorflow等, 能從業務場景中精確識別問題模式并應用相應的模型和算法來解決問題,并有能力建立合理的評價指標;
5、對常見的數據庫Mysq1 Oracle SQLServer 0racle等有較深的理解,能熟練操作:
6、熱愛技術,喜歡鉆研,善于溝通,有團隊合作精神。
數據倉庫工程師崗位的工作職責 篇23
職責:
1) 負責項目需求調研、需求分析、系統界面設計,編寫需求分析說明書
2) 跟進需求開發過程、把控開發質量、檢驗開發結果
3) 負責跟進與需求相關的日常運營事務
4) 開展用戶交流,維護策劃并編寫解決方案,參與項目投標等售前工作
崗位要求:
1) 本科及以上學歷,計算機、地理信息、應用數學、統計等相關專業畢業
2) 掌握界面設計方法與工具;
3) 思維邏輯清晰、具備較強的責任心、良好的溝通表達能與業務理解能力
4) 有公共住房/保障性住房業務經驗者優先、精通UML建模工具者優先
數據倉庫工程師崗位的工作職責 篇24
職責
· 負責系統模塊的設計與開發
· 負責數據庫結構的設計與優化
· 參與業務協議設計
任職要求
· 2年以上服務端開發經驗,熟悉netty框架
· 主導過的后端開發過程,熟悉業務
· 熟悉Linux環境,熟悉Unix套接字編程,熟悉MySQL、Redis等基本方案,有豐富的實踐經驗
· 本科及以上學歷,計算機與軟件工程相關專業畢業。
· 邏輯思維極強,數學功底扎實,編程基礎扎實,對架構以及代碼的優雅有要求
· 較好的英語水平,可以無障礙閱讀英語文檔
· 熱愛技術,樂于學習鉆研,善于解決問題。
數據倉庫工程師崗位的工作職責 篇25
職責:
1.負責SQL審核及SQL審核系統維護、優化;
2.負責執行數據庫監控策略,備份策略,容災策略;
3.據項目開發需求,進行數據庫設計,包括SQL優化,指導以及配合開發工程師進行開發工作;
4.配合研發制定數據庫技術方案,分庫分表策略,數據遷移方案。
技術要求:
1.計算機相關專業,3年以上mysql dba實際工作經驗;
2.精通MySQL,精通SQL腳本編寫,有豐富數據庫管理、運維調優經驗;
3.熟悉數據庫集群、熟悉MySQL主從復制,MHA,熟悉No-SQL技術(Redis、MongoDB等),了解相關高可用技術方案;
4.具有數據庫備份,數據庫還原工作經驗;
5.熟悉MySQL相關監控、分析、開發和管理工具;
6.熟悉linux/windows操作系統,具有簡單的shell腳本編寫能力;
7.具有較強邏輯思維、溝通能力、學習能力、喜歡在技術領域內鉆研;
8.具有高度的責任心,工作主動積極,抗壓能力較強。
數據倉庫工程師崗位的工作職責 篇26
1、負責公司承接業務的美工、系統UI、APP UI設計,編寫設計文檔;
2、負責公司宣傳畫冊、產品廣告、PPT、以及文檔配圖繪制。
3、 參與新產品策劃,設計注重用戶體驗。
數據倉庫工程師崗位的工作職責 篇27
1、 配合對新產品進行測試評估和數據整理;
2、 測試設備的維護和資料整理;
3、 提升產品質量、優化測試流程,完善測試方法和技術,提高測試效率。
數據倉庫工程師崗位的工作職責 篇28
職責:
1、HPE、H3C、華為等服務器硬件安裝和維護;
2、熟悉HPE、EMC、華為等各品牌存儲,能獨立進行LUN映射及存儲故障解決;
3、熟悉服務器常用的RAID、SCSI技術;
4、對WINDOWS、LINUX等操作系統安裝、排錯;
5、協助業務部門做產品升級及方案制訂;
任職資格:
1、大專及以上學歷,計算機專業;
2、服務器相關行業具有三年及以上工作經驗,具有獨立服務器硬件故障判斷能力,對故障進行獨立解決,具有豐富的硬件安裝和維護經驗;
3、熟悉VMWARE、華為、H3C等虛擬化技術及虛擬化軟件操作;
4、具有一定的網絡規劃及實施能力,具備網絡基本知識,可排查常見的網絡故障;
5、具備數據庫維護經驗更佳;
數據倉庫工程師崗位的工作職責 篇29
1、根據產品圖紙或實物,制定鍛造工藝和鍛模設計,實現穩定批量生產。
2、負責新產品開發、實施、產品實現的質量策劃。
3、優化鍛造工藝和模具設計,解決產品質量問題及現場生產問題。
4、根據產品要求對公司內部相關人員進行有關技術培訓。
5、對熱模鍛設備熟悉與了解