數據倉庫工程師的主要職責(精選27篇)
數據倉庫工程師的主要職責 篇1
職責:
1、負責制定數據倉庫平臺技術體系架構、數據架構及規(guī)范;
2、負責設計和實施公司業(yè)務數據的實時/離線數據ETL架構方案;
3、負責調度架構設計與開發(fā);
4、負責數據倉庫平臺運維以及日常數據運營等管理;
5、負責關鍵技術攻關;
任職要求:
1、5年以上數據倉庫項目開發(fā)經驗,參與過數據倉庫架構設計,對ETL開發(fā)流程、調度架構有深入理解;
2、精通mysql、 oralce 、greenplum等至少一種數據庫,豐富的SQL性能調優(yōu)經驗;
3、熟練使用Java、Shell、Python、Perl等至少一種腳本語言;
4、熟悉數據治理理論,數據質量、元數據管理流程和方法;
5、了解Hadoop/Hive/HBase/Spark/Storm等技術及其生態(tài)圈;
6、溝通能力好、責任心強,具有良好的團隊合作精神和敬業(yè)精神;
數據倉庫工程師的主要職責 篇2
職責:
1、負責ETL開發(fā)、作業(yè)調度和數據平臺建設
2、負責數據倉庫的設計、開發(fā)和優(yōu)化,建立結構層次合理、靈活可擴展的數據倉庫
3、設計并研發(fā)BI分析相關的數據產品
4、結合對數據的理解和業(yè)務需求,對數據進行整理、分析和挖掘
任職要求
1、計算機相關專業(yè)本科及以上學歷,有2年以上數據倉庫、ETL工作經驗
2、有海量數據處理、ETL及作業(yè)調度優(yōu)化、數據倉庫建模等經驗
3、熟悉Linux、SQL、Python或Java、Shell腳本,有Hadoop/Hive/Spark/HBase/Kylin/Impala等大數據技術使用經驗
4、邏輯清晰,對數據敏感,深入了解業(yè)務,具備自己獨特的想法并能提出合理的建議
數據倉庫工程師的主要職責 篇3
職責:
1.負責企業(yè)級數據倉庫設計、規(guī)劃、建設、實施、管理,數據倉庫架構設計與數據開發(fā),創(chuàng)建數據倉庫、數據集市
2.熟悉數據倉庫領域知識,從架構和技術層面參與建設數據倉庫,包括元數據管理、數據質量、主數據管理、性能優(yōu)化和調優(yōu)。
3.負責數據倉庫平臺相關數據管理工作,如研發(fā)規(guī)范、質量規(guī)范、保障規(guī)范的制定與推動實施落地
4.配合和協(xié)助數據分析/數據挖掘形成底層/中間層的業(yè)務邏輯切片
任職資格:
1. 本科或碩士以上學歷,計算機工程相關專業(yè)
2. 熟悉大數據相關技術能力(Hadoop/MapReduce/Hive/Hbase等),熟練進行數倉Hive建設和軟件架構,較強的數據抽象能力
3.精通SQL,具備海量數據處理和Hive/Spark性能調優(yōu)經驗,3年以上大規(guī)模分布式數據倉庫建設經驗
4.熟練使用Druid/Kylin之一進行數據挖掘模型設計,熟練掌握Java/Scala之一,具備良好的coding素養(yǎng)和習慣,了解腳本語言,如Python、Shell等
5.強烈的責任心,工作態(tài)度積極主動,有較好的團隊精神和溝通能力,工作細致認真
數據倉庫工程師的主要職責 篇4
職責:
1.建設公司級數據倉庫,并根據業(yè)務變化持續(xù)迭代和優(yōu)化;
2.對業(yè)務數據進行梳理和抽象,建設數據倉庫的數據模型;
3.對業(yè)務數據進行采集、清洗、轉換和存儲;
4.支撐BI、用戶數據、用戶運營、用戶畫像、房源數據、推薦系統(tǒng)等核心數據平臺產品;
5.研究大數據前沿技術,不斷持續(xù)優(yōu)化大數據平臺,為業(yè)務提供價值。
任職資格:
1.本科及以上計算機、統(tǒng)計學、數據庫、機器學習等相關專業(yè),5年以上數據相關工作;
2.對業(yè)務數據有敏銳的理解能力,并能快速梳理和分析業(yè)務數據;
3.熟練掌握SQL語言、熟悉MySQL,對Shell、Java(主要開發(fā)語言)、Python編程非常熟悉;
4.熟悉常用的ETL技術和原則;精通數據倉庫數據庫設計規(guī)范和實操;
5.熟悉Hadoop、Hive、HBase、Spark、Storm等開源平臺者優(yōu)先;
6.具有較強的分析和解決問題的能力,良好的學習能力和團隊合作精神,追求價值實現(xiàn),認同目標管理和敏捷。
數據倉庫工程師的主要職責 篇5
職責:
1、稅務系統(tǒng)數據按照甲方需求的分析、加工、查詢、統(tǒng)計等;
2、BIEE報表前臺展現(xiàn)工具的基礎應用;
3、后臺ORACLE數據庫庫表結構的維護優(yōu)化;
4、ETL工具(ODI)的基礎使用;
崗位要求
1、計算機相關專業(yè)本科學歷,或有一年以上數據庫相關工作經驗?茖W歷;
2、較好的溝通、學習能力和團隊協(xié)作精神;
3、熟練使用ORACLE等數據庫相關技術;
4、熟練掌握PL/SQL等開發(fā)工具;
5、具有較強的問題分析和解決能力,能獨立完成需求分析;
6、有大型數據庫使用維護經驗者優(yōu)先;
7、責任心強,有較好的敬業(yè)精神,工作積極,有較強的自主學習能力;
8、有數據庫工作經驗者優(yōu)先;
9、有稅務行業(yè)、財務行業(yè)開發(fā)管理經驗者優(yōu)先;我們提供雙休、生日禮金、 五險一金以及帶薪年假,發(fā)展前景廣闊。
數據倉庫工程師的主要職責 篇6
1.做好車間各機臺的上下模工作,對車間機臺所生產的模具進行監(jiān)控,防止人為因素的破壞;
2.負責機臺工藝調試,產品質量控制;
3.負責模具潤滑(保養(yǎng))及生產運營情況;
4.對設備運營情況進行觀察,防止設備故障的產生;
5.下班前檢查工具是否齊全,是否規(guī)范到位;
6.對不能正常生產的設備和模具要做好記錄,上報維修;
7.接到轉模通知單后要迅速轉模,嚴禁拖拖拉拉;
8.負責機臺作業(yè)員操作技能培訓,作業(yè)試指導;
9.協(xié)助機臺的6S管理工作;
10.認真填寫作業(yè)員交接班記錄,面對面和下一班技術員相互交流,傳遞信息;
11.負責設備狀況的標識工作,及機臺各類表單成型參數,設備模具的點檢記錄;
12.完成上級交代的其它工作.
數據倉庫工程師的主要職責 篇7
職責:
1、負責公司oracle、DB2數據庫及相關系統(tǒng)維護管理、性能調優(yōu)工作;
2、參與公司數據分析產品的大數據基礎架構設計與優(yōu)化,設計數據整體架構及其細節(jié);
3、負責公司各個項目的數據庫系統(tǒng)部署方案的計劃、設計和實施指導,參與項目的數據庫設計;
4、指導各個實施項目成員,對數據庫語句進行優(yōu)化,解決性能問題;
5、負責研發(fā)及使用新技術和新架構滿足日益增長的數據需求;
6、負責數據庫的日常維護,包括:日常維護,性能監(jiān)控,性能優(yōu)化,安全管理等。
任職要求:
1. 計算機相關專業(yè)大學本科及以上學歷,具備三年以上大型Oracle、DB2數據庫DBA或數據倉庫架構設計經驗,精通數據庫管理與優(yōu)化;
2. 精通ORACLE、DB2等主流數據庫的管理,要求具備有較強的故障定位和問題分析、解決能力;具備一年以上Hadoop、GreenPlum、NoSQL等大數據技術平臺實施、部署、優(yōu)化經驗;
3. 豐富的數據庫維護經驗,擅于分析運行瓶頸,并提供改進方案;精通數據庫的性能優(yōu)化、SQL調優(yōu)技術,對高并發(fā)數據庫的鎖和事務隔離問題有深入理解;精通數據庫容量規(guī)劃和分表設計方法,有海量數據庫設計和支持經驗;
4. 熟悉UNIX/LINUX等主流OS平臺,理解操作系統(tǒng)原理,具備腳本編寫能力(SHELL/PERL/PYTHON),并善于利用腳本解決問題;
5. 熟悉RAC/PureScale/GoldenGate/CDC等高可用技術;
6. 善于數據庫架構的規(guī)劃,能設計主機、存儲、數據庫的整體方案;
7. 具備醫(yī)療從業(yè)資格者優(yōu)先;
8.工作認真,責任心強,良好的溝通技能、團隊合作能力。
數據倉庫工程師的主要職責 篇8
職責:
1、負責Linux服務器、Windows服務器,MySQL數據庫服務器日常運維、優(yōu)化等工作
2、負責處理系統(tǒng)日常變更,控制突發(fā)情況,對疑難問題進行分析并解決,以及各類故障和事務的應急響應和技術支持
3、監(jiān)控服務器的運行狀態(tài)、系統(tǒng)性能;保障產品服務器的穩(wěn)定性、可用性以及安全性
4、負責服務器及設備的安裝、調試、維護、監(jiān)控、備份等日常工作
5、負責對服務器性能監(jiān)測數據以及故障日志等的分析,協(xié)助研發(fā)進行相關問題查找
6、負責辦公設備的日常維護及管理,技術檔案維護
任職條件:
1、具備較強的服務意識和優(yōu)秀的服務態(tài)度。
2、具有良好的獨立分析問題與迅速解決問題的能力;性格沉穩(wěn),吃苦耐勞,良好的口頭和書面表達能力,善于與人溝通。
3、具有1年以上相關數據中心IT基礎設施運維經驗,具備大規(guī)模集群的系統(tǒng)運維、服務監(jiān)控分析、故障排查及緊急情況下的應急處理能力。
4、熟悉Linux、Windows操作系統(tǒng)體系結構,精通Linux操作系統(tǒng)管理,故障分析處理;熟悉常用數據庫(如Oracle,MySQL,redis等)和中間件技術(如Ngnix,Tomcat等)優(yōu)先。
5、熟悉Shell/Perl/Python一種及以上的腳本語言以及grep、sed和awk工具。
6、熟悉ELK、zabbix等自動化運維工具,有自動化運維經驗者優(yōu)先。
7、有負載均衡技術、應用集群技術、數據庫高可用和讀寫分離、分布式存儲維護經驗者優(yōu)先。
數據倉庫工程師的主要職責 篇9
職責:
1 根據產品規(guī)劃或者項目要求,獨立完成業(yè)務需求和功能需求。
2 向開發(fā)工程師提供咨詢、指導、解釋業(yè)務需求。
3 整理、分析和引導客戶需求,提出解決方案、按時交付和提高客戶滿意度。
4 高質量完成上級安排的工作任務。
任職要求:
1 統(tǒng)招本科或以上學歷,2年以上產品需求開發(fā)、需求管理工作經驗;
2 熟練掌握Axure\Visio\PowerPoint\Excel\Word\思維導圖等工具,善于溝通。
3 掌握需求分析方法,熟悉需求管理和研發(fā)過程管理,
4 具備優(yōu)秀的邏輯思維能力和文檔編寫能力;
5 郵政行業(yè)、快遞行業(yè)和金融行業(yè)優(yōu)先。
6 計算機相關專業(yè)優(yōu)先,如大數據專業(yè)、軟件工程專業(yè)、信息管理專業(yè);了解基本SQL語法優(yōu)先。
數據倉庫工程師的主要職責 篇10
職責:
1、根據游戲類型,制定服務器端網絡框架/模型,核心代碼編寫;
2、確保游戲開發(fā)時間和質量;
3、解決游戲開發(fā)、線上問題;能夠與運維溝通,保持游戲服務器穩(wěn)定;
4、實時了解服務器瓶頸,能結合游戲性能及穩(wěn)定性進行調優(yōu);
任職要求:
1、熱愛編程,熱愛游戲,有游戲開發(fā)經驗或豐富的游戲體驗;
2、熟悉C++,熟悉Shell、Python等至少一種腳本,熟悉TCP/IP協(xié)議;
3、熟練使用MySQL,能夠編寫高效的SQL語句;
4、熟練閱讀英文技術文檔,較強的分析解決問題能力。
數據倉庫工程師的主要職責 篇11
1,參與上市公司新組建團隊起步人工智能醫(yī)藥病理項目;
2,負責分析醫(yī)藥病理圖像,設計優(yōu)化算法模型;
3,負責產品優(yōu)化,持續(xù)改進算法;
細分方向1:算法方向:算法設計模型調優(yōu)改進;
細分方向2:圖像方向:圖像處理;
隨著團隊人員增加,要求會越來越高,目前起步團隊基本組建完成,以后候選人的考量將會是全方面的
數據倉庫工程師的主要職責 篇12
1.承擔智慧城市頂層設計和規(guī)劃工作;
2.承擔行業(yè)信息化總體規(guī)劃、信息系統(tǒng)總體方案設計、可行性研究等工作,并進行跟蹤溝通、方案宣講、現(xiàn)場調研、和技術交流;
3.承擔用戶需求分析與解決方案的編制和設計工作;
4.承擔智慧城市的數據標準/接口等的制定;
數據倉庫工程師的主要職責 篇13
1、主要負責項目管理包括建筑工程測量、公路工程測量、橋梁工程測量、隧道工程測量等測量工作;
2、參與項目管理與作業(yè)包括項目方案編寫、預算編寫、外業(yè)作業(yè)、內頁數據處理、報告編寫等;
3、領導交辦的其他工作。
數據倉庫工程師的主要職責 篇14
職責:
1、參與公司產品數據庫設計開發(fā)和評審;
2、對公司產品的數據庫相關問題進行技術支持;
3、對數據庫腳本進行代碼審查;
4、輸出數據庫相關技能培訓,提升團隊數據庫設計和開發(fā)技能。
任職要求:
1、計算機本科及以上相關專業(yè)畢業(yè),熟悉linux操作系統(tǒng);
2、精通主流的數據庫產品oracle、mysql;熟悉DB2和MSQL-Server;
3、精通SQL腳本的編寫,有豐富的數據庫管理、運維調優(yōu)經驗,能獨立完DBA管理任務;
4、具有團隊合作精神,抗壓能力;
5、主動學習,對新技術鉆研有興趣。
數據倉庫工程師的主要職責 篇15
職責
1、負責數據庫及操作系統(tǒng)的日常維護,數據庫性能監(jiān)控及優(yōu)化,故障診斷和排除;
2、制定并實施數據備份、恢復、復制計劃,以及數據庫的安全管理、用戶管理;
3、負責數據庫項目的安裝、部署、維護等工作;
4、完成領導安排的其他工作。
任職資格
1、計算機,統(tǒng)計,數據,電子信息等相關專業(yè)畢業(yè),3年以上工作經驗。(必須211高校統(tǒng)招畢業(yè)。)
2、精通python,熟悉mysql/mariadb,sql server。
3、能對mysql/mariadb、sqlsever集群環(huán)境進行安裝配置、性能優(yōu)化,故障處理。
4、能熟練對數據庫進行備份恢復、數據遷移。
5、具有數據庫相關認證證書的優(yōu)先。
數據倉庫工程師的主要職責 篇16
1、參與數據平臺相關應用項目的ETL設計、開發(fā)、維護工作;
2、參與ETL調度架構的開發(fā)優(yōu)化工作;
4、與團隊內部以及需求部門進行有效溝通,跟進項目進度以及解決相關數據問題;
5、完成上級主管分配的工作任務,并達到公司制度規(guī)定的考核要求;
6、參與Informatica服務工作,包括Informatica性能調優(yōu),服務的安裝發(fā)布,及Informatica工具的相關培訓。
數據倉庫工程師的主要職責 篇17
職責:
1、參與據倉庫的長期架構規(guī)劃,與數據開發(fā),建設共享大數據平臺;
2、負責數據平臺相關數據管理工作,如研發(fā)規(guī)范、質量規(guī)范、保障規(guī)范的制定與推動實施落地;
3、負責來自業(yè)務團隊數據需求的研發(fā)支撐;
4、大規(guī)模數據挖掘和機器學習算法的實現(xiàn)和維護;
5、在線和離線海量數據分析平臺的開發(fā);
6、負責數據倉庫的建設和維護,包括需求調研分析、軟件規(guī)劃、概念模型、設計邏輯、物理模型、數據處理(抽取、清洗、轉化)、項目實施管控等;
7、負責制定數據接入和采集規(guī)范制定。
任職要求:
1、從事數據倉庫領域工作2年以上;
2、熟悉數據建模、ETL設計與應用、報表開發(fā)等,并有實際模型設計及ETL開發(fā)經驗 ;具有良好的編程習慣和文檔編寫習慣;
3、熟悉數據倉庫領域知識和管理技能,包括但不局限于:元數據管理、數據質量、性能調優(yōu)等;
4、掌握大型數據庫開發(fā)技術,如Oracle、Teradata、DB2、Mysql等等掌握至少其中一種,靈活運用SQL實現(xiàn)海量數據ETL加工處理;
5、了解大數據基礎架構和平臺 ,具備相關產品(Hadoop、Hive、HBase、Pig、Sqoop、Spark等)項目應用研發(fā)經驗,有MapReduce開發(fā)的實戰(zhàn)經驗者優(yōu)先考慮;
6、熟悉linux系統(tǒng);
7、熟練掌握python語言;
8、熟悉數據可視化的基本方法,有數據可視化的開發(fā)經驗優(yōu)先;
9、對數據敏感,具有良好的邏輯分析、責任心強、良好的對外溝通和團隊協(xié)作能力
數據倉庫工程師的主要職責 篇18
1. 維護和管理桌面電腦及外設連接設置,并保證電腦及外設連接設置能正常運行;
2. 對硬件故障、軟件、電子郵件和附屬設備等基本問題進行處理解決;
3. 對計算機、無線網絡設備、打印機、掃描等設備的安裝和設置;
4. 保證我司各職場PC機及外設設備的正常運行;
5. 完成直屬上級指派的其他工作任務。
數據倉庫工程師的主要職責 篇19
職責:
1 負責大數據平臺、數據倉庫多維模型設計
2 負責大數據平臺相關生產系統(tǒng)數據的抽取、清洗、轉換等工作
3 負責BI平臺設計與報表開發(fā)工作
崗位要求:
1、精通數據倉庫建模理論,有參與過2個以上的數據倉庫建設經驗;
2、精通ETL開發(fā),熟悉數據的抽取、常用數據腳本編寫、存儲過程的編寫;
3、熟悉BI平臺,有數據報表設計和開發(fā)經驗;
4、熟悉SQL,掌握Oracle、PostgreSQL、MySql等至少一種主流關系數據庫;
5、具備良好的團隊協(xié)作精神,良好的溝通能力;
6、供應鏈、物流行業(yè)數據從業(yè)經歷者優(yōu)先。
數據倉庫工程師的主要職責 篇20
職責:
1、 進行住宅數據抽取、數據清洗、數據探索、數據建模分析等工作;
2、 負責住宅估值相關業(yè)務算法的設計開發(fā);
3、 負責房地產估值數據系統(tǒng)的開發(fā);
4 、參與項目的技術攻堅和優(yōu)化,相關系統(tǒng)的架構設計和評審,以及對問題的跟蹤和解決;
5、參與系統(tǒng)文檔的撰寫、維護。
崗位要求:
1、數學、統(tǒng)計學、計算機等專業(yè)碩士畢業(yè), 具有數據挖掘領域1年以上開發(fā)經驗;
2、至少掌握Python、Scala、R等語言其中一種,Python優(yōu)先;
3、掌握關系型數據庫Oracle、Mysql、Postgresql的使用;
4、熟悉常見的機器學習算法如KNN、決策樹、隨機森林數、邏輯回歸、SVM等算法,熟悉常見深度學習算法CNN、LSTM和神經網絡;
數據倉庫工程師的主要職責 篇21
1,為客戶提供固態(tài)存儲(SSD)產品和方案的技術講解、產品演示,配合銷售人員完成銷售指標;
2,為客戶提供技術支持,解決客戶使用過程中的技術問題;
3,針對客戶反饋的深度問題,負責與產品和研發(fā)團隊溝通做出解決方案;
3,負責項目案例整理、分析、總結和共享推廣。
數據倉庫工程師的主要職責 篇22
1.負責Web操作界面開發(fā);
2.與后臺開發(fā)工程師協(xié)作,完成各種數據交互、動態(tài)信息展現(xiàn)和用戶的互動;
3.配合需求,分析并給出最優(yōu)的前臺技術解決方案;
4.創(chuàng)建用戶友好、符合標準、跨平臺的應用,促進產品易用性改進和界面技術優(yōu)化。
數據倉庫工程師的主要職責 篇23
1.配合團隊成員處理項目中所遇到的電子技術相關問題。
2.負責基于物聯(lián)網的電機各項參數遠程采集系統(tǒng)開發(fā)。
3.協(xié)助開發(fā)與維護遠程視頻+信號集中監(jiān)控管理系統(tǒng)。
4.協(xié)助團隊成員完成電路原理圖繪制及PCB畫板的相關工作。
5.協(xié)助團隊成員完成單片機的嵌入式開發(fā)。
6.完成上級領導安排的研發(fā)任務和日常工作。
數據倉庫工程師的主要職責 篇24
1、負責常規(guī)產品的維護與優(yōu)化;
2、負責新產品的開發(fā);
3、負責常規(guī)項目的管理工作;
4、協(xié)助其他同事完成其他產品的天線設計及技術支持。
數據倉庫工程師的主要職責 篇25
1、主導ESD委員會定期培訓委員;
2、規(guī)范文件定期更新;
3、作業(yè)人員ESD定期培訓;
4、工廠全面ESD推行及管理;
5、工廠ESD風險評估、定期量測及資料管理。
數據倉庫工程師的主要職責 篇26
職責:
1、維護分析集團軟件數據庫功能及故障
2、提取、轉換集團軟件數據
3、維護數據庫功能的日常運行
4、協(xié)調軟件開發(fā)
5、部門ERP系統(tǒng)的日常維護
6、部門安排的其他工作
要求:
1、計算機或數學專業(yè),大專以上學歷
2、有一年以上數據庫實際相關工作經驗,熟悉sqlserver,oracle中至少一種
3、不接收應屆生,不接收實習生或學徒(有實際項目開發(fā)經驗,并能夠獨立分析、解決、編程者不限)
4、男女不限,年齡不限
數據倉庫工程師的主要職責 篇27
1、負責新產品開發(fā)的模具設計,材料選擇、工藝制定;
2、跟進新產品開發(fā)模具及新物料進度,以確保樣品及時交付;
3、負責產品轉量產工藝制定,參與解決生產過程中的技術及工藝問題。