數據倉庫工程師的基本職責模板(通用28篇)
數據倉庫工程師的基本職責模板 篇1
職責:
1、負責公司大數據平臺建設、開發
2、依據業務需求,進行數據產品的規劃和設計開發,為數據分析和運營等人員搭建友好高效的數據產品,如報表、BI系統等
3、協助對業務數據進行分析、建模,為業務部門的數據化運營提供支持
任職要求:
1、本科或以上學歷,2年以上大數據開發或數據倉庫或BI經驗,熟練掌握Java或者Python開發語言
2、熟悉Hadoop或Hadoop生態圈相關技術,如Hive、Spark等,或者大數據云服務技術。
3、對業務有敏銳的洞察力,有較強的業務理解與分析能力;
4、具備良好的團隊合作精神,有較好的溝通交流能力,善于主動思考和行動,樂于解決具有挑戰性的問題;
5、具有電商領域大數據開發、推薦系統研發經驗的優先考慮。
數據倉庫工程師的基本職責模板 篇2
職責:
1、 負責全平臺流量及業務數據開發,參與數據模型體系構建及數據主題設計,為BI數據報表提供底層數據支持;
2、 理解產品、業務人員的數據需求,提供OLAP、數據提取等數據服務;
3、 參與數據倉庫模型設計,負責元數據建設、數據融合、多維度事實表及維表的數據倉庫開發;
4、 參與項目ETL的設計、開發、調度、執行、處理,進行模型性能及ETL流程調優;
任職要求:
1、大學本科及以上學歷,5年以上工作經驗;
2、 熟悉ORACLE、MYSQL、SQL Server等主流數據庫,熟練使用Power designer、kettle、 Data service等數據倉庫及ETL工具,了解Dashboard、Smart BI、Power BI、Cognos等前端開發工具;
3、 熟悉Data Cube,并精通SQL,熟練使用Hive、Spark-SQL, python、Shell等進行數據開發,具備開發復雜業務邏輯的數據處理及分析能力;
4、熟悉數據倉庫理論,掌握Kimball維度建模方法,有ETL開發和數倉模型設計經驗;
5、有很強的自我驅動力,對開源技術非常感興趣并具有一定的研究能力;
數據倉庫工程師的基本職責模板 篇3
職責:
1、根據公司業務需求,構建可擴展的數據倉庫,負責數據模型的規劃設計實現和優化。
2、負責業務數據的采集,清洗,特征抽取。
3、負責ETL的維護工作,發現故障及時診斷、定位、分析和調試,保證數據準確、穩定。
4、根據業務需要,提供面向業務的報表、數據提取等數據服務。
5、參與業務數據分析體系的數據統計、分析及建模。
任職資格:
1、 統招本科及以上學歷,三年以上數據倉庫、BI開發經驗;至少兩年
2、熟練使用oracle、mysql、Postgres等關系型數據庫及Hive、Hbase、spark、impala等基于hadoop集群的組件、編寫優秀的存儲過程、熟悉shell腳本語言,有良好的代碼習慣
3、 熟悉數據倉庫建設的流程及方法論、理解維度建模,有實際的模型設計經驗及ETL相關開發經驗;
4、 熟悉二種以上開源或商業的BI工具,有報表及可視化開發經驗,熟悉帆軟開發優先;
5、互聯網金融工作經驗優先,汽車金融行業經驗優先
5、 較強的邏輯思維能力和學習能力,對數據有敏銳的認知力,工作態度踏實、認真、積極主動,有良好的團隊協作能力、執行力以及抗壓工作能力和心態,樂于溝通交流和分享。
數據倉庫工程師的基本職責模板 篇4
職責:
1.負責VIVO公司級的數據集市和數據倉庫的設計和開發
2.負責基于用戶行為的用戶標簽探索和開發
3.負責基于業務需求的數據中間層和可視化開發
4.負責各類分類和預測模型的開發
任職資格:
1.本科學歷,數統、計算機相關專業。
2.了解hadoop\spark生態,有完整倉庫設計和開發經驗。
3.精通hql調優,shell\python,熟練使用常規機器學習算法。
數據倉庫工程師的基本職責模板 篇5
職責:
1. 獨立完成ETL 需求分析、設計、開發及部署工作
2. 獨立完成BI分析報表等應用的需求分析、模型設計、數據處理、報表開發等工作;
3. 配合開發經理完成BI分析報表等項目的過程管理、元數據管理、質量管理;
4. 完成實時大數據處理系統及批處理系統的架構設計及實現;
5、負責BI分析報表等應用的系統部署及運維
任職要求:
1. 計算機相關專業本科及以上學歷,3年以上相關開發經驗;
2. 精通主流關系型數據庫,精通SQL優化、ETL問題定位,能夠從模型設計層面做ETL優化;
3. 精通ETL架構的設計,精通BI/DW,精通數據倉庫模型設計;
4. 熟悉Hadoop、Map/Reduce的原理,能夠選用合適的工具設計、編寫Hadoop的ETL程序;
5. 熟悉Shell/Perl/Python等腳本語言;
6. 熟悉kettle及sqoop; 精通元數據管理、數據質量分析和處理設計。
數據倉庫工程師的基本職責模板 篇6
1、 設計數字化運營指標體系,監控數據指標,通過數據及時發現業務異常,并產出數字化運營分析報告,分析業務狀況。
2、 數據分析。根據業務主題,獨立設計數據分析報告,抓取數據并進行分析,并最終產出數據分析報告,如用戶畫像分析、運營效果分析、線上活動分析、用戶生命周期研究、競品分析、產品銷售分析,等。
3、 制作部門數據報表,對數據可視化方面有經驗,能夠設計美觀的數據報表。并能夠使用常用的BI工具進行數據可視化,如tableau、PowerBI,等。
4、 負責部門數據平臺、業務數據的準確性測試,對數據敏感,能夠從數據邏輯層面發現數據異常,并從邏輯和技術的角度提出數據驗證方案,并進行驗證。如果數據出現異常,及時與相關部門溝通解決。
5、 具有Python開發經驗,能夠進行數據自動化報表的開發,其中涉及到數據爬蟲、數據清洗、數據入庫、指標加工計算、數據圖表繪制,等,對前端開發也有了解者優先。
6、 科技產品數據埋點的設計,與研發和外部門溝通協調并推動研發落地。
7、 承擔其他數據工作(如數據指標梳理、數據提取、數據文檔編寫,等)。
8、 完成領導交辦的其他工作。
數據倉庫工程師的基本職責模板 篇7
職責:
1、負責數據庫、數據庫服務器的規劃、安裝、配置與運維,保證數據庫穩定高效運行;
2、負責日常數據庫管理、監控、分析、性能調優、故障診斷與排除等;
3、制定數據庫升級、補丁、遷移以及優化方案并實施;
4、支持開發和測試,能夠進行數據報表的開發和數據分析,提供必要的咨詢建議。
其他要求:
1、計算機或相關專業大專或以上學歷,2年以上Oracle PL/SQL相關工作經驗;
2、能夠熟練使用性能分析工具優化數據庫;
3、可獨立編寫腳本、制定數據庫備份、遷移策略,實現對數據庫日常維護的自動化;
4、熟悉并掌握主流數據庫操作、管理、備份等日常運維及服務支持。
5、學習和理解能力強,具有一定的系統分析能力,及獨立解決問題的能力。
數據倉庫工程師的基本職責模板 篇8
1、負責全廠ESD專案工作;
2、ESD防護體系及相關文件的更新與維護;
3、作業人員的ESD基礎防護知識的培訓;
4、新治具,新材料的ESD防護能力的檢驗或驗收;
5、制程ESD防護問題的技術支持和指導;
6、客戶ESD防護的稽核的陪同和應對。
數據倉庫工程師的基本職責模板 篇9
職責:
1、負責公司產品及項目的需求調研、需求分析工作,能和客戶進行有效的需求溝通;
2、負責整理用戶及公司業務部分的需求分析、編寫需求規格說明書;
3、負責流程圖繪制、實施跟進及進度效果監控;
4、負責項目的客戶培訓和后期的技術支持工作;
5、完成部門領導安排的其他工作。
應聘條件:
1、全日制本科以上學歷,計算機相關專業優先;
2、有1-2年需求調研工作經驗優先,優先應屆生也可考慮
3、具有調研問卷方案設計及策劃能力;
4、具備大宗商品市場分析能力及數據敏感性;
5、能撰寫調研行業分析報告和用戶需求報告;
6、具備講述報告的流利口才
數據倉庫工程師的基本職責模板 篇10
職責:
1、負責內容的處理,包括關鍵詞提取、主題分析、類目預測、質量打分等;
2、負責海量用戶行為的分析研究,挖掘優化用戶畫像,包括人口屬性和用戶興趣等;
3、負責推薦引擎算法的開發,包括各類推薦算法的實現、特征和參數調優、用戶體驗優化等;
4、負責數據營銷平臺策略的開發,包括用戶洞察、行業指數趨勢預測、各類精準定向算法的實現和優化等;
5、負責人工智能技術的研究,包括機器學習、知識推理、文本語義理解、計算機視覺等技術;
6、通過海量數據對用戶廣告的行為進行深入分析與洞察,提煉和發現業務規律,指導推薦模型特征構建,定位產品相關的數據問題及分析優化;
7、結合廣告投放場景和用戶畫像進行分析、歸納統計指標建設,協助模型快速定位問題。
招聘要求及條件:
1、具備數據挖掘、NLP、機器學習、最優化等算法原理知識背景;
2、具備推薦系統、精準營銷、信息檢索等方面的工作經驗優先;
3、具備大規模分布式計算平臺的使用和并行算法的開發經驗,對大數據處理及應用有濃厚興趣;
4、具有機器學習、數據挖掘、算法優化的基礎并具有濃厚興趣;
5、熟悉統計原理及檢驗方法、熟悉數據分析方法;
6、熟悉分類、回歸、聚類、降維等機器學習算法及應用場景;
7、熟悉Java、Python等,能獨立完成相關的數據分析及分析報告相關工作。
數據倉庫工程師的基本職責模板 篇11
職責:
1. 維護數據庫穩定運行,持續發現和解決潛在的問題;
2. 負責數據庫的性能優化,使用新技術和新架構滿足日益增長的業務需求;
3. 負責數據庫的監控系統設計,為開發團隊提供平臺支持;
4. 負責數據庫的運維方面的相關工作,包括數據庫的安裝部署、壓力測試、備份恢復、知識庫管理等
5. 負責數據庫進行容量規劃、架構設計,提高業務高可用性和容災能力;
6. 負責數據庫相關工作的整體規劃,提供決策建議。
任職要求:
1. 計算機相關專業本科及以上,具有3年以上DB2數據庫DBA經驗;
2. 精通DB2數據庫體系結構和工作原理,有高可用架構規劃設計經驗優先;
3. 熟悉MySQL數據庫體系結構和工作原理,有高可用架構規劃設計經驗優先;
4. 熟悉TSM的運維管理,并熟悉基于TSM的數據備份和恢復;
5. 熟悉V5000、V7000等存儲的運維管理;
6. 熟悉數據庫的性能優化、SQL調優技術,對高并發數據庫的鎖和事務隔離問題有深入理解;
7. 熟悉數據庫容量規劃和分表設計方法,有海量數據庫設計和支持經驗優先;
8. 熟悉常用的數據庫備份方法;
9. 精通腳本語言,并至少能用Shell,Perl,Python等中的一種進行快速開發。
數據倉庫工程師的基本職責模板 篇12
職責:
1. 參與數據倉庫和基礎架構規劃、安全規劃、ETL架構和規范制定;
2. 負責海量數據的ETL開發和優化,抽取成各種數據需求,并及時解決ETL相關技術問題;
3. 負責對ETL技術培訓,指導進行數據倉庫項目的開發、測試和運 維;
4. 負責ETL數據準確性驗證及報表維護;
5. 海量數據的ETL開發,抽取成各種數據需求。
任職要求:
1. 本科以上學歷,優秀名校或碩士以上優先,有較好的英文閱讀能力;
2. 精通開源etl開發工具及etl架構,有一定的etl開發經驗,熟悉日常作業的部署和調度。;
3. 熟悉主流數據庫技術,如oracle、Sql server、PostgeSQL、MySql等;
4、精通Shell編程。
數據倉庫工程師的基本職責模板 篇13
職責:
1. 負責項目平臺的設計、研發、維護;
2. 進行相關產品的技術文檔編寫,方案設計;
3. 持續對系統架構進行改造和優化;
任職要求:
1. 熟練使用基本的數據結構和算法,熟悉多線程、多進程、異步IO等并發開發模型;
2. 熟練掌握golang常用庫,掌握cgo,理解相關框架提供的特性及其實現原理;
3. 熟悉Internet常用協議,如HTTP、TCP、UDP,熟悉常用數據庫的使用,如MYSQL、REDIS;
4. 熟悉Linux操作系統,能夠編寫腳本,配置系統相關變量;
5. 具備良好的編碼習慣,結構清晰,命名規范,邏輯性強;
6. 具有流媒體編程經驗者優先;
數據倉庫工程師的基本職責模板 篇14
職責:
1) 配合業務伙伴推動思邁特數據挖掘產品的銷售,負責售前階段的客戶需求調研、需求分析,完成項目售前方>案的制作、招投標支持以及產品演示;
2) 理解客戶具體業務需求,利用思邁特數據挖掘軟件,提供明確的大數據分析應用解決方案;
3) 負責具體數據挖掘需求的落地實施工作,進行項目現場業務技術支持、與客戶進行技術溝通;
4) 整理行業案例,深入研究分析市場需求趨勢、行業知識及發展方向,并進行行業案例與解決方案的包裝和推廣;
5) 具有良好的溝通表達能力,抗壓能力強,責任心強,接受短期出差;
崗位要求:
1) 本科以上學歷,計算機、軟件、數學、統計相關專業畢業,數學功底扎實及研究生學歷者優先考慮,2年以上
數據挖掘相關工作經驗;;
2) 具備大量數據挖掘經驗,具備項目建模經驗,有自然語言處理、文本分析經驗尤佳;
3) 能快速理解客戶需求、解決方案編制、模型開發;
4) 至少熟練一門數據挖掘工具,如Python,R等,同時具有Java開發能力優先;
5) 精通數據挖掘和機器學習算法,對深度學些有一定的了解以及應用;
6) 熟悉Linux開發環境,良好的系統編程、數據結構、算法基礎、系統設計能力;
數據倉庫工程師的基本職責模板 篇15
(1)從事土地整治項目規劃設計以及農業綜合開發方案編制有關工作;
(2)能夠獨立開展外業調查、編制文本報告、圖件編制工作;
(3)特別要求有一定的土地整理規劃設計經驗,熟悉概預算編制。
數據倉庫工程師的基本職責模板 篇16
職責:
1、負責大數據平臺數據倉庫建設、數據分析挖掘工作;
2、負責大數據的處理、整合及數據建模,協同業務開發人員,將模型算法成果應用到實際業務系統中,并通過可視化工具進行分析成果展示;
3、基于用戶數據,研究用戶行為,構建用戶畫像。
任職要求:
1、應用數學、計算機、信息處理等相關專業本科及以上學歷;
2、3年以上大數據開發經驗;
3、熟悉hadoop的大數據生態,精通SQL語法【有較好的SQL性能調優能力,掌握基于Hive或者Spark sql的HQL腳本編寫;
4、具有從數據查詢,聚合,分析到可視化的整套實踐經驗;
5、熟練使用java或者python、基礎扎實、能編寫Hive環境下或者Spark sql環境下的UDF;
6、具備良好的表達和溝通能力、學習能力,具備極強的團隊合作精神,能夠承受一定的工作壓力。
數據倉庫工程師的基本職責模板 篇17
職責:
1.負責大規模、高可用集群的運維架構優化與設計;
2.深入理解業務系統的架構,研究并持續優化系統穩定安全性,提升用戶體驗;
3.支撐響應業務需求,優化運維平臺、跟進業務異常的排查與統籌性解決;
4.負責設計、實現與運維相關的自動化系統或工具。
任職要求:
1.至少兩年以上高級運維或運維開發經驗,具有大型網站或Web應用平臺運維經驗。
2.熟悉Linux系統原理和內核參數調優,掌握Linux平臺常用服務器配置,熟悉java、nginx、Tomcat、Jenkins、redis等環境的性能優化與安全防御;
3.具備(集群模式下)MySQL數據庫部署以及多節點數據庫的安裝部署和分區部署能力。
4.熟練編寫SQLJ及shell/Python編程,熟悉業界流行的數據庫第三方軟件的運行及原理。
5.熟悉Docker、K8S等容器技術,有Docker集群實際維護經驗;
6.熟悉服務器、交換機、防火墻等設備的功能與配置;
7.具有較好溝通及協調能力,學習能力強,做事沉穩細致,有具有良好文檔編寫能力;
數據倉庫工程師的基本職責模板 篇18
1、主要負責平臺的WEB全棧(前端)開發工作;
2、運用前端技術,實現體驗的良好傳達;
3、根據設計需求,分析給出前臺技術解決方案;
4、負責JavaScript腳本開發;
5、負責具有前瞻性的WEB開發技術的研究和應用;
數據倉庫工程師的基本職責模板 篇19
1.根據市場需要,能獨立研發、生產新品種,參與公司產品研發策略和產品線規劃,提出新品研發方向;
2.負責本崗重大技改項目計劃、可行性分析與立項工作;
3.熟悉產品、材料的各項標準。
數據倉庫工程師的基本職責模板 篇20
1、熟練掌握翠歐產品知識技能,負責翠歐全線產品的技術支持和產品維護;
2、協助客戶開發程序,攻克項目難點;
3、獨立完成項目的編程調試工作;
4、整理行業相關案例;
5、開發通用功能塊。
數據倉庫工程師的基本職責模板 篇21
職責
1、用戶畫像的持續優化,基于海量用戶行為,建立數據挖掘模型,比如用戶偏好預測、用戶價值評分等;
2、對各類需求數據進行挖掘、統計建模分析,并提交有效的分析報告,為公司運營決策提供數據支持;
3、建立和完善分析體系,跟蹤模型的實施,優化算法和分析策略,提供建設性建議;
4、推進推薦、數據挖掘、機器學習技術在行業數據的應用。
任職資格
1、計算機、應用數學、統計學等相關專業;
2、熟練運用至少一種統計分析工具:R、python、SAS,熟練操作python進行數據分析優先
3、了解數據挖掘方法論,熟悉回歸、決策樹、聚類等算法;
4、參加過數據挖掘項目或推薦項目并擔任項目核心成員優先;
5、精通關系型數據庫SQL Server, 分布式數據倉庫Hive;
6、有責任心,良好的團隊合作精神,樂于分享,積極上進,具備良好的學習能力。
數據倉庫工程師的基本職責模板 篇22
1、負責公司電氣設備的安裝指導及調試工作,并負責設備投運;
2、負責繼電保護調試工作,解決各類技術問題。 熟練使用各類繼電保護相關的試驗儀器;
3、能熟練的匯編各類設備調試報告、調試方案。
數據倉庫工程師的基本職責模板 篇23
職責:
1.負責sql sever、Mysql數據庫集群的日常維護、監測、備份、優化及恢復;、
2.負責數據庫開發支持,熟悉sql語句編寫與調優,配合開發人員完成特殊需求如數據提取、數據修改及報表相關開發;
3.負責業務系統上線支持,管理數據庫服務器高可用集群,保障服務穩定7X24可用;對數據庫進行持續性能優化;
4.負責排查數據庫故障,分析和解決疑難問題,提出預防方案;
5.協助完成系統SIT,UAT及上線驗收工作。
任職資格:
1.大專及以上學歷,兩年以上SQLSERVER、MySQL數據庫設計開發維護等相關經驗;
2.熟悉關系型數據庫體系結構,精通sql語言、能編寫存儲過程、函數以及SQL語句;
3.有實際數據庫優化經驗;
4.對數據庫方向有濃厚興趣,愿意往深層次發展。
5.有良好的編程習慣,思路清晰,工作規范,有良好的溝通能力和學習能力,工作踏實,責任心強,有良好的團隊合作精神。
數據倉庫工程師的基本職責模板 篇24
1.負責項目開發過程中表面處理工藝的選型
2.工藝驗證及培訓
3.協助項目開發過程中的質量提升
4.新表面處理工藝的開發驗證
數據倉庫工程師的基本職責模板 篇25
1.作為工程技術窗口,在新品導入階段與研發部門檢討產品設計風險及可行性;
2.擬定新品工藝流程,確認工藝參數要求、生產設備/治具方案、測試標準及方法;
3.產品設計資料的收集、審核、輸出;
4.試產各階段組織評審會議,匯總設計、制程、來料問題并安排專項解決;
5.協調研發、生產和質量部門,針對跨部門的技術和質量相關問題,討論解決方案,給出辦法并跟進執行。
數據倉庫工程師的基本職責模板 篇26
職責:
1、針對具體的業務場景需求、定義數據分析及挖掘問題;
2、使用統計學分析方法、挖掘算法、構建有效且通用的數據分析模型,對數據挖掘方案進行驗證、開發、改進和優化,實現數據挖掘的功能應用;
3、搭建高擴展高性能的數據分析模型庫,作為數據分析團隊的基礎工具;
4、完成領導安排的其他工作。
任職要求:
1、計算機、統計學、數學相關專業,本科及以上學歷;
2、3年及以上相關工作經驗,985和211大學的優秀畢業生可放寬至2年以上;
3、熟悉PHM的應用背景、功能定義、系統架構、關鍵技術;
4、熟練掌握Python進行數據挖掘;會使用Java進行軟件開發者優先考慮;
5、熟悉常用數據挖掘算法(如分類、聚類、回歸、關聯規則、神經網絡等)及其原理,并具備相關項目經驗;
6、熟悉數據倉庫,熟練使用SQL語言,有良好的數據庫編程經驗;
7、具備較強的獨立解決問題的能力,勤奮敬業、主動性和責任心強。
數據倉庫工程師的基本職責模板 篇27
1. 主要對接業務部,對客戶進行資料預審,并進行超制程評審, 制作工藝單,能快速準確地解讀客戶資料,為銷售團隊提供工程支持,協助業務員報價.
2. 和線路板廠溝通EQ,并就公司內部無法回復的EQ翻譯成英文與客戶溝通;
3. 精通PCB專業英語,理會客戶設計意圖, 能讀懂英文制板信息, 并提取工藝單;
4. 熟悉IPC標準、品質等,從工程師的角度協助品質部門處理客訴;
5. 接收到業務員的訂單后根據產品要求選擇公司合適的供應商進行外發。
數據倉庫工程師的基本職責模板 篇28
職責:
根據管理決策分析的需求,負責數據庫模型的設計,數據庫結構優化及技術指導;
負責數據庫運維自動化方面的研究和踐行實施,確保數據庫的配置管理;
負責設計和優化數據庫建設方案,參與系統架構的規劃、設計、實施;
負責數據庫系統運維流程、開發規范和安全策略的制定;
負責分析和管理數據庫的安全,監控對數據庫的訪問;
負責數據庫備份與恢復策略制定,年度恢復演練的執行;
履行上級主管授予的其它職責;
崗位要求:
本科及以上學歷,計算機或相關專業,5年及以上數據庫運維的工作經驗;
具備OCM證書或相當水平的資格認證。
精通數據庫性能調優,SQL優化,服務器優化;
熟悉Oracle、MySQL數據庫技術以及高可用系統的設計、配置和管理;
熟悉各種操作系統及各種平臺下主流數據庫系統的安裝與日常維護;
熟悉Linux操作系統管理與維護;
具有良好的客戶服務和團隊合作意識,有較強的責任感和執行力;
具有較強的溝通表達、歸納總結的能力,良好的文檔撰寫能力;
具有較強的數據安全和保密意識;