數據倉庫工程師的主要職責(精選16篇)
數據倉庫工程師的主要職責 篇1
職責:
1.建設公司級數據倉庫,并根據業務變化持續迭代和優化;
2.對業務數據進行梳理和抽象,建設數據倉庫的數據模型;
3.對業務數據進行采集、清洗、轉換和存儲;
4.支撐BI、用戶數據、用戶運營、用戶畫像、房源數據、推薦系統等核心數據平臺產品;
5.研究大數據前沿技術,不斷持續優化大數據平臺,為業務提供價值。
任職資格:
1.本科及以上計算機、統計學、數據庫、機器學習等相關專業,5年以上數據相關工作;
2.對業務數據有敏銳的理解能力,并能快速梳理和分析業務數據;
3.熟練掌握SQL語言、熟悉MySQL,對Shell、Java(主要開發語言)、Python編程非常熟悉;
4.熟悉常用的ETL技術和原則;精通數據倉庫數據庫設計規范和實操;
5.熟悉Hadoop、Hive、HBase、Spark、Storm等開源平臺者優先;
6.具有較強的分析和解決問題的能力,良好的學習能力和團隊合作精神,追求價值實現,認同目標管理和敏捷。
數據倉庫工程師的主要職責 篇2
職責:
1.參與傳統數倉和大數據數倉日常開發工作;
2.參與大數據倉庫設計、規劃和開發;
3.參與日常工作的優化,提出建設性意見;
4.負責管理項目,負責板塊內的資源協調、進度管理、交付管理;
5.參與數據倉庫、數據集市體系架構的設計、規劃與開發, 參與大數據、ETL開發,sql性能優化。
任職要求:
1.全日制本科,計算機等相關專業。3年以上數倉開發經驗,有銀行、金融從業經驗者優先。
2.2年以上項目管理經驗,具備PMP證書優先.
3.熟悉oracle/hive/spark,熟悉數據處理和性能優化,有UDF自定義函數、MR開發經驗優先;
4.熟悉常用ETL工具,熟悉常用的Linux指令,熟悉shell/python任意一種腳本語言。
數據倉庫工程師的主要職責 篇3
職責:
1、負責制定數據倉庫平臺技術體系架構、數據架構及規范;
2、負責設計和實施公司業務數據的實時/離線數據ETL架構方案;
3、負責調度架構設計與開發;
4、負責數據倉庫平臺運維以及日常數據運營等管理;
5、負責關鍵技術攻關;
任職要求:
1、5年以上數據倉庫項目開發經驗,參與過數據倉庫架構設計,對ETL開發流程、調度架構有深入理解;
2、精通mysql、 oralce 、greenplum等至少一種數據庫,豐富的SQL性能調優經驗;
3、熟練使用Java、Shell、Python、Perl等至少一種腳本語言;
4、熟悉數據治理理論,數據質量、元數據管理流程和方法;
5、了解Hadoop/Hive/HBase/Spark/Storm等技術及其生態圈;
6、溝通能力好、責任心強,具有良好的團隊合作精神和敬業精神;
數據倉庫工程師的主要職責 篇4
職責:
1.負責企業級數據倉庫設計、規劃、建設、實施、管理,數據倉庫架構設計與數據開發,創建數據倉庫、數據集市
2.熟悉數據倉庫領域知識,從架構和技術層面參與建設數據倉庫,包括元數據管理、數據質量、主數據管理、性能優化和調優。
3.負責數據倉庫平臺相關數據管理工作,如研發規范、質量規范、保障規范的制定與推動實施落地
4.配合和協助數據分析/數據挖掘形成底層/中間層的業務邏輯切片
任職資格:
1. 本科或碩士以上學歷,計算機工程相關專業
2. 熟悉大數據相關技術能力(Hadoop/MapReduce/Hive/Hbase等),熟練進行數倉Hive建設和軟件架構,較強的數據抽象能力
3.精通SQL,具備海量數據處理和Hive/Spark性能調優經驗,3年以上大規模分布式數據倉庫建設經驗
4.熟練使用Druid/Kylin之一進行數據挖掘模型設計,熟練掌握Java/Scala之一,具備良好的coding素養和習慣,了解腳本語言,如Python、Shell等
5.強烈的責任心,工作態度積極主動,有較好的團隊精神和溝通能力,工作細致認真
數據倉庫工程師的主要職責 篇5
職責:
1、負責ETL開發、作業調度和數據平臺建設
2、負責數據倉庫的設計、開發和優化,建立結構層次合理、靈活可擴展的數據倉庫
3、設計并研發BI分析相關的數據產品
4、結合對數據的理解和業務需求,對數據進行整理、分析和挖掘
任職要求
1、計算機相關專業本科及以上學歷,有2年以上數據倉庫、ETL工作經驗
2、有海量數據處理、ETL及作業調度優化、數據倉庫建模等經驗
3、熟悉Linux、SQL、Python或Java、Shell腳本,有Hadoop/Hive/Spark/HBase/Kylin/Impala等大數據技術使用經驗
4、邏輯清晰,對數據敏感,深入了解業務,具備自己獨特的想法并能提出合理的建議
數據倉庫工程師的主要職責 篇6
職責:
1、負責公司業務部門的需求調研,收集、分析、整理產品需求,編寫詳細需求文檔,跟蹤需求在設計、編碼和測試階段的完成情況;
2、基于業務的理解,開展數據分析,發掘數據價值,撰寫數據分析報告和數據應用方案,為業務部門等提供數據支持;
3、負責優化主數據管理流程及質量監控,跨部門合作橫向溝通解決數據質量問題;
4、與相關團隊協作為業務提供數據挖掘、模型及算法等相關服務,推動業務部門的數據化運營。
任職資格:
1、大專以上學歷,2年以上數據管理或需求分析相關工作經驗,制造業或消費定制行業從業者佳;
2、熟悉產品設計的各種設計工具(MindManager、PPT、Visio等),了解需求用例的編制過程,有CRM、ERP、供應鏈經驗優先
3、具有制造業中營銷、供應鏈、產品企劃、財務、人力等至少一個方面的行業經驗;
4、對工作充滿熱情,富有創新精神,能承受較大的工作壓力,優秀的理解分析能力、溝通合作和資源協調能力。
數據倉庫工程師的主要職責 篇7
職責:
1. 設計和搭建游戲服務器端的技術架構;
2. 負責游戲平臺服務器端開發工作,游戲腳本內容編寫;
3. 負責與游戲客戶端數據傳輸協議的制定。
崗位要求:
1、熟悉網游的架構設計,熟悉多線程開發技術,處理大量網絡并發數據, 有高并發多線程服務端程序開發經驗
2、2年以上工作經驗,1年及以上的C/C++服務器開發經驗,熟悉掌握C/C++,良好的編程習慣和調試技巧
3、熟悉C/S結構,網絡通訊協議,http,socket編程技術
4、熟悉數據庫開發,熟悉Mysql,SqlServer數據庫編程技術
5、熟悉windows server開發環境,熟悉Linux操作系統原理和日常使用的Shell命令服務器開發
6、熟悉lua腳本編程
7、熟悉Redis開發
8、邏輯思維清晰,能獨立設計游戲中系統邏輯,較強的溝通和能力,能承擔工作壓力
數據倉庫工程師的主要職責 篇8
1、負責編寫項目初步方案,配合業務部進行技術交流、工況確認;
2、根據專業負責人分配的任務熟悉設計資料,了解設計要求和設計原則,正確進行設計,并做好專業內部與其他專業的提資和配合工作;
3、配合專業進度,制定詳細的作業計劃,并按照項目要求完成設計、自校工作,減少差錯,保證設計質量;
4、獨立編制技術方案和施工圖設計,負責設計修改和處理施工中出現的工藝專業問題;
5、協助處理項目現場安裝調試方面的各類問題,根據項目實際情況作出設計變更。
數據倉庫工程師的主要職責 篇9
職責:
1、負責HP、DELL、華為、浪潮等業界主流品牌的服務器安裝配置及日常維護工作;
2、負責VMWare/Hyper-V虛擬化平臺項目實施及維護工作;
3、負責HP、華為、浪潮等企業級存儲及其SAN網絡的安裝配置及日常維護工作;
4、負責服務器集群拓撲及SAN存儲網絡部署;
5、編寫各類維護文檔,譬如:實施方案、實施報告、巡檢報告、故障處理報告等等。
任職要求:
1、計算機相關本科以上學歷,2年以上IT運維或機房管理工作經驗;
2、熟悉主流X86服務器(IBM/HP/華為/浪潮)和存儲的運維和管理;
3、熟悉vmware虛擬化架構技術,具有虛擬化的搭建和運維經驗。
數據倉庫工程師的主要職責 篇10
1、推行 TPM (Total Productive Maintenance) 體系,建立工藝文件和定期更新TPM
2、負責設備導入及國內與海外各工廠設備轉移
崗位要求:
1、大專以上學歷,5年以上設備管理經驗
2、3年TPM推行經驗及設備海外轉移經驗
數據倉庫工程師的主要職責 篇11
職責:
1、維護分析集團軟件數據庫功能及故障
2、提取、轉換集團軟件數據
3、維護數據庫功能的日常運行
4、協調軟件開發
5、部門ERP系統的日常維護
6、部門安排的其他工作
要求:
1、計算機或數學專業,大專以上學歷
2、有一年以上數據庫實際相關工作經驗,熟悉sqlserver,oracle中至少一種
3、不接收應屆生,不接收實習生或學徒(有實際項目開發經驗,并能夠獨立分析、解決、編程者不限)
4、男女不限,年齡不限
數據倉庫工程師的主要職責 篇12
職責:
1、協助研發自動化運維平臺,提高運維、開發實施協作效率,規范操作流程;
2、協助研發基本服務組件,虛擬化;
3、評估主機、系統運行狀態及性能,編寫主機硬件架構方案;
4、快速準確匯報系統中出現的故障,配合相關人員做好系統升級,故障解決和測試等工作;
5、作好工作記錄,定期匯總并上報給負責人。
任職資格:
1、計算機相關專業,大專及以上學歷,三年以上服務器運維經驗;
2、熟悉主流Linux/Windows服務器系統(CentOS/Redhat)日常安裝配置維護能力,熟練常用命令編寫;
3、熟悉Java應用,能完成Java應用的部署及常見運維工作;
4、熟悉Nginx、Lvs等軟件負載均衡方案,能進行部署和排錯;
5、熟悉Mysql數據庫的管理,熟悉Mysql備份和恢復,熟悉Mysql主從同步復制及性能調優者優先 。
數據倉庫工程師的主要職責 篇13
1.執行新產品設計開發流程,承擔微波新產品的設計開發工作;
2.承擔新工藝的開發工作或工藝指導工作;
3.負責設計開發產品的樣品制作、試生產及批量生產的技術指導工作;
4.負責本崗位相關技術文件、工藝文件和圖樣文件的編制工作;
數據倉庫工程師的主要職責 篇14
1、負責編制脫硫工程項目機務專業施工技術方案以及施工計劃,組織機務施工;對本專業施工進度、質量、安全、成本負責;
2、配合施工經理做好分包隊伍的管理,審核分包單位上報的本專業各項資料。
數據倉庫工程師的主要職責 篇15
職責:
1、負責公司信息化系統的業務需求分析和評估及管理工作;
2、負責相關系統的需求調研、分析和管理工作,對需求文檔進行管理;
3、對需求進行分析、管理,估算需求執行的成本和工作量,跟蹤及控制變更;
4、配合技術經理估算項目的需求開發成本和周期,并跟進項目/任務執行進度;
5、負責需求優先級溝通確認等;
6、負責向開發和測試團隊講解業務需求和業務流程;
7、負責跟進維護型需求的設計、開發、測試、上線整個流程,保障需求與實現的一致性。
任職要求:
1、2年以上相關行業開發、測試或需求分析經驗;
2、參與過1個以上重要項目需求調研、需求分析;
3、精通軟件工程、了解系統架構,具備一定的管理經驗;
4、精通需求開發和需求管理流程, 熟練一種以上需求分析、設計工具;
5、熟悉UIUE設計的過程、方法或工具,具有交互體驗設計技能;
6、具有良好的親和力和團隊合作精神;
7、具有很強的工作責任心、敬業精神;
8、具有創新精神和學習精神;
9、具有良好的分析能力、溝通表達能力、概括總結能力和綜合協調能力。
數據倉庫工程師的主要職責 篇16
職責:
1. 負責或參與智能連接產品(智能耳機,音箱等)后端系統的設計、代碼實現;
2. 參與制定前后端業務流程、接口協議、文檔輸出等;
3. 負責或參與前端程序(APP, Device)的對接、調試;
4. 持續迭代開發,改善系統性能,用戶體驗。
崗位要求
1. 五年以上服務器端開發經驗,一年以上Go語言開發經驗;
2. 熟悉linux,對服務器性能優化有一定了解,有高并發項目經驗優先;
3. 熟練掌握nginx、mongodb、Redis等開源組件;
4. 了解服務器安全配置相關的知識;
5. 熟悉多線程和網絡編程,有分布式系統項目經驗者優先;
6. 有可穿戴產品后臺開發經驗者優先。