數據倉庫工程師的職責(精選16篇)
數據倉庫工程師的職責 篇1
職責:
1、參與數據倉庫架構設計、建模和ETL開發;
2、參與數據治理工作,提升數據易用性及數據質量,與數據工具團隊緊密合作;
3、理解并合理抽象業務需求,發揮數據價值,與業務團隊緊密合作。
任職要求:
1、計算機、數學、統計相關專業專科及以上學歷,其中2年以上數據倉庫開發經歷;
2、精通數據倉庫實施方法論、深入了解數據倉庫體系,并支撐過實際業務場景;
3、具備較強的編碼能力,熟悉sql,python,hive,spark,kafka,storm中的多項,有至少TB以上級大數據處理經驗;
4、對數據敏感,認真細致,善于從數據中發現疑點;
5、善于溝通,具備優秀的技術與業務結合能力。
6、有電力行業經驗者優先
數據倉庫工程師的職責 篇2
職責:
1. 負責企業級數據倉庫架構設計、建模以及ETL開發,構建可擴展的數據倉庫解決方案;
2.負責公司日常運營報表開發維護,和業務及分析部門溝通協作,提供多層面數據服務;
3.提供完善的數據保障體系,包括元數據管理、數據質量、數據安全等;
崗位要求
1. 計算機或相關專業本科及以上學歷 ;
2. 具有豐富的數據開發經驗,對數據處理、數據建模、數據分析等有深刻認識和實戰經驗;
3. 熟悉SQL,有一定的SQL性能優化經驗;
4. 熟練掌握Java語言,MapReduce編程,腳本語言Shell/Python/Perl之一;
5. 業務理解力強,對數據、新技術敏感,對云計算、大數據技術充滿熱情;
6. 積極樂觀、誠信、有責任心;具備強烈的進取心、求知欲及團隊合作精神;
數據倉庫工程師的職責 篇3
職責:
1、構建數據挖掘模型,推動業務精確營銷實踐;
2、根據業務需求開展數據分析與建模工作,提供相關的模型和算法支撐;
3、構建數據挖掘與建模解決方案,指導應用設計與開發;
任職要求:
1、具有數學統計、計算機相關專業的本科及以上學歷
2、兩年以上相關工作經驗;
3、精通各種分類、聚類、預測、關聯模型算法與原理;
4、精通SAS、MATLAB、CLEMENTINEL等主流數據挖掘工具的使用方法,并具有大型數據挖掘項目的成功實施經驗;
5、對數據與業務有足夠敏感性,具有極強的利用數據分析、挖掘,解決業務問題的能力;
6、對數據挖掘方法論有較深刻的理解,能獨立規劃數據挖掘模型解決方案并實施;
7、熟悉linux環境和命令,能編寫簡單的shell腳本。
8、熟悉MySQL、Oracle、SqlServer、PostgreSQL、NoSql、NewSql等主流數據庫,精通mysql,oracle者優先。
數據倉庫工程師的職責 篇4
職責:
1. 針對業務問題進行分析,深入了解業務需求,為業務部門提供數據支持;
2. 搭建業務分析模型或業務分析指標體系,統一數據指標分析口徑;
3. 參與報表需求調研和需求分析;
4. 參與報表開發工作;
5. 參與ELT相關的設計方案和開發;
崗位要求
1.4年及以上BI開發經驗;
2.熟悉數據倉庫建模理論,有建模經驗;
3.熟悉掌握SQL語言嗎,熟悉PL/SQL編程,熟練掌握存儲過程開發;
4.具有較強的業務理解能力,溝通能力;
5.熟悉常用ETL技術;
6.熟悉Hive、HBase、Spark等大數據者優先;
數據倉庫工程師的職責 篇5
職責:
1、負責數據倉庫架構、元數據、數據質量、血緣分析等環節的設計與實現,構建可擴展的數據倉庫和分析解決方案;
2、負責將BI、運營、產品、客服等業務部門的需求抽象成數倉模型并落地;
3、負責參與智能用戶畫像體系開發與建設;
4、負責數據工具、數據產品及其他數據需求的開發。
技能要求:
1、有數據倉庫需求調研和需求分析經驗,能根據業務需求設計數據倉庫模型,并對數據倉庫數據模型進行管理,保證數據質量,熟悉kimball架構;
2、精通sql開發,有較豐富的Hive sql性能調優經驗優先;
3、熟悉spark structured streaming、flink中至少一種流式處理計算框架,有相關開發經驗;
4、熟悉大數據存儲處理組件,包括但不限于Hive/HDFS/HBASE/presto/Druid/kylin/impala;
5、熟練掌握Linux各種命令行工具,良好的shell功底。
數據倉庫工程師的職責 篇6
職責:
1 本科及以上學歷,計算機相關專業;擁有2年以上數據庫開發經驗,有spark sql和hive sql開發經驗者優先;
2、熟練使用oracle、gp、pg等常用數據庫,熟練利用執行計劃進行sql語句調優;
3、熟練對oracle、gp、pg等常用數據庫進行導入導出備份等操作。
4、擁有處理大批量數據(每天單表數億記錄)的工作經驗,
5、能夠通過查看IO、CPU、內存等了解數據庫瓶頸者優先;能夠通過系統日志、數據庫日志分析排查數據庫故障者優先;
7、要求能夠適應短期出差的工作性質。
工作經歷及技能要求*:
1、熟悉電信行業計費或CRM、資源等,具1年以上的相關系統開發經驗,大學本科及以上學歷;
2、精通Oracle數據庫系統,良好的SQL語言能力;
3、工作認真、負責,有良好的團隊合作精神;
4、有良好的學習能力與溝通表達能力;
5、具備一定的組織協調能力與獨立解決問題的能力;
6、有較強的團隊意識和責任感,工作積極主動,能較快接受新事物。
數據倉庫工程師的職責 篇7
職責:
1、充分了解項目需求和設計,與開發人員配合,對整個數據庫進行高效的設計與規劃;
2、數據庫端代碼編寫(存儲過程、函數、視圖等),與應用系統對接。
3、熟悉Memcached、Redis等分布式緩存技術,能夠根據業務需求,合理的設計緩存方案;
4、數據庫數據庫系統的規劃、設計、管理、變更、遷移;
5、熟悉數據庫的性能優化、SQL調優,熟練使用高可用、讀寫分離、負載均衡等解決方案;
6、數據庫架構搭建、日常維護、備份、優化及恢復;
7、能制定數據庫開發的規范,并提供針對開發人員的SQL培訓。
其他要求
1、3年以上數據庫相關工作經驗;
2、熟悉數據庫的運行機制和體系架構、數據庫備份與恢復原理;
3、精通數據庫的管理、編程,2年以上專職MS SqlServer數據庫管理經驗;
4、具備良好的溝通能力及團隊合作精神,能承受一定的工作壓力;
5、有基于云數據庫的管理和開發經驗;
6、有實際運營項目開發經驗、Memcached、Redis緩存技術等經驗優先;
數據倉庫工程師的職責 篇8
1.1 建立電控硬件標準,包含:指定電控零件品牌、定義電控零件重要功能、制定應用規范
1.2 建立電控設計標準,包含:電控設計輸出標準、PLC程序標準結構、建立各類PLC標準功能模塊
1.3 建立軟件設計標準,包含:制定語言選用規范、程序標準結構、建立標準功能模塊
1.4 建立嚴謹的電控及軟件技術的審核、驗證流程,不斷提高審核及驗證標準,持續推動高質量設計輸出
1.5 主導電控及軟件技術輸出的評審,負責電控及軟件設計輸出的最終批準
1.6 建設電控及軟件技術的人員技能識別、技能培訓提高體系
1.7 支持研發中心的各項自主技術研發、外部技術消化吸收,負責內部推廣
1.8 支持電控部經理提升團隊及工程師工作效率效果
數據倉庫工程師的職責 篇9
1、組織新產品焊裝工藝工程技術工作;
2、組織新產品焊裝工藝生產準備工作;
3、組織量產車型焊裝工藝技術服務;
4、組織焊裝工藝過程材料及供應商管理;
5、組織焊裝工藝“三新”研究與應用;
6、組織焊裝新工廠工藝規劃方案評審;
7、組織焊裝新生產線建設及工藝設備技術改造工作;
8、焊裝專業組綜合管理;
9、完成領導交辦的其它事項。
數據倉庫工程師的職責 篇10
職責:
1、負責數據挖掘領域的分析研究,包括數據挖掘算法的分析研究,特定工程的數據挖掘模型的需求分析、建模、實驗模擬;
2、負責數據挖掘系統的開發,包括需求分析、系統設計、系統測試和優化。
3、負責大數據集成、分析和洞察技術研究,業務建模。包括業務模型、數據模型的生成和應用,關鍵算法的研究和開發。
任職要求:
1、具有深厚的統計學、數學和數據挖掘知識基礎;
2、有較強的數據分析能力,邏輯思考、問題定位解決能力;
3、具有良好的溝通能力和團隊協作精神。
4、較強的數據處理和分析能力。
數據倉庫工程師的職責 篇11
職責:
1、負責項目的PC服務器軟硬件巡檢、故障處理、設備優化工作;
2、負責項目的存儲、光纖交換機的巡檢、故障處理、設備優化工作;
3、負責服務器及存儲相關技術的報告及方案編寫;
4、公司安排的其它工作。
任職要求:
1、2年以上經驗,具備主流品牌DELL\HP\IBM的PC服務器硬件故障處理能力,熟悉設備巡檢流程
3、具備主流品牌EMC\HP\IBM\華為存儲及光纖交換機硬件故障處理能力,熟悉設備巡檢流程
4、具備VMware、KVM、XEN、HelpverV等虛擬化維護能力,能對虛擬平臺進行遷移、優化等操作
5、具備Windows\Linux操作系統的巡檢和故障處理能力
6、熟悉OFFICE等辦公軟件使用,能獨立設計、編寫方案和報告,熟悉文檔排版能力
7、具有較強的抗壓能力,較強的溝通意識、責任心強
數據倉庫工程師的職責 篇12
職責:
1. 負責或參與智能連接產品(智能耳機,音箱等)后端系統的設計、代碼實現;
2. 參與制定前后端業務流程、接口協議、文檔輸出等;
3. 負責或參與前端程序(APP, Device)的對接、調試;
4. 持續迭代開發,改善系統性能,用戶體驗。
崗位要求
1. 五年以上服務器端開發經驗,一年以上Go語言開發經驗;
2. 熟悉linux,對服務器性能優化有一定了解,有高并發項目經驗優先;
3. 熟練掌握nginx、mongodb、Redis等開源組件;
4. 了解服務器安全配置相關的知識;
5. 熟悉多線程和網絡編程,有分布式系統項目經驗者優先;
6. 有可穿戴產品后臺開發經驗者優先。
數據倉庫工程師的職責 篇13
職責:
1. 參與海量數據挖掘平臺設計與開發;
2. 負責底層測試數據的解析開發;
3. 負責數據挖掘需求模型設計與開發;
4. 負責海量數據挖掘的分布式部署及其調優工作。
任職資格:
1.本科及以上學歷,計算機、汽車、控制或相關專業;
2.3年以上Python/C++/C開發經驗,包含至少 1年以上的數據分析/挖掘相關經驗;
3.對MySQL及任意一個NoSQL有深入的了解;
4.做事具有條理性,具有良好的自學能力、分析問題以及解決問題的能力;
5.熟練掌握多進程/多線程技術,具有大規模分布式系統開發經驗者,從事過汽車電子相關工作優先。
數據倉庫工程師的職責 篇14
1. 以客戶需求為導向,了解客戶對于產品工藝性能的要求,技術難點,制作產品規范,提高產品意識,積極推進項目進度。
2. 積極與供應商對接,了解供應商在工藝制造商的難點,在滿足設計需求的前提下,降低供應商制造門檻,實現快速、低損、易生產。
3.積極與公司內部采購及QC溝通,了解設計、成型、加工的關聯需求,加強協同溝通能力,提高團隊協同作戰意識
數據倉庫工程師的職責 篇15
1、 確保原輔料、包裝材料、中間產品、待包裝產品和成品符合藥事法規的要求和質量標準;
2、 制定和完善質量標準、取樣方法、檢驗方法和其他質量管理的操作規程;
3、 獨立操作和維護相關設備和儀器;
4、 監督廠房和設備的維護,以保持其良好的運行狀態;監督廠區衛生狀況;
5、 按時完成部門交辦的其他工作任務。
數據倉庫工程師的職責 篇16
1、負責公司電氣設備的安裝指導及調試工作,并負責設備投運;
2、負責繼電保護調試工作,解決各類技術問題。 熟練使用各類繼電保護相關的試驗儀器;
3、能熟練的匯編各類設備調試報告、調試方案。