數據倉庫工程師崗位的基本職責(精選19篇)
數據倉庫工程師崗位的基本職責 篇1
職責:
1.參與打造數據中心內容的規劃、設計、開發和優化工作,實現高質量數據的互通與共享;
2.參與數據模型體系構建及數據主題設計和開發,搭建離線、實時數據倉庫;
3.參與數據產品與應用的數據研發;
4.負責日常應用系統監控,發現異常問題及時分發,并跟進后續處理;
5.編寫Python程序,或ETL技術完成日常數據抽取和整理任務,可獨立進行數據分析;
崗位要求:
1.熟悉ETL開發、數據倉庫設計流程,熟悉Oracle, MS SQL Server 等主流數據庫,表結構設計,存儲過程編寫;
2.熟練掌握常用Linux命令,具備shell編程能力,熟練掌握Python編程語言
3.具有較強的語言表達和溝通能力,良好的團隊合作精神
4.邏輯思維能力強,對數據敏感,有較強學習能力和創新思維;
5.具有高度的責任感和敬業精神,能夠承受較大的工作壓力
數據倉庫工程師崗位的基本職責 篇2
職責:
1、負責大數據開發工作;
2、負責公司數據服務接口平臺的建設;
3、參與打造數據中臺內容的規劃、設計、開發工作,實現高質量數據的互通與共享; 4、參與數據模型體系構建及數據主題設計和開發,搭建離線、近線、實時數據公共層;
5、參與構建非結構化數據體系,進行網絡數據爬取,數據清洗,特征挖掘,統計分析,并結合應用場景實現落地。
崗位要求:
1、本科以上學歷,計算機、數學、統計學等相關專業;
2、熟悉數據集成、數據倉庫、數據分析等全流程數據處理,具備開源或阿里大數據平臺實戰經驗,如hive/spark/Maxcompute;
3、熟悉數據治理體系,包括數據模型、數據標準、數據質量等;
4、熟悉常見的離線、實時、流式數據應用場景及架構;
5、至少掌握一門開發語言,Java/Python;
6、具備良好的溝通能力和設計文檔編寫能力;
7、懂數據挖掘、知識圖譜的構建者優先。
數據倉庫工程師崗位的基本職責 篇3
職責:
負責大數據數據倉庫的建設,根據數據倉庫及BI項目的需求,制定相關的設計方案和開發計劃;
參與數據的分析處理和數據統計內容的架構設計與研發;
組織項目組成員完成數據倉庫的開發和運維等;
負責公司數據規范、數據標準、數據指標梳理與定義;
協助技術人員完成數據管控平臺的搭建,完成數據規范管理體系到信息平臺的落地實施;
組織開展對數據平臺各模塊的內容進行培訓;
制定和審計業務系統數據數據庫模型設計規范;
任職資格:
有一定的互聯網數據倉庫經驗;
深入了解 Hadoop 生態系統,熟悉HBase、Hive、Storm、spark等大數據開發工具中一種或幾種;
具備大型數據倉庫架構設計、模型設計、ETL 設計的相關經驗;
關系型數據庫原理基礎扎實,熟悉 MySQL/PostgreSQL等的使用和調優;
有獨立設計數據倉庫經驗、熟悉數據倉庫相關理論知識者優先;
數據倉庫工程師崗位的基本職責 篇4
職責:
1、負責金融行業數據倉庫開發工作
2、負責與多個應用對接的接口和框架設計
3、充分理解產品需求,能夠結合需求進行任務設計,完成詳細設計文檔的編寫。
崗位要求:
1. 從事數據倉庫及商業智能(BI)領域工作至少3年以上,熟悉數據倉庫模型設計方法論,并有實際的模型設計經驗,有大型數倉建設經驗優先;
2. 精通數據倉庫領域知識和管理技能,包括但不局限于:元數據管理、數據質量、主數據管理、性能調優等;
3.有主流商業/開源ETL工具(Informatica、Datastage、Kettle等)使用經驗者優先;
4. 熟悉Hadoop生態相關技術并有相關實踐經驗,包括Hdfs、Map-Reduce、Hive、Hbase、Spark等,具備海量數據加工處理(ETL)相關經驗;
5. 熟練使用java語言,對微服務架構有一定了解;
6. 具有較強的團隊意識與良好的溝通能力及高度的工作責任感,熱愛技術,有很強的鉆研能力,樂于接受有挑戰性的任務;
7、有團隊管理經驗優先。
數據倉庫工程師崗位的基本職責 篇5
職責:
1、深入理解業務,了解需求和痛點,為風控和業務部門提供數據支持;
2、針對業務需求,參與數據倉庫需求分析,制定ETL相關設計方案和開發計劃;
3、負責數據同步,數據整合清洗,以及數據質量的治理;
4、數據倉庫模型設計,分層體系構建,元數據管理監控以及權限控制。
任職資格:
1、重點院校統招本科及以上學歷,計算機基礎扎實;
2、具有2年以上金融貸款類業務經驗;
3、熟悉數據倉庫理論和數據庫建模,有redshift和AWS經驗優先;
4、精通pgsql/mysql等數據庫,精通sql語言,具有數據庫優化/sql優化相關經驗;
5、熟練掌握python/shell語言。
數據倉庫工程師崗位的基本職責 篇6
1、負責對數據進行預審,保證印制電路板的可生產性,提高印制電路板的成品率;
2、負責使用各個軟件對數據進行各種格式之間的轉換,包括protel,dxp,pads,cadence轉換成GERBER數據;
3、負責阻抗計算,滿足顧客提出的阻抗要求;
4、負責冷板數據的處理與轉換。
數據倉庫工程師崗位的基本職責 篇7
職責:
1. 負責IBM、HP、DELL等業界主流品牌的服務器安裝配置及日常維護工作;
2. 負責VMWare虛擬化平臺項目實施及維護工作;
3. 解決實施工作中的技術難題,挖掘客戶需求,提出針對性的解決方案;
4. 編寫各類維護文檔,譬如:實施方案、實施報告、巡檢報告、故障處理報告等等。
5. 負責操作系統(Windows & Linux)的安裝、配置和維護,問題處理,以及軟件升級,安全優化;
6. 維護linux、windows服務器,監控服務器性能 負責Windows & Linux 平臺下的系統維護(系統補丁安全漏洞修復等),提高系統的可用率及可維護性 負責相關數據備份和恢復.服務器監控系統的配置和維護;
任職要求:
1. 3年以上服務器相關工作經驗。
2. 熟悉或精通以下領域(Windows/Linux Server,Active Directory,GroupPolicy,Vmware/Hyper-V,Storage,Backup and etc)
3. 有技術支持經驗者優先。
4. 有日志分析能力或腳本編寫能力者優先。
5. 有1-3年外企或global team工作經驗者優先。
6. 了解Lotus Notes和C#作為加分項。
7. 計算機相關大專以上學歷,3年以上IT工作經驗;
8. 熟悉vmware虛擬化架構技術,具有虛擬化的搭建和運維經驗,對vmware的存儲、災備、網絡、安全、升級、虛擬機管理、監控和性能等有深刻的理解;
9. 有一定的信息安全實施經驗,對VPN,防火墻,上網行為管理以及內網安全有深入理解和實操經驗;
10. 熟悉服務器運維及服務器架設,包括AD域,IIS,DNS、雙機集群等各類windows服務器的配置管理;
11. 精通Windows & Linux系統的安裝、配置和維護
數據倉庫工程師崗位的基本職責 篇8
1、從事國土規劃類項目的前期調研、數據處理與分析、文本編寫、圖件與數據庫的制作;
2、從事土地開發整理項目的前期踏勘、文本編寫、圖件制作及預算編制;
3、能制定合理的實施計劃,保證項目的有序開展。
數據倉庫工程師崗位的基本職責 篇9
1.參與施工交接樁、復測、設計圖紙復核。對設計中存在問題及時匯報。
2.做好隧道施工中特殊過程、危險源和環境因素辯識評價,參與編制項目施組及隧道工程專項施工組織設計,制定質量安全、環保相關作業指導書、管理方案、應急予案和技術交底。
3.準確掌握隧道工程的設計文件意圖、標準規范,明確施工工藝流程和創優規劃,按工期要求及時提報進度安排、材料計劃和技術交底。深入現場指導施工,及時處理施工中出現的技術問題。
4.做好隧道施工過程中內業資料的積累及竣工資料的編制、整理工作。
5.參與推廣隧道施工中新技術,新工藝、新材料、新方法的應用和QC小組活動。
6.積極主動參與論文及技術總結的編寫。按規定提供有關報表。
7.協助領導做好施工中的進度、質量、安全、環保、成本控制及管理。搞好日常檢查,發現問題及時糾正預防。
數據倉庫工程師崗位的基本職責 篇10
1、模切產品的材料管控、材料開發與驗證、材料知識培訓、產品開發等;
2、對工程開發選材,提供技術支持;
3、為客戶提供材料解決方案;
4、協助生產工藝流程的改進、優化等;
5、能獨立完成新產品開發,產品工藝改善,和各項研究工作開展;
6、對模切生產了解提供支持。
數據倉庫工程師崗位的基本職責 篇11
職責:
1、負責項目的需求調研,編寫相應的調研報告、業務需求方案;
2、負責項目業務需求分析,將業務需求轉化為功能需求,撰寫需求規格說明書;
3、在產品經理組織下,參與產品規劃和策劃;
4、對所負責項目或產品進行需求管理、跟蹤調研、原型設計;
5、向開發、測試、UI解釋業務需求,對實現需求進行驗收。
職位要求:
1、專科學歷以上,計算機、軟件工程相關專業優先;
2、2年以上產品設計、需求分析相關經驗;
3、能熟練使用Axure、墨刀等原型工具,獨立完成產品PRD、Demo及MRD等內容;
4、有很強的溝通表達能力和團隊合作精神,能承受一定的工作壓力;
5、有大數據、BI等相關產品或項目經驗者優先;
6、從事過JAVA開發、數據開發等工作經驗值優先;
7、熟悉審計業務者優先。
數據倉庫工程師崗位的基本職責 篇12
職責:
1、HPE、H3C、華為等服務器硬件安裝和維護;
2、熟悉HPE、EMC、華為等各品牌存儲,能獨立進行LUN映射及存儲故障解決;
3、熟悉服務器常用的RAID、SCSI技術;
4、對WINDOWS、LINUX等操作系統安裝、排錯;
5、協助業務部門做產品升級及方案制訂;
任職資格:
1、大專及以上學歷,計算機專業;
2、服務器相關行業具有三年及以上工作經驗,具有獨立服務器硬件故障判斷能力,對故障進行獨立解決,具有豐富的硬件安裝和維護經驗;
3、熟悉VMWARE、華為、H3C等虛擬化技術及虛擬化軟件操作;
4、具有一定的網絡規劃及實施能力,具備網絡基本知識,可排查常見的網絡故障;
5、具備數據庫維護經驗更佳;
數據倉庫工程師崗位的基本職責 篇13
職責:
1、參與K12教育行業大數據分析、大數據處理、數據挖掘等系統的設計和開發;
2、根據業務需求,基于海量學生學習和行為數據(如錯題等)進行數學建模,設計并開發高效算法,并對模型及算法進行驗證和實現,通過產品和技術提升教學和服務的效率和質量;
3、應用各種機器學習、數據挖掘技術進行數據分析與用戶畫像;
4、設計和構建基于用戶行為特征的平臺化畫像服務能力,并建立用戶畫像產品的評估機制和監控體系;
任職資格:
1、全日制本科及以上學歷,計算機、數學、統計等相關專業;超過三年的相關工作經驗;
2、熟悉C、C++、java、Python,CSharp,R等一門或多門編程語言;具備扎實的數學和計算機編程功底,以及堅實的文本數據挖掘和機器學習理論基礎,在推薦算法、廣告算法等相關領域研究或實踐經驗者優先;
3、具備深厚的數據建模(機器學習、數據挖掘)工作經驗;有大數據處理實際開發經驗(hadoop、spark,、Flink、ElasticSearch、hive、hbase);
4、熟悉各種特征提取、數據降維等數據處理技術;從事過用戶畫像等方面工作;
5、熟練應用各種分類聚類算法;熟悉各種相關性算法、回歸算法;具有數據挖掘算法開發經驗;
6、具備較強的溝通能力和優秀的邏輯思維能力,擅長從海量數據中發現有價值的規律;
7、自我驅動能力強,踏實勤勉,對有挑戰的問題充滿激情;愿意在創業氛圍中工作;
8、能夠閱讀英文技術文檔及論文,具有良好的自學能力,可以快速學習和掌握新的方法和技術;
數據倉庫工程師崗位的基本職責 篇14
職責:
1. 負責移動終端軟件測試,按照測試用例和測試流程完成測試任務。
2. 負責測試過程中發現BUG的登記,并對修改后的BUG做驗證和回歸測試。
3. 按照軟件測試文檔要求,編制規范測試報告。
4. BT,WiFi功能和協議的測試/功耗、性能、壓力測試等,其中任意一方向能達到深入了解;
任職要求:
1. 計算機、通信相關專業,專科以上學歷。
2. 對測試行業有興趣,并想長期發展。
3. 1年以上工作經驗,應屆生條件優秀者可酌情考慮。
4. 責任心強,執行力強,樂于學習,有一定抗壓能力。
5. 有一定用例編寫能力。
6. 有基礎的英文讀寫能力。
數據倉庫工程師崗位的基本職責 篇15
1、負責數據庫系統的管理工作,保證其安全、可靠、正常運行;
2、負責數據庫服務器的管理工作,做好服務器的運行記錄,當服務器出現故障時,迅速會同相關人員一同解決;
3、負責數據庫系統的建設,做好服務器的維護、數據庫軟件的安裝、數據庫的建立工作,定期對數據進行備份;
4、SQL優化,負責對問題SQL提出優化及改進建議;
5、研究新版數據庫功能,完成功能測試報告;
6、負責數據庫服務器的安全防范管理工作,制定業務的日常運維,定期制作運維報告;
7、協助軟件開發人員完成數據庫軟件開發所需的各類數據庫的信息;
8、根據公司和部門工作需要,完成領導交辦的其他任務;
數據倉庫工程師崗位的基本職責 篇16
職責:
(1)負責軟件系統代碼的實現,編寫代碼和開發文檔
(2)負責進行系統的功能定義,程序設計
(3)根據設計文檔或需求說明完成代碼編寫、調試、測試與維護
(4)分析并解決軟件開發過程中的問題
(5)配合技術經理完成相關任務目標
任職資格:
(1) 計算機相關專業全日制本科及以上學歷;
(2) 3年以上工作經驗,其中至少2年Oracle、MySQL數據庫開發經驗
(3) 熟練掌握java架構和開發,熟練使用Shell腳本編程
(4) 學習和理解能力強,具有一定的系統分析能力,及獨立解決問題的能力
(5) 具備良好的團隊合作精神和承受壓力的能力
(6) 擁有金融類產品開發經驗者優先。
數據倉庫工程師崗位的基本職責 篇17
職責:
1、負責生產環境Mysql數據庫系統高可用、高性能架構方案,分庫分表策略,數據庫擴展方案;
2、排查數據庫故障,分析和解決疑難問題,提出預防方案;
3、制定數據庫監控策略、備份策略、容災策略,探查系統潛在的問題和可能的性能瓶頸并進行優化;
4、對開發工程師的SQL語句進行審核及SQL優化;
5、負責redis、memcache等非關系數據庫的管理和擴展,能夠根據業務需求完成系統設計、架構設計工作;
6、參與前瞻性新技術研究,解決數據庫相關疑難問題。
【任職要求】
1、計算機相關專業,統招大專及以上學歷;
2、具備5年以上豐富的MySQL實踐經驗,精通SQL優化以及存儲過程編程,熟悉Oracle的管理和優化;
3、精通MySQL數據庫性能優化,精通MySQL引擎,精通MySQL主從調優,精通MySQL集群優化;
4、精通MySQL數據庫的運行機制和體系架構;
5、精通MySQL復制,實時備份、負載均衡等處理技術,精通數據庫核心參數設置和調整,具備IO與系統性能優化的經驗;
6、熟悉redis、memcached、MongoDB等非關系數據庫管理者優先;
7、有大型網站數據庫高并發量設計經驗、熟悉大型數據庫的設計、容量性能管理和調優經驗者優先。
數據倉庫工程師崗位的基本職責 篇18
1. 鍛造制程的優化(主要為鋼鐵類金屬材料,另有部分鋁合金材質);
2. 現場質量問題分析/改進;
3. 參與新產品/新工藝開發(鍛壓方向)。
數據倉庫工程師崗位的基本職責 篇19
1. 負責相關行業內“氣體探測無線智能化防護平臺”的業務推廣;
2. 負責相關行業內霍尼韋爾氣體探測器的業務推廣;
3. 負責相關行業內個人安全防護及預警理念的交流溝通。