高級數據工程師的職責(精選22篇)
高級數據工程師的職責 篇1
職責:
1、負責生產環境Mysql數據庫系統高可用、高性能架構方案,分庫分表策略,數據庫擴展方案;
2、排查數據庫故障,分析和解決疑難問題,提出預防方案;
3、制定數據庫監控策略、備份策略、容災策略,探查系統潛在的問題和可能的性能瓶頸并進行優化;
4、對開發工程師的SQL語句進行審核及SQL優化;
5、負責redis、memcache等非關系數據庫的管理和擴展,能夠根據業務需求完成系統設計、架構設計工作;
6、參與前瞻性新技術研究,解決數據庫相關疑難問題。
【任職要求】
1、計算機相關專業,統招大專及以上學歷;
2、具備5年以上豐富的MySQL實踐經驗,精通SQL優化以及存儲過程編程,熟悉Oracle的管理和優化;
3、精通MySQL數據庫性能優化,精通MySQL引擎,精通MySQL主從調優,精通MySQL集群優化;
4、精通MySQL數據庫的運行機制和體系架構;
5、精通MySQL復制,實時備份、負載均衡等處理技術,精通數據庫核心參數設置和調整,具備IO與系統性能優化的經驗;
6、熟悉redis、memcached、MongoDB等非關系數據庫管理者優先;
7、有大型網站數據庫高并發量設計經驗、熟悉大型數據庫的設計、容量性能管理和調優經驗者優先。
高級數據工程師的職責 篇2
職責:
1. 負責生產環境Mysql數據庫系統高可用、高性能架構方案,分庫分表策略,數據庫擴展方案。
2. 排查數據庫故障,分析和解決疑難問題,提出預防方案;
3. 制定數據庫監控策略,備份策略,容災策略;探查系統潛在的問題和可能的性能瓶頸,并進行優化。
4. 對開發工程師的SQL語句進行審核,SQL優化。
5. 參與前瞻性新技術研究,解決數據庫相關疑難問題。
6. 負責redis,memcache等非關系數據庫的管理和擴展 任職資格:
職位要求:
1. 具備5年以上豐富的MySQL實踐經驗,熟悉Oracle的管理和優化;
2.計算機及相關專業,本科以上學歷;
3. 具備優秀的數據庫架構設計能力,精通MySQL數據庫性能優化,精通MySQL引擎,精通MySQL主從調優;
4. 精通MySQL、ORACLE數據庫的運行機制和體系架構;
5. 精通MySQL、ORACLE復制,實時備份、負載均衡等處理技術,精通數據庫核心參數設置和調整;
6. 精通redis,memcached等非關系數據庫管理;
7. 需具備IO與系統性能優化的經驗;
8. 需具備良好的職業道德,工作認真、踏實,責任心強,有團隊協作精神;
9. 有大型網站數據庫高并發量設計經驗、熟悉大型數據庫的設計、容量/性能管理和調優者優先;
高級數據工程師的職責 篇3
職責:
1. 維護數據庫穩定運行,持續發現和解決潛在的問題;
2. 負責數據庫的性能優化,使用新技術和新架構滿足日益增長的業務需求;
3. 負責數據庫的監控系統設計,為開發團隊提供平臺支持;
4. 負責數據庫的運維方面的相關工作,包括數據庫的安裝部署、壓力測試、備份恢復、知識庫管理等
5. 負責數據庫進行容量規劃、架構設計,提高業務高可用性和容災能力;
6. 負責數據庫相關工作的整體規劃,提供決策建議。
任職要求:
1. 計算機相關專業本科及以上,具有3年以上DB2數據庫DBA經驗;
2. 精通DB2數據庫體系結構和工作原理,有高可用架構規劃設計經驗優先;
3. 熟悉MySQL數據庫體系結構和工作原理,有高可用架構規劃設計經驗優先;
4. 熟悉TSM的運維管理,并熟悉基于TSM的數據備份和恢復;
5. 熟悉V5000、V7000等存儲的運維管理;
6. 熟悉數據庫的性能優化、SQL調優技術,對高并發數據庫的鎖和事務隔離問題有深入理解;
7. 熟悉數據庫容量規劃和分表設計方法,有海量數據庫設計和支持經驗優先;
8. 熟悉常用的數據庫備份方法;
9. 精通腳本語言,并至少能用Shell,Perl,Python等中的一種進行快速開發。
高級數據工程師的職責 篇4
職責:
1、負責公司數據庫的日常巡檢、常規故障維護、數據庫優化、數據庫的備份恢復
2、負責公司數據庫的容災環境的維護、數據庫的升級、數據庫的遷移
3、負責公司數據庫的數據庫系統linux、solaris的維護
4、負責公司數據庫存儲的維護
職位要求:
1、 三年以上oracle DBA/Sybase/mysql DBA工作經驗,本科以上文憑
2、 熟悉oracle數據庫的體系結構、邏輯結構,熟悉表空間管理,熟悉sql、pl/sql,熟悉oracle數據庫的備份與恢復,熟悉oracle RAC、DATAGURD的搭建與管理,熟悉oracle數據庫的性能優化,熟悉oracle的常規故障處理
3、 熟悉mysql 熟悉mysql集群的搭建與管理,熟悉mysql的備份與恢復,熟悉mysql數據庫的性能優化與常規故障處理
4、 熟悉linux、unix(solaris),熟悉shell腳本的編寫,熟悉sun小機維護、熟悉sybase數據庫者優先考慮
5、具有良好的學習能力、溝通能力和團隊合作能力。
6、有耐心,有服務意識
高級數據工程師的職責 篇5
職責:
1、根據業務需求完成數據庫架構設計,配合系統開發團隊提供DBA服務。
2、負責數據庫的系統安裝、配置管理以及性能監控和調優;
3、對數據庫運行狀況進行監控,及時對故障進行分析處理,記錄解決文檔;
4、提供數據庫的高可用性部署設計方案、以及負責數據庫的日常維護/管理(數據備份/恢復計劃,系統數據安全以及權限管理)
任職要求:
1、3年以上mysql DBA全面運維工作經驗,有存儲過程,觸發器,大數據量的經驗。
2、熟悉Linux系統,能獨立完成數據庫系統的部署、調優、測試和監控;
3、有mysql數據庫高負載高并發系統運維經驗;
4、具有很強的故障排查能力,有很好的技術敏感度和技術文檔整合能力;
5、熟悉MySQL數據庫設計、管理與優化,熟悉myisam和innodb引擎,熟練mysql性能優化、SQL調優技術;
6、具備基本的JAVA知識,可以協助team完成一些基本的開發工作。
7、工作踏實、責任心強,敢于獨立分析和解決問題。
8、有良好的團隊協作精神,樂于分享,共同進步。
高級數據工程師的職責 篇6
1、綜合公司銷售需求節點、材料供應節奏、OEM工廠實際產能等情況,制訂OEM生產計劃;
2、負責OEM供應商的評估把關及質量監控,跟進OEM工廠計劃達成實績,生產過程中的異常處理,確保OEM產品的完成進度;
3、協助對OEM供應商技術、材料等的考察與評價,管理OEM新項目、新工廠評選導入,為公司甄選、拓展OEM供應商,為采購環節提供技術支持;
4、負責整包產品抽檢過程中異常處理,制定質量技術指標和相關文件;
5、負責OEM測試,跟進評估確保滿足量生產日程等,協同并推動供應商的質量改進;
6、OEM生產管理流程梳理完善,結合業務需求制定及改善實績業務流程 。
7、協助部門總監做好管理工作,對相關技術及信息進行收集,整理與轉化。
高級數據工程師的職責 篇7
職責:
1、根據業務需求完成數據庫架構設計,配合系統開發團隊提供DBA服務。
2、負責數據庫的系統安裝、配置管理以及性能監控和調優;
3、對數據庫運行狀況進行監控,及時對故障進行分析處理,記錄解決文檔;
4、提供數據庫的高可用性部署設計方案、以及負責數據庫的日常維護/管理(數據備份/恢復計劃,系統數據安全以及權限管理)
任職要求:
1、3年以上mysql DBA全面運維工作經驗,有存儲過程,觸發器,大數據量的經驗。
2、熟悉Linux系統,能獨立完成數據庫系統的部署、調優、測試和監控;
3、有mysql數據庫高負載高并發系統運維經驗;
4、具有很強的故障排查能力,有很好的技術敏感度和技術文檔整合能力;
5、熟悉MySQL數據庫設計、管理與優化,熟悉myisam和innodb引擎,熟練mysql性能優化、SQL調優技術;
6、具備基本的JAVA知識,可以協助team完成一些基本的開發工作。
7、工作踏實、責任心強,敢于獨立分析和解決問題。
8、有良好的團隊協作精神,樂于分享,共同進步。
高級數據工程師的職責 篇8
職責:
1. 負責公司數據倉庫/數據集市模型設計,優化現有數據倉庫模型;
2. 參與數據倉庫支持工具設計;
3. 參與數據倉庫需求定義;
4. 參與數據治理、元數據建設、優化數據開發流程。
任職資格:
1. 計算機、數學、統計或相關專業本科及以上學歷,數據挖掘/平臺和BI分析領域優先;
2. 3年及以上數據倉庫設計開發經驗;
3. 熟悉HIVE,有HQL使用經驗者優先;
4. 精通數據倉庫建模方法,對kimball維度建模理論有深入的了解;
5. 有實際數倉建設項目負責人經驗者優先;
6. 熟悉Hadoop生態圈以及大數據環境的 OLAP 框架者優先。
高級數據工程師的職責 篇9
職責:
1.負責數據分析,數據挖掘相關的算法、應用的設計與開發;
2.負責公司產品各階段數據的整理、分析、挖掘及提交數據報告,重點對車輛行為數據進行分析和挖掘,利用數據分析結論推動業務產品的優化;
3.對海量業務數據進行整合、分析挖掘,挖掘產品以及用戶潛在信息,為營銷、運營及決策提供業務分析及數據支持。
崗位要求:
1、計算機、統計學、數學、計量經濟學、金融學等相關專業,本科及以上學歷,有數據分析相關工作經驗優先;
2、具有深厚的數學、統計學和計算機相關知識,了解數據倉庫和數據挖掘的相關技術;
3、熟練掌握SQL,有獨立的數據探查能力;
4、曾經參與過比較完整的數據采集、清洗、整理、分析工作,有數據產品設計經驗;5、對商業和業務邏輯敏感,具備良好的邏輯分析能力、組織溝通能力和團隊精神;
6、熟悉決策樹、聚類、邏輯回歸,關聯分析、SVM,貝葉斯等數據挖掘算法優先,有海量時間序列數據挖掘經驗優先;
7、熟悉SAS、SPSS、R等統計分析軟件者優先;
8、具有海量數據挖掘、搜索、推薦相關項目的工作經驗者優先;
9、有物聯網,環保相關行業背景,有競對數據分析及數據挖掘經驗優先。
高級數據工程師的職責 篇10
職責:
1、MySQL數據庫規劃、設計、監控維護、升級、備份、鏡像、容災;
2、數據庫服務器的安裝部署、性能優化、可靠性、容災方案制定等;
3、對數據庫性能分析與調優,排錯,保證數據安全;
4、負責對開發工程師的 SQL 語句進行優化;
5、配合研發制定數據庫技術方案,分庫分表策略,現有表結構優化,數據遷移方案;
6、負責Mysql自動化相關事宜;
崗位要求
1、3年以上mysql數據庫維護經驗,熟悉mysql故障排查、性能優化、備份與恢復、容災等技術。
2、負責MySQL數據庫日常管理和維護,對現有數據系統的穩定性、高可用性、擴展性的相關保障工作;
3、負責性能監控和調優,能夠對業務需求和事故及時響應,調整數據庫設計建議;
4、負責審核新業務上線的數據庫代碼審核與部署;
5、能夠進行數據庫引擎、SQL語句和讀寫分離的優化分析/設計,并具有高并發下讀寫分離維護經驗;
6、熟悉 redis/memcache/mongodb等nosql數據庫優先;
7、熟悉Linux運維管理,熟悉shell或python一種腳本語言開發優先;
高級數據工程師的職責 篇11
職責:
1. 設計和搭建游戲服務器端的技術架構;
2. 負責游戲平臺服務器端開發工作,游戲腳本內容編寫;
3. 負責與游戲客戶端數據傳輸協議的制定。
崗位要求:
1、熟悉網游的架構設計,熟悉多線程開發技術,處理大量網絡并發數據, 有高并發多線程服務端程序開發經驗
2、2年以上工作經驗,1年及以上的C/C++服務器開發經驗,熟悉掌握C/C++,良好的編程習慣和調試技巧
3、熟悉C/S結構,網絡通訊協議,http,socket編程技術
4、熟悉數據庫開發,熟悉Mysql,SqlServer數據庫編程技術
5、熟悉windows server開發環境,熟悉Linux操作系統原理和日常使用的Shell命令服務器開發
6、熟悉lua腳本編程
7、熟悉Redis開發
8、邏輯思維清晰,能獨立設計游戲中系統邏輯,較強的溝通和能力,能承擔工作壓力
高級數據工程師的職責 篇12
職責:
1、負責MySQL的容量規劃,架構設計及安裝、部署及需求處理;
2、負責建立MySQL的高可用集群、監控,應急和備份恢復機制,保障服務穩定7*24可用;
3、負責MySQL的日常管理,監控和維護,及時排除故障,并對MySQL進行持續性能優化;
4、負責MySQL開發支持,參與數據架構規劃設計,以及相關業務的數據建模、設計評審、SQL代碼審核;
5、負責開發人員數據庫方面的知識培養,提高整體開發人員數據庫方面的能力;
6、負責MySQL新技術的研究,適應快速發展的移動互聯網業務場景;
7、負責公司Redis、MC、Hadoop,Otter其他NoSQL,SQL系統的管理和維護。
任職要求:
1、大專及以上學歷,計算機相關專業;
2、至少3年MySQL DBA相關工作經驗,有在知名互聯網的DBA工作經驗優先考慮;
3、精通MySQL數據庫的運行機制和體系架構,熟悉常用的Innodb和myISAM數據引擎,有postgresql、greeplum管理經驗優先;
4、熟悉MySQL集群、負載均衡和高可用技術方案;
5、精通SQL語句,數據庫存儲過程,能對slow SQL提出優化意見和建議;
6、熟悉linux系統管理和操作,有shell腳本編寫能力;
7、有Redis、MC、Hadoop、MongoDB等NoSQL實踐經驗者優先;
8、熟悉shell、python、lua編程,熟悉JAVA者,有自動化運維工具/平臺搭建者優先考慮;
9、誠信,責任心強,具有較強的團隊意識和良好的溝通能力。
高級數據工程師的職責 篇13
職責:
1、 參與或負責公司的大數據平臺的建設;
2、 負責項目的需求調研、數據分析、商業分析和數據挖掘模型等;
3、 負責項目中數據準備、模型建立、模型跟蹤、模型優化、模型維護、部署和評估;等閉環流程,為營銷、運營及決策提供分析支撐及技術支持;
4、 使用統計學分析方法、挖掘算法,構建有效且通用的數據分析模型,支持現有業務并適應業務的不斷拓展。
職位要求:
1、計算機、統計學、數學、金融學等相關專業,本科及以上學歷,碩士及以上優先;
2、優秀的邏輯思維能力,能夠發現關鍵數據、關鍵問題,從海量數據中發現有價值的規律;
3、善于分析業務、能將復雜的業務需求轉化為數據/數學模型,對大數據處理和分析工作有熱情;
4、熟悉常見爬蟲、反爬蟲技術,有爬蟲相關項目開發經驗優先;
5、 熟悉SAS、R、python等統計分析軟件者優先;
6、 有大數據相關(hadoop、spark)編程經驗者優先;
7、有良好的溝通表達能力和分析報告制作經驗者優先。
高級數據工程師的職責 篇14
職責:
1、根據項目要求,開展需求調研,完成調研報告和需求規格說明書;
2、向開發工程師提供咨詢、指導、解釋業務需求,向用戶匯報系統功能;
3、整理和分析客戶需求,對其分類匯總和實現預估,提出需求分析報告和實現計劃要求;
4、參與整個項目開發流程,負責需求開發與跟蹤,完成需求變更的控制與管理,與開發測試團隊一起保證最終項目符合預定的需求;
5、指導測試工程師根據測試需求,組建測試環境的工作。
任職資格
1、計算機或通訊相關專業本科以上學歷,本科畢業4年以上,碩士畢業1年以上;
2、兩年以上終端軟件開發工作經驗;
3、具有較強的溝通能力,邏輯思維能力和文檔編寫能力;
4、掌握需求分析方法,熟悉需求管理和研發過程管理,具有較好的開發經驗;
5、較強的責任心及團隊合作精神,能夠承擔工作壓力;
6、有大數據項目需求分析實踐者優先。
高級數據工程師的職責 篇15
職責:
1、負責目標用戶分析、數據預估、用戶驗證、用戶調研等,為運營計劃提供依據;
2、負責對行業數據的采集、管理,并不斷完善行業數據積累;
3、負責使用行為數據、文本數據、關系數據等對用戶進行深入分析,構建用戶畫像,用戶關系網絡等工具,持續優化用戶風險評估模型、用戶價值模型;
4、建立和優化數據模型,協助建立自動化決策系統;
5、負責監控日常游戲數據,輸出相關結論和報告,及時發現數據異動,預警運營風險;
6、支持公司大數據產品的技術體系建設,將業內先進算法應用到業務場景,提高團隊整體技術創新能力。
要求:
1、本科及以上學歷,計算機、統計學、數學等相關數據分析專業;
2、三年以上工作經驗,有成功的數據挖掘項目經驗優先;
3、掌握SQL語句,熟悉Oracle\MySQL\SQL Server中一種或多種,具備數據處理能力;
4、精通常用數據挖掘工具軟件R 或Python等,掌握常用數據分析方法以及經典的數據挖掘算法,具備一定的基礎可自編挖掘算;
5、具備一定的報告撰寫能力,思維邏輯清晰,能從數據中提煉核心結果,并能形成有力的數據結果報告;
6、具有良好的邏輯分析能力和數據敏感度,善于發現問題和解決問題的能力,具有吃苦耐勞敬業精神和團隊精神。
高級數據工程師的職責 篇16
1、負責金屬表面處理的工藝標準及技術要求的編制和修訂;
2、負責工藝執行的監督、異常分析及預防措施的提出;
3、協助新產品開發;
4、協助生產工藝技術項目的改善,對產品質量問題分析及解決提供技術支持;
5、負責對員工的作業技能、工藝技術等進行相關培訓;
6、完成上級領導安排的其他工作。
高級數據工程師的職責 篇17
職責:
(1)收集客戶分析需求,轉化需求為可執行的分析方案;
(2)基于分析方案,進行數據收集、挖掘建模、模型優化;
(3)撰寫分析報告;
(4)跟進模型效果評估與優化;
(5)其他數據分析挖掘技術性工作。
崗位要求:
(1)本科及以上學歷,專業背景是應用數學或者統計學等相關專業有關;
(2)2年以上相關數據挖掘分析工作經驗;對數據挖掘的基本算法有一定了解和應用經驗;
(3)能快速理解客戶需求,將實際需求轉化為建模分析需求;
(4)熟練使用SAS、JMP、SPSS、R等其中任一挖掘分析軟件。
(5)熟悉運營商業務數據;
高級數據工程師的職責 篇18
職責:
1. 參與數據倉庫和基礎架構規劃、安全規劃、ETL架構和規范制定;
2. 負責海量數據的ETL開發和優化,抽取成各種數據需求,并及時解決ETL相關技術問題;
3. 負責對ETL技術培訓,指導進行數據倉庫項目的開發、測試和運 維;
4. 負責ETL數據準確性驗證及報表維護;
5. 海量數據的ETL開發,抽取成各種數據需求。
任職要求:
1. 本科以上學歷,優秀名校或碩士以上優先,有較好的英文閱讀能力;
2. 精通開源etl開發工具及etl架構,有一定的etl開發經驗,熟悉日常作業的部署和調度。;
3. 熟悉主流數據庫技術,如oracle、Sql server、PostgeSQL、MySql等;
4、精通Shell編程。
高級數據工程師的職責 篇19
1、負責組織與業務部門協調與溝通需求,制定新業務解決方案;
2、負責新系統建設的需求管理、方案設計、系統開發等項目管理工作;
3、跟蹤新系統與其他應用系統的事件與問題解決;
4、參與系統供應商選型;
5、與供應商和第三方合作伙伴的協調與溝通;
6、持續改善新系統與其他應用系統的功能與性能;
7、提出IT流程優化建議。
高級數據工程師的職責 篇20
職責:
1、負責公司服務器日常維護及監控,提供系統功能方面的服務和支持。
2、負責機房巡檢及相關故障、疑難問題排查處理;
3、負責公司辦公電腦軟硬件及其外設日常維護;
任職資格:
1、熟悉微軟windows系列操作系統,熟悉Windows Server產品,有域控管理經驗;
2、熟練掌握VMware虛擬化軟件的使用,有虛擬主機維護經驗者優先;
3、熟悉EXchange server 郵件產品,有相關的安裝配置經驗;
4、能夠熟練使用常用的服務器系統監控軟件等;
5、熟悉計算機硬件、windows操作系統及應用軟件日常故障排除;
6、工作認真、仔細,有強烈的責任感和良好的溝通能力;
7、專科及以上學歷,1年以上相關工作經驗,計算機相關專業;
8、有MCSE、RHCE等證書者優先;
高級數據工程師的職責 篇21
職責:
1、負責數據庫的架構設計、安裝部署、性能調優及故障診斷;
2、負責數據庫管理維護,監控及性能優化;
3、負責數據庫運維標準化,規范化,以及相關文檔編寫及管理;
4、參與業務系統設計,提供高性能、高可用的數據庫設計及業務系統容災設計;
5、參與運維組內部建設工作,執行上級臨時安排的事務。
【任職要求】
1、 本科或以上學歷,2年以上數據庫管理經驗。
2、 熟悉Oracle/MsSQL等常用數據庫的管理,包括數據庫存設計、性能調優、部署和更新。
3、 熟悉MsSQL主從、MHA、Galera等高可用方案。
4、 熟悉MsSQL 相關監控、分析、開發和管理工具。
5、 熟練掌握常用的Linux系統平臺,如CentOS 6或Redhat等。
高級數據工程師的職責 篇22
1.負責三星AP SoC芯片設計系統和射頻電路PCB設計工作;
2.負責元器件庫的建立和維護;
3.解決PCB制板的工藝問題;
4.協助硬件設計工程師進行調試;
5. 負責SMT的相關文件,并與SMT廠商完成貼片工作;