大數據運維工程師崗位的工作職責概述(精選12篇)
大數據運維工程師崗位的工作職責概述 篇1
職責:
1,負責軟件系統的部署運行;
2、負責業務數據系統接入的規劃和實施;
3,理解行業業務,梳理業務數據模型;
4,完成項目實施過程中各類文檔的編寫、收集、整理、歸檔;
5,與客戶保持密切溝通,建立良好的客戶關系,保障良好的客戶滿意度;
有效的分析和控制客戶需求,解決項目實施過程中遇到的質量問題和管理問題。
崗位要求:
1、全日制本科以上學歷,軟件工程、計算機科學相關專業;
2、3年以上的軟件/項目管理實施經驗;
3、熟悉Linux操作,熟練編寫shell/python腳本;
4、了解常用開源分布式系統Hadoop/Spark/Hive/Hbase;
5、熟練使用SQL語句,熟悉ETL工作;
6、熟悉Oracle,mysql等關系型數據庫;
7、具有強烈的責任感與團隊合作精神,出色的溝通及學習能力;
8、有較強的分析問題能力,獨立解決問題能力,能接受在客戶公司辦公。
大數據運維工程師崗位的工作職責概述 篇2
職責:
I、負責Hadoop集群的安裝部署、維護及調優:
2、負責spark的安裝郵署、維護及調優:
3、負責基于大數據平臺開發的應用系統的部署、日常維護、調優和問題處理
4、負責ELK 平臺的部署及維護。
技能要求:
1 、2年以上大數據運維工仵經驗;
2、熟悉Hadoop生態圈技術棧及各個組件原理:
、、熟練掌握HDFS、Hive、HBase、sρark、sqooρ 等組件,具備部署、維護、調優的能力:
4、熱悉kylin技術原理,有一定的維護經驗優先:
5、掌掇ELK的日常維護技能·有一定的維護.經驗優先:
6、有一定的HQL/sql 性能調優經驗;
7、具備基本的 java、python等語言開發能力優先:
8、有較強的溝通、團隊協作及學習能力。
大數據運維工程師崗位的工作職責概述 篇3
職責:
1. 負責大數據平臺的規劃、部署、監控、系統優化及運維等工作,保障系統7*24小時運營;
2. 為線上服務高效穩定運行負責,支撐業務和數據量的快速擴張,發現并能解決重大故障及性能瓶頸;
3. 深入理解系統平臺及大數據相關運維技術,持續優化集群服務架構;
4. 對大數據體系下新技術的調研、應用、對內培訓。
職位要求:
1. 至少3年以上大數據運維經驗, 深入理解Linux系統,運維體系結構;
2. 深度優化HADOOP平臺MR作業/計算框架/存儲技術,提升集群吞吐并降低成本;
3. 具有CDH(或者HDP)/HDFS/YARN/HIVE/ES/Kylin/Hbase/Kafka/Spark/Storm/Flume/Impala/Hue/Kettle/Flink等大數據系統的運維經驗,有開發經驗;
4. 熟悉HADOOP生態,有數據安全相關工作經驗, 并能對平臺CPU/MEM/IO/網絡/調度中一個或多個方面的性能調優;
5. 熟練掌握shell/python中的任意一門腳本語言;
6. 強烈責任感、縝密的邏輯思維能力,良好的團隊協作能力,具備良好的項目管理及執行能力;
大數據運維工程師崗位的工作職責概述 篇4
職責:
1. 管理公司數據庫,提供高可用、高性能數據庫系統,并保障系統穩定運行。
2. 負責數據庫性能監控與優化,故障處理,數據備份及災難恢復。
3. 負責數據庫自助平臺的高可用架構設計和負載均衡的設計和實現。
4. 負責業務系統數據庫管理,包括數據庫日常維護,系統數據安全以及權限管理、故障處理、日常錯誤情況處理等。
5. 負責依據業務需求優化數據存儲結構,負責數據庫系統部署方案的計劃、設計和實施。
6. 負責系統數據庫定期檢查,進行性能分析與調優,充分保證信息系統數據的安全及系統高效運行。
任職資格:
1. 全日制本科及以上學歷,計算機或相關專業
2. 熟悉MySQL實現原理,InnoDB,MyISAM,Memory引擎,熟悉存儲過程和事務。
3. 熟悉數據庫原理、精通數據庫核心參數的設置和調整,有規劃、設計、部署以及數據庫性能優化經驗。
4. 具備數據庫設計、SQL優化能力,能根據業務需求,提供高可用、高性能、可擴展、穩定可靠的數據庫解決方案。
5. 了解MongoDB等非關系型數據庫的特點。了解Redis,Memcache等內存數據庫及緩存系統的原理及實現。
6. 熟悉Linux操作系統,對主機、存儲、網絡有一定的了解, 會使用Shell/Perl/Python中的一門腳本語言。
7. 有Hadoop/Kafka/Spark/ElasticSearch相關經驗的優先考慮。
大數據運維工程師崗位的工作職責概述 篇5
職責:
1、負責公司大數據/Hadoop/hive/hbase/flink等離線實時數據平臺運維保障;
2、負責內部大數據自動化運維以及數據化運營平臺開發工作;
3、負責Hadoop/Hbase等系統的業務監控、持續交付、應急響應、容量規劃等;
4、深入理解數據平臺架構,發現并解決故障及性能瓶頸,打造一流的數據平臺;
5、持續的創新和優化能力,提升產品整體質量,改善用戶體驗,控制系統成本。
6、善于表達、理解客戶數據服務需求,具備數據需求轉化落地能力。
任職要求:
1、大學本科及以上學歷,計算機或者相關專業;
2、深入理解linux系統,運維體系結構,精于容量規劃、性能優化;
3、具備一定的開發能力,精通一門以上腳本語言;(shell/perl/python等),熟悉java等開發語言一種及以上優先;
4、具備很強的故障排查能力,有很好的技術敏感度和風險識別能力;
5、能夠承受較大的工作壓力,以結果和行動為準則,努力追求成功;
6、熟悉hadoop、hbase、hive、spark、tez等原理并具備管理,配置,運維經驗;
7、熟悉分布式系統設計范型,有大規模系統設計和工程實現的了解者優先。
8、具有運營商流量數據加工處理經驗者優先。
大數據運維工程師崗位的工作職責概述 篇6
職責:
1、熟悉基礎網絡知識,熟悉TCP/IP協議工作原理;
2、熟悉WEB相關技術,包括Apache/Nginx/tomcat、Memcached/redis/mysql等應用服務的安裝、配置和維護;
3、熟悉服務器硬件,具備系統、應用軟件的報錯及故障定位、處理的能力;
4、檢測、跟蹤和分析流行安全漏洞、設計和實施防御方案。
任職要求:
1、?萍耙陨蠈W歷,專業不限;
2、有linux理論基礎,熱愛技術崗位,能夠及時補充自己技術缺陷;
3、有團隊意識,責任心強,對自己有一定的規劃;
4、至少掌握Shell/Python其中一種腳本編程;
5、批量、自動化管理服務器集群的能力,有較強的技術文檔總結性工作的經驗。
大數據運維工程師崗位的工作職責概述 篇7
職責:
1.負責本部門系統運維管理工作,常見的維護,搭建,監控響應、負責系統的變更與發布工作,線上服務漏洞的排查,版本升級工作處理等等
2.參于解決系統技術方面的瓶頸,尋找可行的改進方案等突破性工作
3. 負責海外業務系統的方案設計、溝通協調等
4.負責領導交辦的其他工作;
任職要求:
1. 計算機應用、網絡管理、信息管理、計算機科學與技術等計算機相關專業;
2. 至少具備4年以上企業IT運維經驗;
3 對Linux系統下的各類典型應用軟件的性能、使用場景有深刻的認識;
4 精通Python/Shell等任意一種腳本語言,能高效進行日常維護工具開發;
5 對主流數據庫(Mysql/Mongodb/Redis等)有深入了解,有實際部署與常見管理經驗;
6 做事情嚴謹踏實,有責任心,團隊協作能力強,能承受較強的工作壓力,有服務意識式;
7 熟悉Java、Tomcat、Nginx、Mysql等軟件的安裝、配置、故障排查、性能調優等;
8 具備良好的思維邏輯,以及文檔編制能力。
9 要求英文流利,能和外方用英文進行技術溝通、探討,并能查看或編寫英文技術文檔。有外資公司技術工作經驗者優先。
大數據運維工程師崗位的工作職責概述 篇8
職責:
1、 總部、分公司計算機、服務器、筆記本電腦、硬軟件、計算機網絡運營管理;
2、 公司整體硬件及網絡信息化管理規劃及相關制度、流程建設并組織實施;
3、 公司郵件、網站服務器管理、日常維護;
4、 與硬件及網絡供應商保持良好的合作關系,以確保系統問題得到快速的支援;
5、 新員工入職郵箱、系統等權限開通;
6、 領導交代的其他相關事宜。
任職資格:
1、大專以上學歷,計算機等相關專業畢業,接受優秀應屆畢業生;
2、了解或者熟悉HELPDESK;熟悉基本網絡維護作業,知悉基本布線規則;
3、扎實的計算機軟硬件基礎知識;
4、服務意識強、辦事效率高、有責任心;
5、做事積極主動、有一定溝通能力、較強的工作熱情、組織管理能力。
大數據運維工程師崗位的工作職責概述 篇9
1、負責5G超高清視頻運維支撐工作;
2、負責5G超高清視頻CDN對接,維護,監控和配置管理;
3、負責5G超高清視頻資源管理、配置、監控、維護;
4、負責5G超高清視頻便轉碼設備配置、維護;
5、負責5G超高清視頻云資源對接,管理、配置和維護;
6、負責4K、VR直播支撐工作。
大數據運維工程師崗位的工作職責概述 篇10
職責:
1、企微云平臺的日常運行管理,處理各種運維事故及事件;
2、負責企微云應用的部署;
3、負責服務器的規劃、調試優化、日常監控、故障處理、數據備份、日志分析等工作;
4、參與運維流程制定,確保任何突發情況都能高效響應;
5、整理各類運維文檔,沉淀經驗。
工作要求:
1、本科及其以上學歷,3年以上互聯網公司Linux運維相關經驗;
2、精通zabbix監控系統的搭建和維護,能夠開發自定義腳本;
3、熟悉Nginx/Apache/Tomcat等Web應用服務器部署、優化;
4、熟悉數據MySQL數據庫集群的部署,監控,優化;
5、有Elastic Search、Mongodb、Hbase等部署、監控、優化經驗的優先考慮。
大數據運維工程師崗位的工作職責概述 篇11
職責:
1、負責優化公司IT系統以及各應用系統的體系架構;
2、負責系統升級、擴容需求與資源落實,配合開發需求,測試、調整運維平臺;
3、負責網絡以及服務器的網絡設置、維護和優化、網絡的安全監控、系統性能管理和優化、網絡性能管理和優化;
4、負責設計并部署相關應用平臺,并提出平臺的實施、運行報告。
5、負責配合開發搭建測試平臺,協助開發設計、推行、實施和持續改進。
6、負責相關故障、疑難問題排查處理,編制匯總故障、問題,定期提交匯總報告。
崗位要求:
1. 2年以上大中型在線系統運維工作經驗、精通Linux系統及常見服務的安裝配置,熟悉常見的負載均衡實現方案并有實際實施經驗;
2. 精通Linux系統如Redhat、Gentoo、精通Apache、NginX、MySQL、FTP、DNS、Squid等常用服務的安裝、配置和維護;
3. 精通和靈活運用1種以上的腳本語言,包括:Shell、PERL、PHP、Python等;
4. 能夠熟練排查運維過程中出現的服務故障、系統故障、網絡故障;
5. 高度的責任感,較強的故障分析及排除能力,善于在工作中學習,能夠承受工作壓力。
大數據運維工程師崗位的工作職責概述 篇12
職責:
1、負責服務器硬件解決方案的需求管理、規劃及制定;
2、負責協調內外部資源、確保硬件解決方案按客戶要求落地交付,跟蹤推動后續的優化工作;
3、負責撰寫硬件解決方案與相關文檔;
4、負責收集行業趨勢及業界主流技術,對負責的硬件解決方案進行市場調研及競品分析;
任職要求:
1、計算機或相近專業本科及以上學歷;5年以上相關工作經驗;
2、精通PC服務器硬件技術和主流產品,熟悉與PC服務器關聯密切的網絡、存儲及IDC等技術,熟悉VMWare、docker、CloudStack、hadoop等主流應用的技術方案;
3、具體較強的文檔撰寫及溝通表達能力,熟練使用PPT、EXCEL等工具;
4、具備行業視野,對行業發展趨勢有敏銳的洞察力及創新意識,有較強的需求分析及解決方案規劃能力,能提煉用戶需求并轉化為解決方案能力,具備商業敏感性;
5、熟悉云平臺產品及解決方案,具備相關工作經驗優先考慮;