大數據運維工程師的主要職責說明(通用24篇)
大數據運維工程師的主要職責說明 篇1
職責:
1. 管理公司大數據集群,提供高可用、高性能大數據集群系統,并保障系統穩定運行
2. 負責大數據集群性能監控與優化,故障處理,數據備份及災難恢復
3. 負責大數據集群自助平臺的高可用架構設計和負載均衡的設計和實現
4. 負責業務系統大數據集群管理,包括數據庫日常維護,系統數據安全以及權限管理、故障處理、日常錯誤情況處理等
5. 負責依據業務需求優化數據存儲結構,負責數據庫系統部署方案的計劃、設計和實施
6. 負責系統大數據集群定期檢查,進行性能分析與調優,充分保證信息系統數據的安全及系統高效運行
任職資格:
1. 全日制本科及以上學歷,計算機或相關專業,1年以上hadoop運維經驗
2. 熟悉Hadoop生態圈Hadoop、Kafka、Zookeeper、HBase、Spark、hive等的安裝配置和優化
3. 熟悉MySQL等關系型數據庫的部署與優化,了解MongoDB或Cassandra等NoSQL數據庫
4. 熟悉Linux類操作系統的基礎命令操作,能夠編寫腳本開展日常運維工作
5. 熟悉Linux開發環境,會使用Shell/Java/Python中的一門腳本語言
6. 熟悉常見開源工具如Nginx、Zabbix、Grafana等的安裝配置和使用
大數據運維工程師的主要職責說明 篇2
職責:
1、負責公司大數據集群的構建,任務調度、監控預警,持續完善大數據平臺,保證穩定性、安全性;
2、負責集群容量規劃、擴容、集群性能優化及日常巡檢和應急值守,參與大數據基礎環境的架構設計與改進;
3、深入研究大數據業務相關運維技術,持續優化集群服務架構,探索新的Hadoop、Spark運維技術及發展方向;
4、具備ownership,故障排查能力,有很好的技術敏感度和風險識別能力;
5、良好的服務意識,主動思考,自我驅動力。
任職資格:
1、熟悉RedHat、CentOS、Ubuntu系列Linux系統的配置、管理、內核優化。能夠獨立編寫(Shell/Python)腳本語言,腳本開展日常服務器的運維;
2、熟悉hadoop生態圈Hadoop, Kafka, Zookeeper, Hbase, Spark、YARN、Elasticsearch、Storm、Tomcat的安裝、調試和運維經驗; 熟悉分布式日志分析系統ELK及相關技術;
3、熟悉軟硬件設備,網絡原理,有豐富的大數據平臺部署,性能優化和運維經驗; 了解運維高容量、大流量、大并發Web系統的業務知識以及解決方案;
4、工作認真負責,有較強的學習能力,動手能力和分析解決問題的能力;
5、能夠利用各種開源監控工具、運維工具,HA、負載均衡軟件完成工作任務;
6、mongodb、mysql等配置、調優和備份。
大數據運維工程師的主要職責說明 篇3
職責:
1.負責參與公司大數據基礎架構平臺規劃,運維,監控和優化工作,保障數據平臺服務的穩定性和可用性;
2.研究大數據前沿技術,改進現有系統的服務和運維架構,提升系統可靠性和可運維性;
3.負責公司Hadoop核心技術組件HDFS、Yarn、MapReduce、HBase、Storm大數據存儲計算核心的監控和日常運維工作。
4.獨立完成大數據運維過程中問題定位、問題解決、并進行總結及部門的大數據基礎技能培訓;
任職要求:
1. 計算機、信息系統、數學或相近專業本科以上學歷;
2. 擁有至少3年以上Hadoop運維經驗、具備基于CDH與HDP的維護經驗;
3. 熟悉Hadoop大數據生態圈服務的工作原理,具備相關實戰維護經驗,包括但不限于HDFS、YARN、Hive、HBase、ELK、Spark、Kafka、Zookeeper、Flume等;
4. 至少獨立維護過中大型Hadoop集群系統服務;
5. 至少精通Python,shell中的一種,了解JAVA;有良好的系統性能優化及故障排除能力;
6. 有大數據架構師工作經驗更佳;
大數據運維工程師的主要職責說明 篇4
職責:
1、負責大數據運維體系中的監控工作;
2、負責處理用戶服務請求事件;
3、負責監控報警事件的處理;
4、負責協助完善監控體系;
5、負責監控平臺運維工作,持續優化監控體系;
6、按時完成領導交辦的其他相關工作。
任職要求:
1、大專及以上學歷,計算機相關專業,1年以上大數據系統運維經驗;
2、熟悉linux操作系統,熟悉hadoop、hive、hbase、yarn、spark、storm等組件的原理及運維方式;
3、熟悉中間件工作原理,對TOMCAT/jetty/nginx/微服務有一定了解,具備一定的操作能力;
4、至少熟悉python/bash/shell一種或多種語言,可獨立編寫維護及監控腳本;
5、有強烈的求知欲和鉆研技巧,具有良好的獨立分析問題與迅速解決問題的能力;
6、有良好的職業責任心和團隊協作意識;
7、能適應7*24小時三班倒工作時間。
大數據運維工程師的主要職責說明 篇5
職責:
1、響應及解決客戶的技術要求、疑問以及系統使用過程中的各種問題;
2、負責服務過程中問題現象和處理方案的收集撰寫,形成知識庫,并對知識庫進行維護更新;
3、及時反饋技術處理過程中的異常情況,及時向上級反饋告警,同時主動協調資源推動問題解決;
4、定期對所有服務問題進行分析,并對服務效率有影響的問題提供反饋意見,提升服務支撐團隊專業度。
5、能夠獨當一面,具備獨立思考和處理問題的能力,并能夠與客戶建立良好的關系。
6、明確工作范圍,定期與客戶溝通工作量,并獲取客戶回執,及時歸檔。
7、能夠快速熟悉參與項目中的業務,總結后與研發定期溝通。
崗位要求:
1、3年及以上工作經驗,計算機相關專業本科及以上學歷;
2、熟悉weblogic中間件的安裝部署;
3、熟悉Oracle數據庫的增刪改查操作;
4、了解ETL相關內容,如Informatica、kettle等,具備基礎操作技能;
5、了解BI報表相關內容,如cognos、tableau、自助式分析工具等,具備基礎操作技能;
6、掌握基本的windows/linux操作命令;
7、熟練操作Office辦公軟件;具有較強的文檔理解與編寫能力,具有較強的語言表達及溝通協調能力;
8、熟悉電網業務優先。
大數據運維工程師的主要職責說明 篇6
職責:
1. 生產及測試服務器環境塔建,部署,維護;
2. 監控及分析生產環境服務性能,保障服務穩定安全可用;
3. 內部開發環境部署及維護;
4. 生產及開發環境數據庫維護,數據備份,安全管理,日志分析,性能調優等;
5. 配合開發人員對系統及服務進行調優;
6. 診斷系統故障,異常事件的協調處理。
任職要求:
1、熟悉網絡相關理論及技術,了解TCP/IP、HTTP等協議;
2、熟練操作Linux,能夠配置Linux下各種服務,能夠編寫bash腳本;
3、熟悉shell或其他腳本語言;
4、熟悉java環境配置,熟悉zookeeper、redis和activemq等的安裝與配置;
5、了解 sql語句,了解MySQL數據庫的管理和維護;
6、了解負載均衡服務器、緩存服務器的配置;
7、了解網絡安全相關知識。
大數據運維工程師的主要職責說明 篇7
職責
1、負責辦公室交換機、防火墻、上網行為管理的運維工作、故障處理、網絡優化;
2、負責各類網絡及安全設備的基本信息登記、運行信息更新及維護與管理;
3、負責桌面計算機軟硬件(計算機、顯示器、電話、網絡設施和其他附屬硬件設施,如打印機、掃描儀)安裝、配置、升級、運行維護與管理,保障桌面系統正常運行,滿足日常工作的需要;
4、負責對公司綜合布線系統的維護與管理;
5、負責電話、視頻會議系統的運行維護與管理;
6、撰寫運維技術文檔,統計整理運維數據。
任職要求:
1.、熟悉常用路由協議、網絡技術的原理并熟練應用,有獨立網絡故障排查和定位問題的能力;
2、具有團隊精神,善于溝通;
3、具備優秀的計算機軟、硬件知識,能夠快速判斷軟、硬件故障,并且能夠指導用戶使用主流軟、硬件;
4、具備網絡基礎知識,對相關網絡設備及綜合布線有一定了解;
5、具備良好的服務意識與職業素養,溝通能力和良好的語言表達能力,具備團隊協作精神;
6、熟悉常用的操作系統(Windows、linux)的安裝、操作、配置、故障處理,具備微軟商業桌面部署的相關知識及實施能力;
7、具有信息安全防范意識,對網絡、系統安全的整體防范和應對措施有一定實踐經驗。
大數據運維工程師的主要職責說明 篇8
職責:
1、負責公司云平臺服務器、機房服務器的管理、維護;
2、負責對公司相關業務平臺(APP、web 網站、數據庫等)的網絡規劃、服務器規劃;
3、負責對公司相關業務平臺運行的安全性和穩定性,對服務器系統漏洞能及時發現和修補;使用腳本對服務器和項目的性能和資源進行監控;
4、負責網絡服務器數據備份、安全策略、穩定運行。
5、負責相關系統運維文檔的撰寫、整理和更新。
崗位要求:
1、計算機等相關專業畢業,一年以上網絡系統維護工作;
2、熟練掌握騰訊云、阿里云相關產品應用,包含但不限于云服務器、云數據庫、負載均衡、CDN、文件存儲、數據傳輸、服務器安全等應用的配置搭建和操作;
3、熟悉常用服務器系統軟件的部署和調優,常用網絡監控軟件的部署和使用,具有良好的網絡安全意識;
4、具備良好的溝通協調能力和團隊協作能力,具備良好的職業道德和職業操守。
大數據運維工程師的主要職責說明 篇9
職責:
1、能貫徹和落實公司的各項管理制度、公司業務規范,按時完成相關流程要求的交付物提交;
2、從事網絡安全、通信設備的駐場安裝調試和維護工作(包括定期巡檢、技術支持)等;
3、接收和協助解決客戶遇到的各種現場技術問題,能夠對用戶的需求給出相應的解決方案;
4、快捷準確并按要求提供所有報告、數據,如故障處理報告、周報總結等;
5、學習領悟力強,善于主動鉆研,向客戶提供全面優質的服務。
任職要求:
1、專科以上學歷,通信或計算機相關專業,一年以上相關工作經驗;
2、熟悉掌握CISCO、華為等主流廠商的路由器/交換機設備配置和維護;
3、熟練掌握相關網絡技術、TCP/IP協議、路由與交換技術等,具有CCNP或HCNP認證或同等經驗證者優先;
4、具有良好的文檔撰寫能力,語言溝表達能力強,能同客戶建立良好的溝通關系,適應團隊合作,能適應中短期出差;
5、思維清敏捷,具有較強網絡故障排查和解決經驗的能力;較強的邏輯分析能力和對問題的診斷能力。
6、了解X86服務器,熟悉LINUX命令等。
大數據運維工程師的主要職責說明 篇10
職責:
1、負責公司海外游戲運營平臺基礎應用架構設計、部署、性能調優以及維護。
2、負責公司大數據平臺應用環境的架構設計、部署、性能調優以及維護。
3、協助開發部進行平臺代碼配置管理的規劃、流程和策略的制定,嚴格執行代碼的版本管理、發布管理、變更管理和配置審計。
4、負責公司企業郵箱系統的日常運維管理
任職要求:
1、本科以上學歷,三年以上互聯網平臺從業經驗,有游戲行業從業經驗優先考慮。
2、精通Centos/Ubuntu等Linux操作系統,對系統性能安全優化有深入理解。
3、精通Lvs/Haproxy+Keepalived+Nginx/openresty+Resin/Tomcat+Redis/Mongodb/Memcache+Mysql的配置、使用以及調優,有豐富的DBA工作經驗。
4、熟悉git版本控制工具的使用。
5、熟悉Jenkins持續集成工具的使用,對maven的構建過程與原理有所了解。
6、熟悉Elk+Zookeeper+Kafka分布式日志集群系統有比較深入的實際工作經驗。
7、熟悉Hadoop+Spark大數據開發框架,能給予大數據團隊提供基礎的大數據應用服務。
8、熟悉postfix+extmail+SpamAssassin郵件系統的部署;熟悉常用的反垃圾郵件組件。
9、具有shell或python語言開發能力,對自動化運維體系有比較深刻的理解,認同devops工作理念。
大數據運維工程師的主要職責說明 篇11
1.對服務器進行日常維護,確保各項服務連續正常運行,無重大事故;
2.研究運維相關技術,配合公司技術架構師根據系統需求制定運維技術方案。
3.負責應用服務器及應用中間件的安裝.升級.調試.監控.日常維護.性能優化.故障處理等工作
4.負責公司產品的部署及云服務器日常監控與日常安全檢查和風險報告;
5.負責服務器異常或故障的受理.跟蹤.解決以及統計分析;
6.負責服務器資源的管理,備份策略的制定及執行監控;
7.處理線上服務器及中間件的故障,挖掘問題根源,規避問題浮現,保障業務連續性。
大數據運維工程師的主要職責說明 篇12
職責:
1. 負責網站維護、管理與推廣,保證網站的安全運營。
2. 負責網站資料的上傳與更新,與其他網站運營事務。
3. 獨立制定網站的內容結構,設計并負責實施和后期維護。
4. 處理公司內部其他的行政事務。
任職要求:
1. 有網站運營經驗者優先。
2. 良好的團隊協作能力,踏實肯干。
3. 熟練使用辦公軟件及其他相關軟件技能。
4. 熟練掌握和使用普通話。
大數據運維工程師的主要職責說明 篇13
1、日常桌面系統維護、桌面基礎網絡支持、桌面終端的硬件維護
2、設備巡檢、桌面初始化、桌面預裝升級服務,掌握主流的桌面操作系統,能獨立進行Windows XP 、Win7、Win10、MAC等安裝、配置、基本功能,及常見問題故障診斷
3、客戶端病毒查殺、升級與恢復
4、office等常用辦公軟件的維護
5、協助進行設備資產普查服務
6、郵件系統常見問題解決
7、基于Windows環境的域管理
8、視頻會議、電話會議運維及維護等會議支持服務
9、可協助Server team/Network team的工作
10、其他接口人交予的相關工作
大數據運維工程師的主要職責說明 篇14
職責:
1.負責公司內部局域網網絡/應用的日常維護、技術評估和項目實施,包括網絡交換機/路由器/防火墻管理、網絡監控系統等;
2.負責對公司機房內部信息系統及設施的日常檢查、監控、運維分析;
3.負責PC機器、打印機等日常辦公設備維護;技術檔案維護;
4.負責應用服務器的實施部署與搭建;
5.負責應用服務器的資源調配和系統安全、數據備份;
6.負責應用服務器各項數據的監控,如流量、負載等;
7.負責測試環境的搭建工作。
任職資格:
1、大專及以上學歷、計算機及相關專業;
2、具有2年以上網路管理、服務器管理、相關網絡設備設施的維護等工作經驗;
3、精通Linux 、Windows系統及網絡知識,可以安裝架構一些基礎環境等;
4、具備對日常辦公電腦、網絡設備等常見故障的處理能力;
5、表達能力強、邏輯思維能力清晰、工作積極主動,具有良好的溝通能力、執行能力和團隊合作精神,責任心強,能夠吃苦耐勞,服務意識佳。
大數據運維工程師的主要職責說明 篇15
職責:
1、 駐客戶現場負責應用系統日常運維,響應并處理事件和問題;
2、 應用系統的使用指導和系統數據維護管理工作;
3、 維護客戶關系,對客戶的要求及時響應和反饋,協助客戶進行應用系統管理
4、 負責完成上級交辦的其他工作。
職位要求:
1、 大專及以上學歷,計算機相關專業,1年以上的運維工作經驗;
2、 性格開朗,有較強的溝通、表達及邏輯分析能力,具備較強的學習能力,較強的適應能力,善于主動思考問題,創新性強;
3、 工作踏實認真、有責任心、具備良好的服務意識;
4、 了解oracle,mysql數據庫,熟練使用常用的sql語言;
5、 了解各類中間件的使用,如tomcat,weblogic等;
6、 熟悉運維服務管理相關流程者優先;
大數據運維工程師的主要職責說明 篇16
職責:
1、協助計算機相關軟、硬件的故障診斷,排錯和升級工作;
2、協助外設設備維護:打印機、傳真機、復印機設備維護工作;
3、現場緊急事件支持與協助;
4、完成上級交辦的臨時事務。
任職要求:
1、大專及以上學歷,計算機相關專業;
2、具備基本的計算機硬件、網絡配置等相關知識;
3、能對常見的電腦終端故障進行快速定位與排障;
4、具備良好溝通表達能力及團隊合作能力。
大數據運維工程師的主要職責說明 篇17
職責:
1、負責網站的日常運維、部署、監控、系統優化等工作,保證線上環境穩定運行;
2、負責公司內部開發環境和測試環境的建立、維護和日常管理工作,確保開發和測試正常進行;
3、處理各類異常和故障,確保系統平臺的穩定運行;
4、熟練使用監控平臺和工具,對線上各種業務及系統做到時時監控,并且能夠根據需求調整監控模板等;
5、能夠與研發密切配合,優化部署架構,提升平臺穩定性,能夠快速定位技術問題,保證線上環境的高效運行。
任職要求:
1、計算機本科及以上學歷;
2、一年以上大中型在線系統運維工作經驗。
3、深入理解linux系統,精通各種服務器部署、維護及性能優化工作;
4、熟悉項目開發環境(版本控制、持續集成等)管理,精通Bash shell進行腳本編寫;
5、熟練掌握Nginx,Apache,memcached,mysql,mongodb,redis,zabbix等常用軟件的安裝配置和管理;
6、.精通目前主流的監控方式,并且能夠完成監控模板的調整及編寫工作;
7、認真嚴謹、平實穩重、責任心強,良好的溝通能力及團隊合作精神,能承受一定工作壓力
大數據運維工程師的主要職責說明 篇18
1.根據公司信息系統要求,負責公司網絡的運營和維護,網絡內部安全機制的建設、管理,互聯網的監控管理,公司內部網絡Ip地址的劃分、協調及IP權限。負責防火墻、路由器、數據交換機、光端機、UPS的維護及狀態監控,性能優化,配置修改;負責公司專線、光鏈路的維護及監控、測試、報障;確保公司網絡正常。
2.根據公司信息系統要求,負責公司網絡病毒防御系統的服務端管理、模塊更新、代碼升級,服務器病毒預防工作及客戶端殺毒工作;確保公司不受病毒影響。
3.維護員工電腦和操作系統正常使用。
4.其他部門領導交辦的事務。
大數據運維工程師的主要職責說明 篇19
1、負責公司的軟件系統的日常維護和培訓;
2、負責與軟件服務廠商的日常溝通協作;
3、負責公司BI系統數據報表的開發和培訓;
4、完成上級交辦的其它事項;
5、完成與IT相關的綜合性支持工作。
大數據運維工程師的主要職責說明 篇20
職責:
1、負責系統故障的應急響應和問題處理;維護linux、windows服務器,監控服務器性能;
2、負責Linux操作系統的安裝、配置,系統監控和維護,問題處理,以及軟件升級,安全優化,保證其穩定、高效運行;
3、負責公司平臺及應用系統維護工作;
4、負責Linux 平臺下的系統維護,提高系統的可用率及可維護性;
5、負責Linux系統及應用程序進行性能分析,優化,問題跟蹤;
任職資格:
1、三年以上系統配置、管理、維護經驗。
2、精通Linux系統、精通MySQL、FTP、DNS等常用服務的安裝、配置和維護;
3、熟悉linux負載均衡技術;能熟練利用各種工具進行系統狀態監控(cacti、Nagios,bigsister等);
4、熟悉Linux下不同數據庫的安裝和調試及簡單優化;
5、掌握redis、Docker、自動化運維DevOps、高可用架構、大數據處理工具(Hive、Spark等)相關技術者或有團隊管理經驗者優先考慮;
6、有阿里云、騰訊云等云服務器運維經驗優先;
大數據運維工程師的主要職責說明 篇21
職責:
1、負責部門相關應用系統運維,保障系統7*24小時穩定運行;
2、負責推進現網相關問題改進,提高運維效率和質量;
3、根據業務需要能夠合理的運用阿里云運維產品;
4、主動性強,具有良好的溝通、協調和組織能力,富有團隊精神。
崗位要求:
1、具有3年互聯網運維相關工作經驗;
2、獨立排錯能力,熟練使用linux、windows、python,熟悉TCP/IP;
3、能夠獨立維護大中型局域網,熟悉交換機路由器,能夠獨立上架、調試局域網;
4、熟悉機房管理要求,熟悉機房基礎設施的基本管理和技術;
5、對系統常見應用軟件有運維能力,如nginx、mysql、lvs,memcached、redis、tomcat、dns等,能夠快速實施部署、配置及排錯。
大數據運維工程師的主要職責說明 篇22
職責:
1、負責綜合經營管理系統的事件處理、問題解決、知識積累,配合執行變更發布、配置管理、數據維護;參與系統安裝、交接測試等工作;
2、負責根據業務部門提出的優化(bug修訂)、變更、改進、完善等新需求,在現有應用系統的基礎上從事分析設計、編程開發、測試交付等工作。
任職要求:
1、大學本科以上學歷,三年以上工作經驗,至少一年.NET開發經驗;
2、精通Asp.net(C#)、JQuery,XML、CSS、AJAX等語言或Web技術,能獨立完成系統bug修訂,系統優化,包含需求變更修改;
3、熟悉Windows Service、Web Service/WCF以及多線程編程技術;
4、理解.net多層機制, 熟練掌握B/S模式開發;
5、熟悉SQL20xx數據庫系統,能使用SQL進行編程,能對數據庫性能進行優化;
6、有較強的自學能力,有良好的職業素養;
7、熟悉Microsoft Dynamics CRM、Sharepoint20xx開發經驗者優先考慮;
8、善于并樂于各式溝通,具備極強的團隊精神和工作熱情。
大數據運維工程師的主要職責說明 篇23
1、整體設計,參與項目架構設計,運維方案撰寫,推動落地實施。
2、實施部署,合理計劃,把控項目實施部署節奏,保障工作質量。
3、系統優化,主導必要系統優化工作,解決系統性能瓶頸。
4、日常運維,分析運維指標,優化執行過程,提供工作效率。
5、問題處理,剖析問題根源,深刻理解原理,給出明確的解決思路。
6、運維管理,主導新技術調研并分享,考慮系統穩定性、執行高效性,管理一個項目運維交付。
大數據運維工程師的主要職責說明 篇24
職責:
1、進行工作人員計算機、打印機、網絡、應用系統維護工作;
2、解決日常網絡及計算機故障,配合進行系統性故障的查修;
3、負責病毒的查殺,維護網絡系統安全,負責軟件的安裝和維護;
4、域服務器、數據庫服務器、WEB服務器、郵件服務器的維護。
任職資格:
1)年齡:不限 學歷:大專及以上;
2)具有一定溝通能力,有團隊合作精神,工作心態良好;
3)學習能力強,能很快吸收新的技術理念知識;
4)優先錄取具備MCSE的工程師;
5)優先錄取熟悉常規IT產品的硬件、操作系統的操作及安裝,掌握常用的Linux命令、Windows的各項服務、應用配置。