大數據運維工程師崗位的工作職責概述(精選18篇)
大數據運維工程師崗位的工作職責概述 篇1
職責:
1. 管理公司數據庫,提供高可用、高性能數據庫系統,并保障系統穩定運行。
2. 負責數據庫性能監控與優化,故障處理,數據備份及災難恢復。
3. 負責數據庫自助平臺的高可用架構設計和負載均衡的設計和實現。
4. 負責業務系統數據庫管理,包括數據庫日常維護,系統數據安全以及權限管理、故障處理、日常錯誤情況處理等。
5. 負責依據業務需求優化數據存儲結構,負責數據庫系統部署方案的計劃、設計和實施。
6. 負責系統數據庫定期檢查,進行性能分析與調優,充分保證信息系統數據的安全及系統高效運行。
任職資格:
1. 全日制本科及以上學歷,計算機或相關專業
2. 熟悉MySQL實現原理,InnoDB,MyISAM,Memory引擎,熟悉存儲過程和事務。
3. 熟悉數據庫原理、精通數據庫核心參數的設置和調整,有規劃、設計、部署以及數據庫性能優化經驗。
4. 具備數據庫設計、SQL優化能力,能根據業務需求,提供高可用、高性能、可擴展、穩定可靠的數據庫解決方案。
5. 了解MongoDB等非關系型數據庫的特點。了解Redis,Memcache等內存數據庫及緩存系統的原理及實現。
6. 熟悉Linux操作系統,對主機、存儲、網絡有一定的了解, 會使用Shell/Perl/Python中的一門腳本語言。
7. 有Hadoop/Kafka/Spark/ElasticSearch相關經驗的優先考慮。
大數據運維工程師崗位的工作職責概述 篇2
職責:
I、負責Hadoop集群的安裝部署、維護及調優:
2、負責spark的安裝郵署、維護及調優:
3、負責基于大數據平臺開發的應用系統的部署、日常維護、調優和問題處理
4、負責ELK 平臺的部署及維護。
技能要求:
1 、2年以上大數據運維工仵經驗;
2、熟悉Hadoop生態圈技術棧及各個組件原理:
、场⑹炀氄莆誋DFS、Hive、HBase、sρark、sqooρ 等組件,具備部署、維護、調優的能力:
4、熱悉kylin技術原理,有一定的維護經驗優先:
5、掌掇ELK的日常維護技能·有一定的維護.經驗優先:
6、有一定的HQL/sql 性能調優經驗;
7、具備基本的 java、python等語言開發能力優先:
8、有較強的溝通、團隊協作及學習能力。
大數據運維工程師崗位的工作職責概述 篇3
職責:
1、負責公司大數據/Hadoop/hive/hbase/flink等離線實時數據平臺運維保障;
2、負責內部大數據自動化運維以及數據化運營平臺開發工作;
3、負責Hadoop/Hbase等系統的業務監控、持續交付、應急響應、容量規劃等;
4、深入理解數據平臺架構,發現并解決故障及性能瓶頸,打造一流的數據平臺;
5、持續的創新和優化能力,提升產品整體質量,改善用戶體驗,控制系統成本。
6、善于表達、理解客戶數據服務需求,具備數據需求轉化落地能力。
任職要求:
1、大學本科及以上學歷,計算機或者相關專業;
2、深入理解linux系統,運維體系結構,精于容量規劃、性能優化;
3、具備一定的開發能力,精通一門以上腳本語言;(shell/perl/python等),熟悉java等開發語言一種及以上優先;
4、具備很強的故障排查能力,有很好的技術敏感度和風險識別能力;
5、能夠承受較大的工作壓力,以結果和行動為準則,努力追求成功;
6、熟悉hadoop、hbase、hive、spark、tez等原理并具備管理,配置,運維經驗;
7、熟悉分布式系統設計范型,有大規模系統設計和工程實現的了解者優先。
8、具有運營商流量數據加工處理經驗者優先。
大數據運維工程師崗位的工作職責概述 篇4
職責:
1. 負責大數據平臺的規劃、部署、監控、系統優化及運維等工作,保障系統7*24小時運營;
2. 為線上服務高效穩定運行負責,支撐業務和數據量的快速擴張,發現并能解決重大故障及性能瓶頸;
3. 深入理解系統平臺及大數據相關運維技術,持續優化集群服務架構;
4. 對大數據體系下新技術的調研、應用、對內培訓。
職位要求:
1. 至少3年以上大數據運維經驗, 深入理解Linux系統,運維體系結構;
2. 深度優化HADOOP平臺MR作業/計算框架/存儲技術,提升集群吞吐并降低成本;
3. 具有CDH(或者HDP)/HDFS/YARN/HIVE/ES/Kylin/Hbase/Kafka/Spark/Storm/Flume/Impala/Hue/Kettle/Flink等大數據系統的運維經驗,有開發經驗;
4. 熟悉HADOOP生態,有數據安全相關工作經驗, 并能對平臺CPU/MEM/IO/網絡/調度中一個或多個方面的性能調優;
5. 熟練掌握shell/python中的任意一門腳本語言;
6. 強烈責任感、縝密的邏輯思維能力,良好的團隊協作能力,具備良好的項目管理及執行能力;
大數據運維工程師崗位的工作職責概述 篇5
職責:
1,負責軟件系統的部署運行;
2、負責業務數據系統接入的規劃和實施;
3,理解行業業務,梳理業務數據模型;
4,完成項目實施過程中各類文檔的編寫、收集、整理、歸檔;
5,與客戶保持密切溝通,建立良好的客戶關系,保障良好的客戶滿意度;
有效的分析和控制客戶需求,解決項目實施過程中遇到的質量問題和管理問題。
崗位要求:
1、全日制本科以上學歷,軟件工程、計算機科學相關專業;
2、3年以上的軟件/項目管理實施經驗;
3、熟悉Linux操作,熟練編寫shell/python腳本;
4、了解常用開源分布式系統Hadoop/Spark/Hive/Hbase;
5、熟練使用SQL語句,熟悉ETL工作;
6、熟悉Oracle,mysql等關系型數據庫;
7、具有強烈的責任感與團隊合作精神,出色的溝通及學習能力;
8、有較強的分析問題能力,獨立解決問題能力,能接受在客戶公司辦公。
大數據運維工程師崗位的工作職責概述 篇6
職責:
1、負責運維自動化體系的架構優化及實現;
2、負責Linux/Windows操作系統的性能優化、疑難問題的定位和解決;
3、保障數據庫、中間件、基礎軟件服務、操作系統、監控系統軟件環境等的安全穩定運行;
4、負責建立完善的運維經驗知識庫及培訓體系,并保持新技術的追蹤和應用。
崗位要求:
1、計算機相關專業,2年以上IT運維經驗;
2、精通Linux/Windows操作系統的應用;
3、熟練使用linux,了解操作系統原理,在Linux系統管理及優化有豐富經驗;
4、熟悉WEB相關服務,熟悉nginx、apache、memcache、mysql等常用服務架設、管理維護和故障;
5、精通Python/Shell等任意一種腳本語言,能高效進行日常維護工具開發;
6、具有實際運維自動化架構設計經驗及有大規模開源云計算平臺運維經驗者優先;
7、具有較強的分析、研究和解決問題的能力,良好表達能力和責任心。
大數據運維工程師崗位的工作職責概述 篇7
職責
1、負責管理部門的網絡及系統維護工作;
2、按照部門的業務需求, 管理部門的各種應用軟件的安裝、部署、發布和日常運維等工作;
3、負責管理部門的網絡及系統維護工作;
4、按照部門的業務需求, 管理部門的各種應用軟件的安裝、部署、發布和日常運維等工作;
5、能夠獨立編寫各類系統腳本,優化腳本;負責部門oracle、mysql數據庫服務器日常維護。
任職資格
1、計算機及其他相關專業,大專及以上學歷;
2、熟練掌握LINUX、WINDOWS系統運維;
3、熟悉linux下常用軟件如weblogic apache nginx mysql lvs memcache等;
4、掌握oracle或mysql的SQL關系型數據庫原理,有數據庫維護經驗;
5、精通Nginx/redis/zookeeper、Iptables 配置,熟悉shell、ant腳本語言;
6、精通分布式編譯系統,有大型編譯系統運維經驗;
7、具有自動化運維的經驗,有配置管理經驗優先考慮;
8、熟悉VMware虛擬機,會創建,安裝,配置等;
9、至少熟悉一種版本控制工具的使用,如svn,gitlib工具等
大數據運維工程師崗位的工作職責概述 篇8
職責:
1、負責公司產品及業務平臺網絡架構的規劃與部署工作;
2、保證公司線上產品及業務平臺的數據安全,為其穩定的運行提供技術支持;
3、負責服務器系統及網絡設備的日常維護、服務監控和常規系統健康檢查、處理運維事故;
4、對服務器進行日常維護,確保網絡連續正常運行,無重大事故;
5、監控產品以及平臺的運行狀態,及時處理出現的故障;
6、配合數據分析、開發人員進行相關數據、參數配置、系統測試及系統監控;
【任職要求】:
1、1年以上運維工作經驗,熟悉阿里云等管理、配置及調優,如:ECS/RDS/DRDS等;
2、熟悉Windows、Linux操作系統和維護;
3、熟悉IIS,Tomcat,Nginx等主流Web服務器的配置與使用;
4、熟練掌握防火墻等常用網絡設備的配置,熟悉TCP/IP協議;
5、熟悉MySQL,MSSQL SERVER數據庫產品的安裝部署;
6、熟悉腳本語言:Shell,Python等一種以上;
7、熟悉網絡架構,具備基本的網絡故障排錯能力,對網絡安全有一定的了解。
8、有高度的責任心、敬業精神和團隊精神,善于溝通;
9、具有良好的職業道德和強烈的工作責任心。
大數據運維工程師崗位的工作職責概述 篇9
職責:
1、負責系統故障的應急響應和問題處理;維護linux、windows服務器,監控服務器性能;
2、負責Linux操作系統的安裝、配置,系統監控和維護,問題處理,以及軟件升級,安全優化,保證其穩定、高效運行;
3、負責公司平臺及應用系統實施及維護工作;
4、負責Linux 平臺下的系統維護,提高系統的可用性及可維護性;
5、負責Linux系統及應用程序進行性能分析,優化,問題跟蹤;
6、負責Windows Server 20xx、20xx的運維技術支持;
7、負責Windows AD域搭建維護。
任職資格:
1、三年以上主流操作系統安裝、配置、管理、維護經驗。
2、精通Linux系統、精通Oracle、MySQL、FTP、DNS、Squid等常用服務的安裝、配置和維護;
3、熟悉linux負載均衡技術;能熟練利用各種工具進行系統狀態監控(cacti、Nagios,bigsister等); 4、熟悉Linux下不同數據庫的安裝和調試及簡單優化;
5、熟悉AD域控;
6、有阿里云、華為云、七牛云、亞馬遜等云服務器運維經驗優先;
7、熟悉VMware vSphere虛擬化操作平臺;
大數據運維工程師崗位的工作職責概述 篇10
1. 負責項目版本管理和發布管理,實現環境版本迭代的順利交付。
2. 參與制定配置管理規范,流程和策略,針對具體項目制定具體的配置管理計劃。
3. 持續集成和持續交付管理模式的建設與優化,及相關平臺的技術調研。
4. 配置管理平臺維護,確保配置相關工具平臺、site、beta及生產環境的穩定性。
5. 負責生產環境的巡檢與問題排查,緊急問題的處理。
6. 項目日常支持,流程工具的培訓指導,協助解決項目配置管理相關問題。
大數據運維工程師崗位的工作職責概述 篇11
職責:
1、 維護公司IT系統的中間件等組件的日常運行維護和環境監控工作,保障系統的安全、穩定、可靠運行;
2、 協助判斷系統故障,報告問題,回答技術咨詢以及故障處理;
3、 為客戶提供系統相關的技術咨詢,撰寫系統操作手冊,維護技術文檔;
4、 協助系統補丁部署與管理;
5、 協助桌面終端設備運維,提供高可用性的IT系統環境;
6、 完成上級領導交辦的其他工作。
任職資格:
1、 全日制大學本科或以上學歷,計算機相關專業;
2、 具有3年以上系統運維相關工作經驗,熟悉Linux、Windows的日常操作及系統優化,掌握Tomcat、Nginx、redis等中間件的安裝配置和維護優化;
3、 具有良好的職業操守,強烈的責任心,具開拓進取精神,能承受工作壓力。
大數據運維工程師崗位的工作職責概述 篇12
職責:
1、 負責服務器VPC網絡的規劃、可用性維護,以及混合云環境下的VPN網絡的配置;
2、 負責本地服務器上架、本地服務器資源和云服務器資源的管理,負責備份策略的制定及執行。有zstack和云服務商(阿里云、騰訊云等)的使用經驗優先;
3、 負責服務器的腳本管理、基礎監控、磁盤管理、容量規劃、應急響應等;
4、負責Linux環境下常用軟件的搭建和維護,比如時鐘、DNS、SLB、TOMCAT、JENKINS等。
5、 探索、研究自動化運維技術方向,有編程興趣者優先(可培養)。
任職要求:
1、3-5年運維從業經驗,熟悉常見的自動化配置管理工具,100臺以上服務器運維經驗者優先;
2、精通Linux系統基本操作及配置,熟悉至少一款主流Linux服務器發行版。有紅帽認證者優先;
3、熟悉zabbix,falcon等主流監控系統的部署和配置;
4、熟悉shell和python,可以獨立完成常用的腳本編寫;
5、熟悉Tomcat、Nginx、DNS、時鐘、JENKINS等常見軟件的配置、以及常見問題處理方法;
6、 熟悉網絡基礎知識、熟悉TCP/IP的工作原理,會配交換機或路由器,能熟練的對網絡情況進行分析
7、具有團隊合作意識、良好的學習能力、溝通能力和親和力、良好組織能力和協調工作能力,具有高度的工作責任心和良好的職業道德。
大數據運維工程師崗位的工作職責概述 篇13
職責:
1.負責弱電集成系統日常維護,解答客戶提出的技術問題,負責產品工程安裝,包括產品安裝調試,故障排除,日常維護,產品演示等;
2.負責用戶培訓和指導等技術支持工作;收集、匯總用戶的各種需求或建議,并及時提交需求任務或建議措施;
職位要求:
1、計算機、網絡相關專業,大專以上學歷,有技術支持服務工作經驗者優先;
2、熟悉企業it環境,包括網絡,操作系統,應用程序等,有華為、cisco等認證證書優先;
3、良好的溝通能力,有親和力和強烈的責任感,以及很好的團隊合作精神,具備獨立分析問題和解決問題的能力。
4、具有較強的服務意識,時間觀念、耐心和責任心、良好的團隊合作精神。
大數據運維工程師崗位的工作職責概述 篇14
職責:
1、負責zabbix監控優化、日常告警分析處理;
2、協助開發構建管理系統環境,不斷優化系統架構、提升部署效率、優化資源利用率;
3、虛擬化管理,主動協調資源推動問題解決;
4、參與系統的監控方案、容災方案、自動化運維方案的制定和實施。
5、完成協作團隊領導分配任務。
任職要求:
1、大專以上學歷,具有5年以上運維工作經驗;
2、專業知識與技能要求:
A、熟悉常用的linux命令,具有Shell或Python腳本編寫能力;
B、熟悉mysql、mongodb、 ,elasticsearch 等數據庫常用的操作;
C、熟悉zabbix,Prometheus監控系統;
D、有騰訊云等云平臺使用經驗者優先。
3、有 ,k8s經驗;
4、較好的抗壓能力、問題分析與解決能力;
5、較強的責任感,良好的溝通與協調能力。
大數據運維工程師崗位的工作職責概述 篇15
職責:
1負責政務云平臺、政務應用系統中數據庫業務的日常運維,保障平臺及應用系統服務7*24穩定可靠高效運行
2負責數據庫性能調優,了解鎖與隔離機制,協助客戶解決數據庫性能瓶頸
3制定數據庫使用規范,制定數據庫備份、升級、遷移規劃并部署實施
4參與數據庫設計工作,提高數據庫維護自動化水平
5熟悉Linux操作系統,熟練使用Python,Go,Shell等至少一種語言
崗位要求:
1) 5年以上 Oracle/MySQL DBA 從業經驗;
2) 熟練掌握 Oracle/MySQL 數據庫的基礎理論知識、運行機制、體系架構、高可用方案、備份機制、容災機制等;
3) 熟練掌握數據庫性能優化,了解主流的分布式數據庫 Spanner/Cassandra;
4) 熟悉 Linux/Unix 操作系統,對服務器硬件有一定了解;
5) 熟練掌握 golang、Python、Java 等語言中的一種;
6) 熟悉阿里云產品線,具備ACP認證者優先考慮;
大數據運維工程師崗位的工作職責概述 篇16
職責:
1、網絡與電話線路搭建與維護;
2、機房設備、視頻會議系統維護;
3、計算機、打印等日常辦公設備維護與維修;
4、服務器、AD域、DNS、文件共享、IIS服務管理與維護;
5、固定資產日常管理及臺賬更新登記;
6、上級領導交辦的其他工作。
任職資格:
1、本科及以上學歷,計算機、網絡維護等相關專業,兩年以上大中型企業同崗位工作經驗,熟悉建筑設計行業相關軟件者優先。
2、工作責任心強,認真負責,具有良好的溝通協調及邏輯思維能力、踏實認真的工作態度。
3、具有良好的組織、協調能力和較強的團隊管理能力。
大數據運維工程師崗位的工作職責概述 篇17
職責:
1、協助實施運維部經理組織實施運維技術團隊的管理、部門工作分配;
2、組織實施運維部人員履行項目內容,完整把控整個項目及實施各階段,并調動組員積極能動性,對其工作進行監督檢查;
3、做好與公司其它部門的協調工作;
4、組織安排部門工作所需的技能培訓,提高團隊的知識水平。
任職要求:
1、大學本科及以上學歷;
2、高度的責任感和事業心,服從公司領導,堅決貫徹執行上級領導指示;
3、具有計算機SM系統運維技術經驗,具有運維團隊的管理經驗;
4、有堅實的專業技術功底,具備解決技術難題的能力;
5、具備優秀的團隊組織、協調溝通和綜合管理能力;
6、具備良好的語言溝通、文字表達和獨立處理問題能力;
7、具備良好的抗壓能力;
大數據運維工程師崗位的工作職責概述 篇18
1、收集、分析各部門對OA&HR系統的需求,結合OA&HR系統功能整合解決方案;
2、承擔系統實施和日常運維、監控、數據整理、修正工作,使系統能夠按照需求有效的實施和運行;
3、OA&HR表單流程配置;
4、OA&HR系統與其他系統的集成方案梳理;
5、上級交辦的其他工作。