大數據開發工程師崗位的職責描述(精選19篇)
大數據開發工程師崗位的職責描述 篇1
職責:
1、負責異構數據系統和大數據平臺的集成與融合;
2、負責數據挖掘算法的設計及對海量數據進行挖掘分析;
3、負責分布式數據倉庫平臺、海量數據批處理平臺、實時數據處理平臺等系統開發;
4、參與海量數據處理,業務數據體系的設計、數據統計、分析及數據建模;
5、參與數據平臺各系統的性能分析與系統優化,不斷提高系統運行效率;
6、完成領導交辦的其他任務。
任職資格:
1、計算機及其相關專業,大專及以上學歷。兩年以上大數據應用經驗;
2、具備實時處理框架的設計和開發能力,熟練掌握Storm、Spark streaming等大數據實時處理框架中的一種;
3、熟悉Spark 、R、Hadoop、Hbase、Hive、Elastic Search/Solr等相關技術;
4、熟悉Scala、熟悉Linux開發環境,能進行shell腳本的編寫;
5、具有較強的邏輯分析能力,高度的責任心及團隊合作精神;
6、具有實際大數據項目的成功經驗者優先考慮。
大數據開發工程師崗位的職責描述 篇2
職責:
1、參與南方電網軟件產品(項目)前/后臺服務開發,要求高性能、高可用、高并發;
2、獨立完成產品模塊(項目)核心代碼開發、業務代碼開發、系統性能調優等工作;
3、根據分配任務制定開發計劃并按時完成相應模塊的設計、開發和單元測試;
4、參與產品(項目)相關系統需求分析以及撰寫相關系統設計文檔;
要求:
1. 五年左右大數據研發崗位工作經驗
2、豐富大數據開發經驗:熟悉企業大數據常用技術,熟悉Spark、Flume、Hbase、Hadoop、Kafka,ES技術;
3、具有大型應用系統開發經驗,具有分布式、高并發、高性能等架構經驗,具有一定團隊管理經驗者優先;
4、了解J2EE技術平臺及主流框架,具有SpingMVC、SpringBoot、Spring cloud、Mybatis、Redis等框架開發經驗;
5、了解HTML5,CSS3,JavaScript,Ajax,jQuery等Web前端技術,熟悉jQuery、Bootstrap、AngularJS,VUE等主流前端JS框架中的一種;
大數據開發工程師崗位的職責描述 篇3
職責:
1、負責大數據ETL開發與維護;
2、負責大數據平臺數據庫的設計以及開發;
3、負責大數據計算框架的選型與計算流程的設計與開發;
4、負責數據服務的設計與開發。
任職資格:
1、本科及以上學歷;
2、熟悉Flink、flume、jstorm、sparkstream、hive、spark等分布式開源軟件,具備系統優化與性能調優能力者優先;
3、精通JAVA等面向對象編程,有分布式并行計算的開發經驗優先;
4、熟練掌握至少一種MySQL、SQL Server、Oracle等關系型數據庫或MongoDB、Redis等NoSQL數據庫 ,有hive等數據倉庫研發經驗優先;
5、熟悉大數據、云計算概念,了解Hadoop、Hive、Hbase等大數據主流技術及開源框架者優先;
6、自學能力強,溝通能力較好,有一定獨立分析,技術研究能力,具有良好的團隊合作精神;
7、數據意識強,有較好的文檔編寫能力,以及踏實的工作作風。
大數據開發工程師崗位的職責描述 篇4
職責
1、負責大數據分析平臺的建設,基于歷史和業務實時數據構建數據挖掘模型;
2、根據需求設計和實現數據分析展示平臺;
3、負責建立、維護和改進大數據分析流程、規范、方法;
4、負責基于大數據的數據分析算法研究,基于數據分析結果優化現有應用并探索新的應用。
任職要求:
1、本科及以上學歷,統計、數學、計算機或相關專業/方向,3年以上數據分析、數據挖掘相關工作經驗;
2、精通MATLAB、Python等大數據涉及的語言和工具,并能熟練運用相關數據分析工具實現數據分析方法;
3、對機器學習、數據挖掘算法及其應用有比較全面的認識和理解,熟悉主流數據挖掘框架;
4、熟悉分布式數據庫、數據倉庫和數據集市,熟悉數據庫相關操作和編程;
5、具有優秀的發現、分析并解決問題的能力,積極性高,具有嚴謹縝密的工作習慣、較強的溝通能力及團隊合作精神;
6、有旅游行業數據分析與挖掘從業經驗者優先。有主導完成優秀應用、大型數據平臺項目、有數據挖掘,算法設計等開發經驗者優先。
大數據開發工程師崗位的職責描述 篇5
職責:
1. 負責相關項目的開發和維護,進行軟件模塊編碼,確保安全、質量和性能;
2. 維護和升級現有軟件產品,快速定位并修復現有軟件缺陷;
3. 根據設計文檔獨立完成模塊或項目的開發和測試。
4. 快速響應不斷變化的需求。
任職要求:
1. 熟練掌握目前流行開源框架(spring/springmvc/mybatis)。
2. 熟練web開發和Java Script,熟悉并掌握目前流行的前端技術(jquery/Bootstrap/html5/css3)。
3. 對面向對象的軟件開發思想有清晰的認識、熟悉掌握常用的設計模式;
4. 熟悉主流關系數據庫Mysql、Oracle, 有sql調優經驗。
5. 具有較強的責任心、能吃苦、良好的表達、溝通交流能力和團隊協作精神。
6. 有良好的編程習慣,代碼規范,善于整理開發文檔,熱愛技術。
大數據開發工程師崗位的職責描述 篇6
職責:
1、負責公司基礎平臺的自動化腳本搭建、優化及日常維護工作、系統集成測試
2、負責系統性能調優及系統異常的排查
3、負責監控體系部署和優化,參與公司網絡、硬件、系統等層面的標準化及自動化工作
4、其他系統相關的日常維護工作
任職要求:
(一)基本要求
1、學歷要求:本科及以上學歷
2、專業要求:計算機或相關專業,較好的英文閱讀能力
3、工作經驗:2年以上自動化腳本開發工作經驗
(二)技術要求
1、計算機相關專業本科或以上學歷、2年以上運維工作經驗,熟悉TCP/IP協議、Linux系統及內核相關知識;
2、熟練掌握運用1種以上的腳本語言,包括:golong,Shell、Python、perl等;
3、熟練Linux下常規軟件的使用,如LNMP、LVS、NTP、DNS等,善于部署與優化;
4、能夠熟練排查運維過程中出現的服務故障、系統故障、網絡故障等;
5、熟悉KVM、LXC等虛擬化技術優先,有docker、K8S的運維經驗者優先;
6、熟悉公有云、混合云、私有云,使用過阿里云相關中間件產品(EDAS、DRDS、MQ、OceanBase)者優先;
7、搭建自動化測試環境,同時能夠承擔部分軟件測試工作。
(三)能力要求
1、熟練使用docker容器工具和linux系統命令
2、喜歡去看及嘗試新技術,樂于分享,能有效的表達。
大數據開發工程師崗位的職責描述 篇7
職責:
1,負責業務系統的需求分析,相關數據庫設計和對應的開發工作;
2,負責相關技術文檔的編寫;
3,解決開發過程中的關鍵問題和技術難題;
4,能按時,獨立,高質量的完成工作,對自己的代碼有嚴格的規范和質量要求
5,指導初級工程師的工作,負責相關的code review。
任職要求:
1,大專及以上學歷,計算機相關專業;
2、5年或以上java開發經驗,熟悉設計模式,熟練使用spring boot,Mybaits等主流JAVA開發框架;
3,能熟練使用git,maven等工具;
4,熟悉mysq數據庫,能獨立進行數據庫的設計,并且有sql優化經驗;
5,熟悉Redis,MongoDB等Nosql,并且能熟練的使用;
6,熟悉zookeeper,kafak,rabbitmq等中間件,并且能熟練的使用;
7,熟悉spring cloud,dubbo等微服務框架的基本知識和原理;
8,熟悉Linux的基本命令,對docker有一定的了解;
9,有良好的溝通能力,學習能力,適應能力,責任心。
大數據開發工程師崗位的職責描述 篇8
職責:
1.參與基于JAVA技術的應用系統開發;
2.參與需求分析,根據具體的模塊需求,獨立完成模塊的設計編碼工作;
3.負責所開發模塊的故障修復、性能調優等;
4.根據開發規范與流程完成系統設計、編碼、測試以及相關文檔的編寫;
任職要求:
1.計算機相關專業本科及以上學歷,3-5年以上Java開發經驗
2.熟練掌握Java、HTML/Javascript/CSS,JSP/Servlet等JAVAEE相關技術,有vue相關經驗更佳;
3.熟練掌握MySQL等數據庫;
4.熟練掌握Tomcat等應用服務器、nginx等負載均衡軟件;
5.精通MVC模式下的B/S開發,熟悉Spring/Springboot/SpringMVC/MyBatis等開源框架;
6.敬業、責任心強,良好的溝通能力。
大數據開發工程師崗位的職責描述 篇9
1.熟悉Spring MVC+MyBatis開發框架
2.熟練使用Mysql、Oracle等數據庫
3.熟悉主流微服務開發框架,如Dubbo或Spring Cloud
4.了解Linux服務器基本操作
大數據開發工程師崗位的職責描述 篇10
1. 負責車載信息娛樂系統(IVI)的Android Framework開發工作
2. 負責滿足車載產品功能對Framework更改的需求,可獨立完成軟件方案設計,編碼和系統調試
大數據開發工程師崗位的職責描述 篇11
職責:
1、主要負責JavaWeb以及APP項目的前后端服務代碼編寫,參與產品的開發與設計
2、根據項目具體要求,承擔開發任務,按計劃完成任務目標;
3、配合系統分析人員完成軟件系統及功能模塊的需求調研與需求分析;
4、配合系統分析人員完成軟件系統及功能模塊的設計;
崗位要求:
1、大專及以上學歷,計算機相關專業畢業。
2、熟悉Java SSM、開源框架,擁有2年以上經驗;
3、熟練使用Java,Jsp,CSS,JavaScript等開發語言;
4、熟練掌握Weblogic、Tomcat、BOSS等應用服務器以及系統集群的配置經驗;
5、熟悉ORACLE,MYSQL
6、有較好的團隊合作意識和溝通能力。
大數據開發工程師崗位的職責描述 篇12
職責:
1.負責與客戶之間的溝通協調,了解客戶需求,撰寫方案
2.支持元數據的管理、清洗和數據模型開發實現
3.基于客戶需求,形成總結經驗文檔,完善公司數據報表平臺功能
4.與客戶業務部門溝通協調,沉淀行業知識,總結行業案例
5.協調與客戶定期交流和溝通
技能要求:
1.了解主流報表工具,了解ETL概念,應用過ETL相關開發工具;
2.具備基本SQL技能,掌握MYSQL、Oracle數據庫基礎知識;
3.較強的溝通能力、學習能力、邏輯思維、獨立解決問題能力;
4.能根據客戶所處行業,進行行業知識、樣板案例的分析和總結;
5.具備良好的抗壓能力,能適應因工作所需的出差。
大數據開發工程師崗位的職責描述 篇13
職責:
1、參與概要設計,詳細設計,并負責完成核心代碼;
2、參與項目技術選型與架構討論;
3、各類應用系統模塊設計與開發,以及相關設計文檔編寫和整理;
4、指導其他初、中級軟件工程師工作;
5、完成領導交代的其他工作。
崗位要求:
1.精通java語言,熟悉基本設計模式。
2.熟悉常用應用服務器產品,如Tomcat,熟悉Linux系統,熟悉Java應用的部署、配置、調試和測試,并能根據調試測試結果定位錯誤原因,找出解決方案。
3.掌握SQL語言,熟悉以下任意一種或多種數據庫:SQL server、Oracle、MySQL,了解并能熟練運用其常見性能優化手段。
4.熟悉j2EE技術,精通struts、spring、hibernate,mybatis等開源框架,精通jquery等前端框架。
5.熟悉消息中間件,緩存,應用服務器等中間件,并有實際的項目應用經驗。
6.掌握各類技術文檔的編寫和整理。
7.有設計,調試接口的相關經驗。
8.對信息技術領域的新信息、新知識具有相當的敏感性,能夠迅速更新自身的知識內容,能夠在短時間內攻克技術難關。
9.具有很好的代碼編寫能力和良好的代碼編程習慣。
10.具有公衛領域相關項目經驗者優先考慮。
大數據開發工程師崗位的職責描述 篇14
職責:
1,負責設計產品的前后臺技術框架;
2,承擔系統的開發工作,改進框架,基礎架構,持續優化服務;
3,承擔關鍵項目的技術評審及總體設計,參與構建系統原型及關鍵技術問題的攻關活動;
4,控制產品設計質量,制定產品開發規范、指導或撰寫方案、設計等文檔;
5,在開發過程中發現并解決存在的問題,幫助團隊持續改進開發效率。
職位要求:
1,計算機相關專業,有扎實的計算機理論基礎;
2,5年以上PHP語言為主的大中型系統開發經驗,熟悉PHP主流框架;
3,熟悉B/S結構系統分析及設計經驗,有構建可伸縮、可擴展、高可用系統經驗;
4,深刻理解Linux/Unix內存管理、線程/進程間通信、異步事件回調機制;
5,精通MVC/REST架構、模板引擎、中間件的原理與應用;
6,熟練掌握各種設計模式和面向對象設計原則,具備較強的模型抽象能力;
7,熟悉web開發,對HTTP協議有深刻理解;
大數據開發工程師崗位的職責描述 篇15
1、負責手游客戶端的開發工作;
2、與項目組美術/策劃人員深入溝通,準確實現開發需求;
3、和服務器工程師配合,實現客戶端端和服務器的數據交互;
4、與測試人員配合,了解并解決產品中存在的問題,對產品細節能有很好的把握。
大數據開發工程師崗位的職責描述 篇16
職責:
1、負責公司業務系統的代碼開發、調試與維護工作;
2、能夠按照開發進度保質保量完成開發任務;
3、對自己的代碼負責,能夠做好代碼自測;
4、能夠積極主動發現問題,解決系統bug.
崗位要求:
1、本科及以上學歷,計算機專業優先考慮,從事相關工作2年左右;
2、有JAVA開發經驗;
3、Java基礎扎實,熟練使用SSH等主流JAVA框架,熟悉mysql數據庫;
4、具有良好的團隊合作能力,溝通能力強,較強的責任心和抗壓能力。
大數據開發工程師崗位的職責描述 篇17
職責:
1、完成軟件的設計、開發、測試、修改bug等工作。
2、撰寫相關的技術文檔。
3、參與業務需求的溝通,功能模塊詳細設計,業務功能實現與單元測試,系統維護等工作。
4、對代碼質量如執行性能、可讀性、可維護性負責
5、獨立的解決和分析開發過程中的問題
6、完成上級安排的其他臨時性工作。
崗位要求:
1、計算機相關專業?埔陨稀
2、精通Java語言,熟練使用MyEclipse,熟悉Linux平臺的程序開發。
3、熟悉面向對象編程原理,數據結構和算法基礎扎實。
4、熟悉J2EE相關技術,掌握Spring、Spring MVC、Mbatis/Hibernate等常用應用開發框架。
5、掌握Web前端技術,熟悉HTML、CSS、JavaScript,有JQuery、Bootstrap、Vue使用經驗者優先。
6、熟悉Mysql/Oracle等常用關系型數據庫,精通SQL,能夠對SQL進行優化。
7、了解分布式計算、NoSQL技術,有實際應用經驗者優先。
8、有Spring Boot、Spring Cloud、Git、Redis、Java8等相關使用經驗者優先。
9、思維敏捷,具備良好的表達能力和溝通能力,PMP/ACP/CSM優先。
10、工作認真負責,有強烈的責任感和吃苦耐勞精神,具有良好的團隊合作精神,具有強烈的事業心和責任感。
大數據開發工程師崗位的職責描述 篇18
職責:
1、負責公司系統的數據庫SQL性能優化工作;
2、根據公司業務需求,參與架構設計,給出數據庫設計與優化方案;
3、把關上線SQL代碼審核;
4、負責開發人員數據庫方面的知識培養,提高整體開發人員數據庫方面的能力;
5、持續改進數據平臺服務架構,保證系統高性能、高可用性和高可擴展性。
任職要求:
1、2年以上的數據庫開發經驗,熟悉軟件開發的基本流程和方法,java編程經驗優先;
2、精通oracle/Mysql等數據庫,熟悉unix或linux系統,精通pl/sql編程;
3、精通數據庫存儲過程、觸發器、索引、表分區的編寫與使用;
4、有較好的溝通技巧和責任心,良好的團隊合作精神,具有較強的項目管理能力和協調能力,具有較強的技術文檔整理、分析、撰寫能力;
5、有Oracle 12C使用經驗者優先。
大數據開發工程師崗位的職責描述 篇19
職責:
1、理解應用系統的架構,獨立完成開發和測試工作,實現系統的功能模塊;
2、編寫項目和系統開發過程中所需的各類文檔。
3、負責對復雜的腳本進行調優;
4、解決和完成上級制定的任務計劃和臨時任務。
任職資格:
1、計算機相關專業本科及以上學歷,1年以上相關工作經驗;
2、精通MySQL,oracle,DB2一種或多種數據庫;
3、熟悉其中一種數據庫、表空間、數據文件、表、字段、存儲過程、視圖、索引等數據庫對象的運用原理;
4、有復雜SQL編寫經驗,能根據設計說明書進行數據庫存儲過程的開發。
5、具體良好的學習能力,工作積極主動,有責任心。