大數據開發工程師崗位的職責描述(通用23篇)
大數據開發工程師崗位的職責描述 篇1
職責
1、負責大數據分析平臺的建設,基于歷史和業務實時數據構建數據挖掘模型;
2、根據需求設計和實現數據分析展示平臺;
3、負責建立、維護和改進大數據分析流程、規范、方法;
4、負責基于大數據的數據分析算法研究,基于數據分析結果優化現有應用并探索新的應用。
任職要求:
1、本科及以上學歷,統計、數學、計算機或相關專業/方向,3年以上數據分析、數據挖掘相關工作經驗;
2、精通MATLAB、Python等大數據涉及的語言和工具,并能熟練運用相關數據分析工具實現數據分析方法;
3、對機器學習、數據挖掘算法及其應用有比較全面的認識和理解,熟悉主流數據挖掘框架;
4、熟悉分布式數據庫、數據倉庫和數據集市,熟悉數據庫相關操作和編程;
5、具有優秀的發現、分析并解決問題的能力,積極性高,具有嚴謹縝密的工作習慣、較強的溝通能力及團隊合作精神;
6、有旅游行業數據分析與挖掘從業經驗者優先。有主導完成優秀應用、大型數據平臺項目、有數據挖掘,算法設計等開發經驗者優先。
大數據開發工程師崗位的職責描述 篇2
職責:
1、參與南方電網軟件產品(項目)前/后臺服務開發,要求高性能、高可用、高并發;
2、獨立完成產品模塊(項目)核心代碼開發、業務代碼開發、系統性能調優等工作;
3、根據分配任務制定開發計劃并按時完成相應模塊的設計、開發和單元測試;
4、參與產品(項目)相關系統需求分析以及撰寫相關系統設計文檔;
要求:
1. 五年左右大數據研發崗位工作經驗
2、豐富大數據開發經驗:熟悉企業大數據常用技術,熟悉Spark、Flume、Hbase、Hadoop、Kafka,ES技術;
3、具有大型應用系統開發經驗,具有分布式、高并發、高性能等架構經驗,具有一定團隊管理經驗者優先;
4、了解J2EE技術平臺及主流框架,具有SpingMVC、SpringBoot、Spring cloud、Mybatis、Redis等框架開發經驗;
5、了解HTML5,CSS3,JavaScript,Ajax,jQuery等Web前端技術,熟悉jQuery、Bootstrap、AngularJS,VUE等主流前端JS框架中的一種;
大數據開發工程師崗位的職責描述 篇3
職責:
1、負責異構數據系統和大數據平臺的集成與融合;
2、負責數據挖掘算法的設計及對海量數據進行挖掘分析;
3、負責分布式數據倉庫平臺、海量數據批處理平臺、實時數據處理平臺等系統開發;
4、參與海量數據處理,業務數據體系的設計、數據統計、分析及數據建模;
5、參與數據平臺各系統的性能分析與系統優化,不斷提高系統運行效率;
6、完成領導交辦的其他任務。
任職資格:
1、計算機及其相關專業,大專及以上學歷。兩年以上大數據應用經驗;
2、具備實時處理框架的設計和開發能力,熟練掌握Storm、Spark streaming等大數據實時處理框架中的一種;
3、熟悉Spark 、R、Hadoop、Hbase、Hive、Elastic Search/Solr等相關技術;
4、熟悉Scala、熟悉Linux開發環境,能進行shell腳本的編寫;
5、具有較強的邏輯分析能力,高度的責任心及團隊合作精神;
6、具有實際大數據項目的成功經驗者優先考慮。
大數據開發工程師崗位的職責描述 篇4
職責:
1、負責大數據ETL開發與維護;
2、負責大數據平臺數據庫的設計以及開發;
3、負責大數據計算框架的選型與計算流程的設計與開發;
4、負責數據服務的設計與開發。
任職資格:
1、本科及以上學歷;
2、熟悉Flink、flume、jstorm、sparkstream、hive、spark等分布式開源軟件,具備系統優化與性能調優能力者優先;
3、精通JAVA等面向對象編程,有分布式并行計算的開發經驗優先;
4、熟練掌握至少一種MySQL、SQL Server、Oracle等關系型數據庫或MongoDB、Redis等NoSQL數據庫 ,有hive等數據倉庫研發經驗優先;
5、熟悉大數據、云計算概念,了解Hadoop、Hive、Hbase等大數據主流技術及開源框架者優先;
6、自學能力強,溝通能力較好,有一定獨立分析,技術研究能力,具有良好的團隊合作精神;
7、數據意識強,有較好的文檔編寫能力,以及踏實的工作作風。
大數據開發工程師崗位的職責描述 篇5
1. 負責Android產品的功能研發和性能優化,完成高質量編碼工作;
2. 與產品經理配合,深度參與手機產品需求討論,功能定義等 ;
3. 設計編寫良好的代碼結構,不斷迭代重構 ;
4. 需有即時通訊類產品研發經驗,可快速適應工作內容。
大數據開發工程師崗位的職責描述 篇6
職責:
1、大數據日志分析系統的設計,選型和開發;
2、配合各業務給予數據支持,對產品和運營數據總結和優化;
3、處理用戶海量數據,提取、分析、歸納用戶屬性,行為等信息,完成分析結果;
4、發現并指出數據異常情況,分析數據合理性;
5、公司大數據基礎架構平臺的運維,保障數據平臺服務的穩定性和可用性;
6、大數據基礎架構平臺的監控、資源管理、數據流管理;
7、基于數據分析的可預測的云平臺彈性擴展解決方案。
任職要求:
1、日志分析數據系統實際經驗;
2、3年以上互聯網行業研發經驗,有使用Hadoop/hive/spark分析海量數據的能力;
3、掌握 Hadoop、Flume,Kafka、Zookeeper、HBase、Spark 的安裝與調試;
4、熟悉大數據周邊相關的數據庫系統,關系型數據庫和 NoSQL。
5、掌握 Linux 操作系統的配置,管理及優化,能夠獨立排查及解決操作系統層的各類問題;
6、有良好的溝通能力,具備出色的規劃、執行力,強烈的責任感,以及優秀的學習能力。
大數據開發工程師崗位的職責描述 篇7
職責
1.數據庫安裝、配置、故障處理、備份與恢復;
2.數據庫性能監控與優化、數據庫安全加固、數據庫空間管理等(包括線上、線下環境);
3.負責項目數據ETL整合與數據庫設計;
4.審核數據庫設計方案和SQL語句,對上線數據庫質量進行管理;
5.負責數據庫操作標準化流程制定,并遵照執行;(如數據庫設計規范、數據庫變更管理規范)
6.負責跟進、試用廈門數據組產出的工具、數據整合方案,以及在重慶團隊中推廣使用;
7.提升實施團隊數據庫運維相關技能。
崗位要求
1、計算機或相關專業本科以上學歷,2年以上數據處理工作經驗;
2、精通關系型數據庫體系架構和原理,精通存儲過程、觸發器、動態SQL的編寫;
3、精通數據庫的性能優化及SQL語句的優化;
4、精通MySql/oracle數據庫的規劃、設計、優化及運維;
5、熟悉Linux常用命令,熟悉shell/python/perl(其中一種)腳本開發;
6、熟悉數據庫的負載解決方案,如分庫、分表、主從;
7、高度的責任心、良好的溝通技巧和團隊合作精神;
大數據開發工程師崗位的職責描述 篇8
職責:
1、從事Hadoop、Spark、Hbase、hive等分布式大數據產品的設計和開發;
2、針對部門大數據業務進行大數據分析、挖掘等產品應用的開發;
3、大數據平臺各類數據業務抽象及模型化;
4、參與大數據管理平臺的開發及維護;
5、負責大數據平臺數據及相關的應用開發,調優及維護;
6、為項目相關開發人員提供大數據技術指導及解決大數據平臺應用中遇到的技術難題;
7、良好的團隊合作與溝通能力。
任職要求:
1、本科及以上學歷,2年以上大數據應用開發經驗;
2、具備Java、Python、Scala其中兩種語言的開發經驗;
3、了解泛Hadoop大數據生態圈,熟悉HDFS/Hive/Flink/Hbase/Spark/Kafka其中兩種以上技術,并有實際的項目開發經驗,有相關源碼研究者優先;
4、具備ETL開發與運維能力,有Flume、kettle經驗優先;
5、熟悉大數據平臺的搭建過程,熟悉數據處理流程,有TB級以上數據處理經驗優先,有實時數據處理經驗者優先;
6、熟悉離線和實時數據處理流程,熟練使用Spark,Flink處理TB級數據優先;
7、熟悉Linux系統環境,有shell等腳本編寫經驗,熟悉Mysql、PostgreSql、Oracle等常用關系數據庫,熟練編寫SQL語句;
8、熟悉Yarn,Kubernetes,Azkaban等資源調度框架者優先;
9、熟悉Datax的二次開發,并有實際開發經驗優先。
大數據開發工程師崗位的職責描述 篇9
職責:
1、利用HTML5相關技術開發移動平臺的web前端頁面效果實現;
2、根據產品設計實現頁面交互,與后臺工程師共同實現產品功能,完成數據交互、動態信息展現;
3、協助設計師實現頁面及交互,協助產品完善需求,提供技術實現方案;
4、優化代碼及實現技術,提高頁面性能。
任職要求:
兩年以上JavaScript開發工作經驗;
熟悉HTTP協議、W3C標準,能書寫兼容主流瀏覽器并且能夠良好的適配各個尺寸移動設備;
熟練掌握前端開發技術(HTML5、JS、Ajax、Json、XHTML、CSS),了解各項技術的相關標準,并嚴格按照標準進行開發;
熟悉javascript設計模式 能以模塊化進行程序開發;熟悉主流Javascript MVC框架,如reactjs AngularJS Backbone.js,有 Vue.js開發經驗者優先錄用;
對任意一門非Web前端腳本的語言(如Java、PHP、C、Python )有一定的了解程度;
6、對HTML5技術領域、新興Web標準和Web發展趨勢有良好洞察力和極高的關注度,有強烈的求知欲;
7、具有android、iphone、ipad等智能手機和平板開發經驗優先考慮
8、良好的編程習慣和團隊協作精神,工作積極上;
大數據開發工程師崗位的職責描述 篇10
職責:
1、計算機相關專業專科及以上學歷,畢業后1-2年工作經驗
2、輔助進行系統的功能定義,程序設計;
3、具有良好的編程習慣,熱愛編程
4、具有良好的溝通能力和團隊協作能力
崗位要求:
1、具有扎實的Java基礎,理解多線程、網絡等基礎框架
2、熟練使用SSH框架,了解Spring工作機制
3、熟悉使用oracle/sqlserver/mysql至少一種數據庫,熟練使用sql開發;
4、熟練使用javascript,有一定的前端知識;
5、了解linux,能夠進行基本的操作
6、具有強烈的進取心和責任感,有良好的邏輯思維能力
大數據開發工程師崗位的職責描述 篇11
職責
1、負責游戲服務器的日常運維;
2、負責數據備份、恢復、冗余設置,安全防范;
3、負責Web服務,MySQL等數據庫安裝和調優;
4、負責游戲項目等生產服務器的日常更新等操作;
5、負責服務器工具的開發部署。
任職要求
1、計算機相關專業,本科以上學歷,三年以上工作經驗;
2、熟悉linux操作系統的常用命令,工具,配置,熟悉shell/python任一語言的編寫;
3、熟練搭建優化apache、nginx、tomcat、iis、lamp等web服務環境;
4、熟悉mysql數據庫,sql語句,及備份,恢復;
5、了解linux上的集群構架服務如LVS、Keepalived、NFS、MFS的相關知識;
6、了解OpenStack、CloudStack、KVM等虛擬化實現技術;
7、熟悉網絡架構,具備基本的網絡故障排錯能力,對網絡安全有一定的了解。
大數據開發工程師崗位的職責描述 篇12
1、根據公司產品發展方向,負責/參與新產品開發;
2、負責產品的頁面制作及維護,根據設計圖完成頁面html5應用的編碼;
3、根據產品需求,分析并給出最優的頁面前端結構解決方案;
4、根據產品設計,利用HTML5相關技術開發網站、手機、平板電腦等多平臺上的前端應用;
5、編寫可復用的用戶界面組件;
6、協助后臺程序員完成功能鑲嵌和調試;
7、有微信小程序開發經驗者優先。
大數據開發工程師崗位的職責描述 篇13
職責:
1. 負責同程藝龍核心系統的可靠、穩定、高效運行;
2. 參與系統架構設計與優化,不斷提高系統性能與穩定性;
3. 設計、開發提高同程藝龍穩定性、工程效率、資源效率的運維自動化工具與平臺;
4. 探索運維自動化和智能化的技術和方向。
任職要求:
1. 計算機或相關專業;
2. 熟悉Linux操作系統原理、網絡原理;
3. 掌握JAVA/C/Go/Shell/Python等1至2種語言;
4. 良好的溝通、組織協調能力和強烈的責任心,具備很強的分析和解決問題的能力;
5. 對行業技術敏感度高且細致,善于思考,樂于發現,對解決具有挑戰性問題充滿激情。
大數據開發工程師崗位的職責描述 篇14
職責:
1、負責平臺PHP開發工作;
2、團隊協作與分工,按時完成每周進度要求;
3、根據數據接口文檔開發接口,與前端進行數據交互。
4、負責微信小程序項目開發
任職資格:
1、 精通PHP開發語言,1年PHP經驗
2、 熟練掌握HTML、熟悉DIV+CSS布局,熟悉Ajax,熟練掌握jquery;
3、 具有MySql索引、查詢、存儲優化;PHP緩存技術、靜態化方面的經驗;
4、對編程充滿熱情,愛搗鼓程序,有代碼潔癖,樂于了解和掌握新鮮知識;
5、對前后端合作開發有一定的認知,對交互體驗有較為深入的了解;
6、具備OOP編程思想,熟悉MVC,有項目案例,有Laravel開發框架經驗者優先;
7、對互聯網產品熟悉,關注用戶體驗,對用戶體驗有自己的獨到見解。
8、有小程序經驗者優先
大數據開發工程師崗位的職責描述 篇15
1、負責公司基礎產品框架和開發環境的設計搭建和研發;
2、編寫開發平臺和工具,解決實際業務開發問題,提高公司項目開發效率;
3、建立和健全公司技術體系,使產品具備技術競爭性;
4、參與項目需求調研、項目可行性分析、技術可行性分析和需求分析;
5、負責公司項目的后端數據庫設計、代碼編寫、前后端整合;
大數據開發工程師崗位的職責描述 篇16
職責:
1、項目的需求分析、系統設計,相關過程文檔編寫;
2、項目的計劃制定,進度把控,人員關系的協調溝通;
3、項目的編譯、構建、部署,技術疑難問題解決;
4、項目的單元測試和集成測試;
5、項目的培訓、驗收、總結。
任職要求:
1、精通Java,有2年以上Java深層次開發經驗(有豐富項目開發經驗者,可以破格錄用),具備深厚的Java功底;
2、精通面向對象軟件結構知識,熟悉設計模式、OOA/D、UML,能熟練使用Rose建模工具完成軟件設計;
3、熟悉Struts,Hibernate,Spring等開源框架,有架構設計經驗者優先;
4、精通J2EE體系結構,熟悉JBoss, weblogic, Tomcat等應用服務器系統的開發;
5、為人誠信,思維嚴謹,工作主動,能承受一定的工作壓力;
6、工作勤奮,責任心強,有良好的質量意識,具有良好的溝通能力和團隊合作意識。
7、具備PMP或中高級項目管理認證資質優先;
大數據開發工程師崗位的職責描述 篇17
職責
1、負責客戶端應用邏輯的編寫,與項目組美術、策劃人員深入溝通,準確實現開發需求,完成所負責模塊系統的設計、開發和編程;
2.持續優化產品性能,提高用戶體驗;
3.負責游戲的上線發布和維護。
任職資格
1、本科及以上學歷,至少有參與過一款H5項目的研發;
2、熟悉TypeScript/JavaScript/ActionScript,熟悉MVC,有良好的OOP思想;
3、熟悉WebSocket網絡編程,了解ProtoBuf序列化方式,能獨立開發業務邏輯;
4、需有1年或以上使用Egret/Laya 開發項目經驗;
5、踏實上進,善于鉆研技術,具備良好的編程習慣和代碼規范;有較強的獨立解決問題能力,富于團隊精神,喜歡游戲行業。
大數據開發工程師崗位的職責描述 篇18
職責:
1.負責公司項目開發與維護;
2.負責公司項目核心代碼編寫;
3.負責代碼的單元測試,保證開發質量,提交符合規范的成果;
4.針對業務場景的應用要求,不斷優化系統設計和前臺表現,提升系統效能和安全性。
任職要求
1.3年以上的PHP開發經驗,有獨立開發經驗者優先;
2.了解HTML5、CSS3、JAVASCRIPT等前端代碼;
3.具有MySQL索引優化、查詢優化和存儲優化經驗,熟練使用redis;
4.具有良好的PHP基礎,熟悉ThinkPHP開源框架;
5.熟悉微擎二開者優先,做過微信公眾號優先,接過各平臺支付SDK優先,熟悉對高并發業務的處理;
6.有游戲開發經驗者優先,計算機專業優先,熟悉linux服務器操作的優先;
7.有良好的面向對象分析、設計能力、規范的編程風格和良好的文檔習慣;
8.有良好的團隊精神、敬業精神,有高效的執行力,能主動學習鉆研與工作相關的知識和技術;
大數據開發工程師崗位的職責描述 篇19
職責
1、負責公司產品的軟件系統的開發與維護,對整個平臺的安全、穩定、性能和架構先進性負責;
2、負責公司環境管理運營平臺的開發管理,服務器實施;
3、負責公司軟件系統的架構設計,核心代碼編寫,與系統日常維護;
4、按照部門經理制定的項目計劃,按時并高質量的完成開發任務;
5、參與技術難題攻關,對相關系統的接口進行設計和規劃;
6、按時完成領導交辦的其他工作事項。
任職資格:
1、計算機相關專業,具有三年以上PHP項目開發經驗;
2、熟悉PHP+MySQL,熟練掌握主流的PHP開發框架;
3、熟練使用mysqL等數據庫,熟悉sql語言,掌握mysql的常規優化;
4、優秀的代碼編程習慣及文檔編寫能力。
大數據開發工程師崗位的職責描述 篇20
職責:
1.熟悉thinkcmf5框架優先錄取
2.核心業務功能開發和代碼維護;
3.負責網站后端程序開發、數據庫結構設計和搭建;
4.參與網站產品的設計和開發,配合產品經理進行技術決策。
崗位要求:
1.有開發商城系統/微信定制開發優先;1-2年工作經驗也可考慮;
2.熟練掌握PHP,熟悉面向對象的軟件設計方法; 熟悉MVC三層架構的開發,熟練應用PHP框架Thinkphp5。
3.熟悉HTML、CSS、Javascript等前端技術,熟悉jquery者優先;
4.熟悉Linux常用命令;MySQL數據庫開發及常用優化方法;
5.有良好的代碼習慣,要求結構清晰、命名規范、邏輯性強、代碼冗余率低,代碼注釋清晰;
6.性格開朗、喜歡鉆研技術,具有較強的分析和解決問題的能力。
大數據開發工程師崗位的職責描述 篇21
職責:
1、獨立負責工作小組,并對下級成員進行監督;
2、具備資源整合以及對軟件項目全局把控的能力;
3、負責軟件項目的系統設計和需求分析;
4、制定軟件項目開發計劃,并按時完成功能模塊的設計、開發以及編程任務;
5、積極配合并完成主管下達的任務,并能夠對軟件部門的發展規劃提出意見;
任職條件
1、大數據相關開發經驗3年以上,至少具備2年以上java開發經驗;
2、有基于hadoop的數據抽取、轉換、加載的開發相關經驗;
3、熟練掌握hadoop生態的相關知識,如hive,hbase,flume.kafka,storm,spark,mapreduce等;
4、熟悉Linux操作系統。熟悉linux各項基本操作,至少掌握一門腳本語言;
5、熟練數據倉庫,對多維數據建模有深入理解;
6、有BI數據平臺、數據倉庫、日志采集、多維數據倉庫設計、開發、架構經驗者優先;
7、思維敏捷,有較強的鉆研學習能力,較好的溝通能力、團隊合作;
大數據開發工程師崗位的職責描述 篇22
職責:
1.針對項目需求,進行基于JAVA的web后臺開發;
2.按照項目計劃,與項目組其他成員協同工作,在保證質量的前提下,按時完成開發任務;
3.對接短信通道,維護優化短信平臺;
4.積極、認真地根據測試人員提出的問題對程序進行修改,確保產品的高品質。
任職資格:
1.2年以上Java開發實際工作經驗;
2.熟練使用Java語言,熟悉JavaEE體系架構,具有B/S應用開發經驗;
3.熟悉應用開發框架SSH及其他主流JavaEE開發技術;熟悉jQuery等框架;
4:熟練掌握sqlserver數據庫技術,熟練掌握sql語句 ;
5.對用戶體驗、交互操作流程及用戶需求有深入理解;
6.具有規范的編程習慣與文檔編寫能力,積極配合公司各項規范化建設工作;
7.有短信平臺開發維護經驗優先。
大數據開發工程師崗位的職責描述 篇23
1.負責互聯網系統后端模塊的開發和測試;
2.與前端開發、運營、測試團隊合作完成整個項目開發;
3.編寫及維護軟件功能規格說明書,設計及開發過程中產生的系列文檔;
4.參與系統架構設計和核心代碼的編寫,可指導初級開發人員參與工作;
5.參與網站性能優化、產品體驗優化以及產品功能迭代;與前端開發團隊緊密配合,確保代碼有效對接,優化前端性能。