大數據開發工程師的職責文本(精選17篇)
大數據開發工程師的職責文本 篇1
職責:
1、負責數據中心和大數據處理平臺的搭建
2、在線和離線海量數據分析平臺的開發;
3、研究大數據前沿技術,提升系統的運維效率;
4、參與大數據的采集、存儲、處理,分析等開發
5、參與數據挖掘算法的設計、對海量數據進行挖掘分析和發掘數據價值及算法學習及實現
【任職要求】:
1、計算機或相關專業本科學歷及以上,2年工作經驗以上
2、熟悉Java/Scala等至少一門語言,能對分布式常用技術進行合理應用,解決實際架構問題
3、熟練使用hadoop,hive,HBase,YARN,kafka,spark,Storm,Flume等大數據開發組件
4、熟悉整個大數據的完整處理流程,包括數據的采集、清洗、存儲、分析和可視化及報表開發;
5、熟悉分布式系統概念、架構,有大規模分布式系統設計、實現、部署等經驗;
6. 具有優秀的學習能力、獨立分析和解決問題能力,良好的團隊合作精神。
7. 有BI開發經驗的優化考慮。
大數據開發工程師的職責文本 篇2
職責:
1、負責完成業務和產品的對接,支持業務需求研發;
2、負責完成產品的迭代升級以及底層架構的升級研發;
3、完成團隊安排的其他相關日常工作任職要求;
4、負責產品的實時業務和離線業務的研發;
5、支持開源大數據技術在數據系統中的使用,修復、優化增強大數據技術;
崗位要求:
1、具有分布式系統架構開發能力,熟練使用storm、spark hbase者優先。
2、能夠使用實時計算平臺,進行實時業務數據的研發。
3、能夠基于已有平臺進行離線業務的開發。
4、有大數據應用產品研發經驗,具有數據決策產品研發經驗者優先。
大數據開發工程師的職責文本 篇3
職責:
1、負責數據采集、數據存儲、數據查詢、數據計算等基礎平臺的設計和開發工作;
2、利用Hadoop、Spark、Flink等技術進行離線和實時數據開發 ;
3、負責大數據平臺的規劃升級、平臺維護和優化 ;
4、和其他部門或團隊溝通、資源協調并落實工作。
任職要求
1、本科及以上學歷;
2、3年以上大型大數據平臺建設實施經驗 ;
3、掌握常用大數據組件hadoop、Hive、spark、Flink、hbase、elasticsearch等原理、使用和調優 ;
4、具備較強技術功底,精通Java、Scala、Python等至少一種開發語言,能根據需求給出技術架構 ;
5、有數據倉庫、元數據管理和治理的開發經驗優先 ;
6、善于溝通,思維活躍、責任感強、工作積極主動,有良好的團隊協作意識。
大數據開發工程師的職責文本 篇4
職責:
1、負責該領域的業務需求討論,完成技術方案及數據開發;
2、負責數據倉庫的體系建設及落地實現;
3、負責大數據平臺各類環境的部署及運維、并參與架構優化、性能優化等工作;
4、負責該領域所屬模塊的代碼開發、調試與維護工作,并進行技術沉淀和文檔輸出。
招聘要求:
1、計算機、電子通信、自動化等專業,本科及以上學歷;
2、五年以上研發經驗,其中二年以上大數據開發的相關工作經驗;
3、熟練JAVA開發語言;熟悉微服務及Spring框架;
4、熟練熟練Hive、Impala、ES性能調優,關注細節,學習能力強;
5、能配合團隊完成該領域的工作,自我管理能力強,能承受工作中的各種壓力,具備很好的團隊意識
6、熟練主流大數據平臺產品部署及運維,如CDH、HDP平臺。
7、對機器學習和深度學習等方面有一定的了解;
8、有汽車制造業及相關行業的大數據開發經驗優先。
大數據開發工程師的職責文本 篇5
職責:
1.結合項目或產品涉及的具體業務場景,對數據進行清洗、計算與加工;
2.思路清晰,可快速響應數據處理的需求,評估并給出合理的解決方案,并采用合理的方式處理需求;
3.積極主動,能夠與團隊成員進行有效溝通,并完成數據處理結果的核對與對接;
4.完成上級交辦的工作或任務。
崗位要求
1.計算機相關專業大專以上學歷;
2.2年以上大數據產品或項目開發經驗,精通Hadoop生態圈,熟練使用Spark,HBase、Hive、Kafka、Redis等;
3.精通SQL,熟練使用HSQL實現復雜數據處理邏輯,并具備數據處理調優的能力;
4.熟悉Linux開發環境,熟悉Linux的shell命令。
5.具有良好的邏輯思維能力和嚴謹的程序開發思想,具備獨立問題排查與處理的能力;
6.良好的團隊精神和合作意識,強烈的責任心,對工作有激情,良好的溝通能力,能吃苦耐勞;
7.有大數據項目或產品背景者優先;
8.有使用Spark SQL進行數據處理,并具有Spark SQL優化經驗者優先。
9.有Python或者Shell腳本開發經驗優先
大數據開發工程師的職責文本 篇6
職責:
1、負責根據需求調研結果,進行功能設計、詳細設計;
2、負責需求和設計過程中相關文檔的編制;
3、負責核心代碼的編碼和單元測試;
4、對技術難點進行攻關,并負責知識發布和知識傳遞。
任職要求:
1、全日制公立本科以上學歷,計算機相關專業;
2、有3年以上基于J2EE B/S結構軟件的開發經驗;
3、熟悉HTML、JavaScript、AJAX等相關WEB技術,熟練掌握JQuery類庫;
4、熟悉Servlet、JSP、JavaBean、XML等知識;
5、熟悉spring、springMVC、mybatis框架;
6、熟悉數據庫開發,熟悉ORACLE等;
7、有良好的學習能力、團隊協作能力,主動溝通能力;
8、愛崗敬業,服從指揮,認真負責;
大數據開發工程師的職責文本 篇7
職責:
1、負責參與數據庫選型、給出數據庫設計方案、優化方案;
2、負責數據庫故障恢復、備份、調優;
3、負責監控數據庫資源消耗情況、數據庫運行日志、故障日志,給出解決方案;
4、負責數據庫安裝和配置管理;
5、負責解決數據庫、數據方面的問題。
任職要求:
1、本科以上學歷,計算機及相關專業;
2、兩年以上的數據庫開發經驗;
3、熟悉oracle或者greenplum等常見關系型數據庫,有開發存儲過程(PL/SQL)的經驗;
4、熟悉SQL調優;
5、熟悉數據庫集群、分庫、分表等操作的優先考慮;
6、有greenplum數據開發的經驗優先考慮。
大數據開發工程師的職責文本 篇8
1. 進行UE4圖像效果方面的技術研發,有很強的邏輯思維和獨立解決問題的能力;
2. 使用UE4進行核心功能模塊開發,框架搭建,算法編寫等工作;
3. 精通UE4引擎中的功能模塊,精通C++以及藍圖,有技術攻關能力;
4. 扎實的圖形學和3D數學能力;
5. 開發實現unreal4引擎中的各種圖形效果,包含海水系統、模型shader、毛發系統、布料系統、光照系統
6. 創建工具插件,以優化引擎視頻效果和美術資源制作流程
7. 了解虛幻4渲染管線基本原理
8. 有虛幻4游戲底層架構經驗者優先(網絡層,數據層,邏輯層,UI架構)
大數據開發工程師的職責文本 篇9
職責:
1、開發網站新功能、新模塊;
2、負責項目產品各個功能的完善與維護,新功能代碼編寫及測試;
3、對現有項目進行性能分析、效率優化;
4、參與需求分析、系統設計以及核心代碼的編寫和架構設計;
5、根據不同的業務需求,靈活快速地完成具有挑戰性的項目;
任職資格:
1、從事PHP編程工作3年以上,有大型網站開發經驗、大數據操作經驗者優先;
2、深入理解oop思想,熟悉常見設計模式,熟悉常用框架thinkphp或CI或YII其中一種;
3、優秀的數據庫設計和優化能力,精通Mysql數據庫應用;
4、熟悉Javascript/Ajax/Jquery等相關技術,熟悉前后端技術動向;
5、熟練掌握redis,MongoDB等NoSql, 掌握Elasticsearch
大數據開發工程師的職責文本 篇10
跟客戶溝通,整理分析需求;
制定設計文檔進行開發,測試;
撰寫必要的文檔。
工作要求:
1年以上MES開發或實施經驗;
2年以上項目開發經驗,熟悉SpringMVC/Struts,Hibernate/MyBatis等開發框架;
熟練掌握面向對象的分析及設計方法,以及關系型數據庫結構設計;
熟悉HTML,CSS,Javascript,jQuery等腳本語言,了解Ajax原理;
有良好的表達和溝通能力,能整理和撰寫設計和開發文檔;
樂于學習新技術,有團隊合作精神與集體榮譽感。
大數據開發工程師的職責文本 篇11
職責:
1、根據開發進度和任務分配,完成相應模塊的開發、編程任務;
2、參與維護并不斷發現和改進存在的問題、不斷提升系統性能;
3、積極參與產品、功能與技術架構的改進、參與技術規范的實施。
任職要求:
1.、1-3年以上PHP開發經驗,熱愛軟件開發工作;
2、精通PHP語言,熟悉常用主流框架Laravel、thinkphp等;
3、熟悉MVC開發模式,深入了解php的性能和安全,能獨立完成模塊設計和開發;
4、精通MySQL數據庫,熟悉數據庫設計和性能優化;
5、熟練使用linux系統,熟悉nginx等web服務器的配置和優化。
6、熟悉并開發過微信公眾平臺的優先
大數據開發工程師的職責文本 篇12
職責:
1. 對數據進行結構化、標準化處理,對處理流程進行自動化搭建
2. 通過ETL/Cube數據建模,構建基于數據倉庫的分析工具;
3. 參與數據與公司軟件產品及第三軟件的API對接;
4. 搭建與優化,數據采集、處理、可視化流程中所需的框架與模塊開發;
5. 協同內外部力量完成需求的表達與技術攻關。
任職要求:
1. 熟悉數據庫的設計和開發如:Oracle/Mysql/MSSQL/Redis等,有處理大量數據經驗的優先;
3. 熟練使用ETL工具進行數據抽取,清洗,轉換,關聯等操作;
4. 熟練使用Linux操作系統,具備編寫shell的能力;
5. 熟練使用主流的開發框架,掌握以下語言:Java、Python;了解過源碼的優先;
6. 具有2年以上數據倉庫(DW)、商務智能(BI)、大數據等方面的軟件或項目開發經驗;
7. 了解可視化及BI工具者優先;
大數據開發工程師的職責文本 篇13
職責:
1、負責項目相關模塊功能的開發;
2、維護及優化線上系統性能,提升其穩定性;
3、及時響應并解決系統突發問題。
任職要求:
1、大專及以上學歷,2年以上PHP為主的中大型互聯網產品軟件的開發及維護工作經驗;
2、熟練掌握Laravel、 Thinkphp 框架使用開發;
3、熟悉Linux的基本使用;
4、熟悉Mysql數據庫,熟悉redis、memcached使用及應用場景;
5、熟悉http協議、html/xhtml、javascript等前端技術棧;
6、有微信公眾號、微信小程序相關開發經驗優先。
大數據開發工程師的職責文本 篇14
職責:
1、負責公司CMS系統優化和新產品開發;
2、按照項目計劃,與項目組其他成員協同工作實現開發目的;
3、協助工程師測試和發布系統,準備相關的技術文檔,協助解決各種技術問題;
4、負責文檔撰寫,在前期期間設計交付URL接口文檔、模板數據描述文檔,在編碼期間能撰寫清晰明了的注釋。
任職資格:
1、熟練基于windows/Linux系統的 PHP+MySQL 開發;
2、相關專業畢業,1年以上PHP編程經驗,熟悉Ajax的前臺技術;
3、擁有良好的代碼習慣,要求結構清晰,命名規范,邏輯性強,代碼冗余率低;
4、熟悉ThinkPHP框架開發或者二次開發的優先;
5、能獨立用php開發一般的項目,對軟件編程有較透徹的了解;
6、良好的溝通能力和團隊合作精神。
大數據開發工程師的職責文本 篇15
職責:
1、 與UI設計師、交互設計師、產品經理協作,分析并給出較優的移動界面前端結構解決方案和效果實現;
2、 與后臺開發工程師協作,完成各種數據交互、動態信息展現和用戶的互動;
3、 維護及優化移動端前端頁面執行性能和加載性能,優化前端代碼規范;
4、 負責解決產品在不同移動設備端及不同版本下的兼容問題;
5、 根據產品開發需要,配合相關人員完成產品各部分設計的更新和修改;
任職要求
1、 熟悉微信小程序開發,有實際項目經驗的優先;
2、 熟悉微信H5開發,了解微信jssdk;
2、 熟練運用HTML5、CSS3、Javascript/Jquery/zepto構建高性能的Web應用程序;
3、 熟練使用CSS3動畫,并有一定的項目經驗;
4、 熟悉前端相關標準,對前端語義化、瀏覽器兼容性問題有深入理解;
5、 良好的代碼習慣,結構清晰。命名規范,邏輯性強;
6、 良好的人際溝通與團隊創作能力,能夠按時完成安排的任務。
大數據開發工程師的職責文本 篇16
職責:
1.進行產品需求分析和系統架構設計,負責公司核心業務模塊開發,能獨立攻關系統難點問題。
2.編寫系統架構文檔、接口說明文檔及主要業務流程圖等開發文檔。
3.進行團隊技術管理,為每個版本制定準確的開發計劃并分配給下屬人員進行開發。
4.代碼審計,指導初中級開發人員編碼,協助參與代碼設計、審核和檢查。
5.參與系統穩定性、性能和擴展性調試。
任職要求:
1.計算機、電子、通信、信息處理、電子商務、辦公自動化等相關專業大專以上學歷,有5年以上相關軟件開發經驗;
2.精通web mvc框架、Java、JavaScript,熟悉JSP/Servlet、JavaScript、Ajax、Jquery等WEB技術,至少精通Struts、Spring、Hibernate、iBatis等主流的開源框架之一;
3.有分布式、高可用、高并發系統開發經驗,熟悉Dubbo等分布式框架并有應用經驗;
4.熟練使用Oracle、MySQL、SQL Server數據庫之一,有數據庫性能問題診斷及SQL語句調優經驗;
5.熟悉Linux操作系統,熟悉Shell腳本,熟練使用SVN或Git版本管理工具;
6.熟練使用WebLogic、Tomcat、WebSphere等web應用服務器之一,熟悉nginx、Apache等的安裝、配置;
7.參與過大型項目軟件的開發,有團隊精神和敬業精神,具備良好的自我學習能力和獨立的解決問題能力,能夠帶領小團隊在指定時間內完成高質量程序;
大數據開發工程師的職責文本 篇17
職責:
1.、負責平臺web前端和webapp端設計和開發;
2.、設計和實現面向開發者的平臺套件和功能組件;
3、通過前端自動化構建工具和測試工具,對現有模塊進行完整構建和測試;
4、完成前端核心模塊的相關文檔;
5、2年以上web應用程序開發經驗,至少1年web站點的實際開發經歷;
6、與設計師、產品工程師緊密工作在一起,負責產出高質量的產品前端層;
7、在理解前端開發流程的基礎上,結合前端實際建立或優化提升工作效率的工具;
8、參與多種平臺的應用開發,包括Web及Mobile等產品,負責前端交互的實現。
任職要求:
1、熟練掌握Web及H5前端開發技術,有復雜應用開發及性能調優經驗;
2、能充分理解項目需求和設計需求,具有一定研發精神,能解決各種未知問題;
3、能熟練高效手工編寫HTML及CSS、JS代碼,熟悉DIV+CSS布局,確保代碼對各種
瀏覽器的良好兼容性;
4、熟練掌握一種以上js框架Vue或是React 技術棧,了解 webpack的使用和原理,對
http協議有一定理解;
5、熟悉Git版本管理和了解Git-flow;
6、熟悉React.js、redux、React Native;
7、有開源項目經驗優先,熟悉服務器端語言者優先;
8、了解模塊化、前端編譯和構建工具;