大數據開發工程師的主要職責(精選28篇)
大數據開發工程師的主要職責 篇1
職責:
1、負責公司大數據平臺建設;
2、根據業務需求,制定數據倉庫和數據分析平臺的實施和持續更新;
3、攻克技術難關,保證大數據系統的穩定運行;
4、完成大數據產品的開發。
職位要求:
1、計算機相關專業全日制專科及以上學歷,大數據相關經驗;
2、熟悉Java或Scala語言,熟悉Spark,Hadoop,Kafka,Hive,HBase,ZooKeeper等大數據相關技術;
3、精通SQL語句并對Redis,Mongodb等NoSQL數據庫有一定經驗;
4、對于高并發、高穩定可用性、性能、大數據處理有過實際項目產品經驗者優先;
5、責任心強,工作踏實,有團隊協作精神,溝通能力強者優先。
大數據開發工程師的主要職責 篇2
職責:
1.負責公司環保大數據平臺的架構與搭建;
2.負責需求分析,根據客戶應用需求規劃大數據平臺架構;
3.負責將大數據平臺部署至私有服務器群、私有云或公有云;
4.負責在企業內部進行數據平臺原型開發與數據實時交互、存儲性能測試;
5.負責與數據挖掘算法交互的架構設計與開發。
任職要求:
1.計算機相關專業,全日制本科以上學歷;
2.具有3年以上大數據相關應用開發經驗,有Java開發經驗更佳;
3.至少熟悉一種流行的大數據編程框架,如Spark,Storm,Flink等;
4.熟悉大數據生態圈常用技術如RocketMQ,Kafka,Flume,Zookeeper等;
5.熟悉Hadoop安裝、調試、發布配置應用,熟悉Linux操作系統更佳;
6.至少熟悉TIDB,MySQL,SQLServer其中一種數據庫;
7.學習能力強,對技術有熱情,關注技術發展方向;
8.具有工業物聯網、智慧型環保項目背景者優先。
大數據開發工程師的主要職責 篇3
職責:
1、負責公司項目應用監測數據,分析軟件大數據平臺的代碼開發;
2、負責大數據體系架構設計和應用產品的研究;
3、負責大數據平臺及應用場景的構建、部署、測試;
4、編寫軟件研發相關技術文檔;
5、編寫產品研發相關任務單計劃,階段性代碼、技術方案和軟件產品及時提交至配置管理理庫;
6、Spark程序的研發,sqoop腳本開發和商家用戶行為等離線分析數據;
7、kudu,kylin等技術調研,編寫軟件研發相關技術文檔;
8、SUNMI數倉設計架構以及ETL流程開發;
9、建立多維度,多體系的用戶標簽體系以及用戶行為數據庫。
崗位要求 :
1、本科以上學歷,4年以上?工作經驗,2年以上Hadoop平臺的相關研發經驗,具有良好的需求分析,方案設計,架構設計,程序編寫、測試能力;
2、熟悉J2EE或Python平臺開發,有良好的Java或Python語言功底;
3、了解Linux/Unix操作系統,了解腳本編程(Shell/Python其中一種);
4、具備數據中心資源管理(YARN)、監控(ClouderaManage)、調度(Azkaban)等系統研發經驗者優先,具備分布式系統研發經驗者優先;
5、熟悉hadoop以及其?生態圈系統上的hive、hbase、sqoop、spark、spark-streaming等技
術,懂hadoop源碼者優先;
6、熟悉Kylin有OLAP平臺設計和開發經驗優先;
7、具有應用大數據技術處理TB級以上數據的項目開發經驗者優先;
8、有較清晰的代碼編寫規范,邏輯性強,工作態度認真,良好溝通能力和團隊合作精神。
大數據開發工程師的主要職責 篇4
職責:
1、 負責基于Hadoop/Spark平臺架構的開發、設計和布局 ;
2、 完成系統框架的設計和核心代碼的編寫;
3、 針對海量的用戶行為數據進行統計、分析與挖掘,不斷提高系統運行效率;
4、 負責對數據進行分析,為項目組提供大數據技術指導及分析手段支撐;
5、 負責大數據平臺的性能監控和持續優化;針對需求提供大數據分析技術解決方案 ;
6、 大數據平臺的運維工作,持續完善大數據平臺,保證穩定性、安全性;
7、 熟練使用大數據ETL數據抽取工具;
8、領導安排的其他工作。
任職資格:
1、 3年互聯網行業開發經驗,計算機或相關專業本科以上學歷;
2、 精通Hadoop大數據平臺架構,具有扎實的Java/Python等開發語言;并可以開發高效可靠的代碼;
3、 具有較強的數據分析、數據挖掘的能力;
4、 熟悉spark、Hive、storm等計算框架者優先,對分布式存儲和計算原理有較深的理解;
5、 嚴密的數學思維、突出的分析和歸納能力、優秀的溝通表達能;
6、 個性開朗,對技術鉆研好學、邏輯思維能力強,溝通能力優秀,有團隊合作精神。
大數據開發工程師的主要職責 篇5
職責:
1. 負責機票酒店大數據項目的評估、設計及關鍵模塊研發;
2. 參與公司大數據平臺及聯機分析系統的建設;
3. 機器學習算法討論、評估及算法的最終編碼實現;
4. 數據平臺開發規范制定,數據建模及核心框架研發;
任職要求:
1. 本科及以上學歷,計算機或數學相關專業,三年以上相關工作經驗;
2. 掌握Java、Python、Scala等 中的一到兩種語言;
3. 熟悉Mongodb、Hive、Hbase、Redis等NoSQL數據庫開發和調優;
4. 熟悉數據相關開源框架和工具,如ZooKeeper、Spark、Flink、Impala、Kylin 等;
5. 對數據結構和機器學習算法有一定的了解;
6. 具有海量數據處理、數據挖掘、數據分析相關項目的工作經驗者優先;
7. 有機票酒店等旅游行業數據開發經驗者優先。
大數據開發工程師的主要職責 篇6
1.負責顯示圖像處理相關的FPGA RTL架構及子模塊設計,工程綜合及時序分析,解決開發過程中出現的技術問題;
2.負責芯片化IP開發工作,對應芯片化代碼綜合及驗證;
職位要求:
熟悉FPGA原理,熟悉HDMI、DP和網口等接口調試,熟練掌握FPGA開發軟件、硬件描述語言,熟悉DDR控制設計
有豐富的圖像處理或圖像識別相關FPGA項目開發經驗、有較多的復雜工程整合和時序分析經驗,有RTL代碼測試經驗
大數據開發工程師的主要職責 篇7
1、根據設計文檔或者需求說明,完成代碼編寫、調試、測試、部署和維護;
2、負責系統的總體技術方案與系統設計,系統的質量控制;
3、負責公司應用系統項目的推進工作;
4、負責完成公司或部門交付的工作任務。
大數據開發工程師的主要職責 篇8
職責:
1. 編寫存儲過程和SQL腳本實現復雜業務邏輯;
2. 根據業務邏輯完成數據庫表設計,和整個數據的抽取清洗轉換過程(ETL),以及數據輸出;
3. 對于運行緩慢的SQL語句調優;
4. 數據處理自動化腳本部署和維護。
5、定時巡查數據庫系統,發現潛在問題和性能瓶頸,并預警
【任職要求】
大專以上學歷,計算機相關專業,有存儲開發經驗;
2、數據Oracle或SQLSERVER的運行機制,熟練掌握Oracle或SQLSERVER的基本操作和調優;
3、精通SQL語句,基礎扎實
大數據開發工程師的主要職責 篇9
職責:
1. 負責公司項目微信小程序的開發;
2. 負責與服務端完成接口聯調;
3. 能夠正確理解需求,并獨立完成代碼編寫并自測;
4. 有獨立鉆研解決工作中疑難問題的能力
崗位要求:
1. HTML、CSS、JavaScript 基礎扎實;
2. 至少3年以上工作經驗,熟悉微信小程序的開發流程,熟悉小程序開發API,并有相關項目開發經驗;
3. 有前端框架(如Angular.js、Vue.js(主要)、React.js等)項目經驗者優先,對Weex框架熟練;
4. 有良好的編碼習慣,結構清晰、命名規范、邏輯性強;
5. 優秀的溝通能力,積極的工作態度,具有良好的團隊協作精神;
6. 可以承受較強的工作壓力;
7. 熟悉后臺等其中一種后臺語言優先;
8. 善于分析問題,并用簡單的方案解決復雜問題,化繁為簡。
大數據開發工程師的主要職責 篇10
職責:
1、負責運維系統、平臺的構建與開發工作
2、負責運維自動化、規范化解決方案的開發工作
3、深入理解系統,為其持續優化提供建設性意見
4、完成領導交代的其他臨時性工作。
崗位要求
1、具有5年以上開發經驗
2、本科及以上學歷,計算機相關專業優先
3、主動、正直、有責任心和團隊協作意識
4、精通Java語言、網絡及多線程編程,掌握Spring、SpringCloud等常用框架技術
5、熟悉常見的開源技術,如HBase、Redis、KafKa、Dubbo、ZooKeeper等,并具備一定的經驗
6、良好的服務器端編程能力和編程習慣,對設計模式深入理解
7、了解互聯網產品運維、監控,具有大型運維系統、監控系統、工作流系統開發工作經驗者優先
大數據開發工程師的主要職責 篇11
職責:
1、負責Devops流水線工具開發、運維工具、自動化安裝部署、數據監控分析等平臺/工具的開發工作
2、熟練使用Django/flask/webpy或其他python web框架
3、熟悉Ansible/Saltstack等主流運維工具的配置、管理、使用
4、熟練掌握html、jquery、ajax等前端知識,并有實際開發經驗
5、熟悉Jenkins、maven、Github、Gitlab等工具
任職要求:
1、具有3-5年互聯網運維平臺開發經驗,能獨立進行功能開發
2、精通Python和shell編程,熟悉Python常用框架(Django、Flask、webpy等);
3、熟練掌握html、jquery、ajax等前端知識,并有實際開發經驗
4、熟悉Ansible/Saltstack等主流運維工具的配置、管理、使用
5、熟悉Jenkins、maven、Github、Gitlab等工具
6、熟悉Linux系統,有Linux應用系統運維相關經驗
大數據開發工程師的主要職責 篇12
職責:
1、協助收集行業技術資料,收集專業領域內的技術信息,為領導決策提供信息支持。
2、參與新產品開發和產品完善,承擔簡單系統原理設計,原理圖、接線圖繪制;編寫調試程序,測試或協助測試開發的系統設備,確保其按設計要求正常運行;維護管理或協助管理所開發的系統;提出產品改進建議和新產品開發提議。
3、技術文檔編寫,建立完整的系統設計技術文檔;編寫裝置使用說明。
崗位要求:
1、本科及其以上學歷,電力電子、自動化相關專業。
2、有相關項目研發經驗。
3、掌握電力電子、數字、模擬電路基礎知識;熟練掌握matlab、autocad軟件,熟悉C語言、Verilog或VHDL開發邏輯設計。
4、熟練使用自動化辦公軟件和相應計算機輔助設計軟件,流暢閱讀和理解英文資料。
5、較強的學習能力、溝通能力、計劃與執行能力。較強的成就動機、責任心、團隊合作精神。
大數據開發工程師的主要職責 篇13
1、負責Android Framework開發和維護;
2、負責Android應用開發;
3、負責系統性能調優;
4、參與重大技術問題的技術攻關;
5、整理和輸出規范的代碼和設計文檔。
大數據開發工程師的主要職責 篇14
職責:
1.和產品經理溝通產品需求;
2.進行業務需求系統分析,提出技術研究及可行性報告及系統概要設計;
3.系統子模塊設計和數據庫設計;
4.詳細設計、代碼編寫和單元測試;
5.評審其它團隊成員的代碼;
6.調研、評估最新云服務技術并應用到當前項目。
任職要求:
1.計算機相關專業,本科及以上學歷(985/211優先考慮),3年以上J2EE工作經驗;
2.熟練使用主流的開發框架,SpringMVC、MyBatis、SpringBoot等;
3.具有豐富的mysql使用與開發經驗,以及Redis等緩存數據庫技術經驗;
4.熟悉微服務設計;
5.熟悉maven/gradle、git,熟悉tomcat、nginx等開源項目
6.有高并發及大數據量系統開發經驗的優先;
7.有Restful API、spring cloud、dubbo開發經驗者的優先;
8.有GIS開發經驗的優先。
大數據開發工程師的主要職責 篇15
職責:
1.參與產品需求分析及評審,設計產品解決方案;
2.負責系統架構、數據庫、接口設計等工作;
3.負責系統核心代碼開發;
4.參與日常開發和測試工作,解決開發中的技術問題;
5.解決日常和線上系統問題,及時處理系統問題;
崗位要求:
1.計算機或相關專業本科及以上學歷,1年以上工作經驗;
2.熟練掌握Java語言,有服務器端開發經驗者優先;
3.熟悉 SSH 開發框架,具備maven實際項目使用經歷,具備接口編程思想,有大型應用開發經驗者優先;
4.熟練應用HIBERNATE持久層技術以及JPA、Spring、SpringMVC,Mybatis等;
5.熟悉MySql,Oracle,具備一定的數據庫設計優化能力;
6.有dubbo框架使用經驗優先,有分布式開發、高并發性能調優經驗者優先
7.具備扎實的數據結構及算法基礎;
8.優秀的學習能力、分析和解決問題的能力及強烈的進取心;
9.誠懇、踏實,對技術與工作充滿熱情,具備良好的溝通能力和團隊合作精神.
大數據開發工程師的主要職責 篇16
職責:
1、依據業務需求邏輯和功能模塊的設計思路,負責平臺項目產品的開發和技術文檔的撰寫,并主導實施。
2、監控系統運行健康狀態,及時優化系統性能,支持產品應用服務。
3、參與軟件質量審查,提升開發質量和效率。
4、完成項目的核心編碼,支撐企業SOA服務化設計和實施,配合項目主管做好項目管理 。
5、參與部分產品的架構預研并做技術分享 。
6、全程參與產品的需求分析、設計、開發以及測試幾個階段 。
任職資格:
1、計算機相關專業本科以上學歷。
2、2年以上JAVA項目開發經驗;有過大型項目經驗優先考慮。
3、Java基礎扎實、理解JVM原理、有多線程、并發系統開發經驗的優先考慮;熟悉jsp、Jquary、JavaScript/Ajax。
4、熟悉主流開源框架,如Spring、spring mvc、elasticsearch等;
5、掌握分布式系統原理和實踐,出色的工程意識和架構設計能力。有SOA架構開發經驗優先。
6、優秀的分析問題和解決問題的能力。
7、責任心強,做事細心 、有恒心和毅力、具備良好的團隊合作精神和承受壓力的能力。
大數據開發工程師的主要職責 篇17
職責:
1.負責移動互聯網產品服務器端的設計和研發工作。
2.按時高質量的完成上級安排的開發任務和工作,配合測試團隊進行負責模塊測試回歸和修改BUG。
3.按照團隊的開發編碼規范進行開發,編寫規范化、易閱讀、可擴展、便維護、高性能、安全性的代碼。
4.參與團隊的技術分享、溝通和交流,具備與多人、多團隊溝通和協作進行開發的能力。
崗位要求:
1.3年以上Java EE開發經驗,計算機相關專業專科以上學歷,具有扎實的計算機基礎理論知識,對Java底層、泛型、反射、Annotation有深刻的理解。
2.靈活使用常見設計模式,深入理解Spring、SpringMVC、MyBatis、Spring Boot等常用框架的原理。
3.能夠基于MySQL數據庫靈活、高效地設計和編寫出滿足業務需求的SQL和相關表結構。
4.能夠使用Redis、ZooKeeper、緩存、隊列、多線程、線程池、ThreadLocal、Elasticsearch、Quartz、RESTFul、Oscached、ActiveMQ/RabbitMQ/RocketMQ等技術開發項目。
5.具備一定的Web安全經驗,深刻知道防SQL注入、防文件上傳漏洞、防XSS跨站腳本攻擊、防CSRF/XSRF跨站請求偽造攻擊、防表單重復提交、敏感詞過濾和處理、敏感數據安全性、重要資源安全性等的重要性。
6.要了解或者知道Maven、Jenkins、GIT、Eclipse/IDEA等相關工具的使用。
7.正直誠信、有責任感、有激情、有好奇心; 對技術有強烈的興趣,喜歡鉆研,有優秀的學習能力和技術落地轉化能力;
8.參與開發過大型分布式架構的電商項目,或者使用過Dubbo開發過大型分布式架構的電商項目,具備這些經驗優先考慮。
9.具備Spring Cloud體系項目經驗優先考慮。
大數據開發工程師的主要職責 篇18
1.具有無線路由器產品系統開發經驗,熟悉主流無線路由器芯片方案開發,具有IPQ平臺開發經驗者優先;
2.熟悉基于OpenWRT或Linux的無線路由固件開發,能夠對路由固件系統進行裁剪和定制開發;
3..對路由網關產品內核及iptable,網卡驅動,網絡協議棧有相當了解,熟悉DNS、DHCP、NTP、HTTP等應用層協議;
4.精通Linux網絡體系結構或其它嵌入式系統C語言編程,SHELL編程。
5.熟悉無線路由器底層開發,熟悉網絡編程及相關網絡協議,熟悉luci深度定制。
大數據開發工程師的主要職責 篇19
職責
1、負責公司企業SaaS產品線與相關平臺的后端核心技術和業務開發;
2、接收產品部設計,帶領前端開發,配合產品與測試團隊,實現產品設計等相關工作,逐步完善軟件產品架構;
3、配合技術總監,負責和參與相關技術的技術選型和核心代碼編寫,擬定技術標準;
4、負責技術團隊建設及技術培訓工作,帶領團隊鉆研新的技術;
5、跟蹤和研究IT新技術、新產品的發展方向,推動新技術應用。
任職條件
1、計算機、軟件工程專業本科或以上學歷,5年以上Java的開發經驗,企業產品與業務理解能力優秀;
2、深刻了解常用java框架(spring, mybatis,Hibernate等),能夠整合和開發自有框架、開發工具;
3、具有設計并實現高并發、高可用Java應用的能力。熟悉分布式緩存、分布式存儲技術方案;
4、熟悉Linux環境與TCP網絡,熟悉容器(Tomcat等)的配置和使用,了解shell腳本工具;
5、思路清晰,善于思考,能獨立分析和解決問題;責任心強,具備良好的團隊合作精神;
6、能夠平衡業務需求與技術架構,具備較強的邏輯思維能力和表達溝通能力,有很強的自學能力,喜歡鉆研技術。
大數據開發工程師的主要職責 篇20
職責:
1、負責公司WMS,OMS,TMS,BMS等產品的核心功能開發及相關開發文檔的編寫;
2、參與公司物流產品對外接口的設計與開發;
3、編寫相關業務場景的技術解決方案;
4、完成領導安排的其它工作。
崗位要求:
1、計算機或相關專業大專及以上學歷;
2、3年及3年以上軟件產品開發經驗且成功上線運行;
3、JAVA基礎扎實, 包括多線程、集合、緩存、消息隊列、全文搜索等;
4、對于主流的開源框架,能夠熟練使用,包含但不限于Springboot、SpringCloud,SpringMVC,Mybatis、Dubbo、Redis框架進行項目開發;熟悉微服務相關框架使用,熟悉分布式原理有分布式應用開發經驗者優先;
5、掌握前端基礎,包括JS、JQuery、HTML、CSS;熟悉使用一種以上前端UI框架,包括jqueryui、layui、bootstrap、element、mui優先;
6、熟悉Oracle,Mysql,SQLserver等主流數據庫,熟練使用Oracle者優先,有熟練的SQL編寫能力者優先;
7、熟悉常用的設計模式,有大型分布式、高并發、高負載、高可用性系統的設計開發經驗者優先;
8、具有規范的開發文檔寫作能力及有一定的項目管理能力,具有良好的邏輯思維能力、溝通能力,良好的團隊配合能力,具有一定的抗壓能力;
9、有WMS,OMS,TMS,BMS,SCV,BI等相關開發經驗者優先。
大數據開發工程師的主要職責 篇21
職責:
1、協助開發主管/高級軟件開發成員完成所負責的各種開發任務、具備良好的溝通交流和邏輯思維能力、有責任心,有團隊精神,樂于幫助同事者優先
2、負責與其他開發成員一起,按時完成系統功能的各種前后臺編碼實施
3、負責對平臺各種功能完善、 bug修復、性能優化、安全監控….問題進行修復
4、完成領導交待的其它開發任務
5、有電商平臺行業開發經驗者優先
崗位要求:
1、計算機或相關專業專科以上學歷,1-2年JavaEE開發經驗,熟悉Java、Jquery、io、多線程、集合、分布式、緩存、消息、搜索等機制……,有NodeJs、Python、LinuxShell、Html5、Android、IOS……其它開發語言經驗者優先
2、具有較強的事業心、對工作認真負責、主動性強、有敬業精神,勇于面對困難和接受挑戰
3、具有一定的項目開發經驗、有良好的團隊協作能力和溝通能力
4、 熟悉或了解使用常用開發框架,如:Spring Boot、Hibernate、Spring MVC、EasyUI、AngularJS、Require……
5、熟悉或了解常用的web server,如Tomcat、Weblogic、Websphere、JBoss、jetty……中的一種或多種
6、熟悉或了解數據庫設計和優化,如Oracle、MYSQL、Redis、Solr……有NoSQL 數據庫使用經驗者優先
7、熟悉或了解Eclipse、WebStorm、SVN、GIT、UML、Redmine……常用工具多種或一種
8、熟悉或了解前后端開發與有良好代碼規范者優先
大數據開發工程師的主要職責 篇22
1、根據公司項目發展方向,完成手機客戶端、桌面客戶端產品研發。
2、手機APP應用開發(基于android或IOS)。
3、負責Android或IOS系統平臺上的客戶端軟件的產品開發與維護
大數據開發工程師的主要職責 篇23
1.基于JAVA的軟件設計與開發(J2EE);
2.參與軟件的業務建模、模塊設計、編碼設計
3.負責軟件代碼的編寫、數據庫設計。
4.能獨立解決技術問題。
大數據開發工程師的主要職責 篇24
1、負責手機棋牌客戶端各項系統功能開發、優化、修復Bug問題;
2、參與客戶端架構設計以及優化,模塊測試,以及與服務端開發對接;
3、參與技術文檔的編寫、研發流程的優化;
大數據開發工程師的主要職責 篇25
職責:
1、負責Web產品前后端開發和項目定制開發;
2、負責UI/UE設計、技術實現,能獨立解決開發中的重難點問題;
3、負責對現有產品提供維護和支持,及時解決運行過程中出現的問題;
4、對分配的軟件功能模塊進行設計、編碼、維護,符合公司規定的規范要求;;
5、根據產品經理的策劃,完成產品的設計開發、代碼編寫,撰寫技術文檔和技術報告。
6、跟蹤新技術發展,并將其應用于產品中
崗位要求:
1、全日制本科以上學歷,計算機相關專業,3年以上相關開發工作經驗;
2、具備良好的計算機基礎、編程能力、分析能力,熟悉常見的數據結構和算法,對Html/Java語言有一定的了解;
3、熟練使用后端主流開源框架(Spring MVC/MyBatis)進行快速開發,以及熟悉Web前端開發技術(Html/Javascript/CSS),熟悉流行的Web前端框架(JQuery/Bootstrap);
4、熟悉Oracle、MSSQL、MySQL至少一種主流關系型數據庫;
5、熟悉常用服務器的配置及維護和管理等工作;
6、有創業創新精神,抗壓能力強,具有良好的學習能力、語言表達能力、溝通能力
大數據開發工程師的主要職責 篇26
職責:
1.參與基于JAVA技術的應用系統開發;
2.參與需求分析,根據具體的模塊需求,獨立完成模塊的設計編碼工作;
3.負責所開發模塊的故障修復、性能調優等;
4.根據開發規范與流程完成系統設計、編碼、測試以及相關文檔的編寫;
任職要求:
1.計算機相關專業本科及以上學歷,3-5年以上Java開發經驗
2.熟練掌握Java、HTML/Javascript/CSS,JSP/Servlet等JAVAEE相關技術,有vue相關經驗更佳;
3.熟練掌握MySQL等數據庫;
4.熟練掌握Tomcat等應用服務器、nginx等負載均衡軟件;
5.精通MVC模式下的B/S開發,熟悉Spring/Springboot/SpringMVC/MyBatis等開源框架;
6.敬業、責任心強,良好的溝通能力。
大數據開發工程師的主要職責 篇27
職責:
1、負責數據分析、加工、清理、處理程序的開發;
2、負責數據相關平臺的搭建、維護和優化;
3、負責基于Hadoop/Spark/Hive/kafka等分布式計算平臺實現離線分析、實時分析的計算框架的開發;
崗位要求:
1、本科學歷須211院校以上,碩士及以上學歷不限院校,計算機軟件及相關專業
2、熟悉Java和Scala語言、熟悉常用設計模式、具有代碼重構意識;
3、熟練使用hadoop、hbase、Kafka、hive、spark、presto,熟悉底層框架和實現原理;
4、使用Spark Streaming和Spark SQL進行數據處理, 并具有SPARK SQL優化經驗;
5、需要有至少2年開發經驗,有flink開發經驗優先;
6、學習能力強,喜歡研究新技術,有團隊觀念,具備獨立解決問題的能力。
大數據開發工程師的主要職責 篇28
職責:
1. 負責公司APP的設計研發;
2. 負責項目某個單元的產品功能需求分析、設計、開發工作;
3. 負責系統架構設計和性能優化;
4. 解決開發中遇到的關鍵問題和技術難題;
5. 協調和指導的部分開發人員的開發工作;
6. 協助保證研發工作的質量和進度,找出系統瓶頸,改進系統算法,提高系統性能;
7. 參與公司重大項目的技術方案設計及技術評審;
8. 遵守團隊的代碼格式、代碼安全、代碼結構的規定,編寫易讀、易維護、高效率的代碼;
9. 互聯網前沿技術研究和新技術應用。
崗位要求:
1、本科或以上學歷,計算機相關專業畢業,具有良好和規范的代碼書寫習慣;
2、精通PHP,熟悉 Linux+Nginx+php+Mysql 網站架構,熟悉設計模式;
3、3年以上網站或互聯網產品開發經驗,對高并發有著深刻的實踐;
4、了解 Linux 操作,有 LNMP 的部署與性能調優經驗;一定英文文檔閱讀能力;
5、具有較強的團隊意識,高度的責任感,對工作積極嚴謹,勇于承擔壓力。