數(shù)據(jù)平臺崗位職責（精選17篇）

數(shù)據(jù)平臺崗位職責 篇1

　　職責描述:

　　1.負責租賃行業(yè)大數(shù)據(jù)平臺架構規(guī)劃、技術落地、與開發(fā)團隊協(xié)同實施;

　　2.負責需求調研、需求分析,編寫需求分析說明書,負責項目全周期管理;

　　3.組織uat測試方案制定、測試案例準備,負責測試環(huán)境搭建、以及對項目進行驗收測試。

　　任職要求:

　　1.計算機軟件或信息系統(tǒng)相關專業(yè)碩士以上學歷;

　　2.具有三年及以上大數(shù)據(jù)系統(tǒng)架構規(guī)劃及系統(tǒng)建設相關的工作經驗;

　　3.精通大數(shù)據(jù)平臺存儲、計算及算法相關技術,精通機器學習相關模型與算法、或nlp或計算機圖像識別等相關理論及技術,熟悉精益(敏捷)項目管理、瀑布式項目管理流程,有項目經驗者優(yōu)先;

　　4.有強烈的技術思維及自我突破的欲望,性格外向、善于組織溝通、文字表達能力強。

數(shù)據(jù)平臺崗位職責 篇2

　　職位描述：

　　1、基于每日百億級展現(xiàn)數(shù)據(jù)，搭建大數(shù)據(jù)處理平臺;實現(xiàn)流式事件的實時計算，落地儲存。對于離線數(shù)據(jù)完成數(shù)據(jù)倉庫的建立，為數(shù)據(jù)挖掘提供有效的數(shù)據(jù)。

　　2、使用用戶行為數(shù)據(jù)，廣告投放數(shù)據(jù)，挖掘數(shù)據(jù)層次關系，利用機器學習算法，解決媒體、流量、充分競價等對優(yōu)化廣告投放流程，

　　3、數(shù)據(jù)分析，挖掘，模型具體的產品化；了解廣告業(yè)務能，和pm合作，基于數(shù)據(jù)驅動持續(xù)優(yōu)化數(shù)據(jù)產品。

　　任職要求：

　　1、熟悉c++、java、python中的一種或多種編程技術，編程能力強，熟悉大數(shù)據(jù)處理技術，善于學習應用業(yè)界領先數(shù)據(jù)架構和技術。

　　2、熟悉數(shù)據(jù)挖掘算法，包括數(shù)據(jù)清洗、統(tǒng)計學習、分類聚類算法，并能夠驗證算法效果，將算法應用在廣告業(yè)務中。

　　3、善于學習，有想要折騰的想法。有廣告調優(yōu)背景優(yōu)先，對廣告行業(yè)有自己思考的優(yōu)先。

數(shù)據(jù)平臺崗位職責 篇3

　　工作職責:

　　1、負責離線計算平臺的開發(fā)和維護工作;

　　2、負責hbase/tidb的開發(fā)與維護工作;

　　3、負責alluxio/arrow等開發(fā)與維護工作。

　　任職要求:

　　1、5年以上相關領域開發(fā)經驗,熟悉java/go/c++的一種;

　　2、對數(shù)據(jù)庫系統(tǒng)或分布式系統(tǒng)的原理和架構有較好的了解;

　　3、優(yōu)秀的發(fā)現(xiàn)和解決問題能力,良好的溝通能力和團隊意識。

　　加分項:

　　1、熟悉hadoop生態(tài),參加過開源項目;

　　2、熟悉hive、spark、hdfs、hbase、tidb中至少一種產品的實現(xiàn)細節(jié);

　　3、有數(shù)據(jù)庫/數(shù)據(jù)治理產品的開發(fā)和運維經驗。

數(shù)據(jù)平臺崗位職責 篇4

　　工作職責:

　　1.構建分布式大數(shù)據(jù)服務平臺,參與和構建公司包括海量數(shù)據(jù)存儲、離線/實時計算、實時查詢,大數(shù)據(jù)系統(tǒng)運維等系統(tǒng);

　　2.服務各種業(yè)務需求,服務日益增長的業(yè)務和數(shù)據(jù)量;

　　3.深入源碼內核改進優(yōu)化開源項目,解決各種hadoop、spark、hbase疑難問題。

　　4.負責管理大數(shù)據(jù)工程團隊。

　　任職資格:

　　1.計算機或相關專業(yè)本科以上學歷(5年以上工作經驗);

　　2.精通c++/java/scala程序開發(fā)(至少一種),熟悉linux/unix開發(fā)環(huán)境;

　　3.熟悉常用開源分布式系統(tǒng),精通hadoop/hive/spark/storm/flink/hbase/kafka/flume之一源代碼,解決問題;

　　4.有大規(guī)模分布式系統(tǒng)開發(fā)、維護經驗,有故障處理能力,源碼級開發(fā)能力;

　　5.具有良好的溝通協(xié)作能力,具有較強的分享精神;

　　6.對kudu、kylin、impala、elasticsearch,github等系統(tǒng)有深入使用和底層研究者加分。

數(shù)據(jù)平臺崗位職責 篇5

　　職位描述：

　　負責騰訊微校數(shù)據(jù)平臺搭建與數(shù)據(jù)分析工作；

　　承擔大數(shù)據(jù)etl、高效計算、即時查詢等數(shù)據(jù)處理分析工程開發(fā)；

　　bi與大數(shù)據(jù)產品架構設計與開發(fā)。

　　任職要求：

　　本科及以上學歷，數(shù)學或計算機相關專業(yè)背景；

　　有互聯(lián)網(wǎng)公司的從業(yè)經驗，三年以上數(shù)據(jù)平臺開發(fā)或數(shù)據(jù)分析工作經驗；

　　熟練掌握sql語言，了解hadoop、hbase、hive、spark、flink等組件的工作原理；

　　熟悉機器學習、數(shù)據(jù)挖掘、數(shù)據(jù)分析、分布式計算至少一方面，有較深的理論研究和實踐經驗優(yōu)先；

　　熟練掌握scala/java/python中的至少一門語言，有其他腳本語言開發(fā)經驗的優(yōu)先；

　　數(shù)據(jù)敏感，有良好的邏輯思維能力，較強的溝通能力和團隊合作精神，勇于承擔工作壓力。

數(shù)據(jù)平臺崗位職責 篇6

　　職位描述：

　　1、參與小鵬汽車技術中臺的大數(shù)據(jù)云平臺產品建設，包括：實時計算處理平臺、離線計算處理平臺、調用鏈分析監(jiān)控、日志處理平臺；

　　2、分析系統(tǒng)瓶頸，處理、協(xié)調和解決基礎框架中出現(xiàn)的技術問題；

　　3、大數(shù)據(jù)新技術研究和應用，并推動適合技術應用于生產；

　　任職要求：

　　1、計算機相關專業(yè)，本科或以上學歷，五年以上開發(fā)工作經驗，有基礎架構開發(fā)經驗優(yōu)先；

　　2、熟練java、python服務端編程，有良好的編碼習慣；

　　3、深入理解mapreduce，熟練使用storm/flink、hadoop、spark，并閱讀部分源碼；

　　4、熟練使用hadoop、hdfs、hbase、kafka、elasticsearch；

　　5、具有自然語言處理、信息檢索、機器學習、web挖掘、搜索引擎、推薦引擎等相關經驗優(yōu)先；

　　6、熟悉docker容器及容器化技術，有kubernetes實戰(zhàn)經驗者優(yōu)先；

　　7、對新技術有執(zhí)著追求，熱愛編程。善于抽象、總結、思考，能及時關注和學習業(yè)界最新技術；

　　8、有較強的自學能力和鉆研精神，具有良好的溝通能力和團隊合作能力，綜合能力強。

數(shù)據(jù)平臺崗位職責 篇7

　　職位描述：

　　1.負責廣告數(shù)據(jù)平臺實時指標計算、歸因、實驗平臺等業(yè)務的計算架構設計與開發(fā)；

　　2.負責對實時計算服務的性能進行優(yōu)化；

　　3.負責指導其他工程師進行業(yè)務功能開發(fā)。

　　任職要求：

　　1.3年以上相關工作經驗，計算機相關專業(yè)本科及以上學歷；

　　2.具備扎實的java語言基礎；

　　3.熟悉并行計算或者分布式計算原理，熟悉高并發(fā)、高穩(wěn)定性、可線性擴展、海量數(shù)據(jù)的系統(tǒng)特點和技術方案；

　　4.有storm/sparkstreaming/flink等數(shù)據(jù)平臺的開發(fā)和使用經驗；

　　5.對性能調優(yōu)，算法效率和分布式計算的資源管理策略有較深的理解；

　　6.熟悉zookeeper/kafka/hadoop/hbase/flume/redis等平臺者優(yōu)先；

　　7.具備較強的業(yè)務需求分析能力，問題定位能力良好的溝通能力和自我學習能力。

　　額外加分項:

　　github等開源社區(qū)貢獻者。

數(shù)據(jù)平臺崗位職責 篇8

　　職位描述：

　　1、面向公司的大數(shù)據(jù)開發(fā)套件產品設計與研發(fā)，包括大數(shù)據(jù)任務建設平臺，元數(shù)據(jù)管理系統(tǒng)，數(shù)據(jù)質量監(jiān)控平臺，任務運維平臺等

　　2、參與需求調研與用戶技術支持

　　3、追求極致，構建業(yè)內領先的數(shù)據(jù)平臺產品

　　任職要求：

　　1、精通java/scala語言，包括jvm、類裝載、線程、并發(fā)、io資源管理、網(wǎng)絡

　　2、扎實的計算機基礎，對技術有熱情，愿意不斷嘗試新技術和業(yè)務挑戰(zhàn)

　　3、精通soa架構和微服務架構

　　4、有ide開發(fā)經驗者優(yōu)先考慮

　　5、熟悉前端技術的全棧開發(fā)工程師優(yōu)先

　　6、熟悉hadoop ecosystem常用開源框架者優(yōu)先，例如hadoop/flink/spark等

數(shù)據(jù)平臺崗位職責 篇9

　　1、負責騰訊云數(shù)據(jù)平臺產品中心整體項目管理工作，確保項目團隊各干系人協(xié)同工作，達到項目目標；

　　2、負責騰訊云數(shù)據(jù)平臺產品中心研發(fā)項目管理工作，對項目資源、項目節(jié)奏、項目進度、項目質量、項目風險等進行有效管理；通過組織項目需求評審、項目例會、制定并推廣項目流程規(guī)范，確保項目有序推進；

　　3、負責騰訊云數(shù)據(jù)平臺產品中心團隊氛圍建設管理；

　　任職要求：

　　1.本科及以上學歷，計算機、通信或相關專業(yè)優(yōu)先；

　　2.至少2年以上項目管理經驗，軟件或it相關領域項目管理經驗優(yōu)先；

　　3.精通項目過程管理，對敏捷項目管理有實際應用經驗及深刻理解；

　　4.具有較強的自驅力和執(zhí)行力，極具正能量和感染力，積極推動項目團隊朝目標前進；

　　5.具有豐富的與人溝通、交流和組織協(xié)調能力，出色的團隊合作精神；

　　6.具有tob和tog溝通經驗者優(yōu)先；

數(shù)據(jù)平臺崗位職責 篇10

　　職位描述：

　　1、負責公司級別的異構數(shù)據(jù)源傳輸平臺架構設計與核心技術研發(fā)

　　2、參與需求調研與用戶技術支持

　　3、追求極致，構建業(yè)內領先的異構數(shù)據(jù)源傳輸產品

　　任職要求：

　　1、精通java/scala語言，并發(fā)編程，jvm

　　2、精通數(shù)據(jù)庫技術，rdbms、nosql、大數(shù)據(jù)至少精通一種

　　3、精通數(shù)據(jù)庫日志抓取解析、message queue、etl等數(shù)據(jù)處理技術

　　4、扎實的計算機基礎，對技術有熱情，愿意不斷嘗試新技術和業(yè)務挑戰(zhàn)

　　5、有canal運維或開發(fā)經驗者優(yōu)先

　　6、熟悉hadoop ecosystem常用開源框架者優(yōu)先，例如hadoop/flink/spark等

數(shù)據(jù)平臺崗位職責 篇11

　　職位描述：

　　1、負責大數(shù)據(jù)開源組件的調研

　　2、負責大數(shù)據(jù)平臺自研平臺系統(tǒng)及功能模塊設計與開發(fā)

　　3、配合架構師及測試按時完成開發(fā)，保證產品正常發(fā)布與迭代

　　任職要求：

　　1、本科以上學歷，計算機相關專業(yè)

　　2、2年以上大數(shù)據(jù)平臺開發(fā)經驗

　　3、精通java，熟悉linux系統(tǒng)，深入理解并使用主流技術框架，如springboot、mybatis、mq、redis、zk、spring cloud等技術棧，具備豐富的分布式系統(tǒng)的研發(fā)經驗

　　4、熟悉hadoop生態(tài)圈其他系統(tǒng)，包括hive，pig，hbase，spark，kafka，oozie，sqoop，flume，zookeeper，strom，flink，并了解其原理

　　5、熟練掌握各類數(shù)據(jù)結構與算法，具有較強的編碼能力

　　6、具有良好的團隊合作精神和表達溝通能力

　　7、有數(shù)據(jù)中臺，數(shù)據(jù)服務平臺開發(fā)經驗，熟悉hadoop生態(tài)圈組件者優(yōu)先

數(shù)據(jù)平臺崗位職責 篇12

　　職位描述：

　　1、負責今日頭條的通用數(shù)據(jù)平臺和分析型產品，包括數(shù)據(jù)開發(fā)工具，olap查詢引擎/產品等，服務于全公司的幾十個用戶產品線；

　　2、面向pb級超大規(guī)模數(shù)據(jù)問題，每天處理千億增量的用戶行為數(shù)據(jù)；

　　3、負責上海團隊的梯隊建設和管理，提升團隊技術實力。

　　任職要求：

　　1、3年以上大數(shù)據(jù)架構相關經驗，熟悉以下中的多項，e.g.hadoop，mapreduce，hive，storm，spark，kylin，scribe，kafka，hbase，canal，sqoop etc；

　　2、強悍的編碼能力，生產環(huán)境快速trouble-shooting能力，對新技術有強烈的學習熱情；

　　3、有良好的產品服務意識，有技術負責人或管理經驗者優(yōu)先。

數(shù)據(jù)平臺崗位職責 篇13

　　職責描述：

　　1.負責華大ilearningx平臺大數(shù)據(jù)分析平臺的開發(fā)及測試。

　　崗位要求：

　　1.本科以上學歷，計算機或相關專業(yè)者優(yōu)先。

　　2. 3年以上工作經驗，至少精通一門編程語言；

　　3.具備數(shù)據(jù)庫系統(tǒng)基本理論知識，精通sql語言；

　　4.熟悉hadoop/hbase/spark/storm/hive，熟悉數(shù)據(jù)挖掘策略與算法；

　　5.善于發(fā)現(xiàn)問題、解決問題，具備良好的分析和解決問題的能力，具備一定的鉆研精神和持續(xù)學習的意愿，對負有挑戰(zhàn)性的工作充滿熱情。

　　崗位要求：

　　學歷要求：本科

　　語言要求：不限

　　年齡要求：不限

　　工作年限：3-4年經驗

數(shù)據(jù)平臺崗位職責 篇14

　　職位描述：

　　基于海量的微信支付用戶、商戶、交易和行為數(shù)據(jù)，使用業(yè)界開源的主流技術棧以及我們自研的大數(shù)據(jù)技術相結合，構建金融級的大數(shù)據(jù)平臺，提供金融級數(shù)據(jù)安全保障和質量保障，為數(shù)據(jù)開發(fā)者提供工業(yè)化的數(shù)據(jù)平臺服務，建立元數(shù)據(jù)管理、血緣關系、計算任務和計算資源的動態(tài)管控、全方位的數(shù)據(jù)安全風險控制，為數(shù)據(jù)分析、智慧推薦、金融風控等業(yè)務提供數(shù)據(jù)平臺支撐；

　　負責微信支付大數(shù)據(jù)基礎平臺相關開發(fā)工作；

　　負責大數(shù)據(jù)采集、計算、分析處理相關開發(fā)工作；

　　負責大數(shù)據(jù)治理相關開發(fā)工作，提供一站式的數(shù)據(jù)平臺及工具支持。

　　任職要求：

　　本科及以上學歷，計算機相關專業(yè)，3年及以上開發(fā)經驗；

　　熟悉java、php、shell、python等至少三種開發(fā)語言；

　　有分布式系統(tǒng)、大數(shù)據(jù)服務、數(shù)據(jù)分析方面的開發(fā)經驗者優(yōu)先；

　　熟悉hadoop，spark，storm，flink，kafka、elasticsearch、druid等平臺和組件，有相關項目經驗優(yōu)先；

　　良好的.溝通表達能力，執(zhí)行力力強，對待工作認真嚴謹、高度負責。

數(shù)據(jù)平臺崗位職責 篇15

　　職位描述：

　　1.負責數(shù)據(jù)平臺業(yè)務需求分析調研；

　　2.負責設計并構建數(shù)據(jù)平臺，落實底層數(shù)據(jù)平臺、存儲平臺和分析平臺的設計和搭建工作；

　　3.負責數(shù)據(jù)平臺運行性能、可用性、擴展性等監(jiān)控與優(yōu)化調控；

　　4.負責構建大數(shù)據(jù)服務體系，提供統(tǒng)一數(shù)據(jù)產品和工具體系；

　　5.負責指導數(shù)據(jù)平臺研發(fā)成員工作，提升研發(fā)能力。

　　任職資格：

　　1.本科或以上學歷，計算機相關專業(yè)，8年以上相關工作經驗

　　2.具備多個數(shù)據(jù)平臺開發(fā)經驗，熟悉hadoop、spark、storm等平臺

　　3.熟悉常用分布式系統(tǒng)的體系架構、通信機制和優(yōu)化方法，擁有大規(guī)模分布式系統(tǒng)建設經驗，

　　4.了解大數(shù)據(jù)生態(tài)，對行業(yè)和技術的發(fā)展有自己的見解，具有分布式存儲、計算平臺的開發(fā)、調優(yōu)和運維經驗

　　5.責任心強，具有良好的學習能力、溝通能力和團隊合作精神，有一定的組織協(xié)調能力和較好的抗壓能力

數(shù)據(jù)平臺崗位職責 篇16

　　職位描述：

　　負責spark、hadoop計算平臺的設計和開發(fā)工作，構建高效穩(wěn)定的計算平臺，為業(yè)務提供大數(shù)據(jù)分析所需的海量計算服務；

　　負責數(shù)據(jù)倉庫、以及機器學習平臺的建設。

　　任職要求：

　　計算機相關專業(yè)，本科及以上學歷，2年以上大數(shù)據(jù)平臺開發(fā)、運維經驗；

　　對spark、hadoop平臺計算原理有深刻理解，能夠閱讀spark、hadoop源碼；對社區(qū)有源碼貢獻者優(yōu)先；

　　熟悉spark流計算框架或其他開源實時計算框架；

　　有elasticsearch集群運維、開發(fā)經驗者優(yōu)先；

　　有數(shù)據(jù)倉庫建設經驗者優(yōu)先；

　　數(shù)據(jù)大數(shù)據(jù)算法經驗、機器學習平臺建設經驗者優(yōu)先；

　　精通java、熟練掌握mapreduce原理及數(shù)據(jù)分析相關的二次開發(fā)；

　　對新技術充滿熱情，具有良好的學習能力、團隊協(xié)作能力和溝通能力；

　　能承受較大的工作壓力。

數(shù)據(jù)平臺崗位職責 篇17

　　職位描述：

　　1、負責大數(shù)據(jù)平臺建設，包含數(shù)據(jù)平臺的技術運維維護規(guī)范定義和執(zhí)行落地；

　　2、定義數(shù)據(jù)采集規(guī)范、數(shù)據(jù)層級規(guī)范（5層經典結構），并執(zhí)行落地；

　　3、構建業(yè)務指標體系，建立自動化和自助的數(shù)據(jù)輸出體系，提升數(shù)據(jù)輸出能力；

　　4、實現(xiàn)實時數(shù)據(jù)和離線數(shù)據(jù)體系；

　　5、負責團隊梯度建設，人才培養(yǎng)，人才輸出和能力輸出。

　　任職資格:

　　1、6年以上數(shù)據(jù)平臺建設工作經驗，3年以上帶領團隊經驗-

　　2、精通hadoop、hive、spark、sparkstreaming、storm、kafka等技術體系，熟練使用至少一門編程語言（java、python、go、scala）；

　　3、鉆研大數(shù)據(jù)行業(yè)技術和應用前沿，日tb級數(shù)據(jù)，構建過實時數(shù)據(jù)平臺系統(tǒng)；

　　4、對數(shù)據(jù)敏感，熟悉常用數(shù)據(jù)挖掘算法，并有一定實踐經驗；

　　5、強烈的好奇心和求知欲，善于深入一線業(yè)務，研究業(yè)務；