大數據架構師崗位的基本職責（精選31篇）
大數據架構師崗位的基本職責 篇1
職責：
負責公司大數據產品架構的設計與實現;
配合大數據產品經理完成產品的快速研發與交付;
負責大數據產品架構的持續優化設計;
負責大數據產品核心組件設計;
負責大數據相關數據架構規劃、數據建模、數據庫設計以及大數據產品研發工作;
為應用開發團隊提供技術支撐。
任職要求：
本科及以上學歷，3年以上的大數據開發經驗、
2年以上大數據架構設計經驗;
豐富的JAVA研發經驗，精通JAVA，熟悉Python Scala等編程語言;具備深厚的分布式系統或數據庫系統的理論基礎，熟悉分布式計算系統的工作機制，具有分布式文件系統、分布式數據庫系統、集群存儲系統等架構設計經驗;
熟悉整個大數據的完整處理流程(數據的采集、清洗、預處理、存儲、分析挖掘、機器學習和數據可視化);
精通各種大數據相關技術體系：Hadoop、Spark、Storm、ElasticSearch、Kafka;
有數據挖掘、機器學習相關應用或研究背景;
溝通能力較好，積極主動意識較強，責任心較強。
大數據架構師崗位的基本職責 篇2
職責：
1、負責大數據項目技術架構評估與設計;
2、負責關鍵功能的開發，技術難題的解決，以及輸出代碼的關鍵把控;
3、負責對使用關鍵技術的預研和選型，完成PoC;
4、指導工程師完成開發工作，并能分享技術經驗。
任職要求：
1、3年以上相關工作經驗，其中具有1年以上架構設計經驗
2、熟悉商業智能系統相關技術，如 ETL、數據倉庫、OLAP開發;
3、精通設計模式，熟悉面向服務架構(SOA)以及其它常用軟件架構思想，有SOA方案設計、開發實施的實際經驗，要具備實際的服務規劃、服務粒度劃分經驗;并且要善于設計可重用組件和可定制化產品。
4、相關技術棧：Java /Scala/Flume/Hive/Kafka/HBase/ Spark/Storm/Redis;
5、有扎實的計算機基礎，熟悉Java等編程語言;
大數據架構師崗位的基本職責 篇3
職責：
1、負責大數據平臺架構的評估、規劃和設計 ;負責海量數據采集、處理及存儲、應用方案的技術選型及架構實現;
2、開發大數據平臺的核心代碼，負責大數據平臺的搭建，完成系統調試、集成與實施，技術難題的解決，保證大數據產品的上線運行 ;
3、根據業務需求持續優化數據架構，保證產品的可靠性、穩定性 ;
4、指導開發人員完成數據模型規劃建設，分析模型構建及分析呈現 ，分享技術經驗;
5、負責大數據平臺的架構評審，代碼評審，上線評審;參與數據應用需求、設計、審核和評審;
6、深入研究大數據相關技術和產品，跟進業界先進技術;
任職資格：
1.本科及以上學歷，數學或計算機相關專業畢業，不少于5年的工作經驗，具有扎實的計算機基礎理論知識;
2.有3年以上Hadoop、Spark、Hbase平臺性能調優經驗;熟悉sparkstreaming等實時計算技術
3.熟悉hive、hbase、storm、mahout、flume、ElasticSearch、Spark、Kafka等，具備實際項目設計及開發經驗;
4.熟悉sparkstreaming等相關的實時計算技術;
5.熟悉大規模數據挖掘、機器學習、自然語言處理、分布式計算中一項或多項技術，并具備多年的實際工作經驗;
6.熟悉主流關系型數據庫(Oracle、MySql)、NoSql數據庫，熟悉pl/sql編程;精通Linux操作系統，熟練使用Java;熟悉常用框架.如Spring、MyBatis等;
7.具有較強的執行力，高度的責任感、很強的學習、溝通能力，能夠在高壓下高效工作;
大數據架構師崗位的基本職責 篇4
職責：
1、負責大數據項目或產品中架構設計、數據倉庫公共層與應用層建模;
2、負責大數據項目或產品中業務需求的需求理解、數據指標維度需求梳理、數據探查和分析，指導技術團隊進行工作;
3、負責大數據項目中的具體技術管理工作，完成驗收目標。
4、發現并解決數據質量問題，推動整體數據質量提升。
任職要求：
1、計算機相關專業，3年以上數據研發與數據倉庫相關開發經驗;
2、熟練掌握維度建模方法，有大型數倉構建經驗優先;
3、精通Oracle/DB2/Teradata等主流數據庫編程，有較好的SQL性能調優經驗;
4、扎實的編程基礎和動手能力，精通至少一門編程語言，有大數據、分布式開發經驗尤佳;
5、有良好溝通協調能力，有帶領小團隊或項目管理工作經驗;
6、具備很強的責任心，做事細致、嚴謹，同時需要具備較強的溝通和學習能力，能快速理解行業的需求，對農業等行業數據應用有經驗者優先;
7、能夠接受出差。
大數據架構師崗位的基本職責 篇5
職責:
1、負責自然語音交互、IOT家電物聯控制、知識圖譜等相關模塊和系統的開發;
2、負責掌握第三方接口的調用和功能實現，持續優化服務性能和容量，并保證產品的兼容性和執行效率;
3、根據設計文檔和需求說明完成代碼編寫、調試、單元測試與維護，確保項目進度和質量;
4、協助制定測試計劃，及時發現并修復BUG，實現服務端的性能優化。
任職資格:
1、大學本科3年以上工作經驗，計算機相關專業;
2、熟悉軟件項目開發流程，具有良好編碼風格及文檔編寫能力;
3、熟悉Linux服務器相關技術，能夠獨立完成服務器部署，具有相關經驗;
4、熟悉Hadoop/Spark框架，JAVA基礎扎實;
5、熟練使用Mysql數據庫，了解MongoDB或neo4j等分布式數據庫;
6、熟悉SpringCloud,SSM,Docker,redis開發者優先;
7、熟悉前端(包括但不限于Html5、css、Angularjs、ajax、jquery等)開發技術優先;
8、了解Socket網絡編程、MQTT等，有相應實踐經驗者優先;
9、有智能語音語義、知識圖譜服務端開發經驗者優先。
大數據架構師崗位的基本職責 篇6
職責：
1. 負責產品級業務系統架構(如業務數據對象識別，數據實體、數據屬性分析，數據標準、端到端數據流等)的設計與優化。協助推動跨領域重大數據問題的分析、定位、解決方案設計，從架構設計上保障系統高性能、高可用性、高安全性、高時效性、分布式擴展性，并對系統質量負責。
2.負責云數據平臺的架構設計和數據處理體系的優化，推動云數據平臺建設和持續升級，并制定云數據平臺調用約束和規范。
3. 結合行業應用的需求負責數據流各環節上的方案選型，主導云數據平臺建設，參與核心代碼編寫、審查;數據的統計邏輯回歸算法、實時交互分析;數據可視化方案等等的選型、部署、集成融合等等。
4. 對云數據平臺的關注業內技術動態，持續推動平臺技術架構升級，以滿足公司不同階段的數據需求。
任職要求：
1. 熟悉云計算基礎平臺，包括 Linux(Ubuntu/CentOS)和 KVM、OpenStack/K8S 等基礎環境，熟悉控制、計算、存儲和網絡;
2. 掌握大型分布式系統的技術棧，如：CDN、負載均衡、服務化/異步化、分布式緩存、NoSQL、數據庫垂直及水平擴容;熟悉大數據應用端到端的相關高性能產品。
3. 精通 Java，Python，Shell 編程語言，精通 SQL、NoSQL 等數據庫增刪改查的操作優化;
4. PB 級別實戰數據平臺和生產環境的實施、開發和管理經驗;
5. 熟悉 Docker 等容器的編排封裝，熟悉微服務的開發和日常調度;
6.計算機、軟件、電子信息及通信等相關專業本科以上學歷，5 年以上軟件工程開發經驗，2 年以上大數據架構師工作經驗。
大數據架構師崗位的基本職責 篇7
職責：
1、負責相關開源系統/組件的性能、穩定性、可靠性等方面的深度優化;
2、負責解決項目上線后生產環境的各種實際問題，保障大數據平臺在生產上的安全、平穩運行;
3、推動優化跨部門的業務流程， 參與業務部門的技術方案設計、評審、指導;
4、負責技術團隊人員培訓、人員成長指導。
5、應項目要求本月辦公地址在錦江區金石路316號新希望中鼎國際辦公，月底項目結束后在總部公司辦公
任職要求：
1、熟悉linux、JVM底層原理，能作為技術擔當，解決核心技術問題;
2、3年以上大數據平臺項目架構或開發經驗，對大數據生態技術體系有全面了解，如Yarn、Spark、HBase、Hive、Elasticsearch、Kafka、PrestoDB、Phoenix等;
3、掌握git、maven、gradle、junit等工具和實踐， 注重文檔管理、注重工程規范優先;
4、熟悉Java后臺開發體系，具備微服務架構的項目實施經驗，有Dubbo/Spring cloud微服務架構設計經驗優先;
5、性格開朗、善于溝通，有極強的技術敏感性和自我驅動學習能力，注重團隊意識。
大數據架構師崗位的基本職責 篇8
職責：
負責公司大數據產品架構的設計與實現;
配合大數據產品經理完成產品的快速研發與交付;
負責大數據產品架構的持續優化設計;
負責大數據產品核心組件設計;
負責大數據相關數據架構規劃、數據建模、數據庫設計以及大數據產品研發工作;
為應用開發團隊提供技術支撐。
及時向上級反饋工作進度、遇到的問題或者對現有工作的建議等;
完成上級領導交辦的其它各項工作。
任職資格：
985/211本科及以上學歷，3年以上的大數據開發經驗、
2年以上大數據架構設計經驗;
豐富的JAVA研發經驗，精通JAVA，熟悉Python Scala等編程語言;具備深厚的分布式系統或數據庫系統的理論基礎，熟悉分布式計算系統的工作機制，具有分布式文件系統、分布式數據庫系統、集群存儲系統等架構設計經驗;
熟悉整個大數據的完整處理流程(數據的采集、清洗、預處理、存儲、分析挖掘、機器學習和數據可視化);
精通各種大數據相關技術體系：Hadoop、Spark、Storm、ElasticSearch、Kafka;
有數據挖掘、機器學習相關應用或研究背景;
溝通能力較好，積極主動意識較強，責任心較強。
具備優秀的邏輯思維能力，對解決挑戰性問題充滿熱情，善于解決問題和分析問題;
良好的團隊合作精神，較強的溝通能力和學習能力 ;
大數據架構師崗位的基本職責 篇9
職責：
1、負責公司大數據產品的架構設計，包含數據收集、數據存儲、數據應用，并完成相關架構設計文檔的撰寫;
2、參與規劃從數據源到數據應用的整體流程，并參與相關產品的決策;
3、負責解決核心技術問題，對技術方案進行決策;
4、負責大數據研發團隊建設、人才梯隊培養和技術團隊管理;
5、積極了解業界發展，研究與跟蹤大數據新技術發展方向。
任職要求：
1、精通GoldenGate For BigData相關理論，具備大型數據利用的生產實戰經驗;
2、精通數據驅動的理論，設計并生產上線相關數據驅動的產品;
3、精通常用消息中間件的使用，例如kafka/RocketMQ/Apache Pulsar，有解讀相關源碼者優先;
4、掌握hadoop、spark生態體系相關產品的使用，掌握MapReduce編程或Spark編程;
5、了解傳統數據倉庫理論及相關ETL工具，例如kettle/datastage;
6、熟悉Oracle、Mongodb、Mysql數據庫的使用;
7、扎實的Java語言基礎，熟悉Java開發工具和調試工具的使用;
8、良好的團隊協作精神，有能力對團隊在軟件設計、實現和測試方面進行指導;
9、良好的邏輯分析能力和溝通能力，執行力強、對待工作認真嚴謹、責任心強、具備出色的學習能力和團隊合作精神，有一定的推動能力;
10、計算機科學、信息技術或相關領域本科以上學歷，具有5年以上數據平臺項目開發經驗，3年以上的架構設計經驗，具有大數據平臺應用大型項目架構設計經驗優先;
大數據架構師崗位的基本職責 篇10
職責
1、負責大數據架構設計，包括定義數據的存儲、集成(ETL)、應用，支撐業務運營和數據分析類需求實現;
2、制定數據治理領域的數據體系化管理措施，包括元數據設計、數據標準、數據質量、數據處理、數據安全等工作，確保數據可信與安全;
3、基于行業數據積累，滿足業務的數據挖掘需求，實現從數據到資產的轉變，根據目標行業建立具有前瞻性的數據模型;
4、對各產品的數據安全負責，主導制定和實施數據庫系統安全策略，保證整體方案數據安全;
崗位要求
業務技能要求：
1、深入理解云化、數據倉庫，在參與過的系統設計中，必須涉及這兩項關鍵技術;
n2、精通或者熟悉Hadoop體系架構，以及HDFS/HBase/Hive/MapReduce/Spark等技術，了解體系架構各組件的優缺點，有直接的產品設計與開發、部署、調優的經驗;
3、精通或熟悉常見RDBMS(Oracle / PostgreSQL / MySql)、NoSQL(Redis / Memcached/ MongoDB)、全文搜索引擎(Solr/ElasticSearch)的使用及開發，了解各數據庫優缺點， 熟悉與架構設計相關的數據存儲、性能調優等相關領域知識，有相關項目經驗尤佳;
4、熟悉業界常用的數據采集、集成、數據存儲、計算、數據模型、數據分析的技術方案，具有數據分析或數據挖掘相關經驗者優先;
n5、熟悉數據治理相關流程，包括數據接入、數據處理、數據治理、數據組織、數據服務等。
專業知識要求：
1、具備數據治理的知識與體系方案，包含政策、組織、角色、流程、規范等，以及規劃相應的支撐方案。了解業界的數據管理方法論;
2、具備數據用例設計和開發能力。能夠基于業務相關數據進行業務需求分析和痛點識別，將業務需求轉化為數據的需求，完成數據用例的設計和開發;
3、精通海量數據(日增量百億)級別數據倉庫、數據集市的構建流程。熟悉公安、政務、工業、交通、醫療等多行業業務者優先。
大數據架構師崗位的基本職責 篇11
職責：
1. 負責公司大數據平臺的設計和開發，負責spark, hadoop, flink等云計算平臺的開發和優化;制定數據架構規范，進行核心代碼編寫，指導團隊落地;
2. 負責數據基礎架構和數據處理體系的升級和優化，技術難題攻關，持續提升核心系統性能，保證系統的安全、穩定、高效運行
3. 設計并實現對BI分析、數據產品開發、算法開發的系統性支持
4. 研究未來數據模型和計算框架的創新與落地，包括但不限于以下領域：大規模數據實時化、研發模式敏捷化、數據計算框架輕量化、數據模型組織方式業務化等方面參與制定并實踐團隊的技術發展路線
5. 建立良好的公司內外的業界技術影響力;參與培養未來數據人才;有效輔導團隊，提升數據研發能力
任職要求：
1. 有很強的數據設計抽象能力，善于從復雜的數據問題中找到關鍵路徑，能夠開發創新而實際的分析方法以解決復雜的商業問題
2. 有作為技術負責人系統化解決問題的成功案例;有海量數據建模實踐經驗優先
3. 熟練掌握Hadoop、Spark、Flink、HBase的原理特性以及適用場景，精通流式計算開發，有開源二次開發經驗者優先，有NLP數據處理經驗者優先
4. 性格積極樂觀，誠信，能自我驅動，有較強的語言表達能力;具備強烈的進取心、求知欲及團隊合作精神;具有良好的溝通、團隊協作、計劃和創新的能力
5. 本科以上學歷，扎實的計算機專業基礎，有5年以上大數據平臺開發經驗;
大數據架構師崗位的基本職責 篇12
職責：
1. 規劃設計大數據平臺整體架構，規劃各種組件，并且指導技術團隊完成相關系統驗證、安裝、部署、配置;
2. 負責制定大數據平臺技術規范和接口規范，指導研發團隊按照規范進行系統開發;
3. 配合商務人員完成售前技術支持工作;
4. 完成其他與數據應用有關的技術工作;
任職要求：
1. 計算機相關專業本科學歷，5年以上工作經驗;
2. 對大數據技術棧有非常深刻的了解;具備架構設計的實際經驗;
3. 對信息安全架構設計及實施有一定的經驗;
4. 熟悉Linux、Windows等操作系統的安裝配置;
5. 熟悉互聯網應用的安裝配置;熟悉常見大數據技術棧組件的安裝配置;熟悉Visio等繪圖工具的使用;
6. 有衛生信息化建設經驗者優先;有容器安裝部署經驗者優先。
大數據架構師崗位的基本職責 篇13
職責:
1、從事電信行業大數據項目相關業務調研、產品標準建設、核心模型設計和優化、系統測試等相關工作
2、與數據專業委員會一起研究數據建模方案和建模工具，負責產品線產品的數據架構、數據模型設計
3、參與研究數據庫之間的數據轉換方式，參與項目中的數據移植工作，收集在項目中的數據移植經驗，優化產品的數據模型
4、負責培訓本部門隊伍的數據模型基礎理論工作，建立數據模型團隊
崗位要求：
1、統招本科學歷，3年以上主流數據上(DB2、Oracle、SQLServer、Mysql等)ETL設計、開發經驗，具備大型數據倉庫邏輯模型和物理模型設計經驗，精通SQL，有較好的SQL性能調優經驗;
2、擁有Python，R等數學建模工具的使用經驗，并具備一定的數據處理和建模經驗，可以輸出相應的模型分析結果、模型比較、模型效率以及對模型的理論和判斷依據方法并對其進行完整的解釋和說明;
3、熟悉統計學基本原理，做過實戰的數據建模項目;
4、有分布式數據倉庫建設相關經驗者優先，具備電信行業數據倉庫建設相關經驗者優先;
大數據架構師崗位的基本職責 篇14
職責：
1.負責企業數據中心建設，設計數據邏輯模型和物理模型，并完成相關開發
2.梳理公司各業務線常用的指標和維度，統一指標定義口徑
3.根據數據應用開發和數據分析需求，設計數據倉庫信息層模型，提高數據開發的效率
4.負責數據模型的運營和優化，及時響應業務邏輯變更，保證模型的數據質量和穩定性
5.負責公司數據標簽體系的建設，并推動標簽體系在實際業務場景中落地
崗位要求：
1.5年以上DW/BI數據架構設計、模型設計和性能調優等相關經驗
2.有較強的數據分析能力，精通數據倉庫架構，熟悉Erwin或PowerDesigner建模工具
3.精通一種主流關系數據庫(如mysql等)，熟悉Hive開發
4.有電商業務經驗，元數據管理，數據質量管理或標簽體系搭建經驗者優先
5.優秀的協調溝通與團隊協作能力，極強的責任心，能承受一定的工作壓力，認同企業文化和團隊價值
大數據架構師崗位的基本職責 篇15
職責：
1、負責大數據基礎平臺的整體規劃和架構設計，參與需求分析、技術決策以及詳細設計;
2、為現有大數據集群Hadoop、hive平臺提供性能調優、架構優化重組，解決系統中的關鍵問題和技術難題;
3、把握基礎業務復雜系統的設計，確保系統的架構質量，編寫核心部分代碼;
4、持續挑戰新的技術方向，攻克大數據量，高并發，穩定性等各種技術難點。
任職資格:
1、計算機或相關專業本科及以上學歷;
2、5年以上hadoop的應用開發經驗，5年以上數據倉庫開發實踐經驗，至少一個企業級數據倉庫項目開發經驗或者大數據處理項目經驗;
3、良好的編程開發能力，精通PHP及其他開發語言;
4、熟悉mysql等數據庫經驗，具備優秀的SQL編寫、調優能力;
5、熟練掌握Linux常規命令與工具，精通shell, perl, python等腳本語言至少一種;
6、軟件基礎理論知識扎實，具有良好的數據結構、算法功底;
7、對新技術敏感，學習能力強，樂于接受挑戰，具有良好的團隊合作精神;
大數據架構師崗位的基本職責 篇16
職責：
1、負責公司大數據底層框架的整體架構設計，結合公司實際業務情況進行技術選型及大數據戰略規劃;
2、負責公司項目的整體評估、設計、架構及關鍵模塊的開發;
3、負責架構優化，協助團隊解決開發過程中遇到的技術難題;
4、負責新技術的調研和大數據相關開源組件的研究，并能在團隊進行推廣應用;
5、參與數據分析、數據建模、項目核心模塊及核心框架的開發;
6、負責大數據平臺的性能條有和問題診斷。
任職要求：
1、計算機相關專業，本科及以上學歷，3-5年以上工作經驗，2-3年大數據相關經驗;
2、具有扎實的大數據和數據倉庫理論功底，負責過大數據平臺或數據倉庫設計;
3、對基于Hadoop的大數據體系有深入的認識，具備相關產品(Hadoop、Hive、HBase、Spark、Storm、Flume、Kafka、Redis、ES等)項目應用研發經驗，有Hadoop集群搭建和管理經驗，度過Hadoop和Spark源碼;
4、熟悉Linux和Python語言，了解Scala原理和底層技術;
5、熟悉分布式系統的架構及對其進行設計和優化，對海量數據的清晰、分析處理及存儲有相關的實戰經驗;
6、算法基礎扎實，熟悉常見的數據結構，深入理解分布式算法和以上提到的分布式系統，
7、必須有一線coding的能力;
8、有統計學、數學知識，海量數據處理、分析和挖掘，大型互聯網公司從業經歷著優先。
大數據架構師崗位的基本職責 篇17
職責：
1. 負責大數據基礎和應用平臺的整體規劃和架構設計，參與需求分析，架構設計，詳細設計以及技術選型決策
2. 參與數據挖掘和建模相關核心算法的代碼實現
3. 負責大數據算法平臺的技術把關，性能調優，控制架構質量，解決項目技術難題;對研發項目和任務需求進行評估和方案設計、拆分任務并指導工程師完成開發
4. 帶領團隊提供并實現大數據算法平臺上各項數據接入、數據挖掘分析及數據可視化的架構設計與能力，支持解決方案實施
5. 負責數據庫設計、應用架構設計、核心技術選型等工作
6. 協調解決開發中的技術問題、設計和監控運營指標，保障系統穩定運行
7. 培養，指導有能力的員工，指導工程師進行技術驗證實現，核心技術攻關，解決開發過程中的技術難題
任職要求：
1. 熟悉大數據和數據倉庫的系統架構設計方法
2. 熟練使用并理解HadoopSpark架構及生態。(Hadoop，Hive，Hbase，Elasticsearch，Kafka，SparkFlink等)
3. 熟悉分布式系統架構，有分布式實時、離線和機器學習平臺的架構和開發經驗，具備海量數據清洗、分析處理及存儲的實踐經驗
4. 熟練使用JAVA，具有大規模分布式系統調優經驗
5. 熟悉AI相關算法，熟悉機器學習、深度學習。熟悉AI學習開源框架(Tensorflow、PyTorch等)者優先;
6. 具備良好的團隊合作精神，對工作充滿激情。
7. 熟悉FusionInsight平臺開發經驗者優先
大數據架構師崗位的基本職責 篇18
職責：
1、負責大數據平臺及BI系統框架設計、規劃、技術選型，架構設計并完成系統基礎服務的開發;
2、負責海量埋點規則、SDK標準化、埋點數據采集、處理及存儲，業務數據分布存儲、流式/實時計算等應用層架構搭建及核心代碼實現;
3、開發大數據平臺的核心代碼，項目敏捷開發流程管理，完成系統調試、集成與實施，對每個項目周期技術難題的解決，保證大數據產品的上線運行;
4、負責大數據平臺的架構優化，代碼評審，并根據業務需求持續優化數據架構，保證產品的可靠性、穩定性;
5、指導開發人員完成數據模型規劃建設,分析模型構建及分析呈現，分享技術經驗;
6、有效制定各種突發性研發技術故障的應對預案，有清晰的隱患意識;
7、深入研究大數據相關技術和產品，跟進業界先進技術;
【任職要求】
1、統計學、應用數學或計算機相關專業大學本科以上學歷;
2、熟悉互聯網移動端埋點方法(點擊和瀏覽等行為埋點)，無埋點方案等，有埋點SDK獨立開發經驗者優選;
3、熟悉Hadoop,MR/MapReduce,Hdfs,Hbase,Redis,Storm,Python,zookeeper,kafka,flinkHadoop,hive,mahout,flume,ElasticSearch,KafkaPython等，具備實際項目設計及開發經驗;
4、熟悉數據采集、數據清洗、分析和建模工作相關技術細節及流程
5、熟悉Liunx/Unix操作系統，能熟練使用shell/perl等腳本語言，熟練掌握java/python/go/C++中一種或多種編程語言
6、具備一定的算法能力，了解機器學習/深度學習算法工具使用，有主流大數據計算組件開發和使用經驗者優先
7、熟悉大數據可視化工具Tableau/echarts
8、具有較強的執行力，高度的責任感、很強的學習、溝通能力，能夠在高壓下高效工作;
大數據架構師崗位的基本職責 篇19
職責：
1、負責公司的大數據處理框架的研發設計工作，梳理可實現方案和技術規范;
2、開發、完善公司大數據平臺;參與公司離線、實時大數據處理系統的設計、開發、測試及多個業務模塊的自動化集成;
3、負責業務平臺數據統計分析模塊的設計與規劃;
4、負責公司產品研發過程中的數據及存儲設計;
5、帶領和培養團隊完成組織分解的目標;
任職要求：
1、統招本科及以上學歷，計算機、軟件工程相關專業，至少8年以上工作經驗，5年以上大數據開發經驗;
2、熟悉Java、Hadoop、HDFS、Hive、HBase、Spark、Storm、Flume等相關技術的基礎架構
3、熟悉數據倉庫，數據算法，分布式計算技術理論，具有大數據整體系統架構設計經驗;
4、熟悉Linux系統，熟練使用shell/perl/python腳本處理問題;
5、對深度學習框架(Tensorflow)和機器學習(svm 隨機深林貝葉斯等)有一定了解的優先;
6、能夠組織項目開發組協同工作，包括團隊溝通、計劃、開發環境管理等
大數據架構師崗位的基本職責 篇20
職責：
1、負責規劃大數據平臺及應用產品的需求和技術方案設計;
2、負責數據對接和對外服務設計、開發和維護，并能保證質量和性能;
3、負責基于大數據平臺的應用設計、開發和維護;
4、能從系統全局和各子系統的角度思考可能存在的問題，并提出改進方案建議;
任職要求：
1、大學本科6年以上工作經驗，計算機相關專業。
2、至少4年以上的Java開發經驗，3年以上大數據應用系統的開發和設計經驗。
3、熟悉Hadoop生態圈技術體系， 對離線計算、內存計算和流式計算均有深刻理解， 如Hadoop、Storm、Spark三個中的任意二個， 能進行平臺和組件優化。
4、精通Hive、HBase倉庫設計，深刻理解MR運行原理和機制，能進行以提供高任務執行效率的優化。
5、精通Java開發，熟悉JVM調優， 對GC有深刻理解。
6、熟悉Linux、Shell、Kafka、Oracle、Mysql、Redis等相關技術， 能進行hbase可靠性診斷和維護。
7、快速研究和學習技術能力。
大數據架構師崗位的基本職責 篇21
職責：
1、大數據平臺的規劃、設計、實施，并優化數據庫;
2、對數據庫進行管理，負責數據庫應用系統的運營及監控;
3、對數據庫性能分析與調優，排錯，保證數據正確率;
4、配合其他部門進行的數據處理、查詢，統計和分析工作;
5、完成公司下達的項目開發任務。
任職要求：
1、計算機及相關專業本科以上學歷，5年以上軟件開發從業經驗，其中包括至少2年以上的大數據開發工作經驗;
2、熟悉hive,hadoop/spark,hbase等大數據相關技術架構，有管理或優化大型分布式集群經驗;
3、熟悉linux基本命令，精通SQL腳本的編寫，有豐富的數據庫管理、運維調優經驗;
4、熟悉C++、Java、C#等開發語言;
5、有互聯網電商行業大數據分析處理和大型數據倉庫的設計和實施經驗;
6、有分布式系統分析及架構設計經驗和大型計算集群的基礎設施開發維護經驗;
7、快速處理系統突發事件的能力，較強的學習和創新能力;
8、良好的溝通能力和團隊合作精神。
大數據架構師崗位的基本職責 篇22
職責:
1、對業務需求深入分析，從而進行大數據平臺核心應用的架構設計、開發和技術支持;
2、規劃業務應用系統和基礎平臺的技術架構，參與需求分析、建模、架構設計、技術決策以及詳細設計;
3、把握復雜系統的設計，確保系統的架構質量，編寫核心部分代碼;
4、帶領團隊攻克例如大數據量、高并發、高穩定性等帶來的各種挑戰及技術難關;
5、在大數據平臺建設路線圖指導下，進行架構實施和交付物投遞，同時確保研發質量和方向的準確性;
6、進行團隊技術的培訓和梯隊建設崗位要求;
任職條件:
1、本科或以上學歷，計算機相關專業，8年以上研發經驗，3年以上大數據平臺相關工作經驗;
2、精通Java開發技術，熟悉Shell、Scala語言和PYTHON優先;
3、編程基礎扎實，熟悉I/O、多線程、集群等基礎框架和原理，熟悉分布式、緩存、消息等機制;
4、熟悉常用設計模式，代碼評審規則，單元測試，持續集成;
5、熟悉AWS云服務或阿里云服務;
6、熟悉容器技術原理、生態系統，熟悉Docker、Mesos、Kubernetes等容器系統、大規模容器資源調度系統、分布式應用生命周期。
大數據架構師崗位的基本職責 篇23
職責：
1、 基于公司大數據基礎和數據資產積累，負責大數據應用整體技術架構的設計、優化，建設大數據能力開放平臺;負責大數據應用產品的架構設計、技術把控工作。
2、 負責制定大數據應用系統的數據安全管控體系和數據使用規范。
3、 作為大數據技術方案到產品實現的技術負責人，負責關鍵技術點攻堅工作，負責內部技術推廣、培訓及知識轉移工作。
4、 負責大數據系統研發項目任務規劃、整體進度、風險把控，有效協同團隊成員并組織跨團隊技術協作，保證項目質量與進度。
5、 負責提升產品技術團隊的技術影響力，針對新人、普通開發人員進行有效輔導，幫助其快速成長。
任職資格：
1、 計算機、數學或相關專業本科以上學歷，5-20xx年工作經驗，具有大型系統的技術架構\應用架構\數據架構相關的實踐工作經驗。
2、 有分布式系統分析及架構設計經驗，熟悉基于計算集群的軟件系統架構和實施經驗。
3、 掌握Hadoop/Spark/Storm生態圈的主流技術及產品，深入了解Hadoop/Spark/Storm生態圈產品的工作原理及應用場景。
4、 掌握Mysql/Oracle等常用關系型數據庫，能夠對SQL進行優化。
5、 熟悉分布式系統基礎設施中常用的技術，如緩存(Varnish、Memcache、Redis)、消息中間件(Rabbit MQ、Active MQ、Kafka、NSQ)等;有實踐經驗者優先。
6、 熟悉Linux，Java基礎扎實，至少3-5年以上Java應用開發經驗，熟悉常用的設計模式和開源框架。
大數據架構師崗位的基本職責 篇24
職責：
1、負責面向政府信領域的企業(不限于)大數據平臺、大數據應用等系統的架構設計、技術規劃、技術選型
2、跟進業界大數據技術發展動態，匹配行業應用訴求，制定大數據策略，提前識別關鍵技術并完成技術驗證;
3、支撐售前完成項目解決方案技術架構的設計及重要客戶的交流;
4、負責指導研發完成大數據產品的開發
5、帶領團隊進行產品核心技術的創新和積累
崗位要求：
1、熟悉BI和大數據領域的解決方案，具備該領域全面的技術積累，包括報表平臺，OLAP引擎和DB，ETL，數據倉庫建模和設計，海量分布式數據處理分析架構;
2、在大數據處理和分析領域具有3年或者以上的技術規劃、架構設計經驗，并有成功的項目實踐;
3、4年以上Hadoop實戰經驗，熟悉Hadoop底層文件系統及分布式計算框架，具備傳統數據倉庫、MPP、Hadoop等混搭平臺架構的設計能力和數據建模能力，對大規模數據并行計算、傳輸、處理等有豐富的經驗;
4、有實際應用storm、spark、flume、kafka等項目經驗優先;
5、卓越的技術領導力，善于溝通、發現和解決產品需求階段、開發階段和測試階段的問題，并能提供合理解決方案，有大中型互聯網企業工作背景優先。
大數據架構師崗位的基本職責 篇25
職責：
1)負責大數據平臺系統架構設計、核心開發工作(Hadoop&Spark技術方向)，基于業務場景設計最優的系統解決方案。
2)構架支持大數量級的數據的大數據平臺系統，及相關監控，拓展系統設計及實現。
3)利用Hadoop、Spark等大數據技術對海量數據進行處理，支持BI和數據科學(建模)的應用實現。
4)對現有系統的進行架構深入分析及系統優化，進一步提升系統的性能及數據處理能力。
任職資格
1)統招本科或以上學歷，計算機相關專業， 5年以上軟件開發經驗、3年以上大數據項目經驗。
2)具備較豐富的大數據平臺相關構建，維護及調優經驗，有大數據量級下的大數據集市相關經驗。
3)具備較豐富的基于Hadoop或Hive或Spark等大數據處理項目經驗，具備一定的數據挖掘經驗。
4) 具有阿里云的EMR(emapreduce)的經驗者優先考慮。
5)具有良好的業務理解、溝通和協作能力，具有較強的學習和總結能力。
6)優秀的團隊合作精神、誠實、勤奮、嚴謹，敢于接受挑戰。
7)機器學習技術、數據挖掘經驗豐富者優先考慮。
大數據架構師崗位的基本職責 篇26
職責：
1.負責公司新業務方向平臺大數據基礎架構的搭建及后期數據處理體系的升級和優化，不斷提升系統的穩定性和效率。為公司未來方向性產品提供大數據底層平臺的支持和保證。
2.負責制定大數據平臺調用約束和規范;
3.負責大數據方向技術難題的解決，以及代碼質量的把控;
4.作為大數據開發團隊的leader,負責大數據系統平臺開發團隊建設與人才梯隊培養，分享技術經驗，撰寫相關技術文檔指導和培訓工程師。
任職要求：
1.熱衷于大數據技術，并能平衡大數據性能、穩定性、擴展性多重要素進行設計和優化;
2.熟悉服務器基本知識，能夠評估系統硬件性能瓶頸;
3.掌握Linux操作系統的配置，管理及優化，能夠獨立排查及解決操作系統層的各類問題，并能提供解決問題的理論依據;
4.精通Java服務器編程，熟悉JVM原理，對數據結構和算法設計有較為深刻的理解;
5.精通elasticsearch、Redis、hadoop、Kafka、Zookeeper、Yarn、Hbase、Spark底層架構，熟悉原理、源碼、集群部署，包括參數優化、Bug修復，貢獻過代碼或提交過bug者優先
6.具備數據中心資源管理、監控、調度等系統研發經驗者優先，具備分布式系統研發經驗者優先;
7.具有應用大數據技術處理的項目開發、維護超過兩年的經驗者優先;
8.具有良好的文檔編寫能力，可進行方案設計、架構設計。
大數據架構師崗位的基本職責 篇27
職責：
1. 負責大數據平臺的基礎技術規劃，編制相關規范文檔。
2. 負責大數據平臺的數據采集，處理，存儲以及挖掘分析的架構實現。
3. 負責大數據平臺的實際規劃建設，包括環境和框架的規劃搭建以及部分核心編碼工作。
4. 負責大數據相關技術發展方向的預研。
5. 參與業務需求調研，根據需求及行業特點設計大數據解決方案并跟進具體實施項目。
6. 制定大數據平臺中數據質量，業務質量監控及管理辦法。
崗位要求：
1. 全日制本科及以上學歷，5年以上工作經驗，4年及以上大數據架構設計經驗，熟悉大數據解決方案，包括Hadoop平臺、Spark、storm、機器學習、深度學習等大數據解決方案。
2. 深刻理解大數據處理(流計算、分布式計算、分布式文件系統、分布式存儲等相關技術)實現方法。有架構和設計實踐經驗。
3. 精通大型數據庫Oracle、SqlServer等的開發。
4. 精通java，Python中的一種或多種語言。
5. 熟悉容器、虛擬化、微服務框架等相關技術。
6. 對數據敏感，有嚴謹的工作思路，良好的溝通能力和團隊合作精神。
7. 熟悉R，Python，SAS、SPSS等數據挖掘經驗者優先。
8. 高寬展性，高性能，和分布式系統的實踐及運維經驗者優先。
9. 有大型數據倉庫實施、大數據平臺數據開發經驗，熟悉運營商業務者優先。
大數據架構師崗位的基本職責 篇28
職責：
1.能夠帶領技術人員基于hadoop平臺進行海量數據應用系統開發;
2.負責結構化和非結構化數據的解析和清洗,海量數據查詢和報表展現;
3.負責超大規模數據平臺的搭建、維護和優化;
4.負責大數據采集、存儲框架研究，參與在線或離線數據存儲模型設計;
5.負責大數據平臺新技術的開發使用和性能優化，測試。
任職資格：
1.計算機相關專業本科及以上學歷;
2. 熟悉hadoop相關各種開源項目，比如HDFS/Hive/Hbase等有實際應用。(5年以上開發經驗者優先);
3.兩年以上熟練編寫mapreduce代碼經驗，有三年以上網絡日志分析、ETL經驗。熟悉日志分析框架chukwa,flume,scribe者優先;
4.兩年以上海量數據存儲的安裝部署、優化、二次開發經驗，對大規模數據存儲、傳輸、處理等有豐富的經驗;
5.在數據挖掘、數據密集型處理、分布式計算、網格計算領域有深入理論基礎;
6.具有較強的文檔撰寫能力，較強的團隊精神和合作精神，對工作有熱情，能承受壓力。
大數據架構師崗位的基本職責 篇29
1. 負責大數據項目整體架構規劃，包括應用架構、技術架構、物理架構和數據架構等;
2. 負責指導工程師進行技術驗證與實現，核心技術問題的攻關，解決項目開發過程中的技術難題;
3. 負責項目對外技術溝通，具有較強的溝通，表達和文檔撰寫能力;
4. 根據公司項目和業務發展特點，負責研究相關大數據前沿技術;
5. 推動技術能力的沉淀。
大數據架構師崗位的基本職責 篇30
職責：
1.負責過多個大數據項目的架構;
2.精通Hadoop、Spark, HBase等主流的大數據平臺、精通各組件優化設計原理;
3.精通大數據實時流式處理的設計和應用;
3.熟悉大數據平臺調優，具備大數據生產平臺調優經驗;
4.金融行業，運營商行業大數據架構經驗更優;
5.研究大數據技術的最新發展，并引入到公司技術架構;
6.指導大數據工程師的日常工作，并培養技術骨干。
任職資格：
1.計算機相關專業本科或以上學歷;
2.具有5年以上大數據相關開發經驗;
3.具有2年以上帶團隊經驗
4.對Hadoop/Hive/Spark/HBase/ES等等大數據常用技術有深刻理解，能夠帶領團隊進行技術攻堅，完成中間件的實施、改造、調優;
5.精通海量數據和實時數據的分析處理，能對線上的數據處理性能問題做調優;
6.精通數據倉庫以及維度建模原理，有大型數據倉庫建設經驗;
7.精通關系型數據庫和NoSQL數據庫的使用，熟悉相關理論;
8.溝通順暢，重點突出，高效。
大數據架構師崗位的基本職責 篇31
職責：
1、數據分析軟件平臺架構搭建
2、負責深度學習核心框架或高性能后臺服務系統的架構設計工作，包括系統總體規劃、架構設計、系統分析、軟件實現、性能優化;
3、指導開發人員開發，并解決系統出現的問題，理解物業需求;
4、制定開發計劃和控制開發進度，負責指導研發團隊開展設計工作;
任職要求：
1、碩士以上，計算機或先關專業;
2、5年左右軟件開發經驗，含3年以上系統分析、設計經驗，有大型軟件項目大型軟件項目;有中大型互聯網企業數據庫架構設計及管理經驗，
3、 具備良好的組件級建模能力，熟悉HTTP、TCP等協議
4、熟練使用UML進行軟件架構設計，至少精通EA，RATIONAL， VISIO等一種設計工具.
5、精通至少一種編程語言，熟悉 Linux 相關技術，能獨立在上面進行開發、測試和部署
6、深入理解數據庫、數據倉庫、大數據、分布式體系架構和關鍵技術