數(shù)據(jù)倉庫工程師的具體職責(zé)文本(精選12篇)
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇1
職責(zé):
1、負責(zé)大數(shù)據(jù)平臺搭建及數(shù)據(jù)倉庫建模;
2、負責(zé)數(shù)據(jù)庫管理及數(shù)據(jù)優(yōu)化;
3、利用大數(shù)據(jù)相關(guān)技術(shù)實現(xiàn)對數(shù)據(jù)的分析、挖掘、處理、及數(shù)據(jù)可視化等相關(guān)工作;
4、維護大數(shù)據(jù)平臺并能解決相關(guān)問題, 保障平臺正常運行;
5、學(xué)習(xí)和研究新技術(shù)以滿足系統(tǒng)需求。
任職資格:
1、本科及以上學(xué)歷,計算機、通信等相關(guān)專業(yè);
2、有相關(guān)工作經(jīng)驗者優(yōu)先;
3、對互聯(lián)網(wǎng)產(chǎn)品有見解,關(guān)注前沿技術(shù),有較強的學(xué)習(xí)能力、分析能力和動手能力;
4、熟悉Linux操作系統(tǒng)及ORACLE、MySQL及MongoDB等數(shù)據(jù)庫,了解SQL優(yōu)化,熟悉ER模型和相關(guān)數(shù)據(jù)建模技術(shù),能夠熟練使用Java或Python、SHELL;
5、熟悉Hadoop的體系架構(gòu)和運行原理,有大數(shù)據(jù)處理方面經(jīng)驗
6、具有大型數(shù)據(jù)倉庫和ETL開發(fā)、HIVE經(jīng)驗優(yōu)先
7、個性樂觀開朗,溝通能力強,具備良好的團隊協(xié)作精神,能利用自身技術(shù)能力提升團隊整體研發(fā)效率。
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇2
職責(zé):
1、參與數(shù)據(jù)倉庫建設(shè),負責(zé)數(shù)據(jù)倉庫模型設(shè)計;
2、開發(fā)高質(zhì)量可擴展的底層數(shù)據(jù)倉庫體系;
3、負責(zé)數(shù)據(jù)倉庫系統(tǒng)與業(yè)務(wù)系統(tǒng)的接口設(shè)計和確認工作;
4、負責(zé)數(shù)據(jù)平臺相關(guān)的管理工作,如數(shù)據(jù)研發(fā)規(guī)范、數(shù)據(jù)質(zhì)量及穩(wěn)定性保證等建設(shè);
5、參與公司各個業(yè)務(wù)線BI、數(shù)據(jù)產(chǎn)品與應(yīng)用的數(shù)據(jù)研發(fā),發(fā)覺數(shù)據(jù)潛在價值。
崗位要求:
1.大學(xué)本科及以上學(xué)歷,計算機、經(jīng)濟、金融、數(shù)學(xué)專業(yè)背景,有3年以上工作經(jīng)驗;
2.熟悉數(shù)據(jù)倉庫建模理論,以及數(shù)倉數(shù)據(jù)層級關(guān)系,具備大型數(shù)倉邏輯模型和物理模型設(shè)計經(jīng)驗;
3.熟悉一種ETL開發(fā)工具(sqoop,datax等), 熟悉ETL開發(fā)實施流程和原理;
4.掌握CDH版的hadoop環(huán)境,掌握hiveQL,有調(diào)優(yōu)經(jīng)驗;
5.有一定的編程語言基礎(chǔ),不限制于java,python,shell等;
6.有元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理工作經(jīng)驗的優(yōu)先考慮;
7.工作認真,負責(zé),仔細,有良好的團隊合作精神。
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇3
職責(zé):
1、學(xué)習(xí)并理解勵步云學(xué)業(yè)務(wù)及系統(tǒng),根據(jù)業(yè)務(wù)部門需求對公司各項業(yè)務(wù)數(shù)據(jù)進行統(tǒng)計分析,出具相關(guān)報表;
2、進行數(shù)據(jù)倉庫設(shè)計、模型開發(fā)、數(shù)據(jù)質(zhì)量校驗,報表開發(fā);
3、進行數(shù)據(jù)差異分析,找出統(tǒng)計口徑、數(shù)據(jù)錯誤、操作錯誤等造成的差異原因;
4、進行數(shù)據(jù)查詢優(yōu)化,解決跑數(shù)性能問題。
任職資格:
1、本科以上學(xué)歷,數(shù)學(xué)、統(tǒng)計、計算機相關(guān)專業(yè)優(yōu)先;
2、3年以上互聯(lián)網(wǎng)相關(guān)行業(yè)數(shù)據(jù)開發(fā)經(jīng)驗;
3、精通數(shù)據(jù)倉庫建設(shè)思路,并有相關(guān)實施經(jīng)驗,特別是通用匯總層建設(shè)經(jīng)驗;
4、較強的數(shù)據(jù)開發(fā)能力,熟悉Hadoop相關(guān)技術(shù),深刻理解MapReduce原理和過程;
5、精通Hive SQL,進行數(shù)據(jù)處理及模型開發(fā);
6、有較強的學(xué)習(xí)能力,能快速學(xué)習(xí)和理解業(yè)務(wù)知識及數(shù)據(jù)需求;
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇4
Responsibility
1、負責(zé)建設(shè)數(shù)據(jù)倉庫架構(gòu),包括元數(shù)據(jù)管理、ETL調(diào)度、數(shù)據(jù)集成、OLAP等子系統(tǒng)的設(shè)計和開發(fā);
2、制定和推廣數(shù)據(jù)字典,建立完善的元數(shù)據(jù)管理規(guī)范,負責(zé)數(shù)據(jù)質(zhì)量監(jiān)控設(shè)計;
3、搭建和維護數(shù)據(jù)倉庫表,解決業(yè)務(wù)人員在倉庫系統(tǒng)流程、工具使用、數(shù)據(jù)處理等遇到的問題;
4、深入了解網(wǎng)易游戲、CC直播、藏寶閣、網(wǎng)易大神等業(yè)務(wù),負責(zé)數(shù)據(jù)倉庫和其它業(yè)務(wù)系統(tǒng)接口。
5、基于對數(shù)據(jù)的理解和業(yè)務(wù)需求,對數(shù)據(jù)進行整理、分析和用戶畫像搭建。
Requirements
1、計算機相關(guān)專業(yè)本科及以上學(xué)歷,有2年以上數(shù)據(jù)倉庫、ETL工作經(jīng)驗;
2、熟悉SQL、Shell等相關(guān)技術(shù),有海量數(shù)據(jù)處理、ETL及任務(wù)調(diào)度優(yōu)化、數(shù)據(jù)倉庫建模等經(jīng)驗;
3、熟悉Linux環(huán)境,了解Java/Python服務(wù)端系統(tǒng)開發(fā);
4、熟悉Hadoop/Spark/Hive/Hbase/Kafka/Flume等大數(shù)據(jù)技術(shù)者優(yōu)先;
5、邏輯清晰、對數(shù)據(jù)敏感,良好的溝通能力和協(xié)作能力,敢于接受挑戰(zhàn),能夠承受壓力;
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇5
職責(zé):
1、負責(zé)數(shù)據(jù)倉庫(HADOOP)ETL工作以及數(shù)據(jù)運營;
2、負責(zé)數(shù)據(jù)產(chǎn)品的業(yè)務(wù)需求梳理、數(shù)據(jù)開發(fā)以及維護;
3、負責(zé)數(shù)據(jù)倉庫的維度建模以及設(shè)計相關(guān)的腳本調(diào)度;
4、負責(zé)維度模型的數(shù)據(jù)處理的腳本開發(fā),程序開發(fā)以及接口對接。
職位要求:
1. 本科以上學(xué)歷,信息管理、計算機相關(guān)專業(yè),兩年以上ETL、數(shù)據(jù)倉庫和大數(shù)據(jù)相關(guān)經(jīng)驗;
2. 熟悉數(shù)據(jù)倉庫架構(gòu),了解HADOOP等大數(shù)據(jù)平臺;
3. 有ORACLE\DB2等大型的數(shù)據(jù)倉庫的開發(fā)經(jīng)驗;
4. 能夠用HIVE的SQL,HADOOP的MAPREDUCE和SPARK去處理數(shù)據(jù);
5. 熟悉關(guān)系數(shù)據(jù)庫,并有HIVE的SQL的開發(fā)經(jīng)驗;
6. 熟悉Linux的shell編程;
7. 有銀行和運營商相關(guān)的大數(shù)據(jù)或者數(shù)據(jù)倉庫相關(guān)經(jīng)驗的優(yōu)先
8. 熱愛技術(shù)工作,具有較強的團隊協(xié)作意識,數(shù)據(jù)安全意識;
9. 工作嚴謹、責(zé)任心強,能承受工作壓力。
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇6
1、建立健全公司防靜電體系;
2、生產(chǎn)現(xiàn)場所有接地、點檢、記錄相關(guān)工作的落實;
3、戶及第三方審核的準(zhǔn)備及主導(dǎo);
4、分析與改善生產(chǎn)現(xiàn)場ESD不良。
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇7
1、負責(zé)ESD靜電防護內(nèi)部審核稽查工作及ESD問題改善;
2、負責(zé)靜電防護知識培訓(xùn)及相關(guān)文件的制定與完善;
3、主導(dǎo)公司ESD月度、季度和年度審核計劃及實施;
4、依據(jù)客戶要求制定ESD測試方案,并協(xié)助客戶做ESD測試工作;
5、完成上級領(lǐng)導(dǎo)交待的其他與ESD相關(guān)的工作。
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇8
職責(zé):
1. 參與數(shù)據(jù)倉庫和基礎(chǔ)架構(gòu)規(guī)劃、安全規(guī)劃、ETL架構(gòu)和規(guī)范制定;
2. 負責(zé)海量數(shù)據(jù)的ETL開發(fā)和優(yōu)化,抽取成各種數(shù)據(jù)需求,并及時解決ETL相關(guān)技術(shù)問題;
3. 負責(zé)對ETL技術(shù)培訓(xùn),指導(dǎo)進行數(shù)據(jù)倉庫項目的開發(fā)、測試和運 維;
4. 負責(zé)ETL數(shù)據(jù)準(zhǔn)確性驗證及報表維護;
5. 海量數(shù)據(jù)的ETL開發(fā),抽取成各種數(shù)據(jù)需求。
任職要求:
1. 本科以上學(xué)歷,優(yōu)秀名校或碩士以上優(yōu)先,有較好的英文閱讀能力;
2. 精通開源etl開發(fā)工具及etl架構(gòu),有一定的etl開發(fā)經(jīng)驗,熟悉日常作業(yè)的部署和調(diào)度。;
3. 熟悉主流數(shù)據(jù)庫技術(shù),如oracle、Sql server、PostgeSQL、MySql等;
4、精通Shell編程。
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇9
1. 負責(zé)智能家居系統(tǒng)技術(shù)規(guī)劃、產(chǎn)業(yè)鏈資源、供應(yīng)商整合的統(tǒng)籌推進;
2. 負責(zé)智能家居系統(tǒng)的功能定義、場景及用例需求編寫;
3. 負責(zé)智能家居系統(tǒng)的系統(tǒng)需求及功能定義編寫,包含系統(tǒng)軟、硬件需求、系統(tǒng)架構(gòu)、頂層邏輯、狀態(tài)機、總線、原理圖等設(shè)計;
4. 負責(zé)智能家居系統(tǒng)各模塊的系統(tǒng)集成與匹配;
5. 負責(zé)智能家居系統(tǒng)交互及接口定義;
6. 協(xié)助部門領(lǐng)導(dǎo)推進整體項目進展。
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇10
1、負責(zé)組裝、測試工藝可行性分析,SE分析相關(guān)工作,并協(xié)助研發(fā)進行工藝性評估、驗證;
2、負責(zé)編制工藝過程流程圖、線平衡分析,產(chǎn)能優(yōu)化并對人員培訓(xùn),提升制程直通率;
3、負責(zé)編制產(chǎn)品作業(yè)參數(shù)標(biāo)準(zhǔn)、更新、完善工藝文件和文件管理;
4、具備較強的邏輯分析及數(shù)據(jù)處理能力;
5、協(xié)助處理上級交辦的其它事務(wù);
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇11
職責(zé):
1. 為用戶提供服務(wù)器技術(shù)服務(wù),在分公司主管和公司業(yè)務(wù)部門的領(lǐng)導(dǎo)下,開展技術(shù)咨詢、項目支持工作;
2. 負責(zé)總公司在分公司市場開展業(yè)務(wù)所需要的技術(shù)工作;
3. 協(xié)調(diào)分公司當(dāng)?shù)丶夹g(shù)活動與總公司相應(yīng)部門的協(xié)調(diào);
4. 配合分公司完成全年的銷售任務(wù);
5. 履行各業(yè)務(wù)部的技術(shù)要求,加強項目管理。
6、能夠充分了解用戶各個系統(tǒng)、存儲、服務(wù)器、網(wǎng)絡(luò)等情況,并結(jié)合高校用戶實際情況提出可行的優(yōu)化建議;.了解網(wǎng)絡(luò)相關(guān)知識,熟悉TCP/IP協(xié)議線,有調(diào)試過交換機、路由器、防火墻、各類安全產(chǎn)品經(jīng)驗優(yōu)先,有HCNP或等同以上證書優(yōu)先。
任職條件:
(1)本科以上學(xué)歷,計算機相關(guān)專業(yè),具有一年以上計算機通信等相關(guān)工作經(jīng)驗者優(yōu)先(優(yōu)秀應(yīng)屆畢業(yè)生亦可);
(2)掌握存儲、服務(wù)器等技術(shù)和解決方案;
(3)具有撰寫標(biāo)書的工作經(jīng)驗,從事過大型網(wǎng)絡(luò)的設(shè)計、施工或維護工作;
(4)具有項目管理經(jīng)驗,能夠按照ISO9001及相應(yīng)要求進行項目管理;
(5)具有較強的學(xué)習(xí)能力和表達能力;
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇12
職責(zé):
1、參與數(shù)據(jù)ETL和數(shù)據(jù)倉庫治理;
2、參與大數(shù)據(jù)分析和挖掘,個性化推薦等系統(tǒng)的設(shè)計和開發(fā);
3、負責(zé)數(shù)據(jù)挖掘、自然語言處理及預(yù)測等相關(guān)模型、算法的設(shè)計與開發(fā);
4、參與BI等系統(tǒng)基礎(chǔ)數(shù)據(jù)支撐開發(fā);
5、參與用戶畫像、用戶行為評分、行業(yè)指數(shù)、銷售預(yù)測等功能模塊的開發(fā);
6、參與爬蟲等外部相關(guān)數(shù)據(jù)爬取。
任職要求:
1、熟悉概率論和統(tǒng)計方法;
2、掌握統(tǒng)計學(xué)習(xí)方法和機器學(xué)習(xí)算法者優(yōu)先;
3、掌握JAVA,理解MapReduce開發(fā)思維,能獨立開發(fā)分布式計算;熟悉Shell、R、MATLAB、Octive、Python等腳本語言或應(yīng)用開發(fā)者優(yōu)先;
4、熟悉關(guān)系型數(shù)據(jù)庫MySQL等,了解NoSQL;
5、具備工程化思維,思考數(shù)據(jù)業(yè)務(wù)能夠全面謹慎;
6、具備快速學(xué)習(xí)的能力和業(yè)務(wù)理解力,對數(shù)據(jù)開發(fā)有濃厚的興趣,具備理解和整合算法的能力。