數據倉庫工程師崗位的工作職責(精選15篇)
數據倉庫工程師崗位的工作職責 篇1
職責:
1. 負責數據倉庫建設、設計、優化和落地
2. 負責數據ETL任務開發及日常維護
3. 對數據ETL任務進行性能調優及性能瓶頸分析
4. 學習新技術,提高整個平臺的計算能力和效率
任職要求:
1. 計算機相關專業,全日制本科及以上學歷,2-5年工作經驗
2. 熟悉數據倉庫理論基礎,對數據模型建設、應用層建設有比較豐富的經驗
3. 熟練使用 SHELL或PYTHON
4. 熟悉HADOOP相關的大數據技術:HDFS, MAPREDUCE, HIVE
5. 能對HIVE進行性能分析及調優
6. 有MAPREDUCE開發經驗優先
7. 良好的溝通能力、組織協調能力、應變能力, 極強的責任心、學習能力。
數據倉庫工程師崗位的工作職責 篇2
職責:
1 負責大數據平臺、數據倉庫多維模型設計
2 負責大數據平臺相關生產系統數據的抽取、清洗、轉換等工作
3 負責BI平臺設計與報表開發工作
崗位要求:
1、精通數據倉庫建模理論,有參與過2個以上的數據倉庫建設經驗;
2、精通ETL開發,熟悉數據的抽取、常用數據腳本編寫、存儲過程的編寫;
3、熟悉BI平臺,有數據報表設計和開發經驗;
4、熟悉SQL,掌握Oracle、PostgreSQL、MySql等至少一種主流關系數據庫;
5、具備良好的團隊協作精神,良好的溝通能力;
6、供應鏈、物流行業數據從業經歷者優先。
數據倉庫工程師崗位的工作職責 篇3
職責:
參與數據倉庫模型設計和開發工作;
負責建立數據分析模型,設計前端報表,數據可視化開發;
負責數據平臺項目數據倉庫的管理、性能監控及優化等;
負責數據平臺的日常運維及優化
職位要求:
大學本科以上學歷,3年以上工作經驗,包含2年以上數據倉庫開發工作經驗;
精通數據倉庫建設,熟悉常用的模型設計方法;
對數據可視化有豐富的經驗,熟悉常用的數據分析方法;熟悉至少一種報表工具開發;
精通數據倉庫領域知識和技能,包括元數據管理、主數據管理、數據質量管理等;
熟練使用ETL工具如Kettle、SSIS等進行數據清洗、轉換、整合;
熟悉至少兩種關系型數據庫,如Oracle、SQL Server、PostgreSQL、MySql等主流數據庫,精通SQL Server開發和運維者優先考慮;
有完整的數據平臺建設經驗者優先;
熟悉使用Linux系統及Shell腳本開發,熟練開發Python程序者優先;
熟悉大數據開發框架者優先,如Spark,Flink等;
對新技術好奇愛學習,主動性和責任心強,對數據敏感,邏輯性強,有良好的抗壓能力;
團隊協作能力強
數據倉庫工程師崗位的工作職責 篇4
職責:
1、參與據倉庫的長期架構規劃,與數據開發,建設共享大數據平臺;
2、負責數據平臺相關數據管理工作,如研發規范、質量規范、保障規范的制定與推動實施落地;
3、負責來自業務團隊數據需求的研發支撐;
4、大規模數據挖掘和機器學習算法的實現和維護;
5、在線和離線海量數據分析平臺的開發;
6、負責數據倉庫的建設和維護,包括需求調研分析、軟件規劃、概念模型、設計邏輯、物理模型、數據處理(抽取、清洗、轉化)、項目實施管控等;
7、負責制定數據接入和采集規范制定。
任職要求:
1、從事數據倉庫領域工作2年以上;
2、熟悉數據建模、ETL設計與應用、報表開發等,并有實際模型設計及ETL開發經驗 ;具有良好的編程習慣和文檔編寫習慣;
3、熟悉數據倉庫領域知識和管理技能,包括但不局限于:元數據管理、數據質量、性能調優等;
4、掌握大型數據庫開發技術,如Oracle、Teradata、DB2、Mysql等等掌握至少其中一種,靈活運用SQL實現海量數據ETL加工處理;
5、了解大數據基礎架構和平臺 ,具備相關產品(Hadoop、Hive、HBase、Pig、Sqoop、Spark等)項目應用研發經驗,有MapReduce開發的實戰經驗者優先考慮;
6、熟悉linux系統;
7、熟練掌握python語言;
8、熟悉數據可視化的基本方法,有數據可視化的開發經驗優先;
9、對數據敏感,具有良好的邏輯分析、責任心強、良好的對外溝通和團隊協作能力
數據倉庫工程師崗位的工作職責 篇5
職責:
1、基于互聯網行業特點構建企業級數據倉庫架構,建設PB級共享數據平臺;
2、負責數據平臺相關數據研發及管理工作,參與制定EDW相關規范并推動實施落地;
3、對海量數據處理的相關需求進行評估及方案設計;
4、負責數據產品如用戶畫像等模型設計;
5、了解行業前沿大數據處理方法。
任職資格:
1、8年以上數據倉庫開發及管理經驗,5年以上互聯網/電商行業經驗;
2、精通數據倉庫建設方法論,有大型數據倉庫建設項目經驗(PB級以上);
3、熟悉HADOOP、HIVE、HBASE、SPARK、FLUME等工作原理;
4、精通HiveSQL,有較豐富的HiveSQL性能調優經驗;
5、至少熟練使用Shell、Python、Perl等腳本語言之一;
6、工作認真、負責,有良好的團隊合作精神,良好的分析及溝通能力;
數據倉庫工程師崗位的工作職責 篇6
職責:
1、協助研發自動化運維平臺,提高運維、開發實施協作效率,規范操作流程;
2、協助研發基本服務組件,虛擬化;
3、評估主機、系統運行狀態及性能,編寫主機硬件架構方案;
4、快速準確匯報系統中出現的故障,配合相關人員做好系統升級,故障解決和測試等工作;
5、作好工作記錄,定期匯總并上報給負責人。
任職資格:
1、計算機相關專業,大專及以上學歷,三年以上服務器運維經驗;
2、熟悉主流Linux/Windows服務器系統(CentOS/Redhat)日常安裝配置維護能力,熟練常用命令編寫;
3、熟悉Java應用,能完成Java應用的部署及常見運維工作;
4、熟悉Nginx、Lvs等軟件負載均衡方案,能進行部署和排錯;
5、熟悉Mysql數據庫的管理,熟悉Mysql備份和恢復,熟悉Mysql主從同步復制及性能調優者優先 。
數據倉庫工程師崗位的工作職責 篇7
職責:
1、參與數據倉庫架構設計、建模和ETL開發;
2、參與數據治理工作,提升數據易用性及數據質量,與數據工具團隊緊密合作;
3、理解并合理抽象業務需求,發揮數據價值,與業務團隊緊密合作。
任職要求:
1、計算機、數學、統計相關專業專科及以上學歷,其中2年以上數據倉庫開發經歷;
2、精通數據倉庫實施方法論、深入了解數據倉庫體系,并支撐過實際業務場景;
3、具備較強的編碼能力,熟悉sql,python,hive,spark,kafka,storm中的多項,有至少TB以上級大數據處理經驗;
4、對數據敏感,認真細致,善于從數據中發現疑點;
5、善于溝通,具備優秀的技術與業務結合能力。
6、有電力行業經驗者優先
數據倉庫工程師崗位的工作職責 篇8
職責:
1、充分了解項目需求和設計,與開發人員配合,對整個數據庫進行高效的設計與規劃;
2、數據庫端代碼編寫(存儲過程、函數、視圖等),與應用系統對接。
3、熟悉Memcached、Redis等分布式緩存技術,能夠根據業務需求,合理的設計緩存方案;
4、數據庫數據庫系統的規劃、設計、管理、變更、遷移;
5、熟悉數據庫的性能優化、SQL調優,熟練使用高可用、讀寫分離、負載均衡等解決方案;
6、數據庫架構搭建、日常維護、備份、優化及恢復;
7、能制定數據庫開發的規范,并提供針對開發人員的SQL培訓。
其他要求
1、3年以上數據庫相關工作經驗;
2、熟悉數據庫的運行機制和體系架構、數據庫備份與恢復原理;
3、精通數據庫的管理、編程,2年以上專職MS SqlServer數據庫管理經驗;
4、具備良好的溝通能力及團隊合作精神,能承受一定的工作壓力;
5、有基于云數據庫的管理和開發經驗;
6、有實際運營項目開發經驗、Memcached、Redis緩存技術等經驗優先;
數據倉庫工程師崗位的工作職責 篇9
1.熟悉娛樂系統的基本功能: 導航,語音,在線音樂, 收音機,藍牙,WIFI,HUD,無線充電,車輛控制及設置,系統設置,倒車影像&360
2.娛樂系統全功能測試用例開發為主
3.全功能測試
4.娛樂系統實操測試
數據倉庫工程師崗位的工作職責 篇10
職責:
1、根據業務部門需求進行數據的處理、分析、導出和日常維護;
2、結合公司的業務,進行一些自動化數據處理腳本的開發;
3、完成相關文檔的編寫。
職位要求:
1、熟練掌握SQL語句,能夠運用SQL進行各種數據處理;
2. 熟悉Postgresql、Mysql、Oracle、HIVE 或其他數據庫中的一項或幾項;
3、熟悉shell或python編程,能夠用腳本進行數據自動化數據處理;
4、具有良好的溝通能力和業務理解能力;
5、有過kettle,powercenter等ETL經驗加分;
6、有數據挖掘分析能力加分。
數據倉庫工程師崗位的工作職責 篇11
1、對旅游行業客戶需求分析,制定旅游行業市場策略和方向;
2、針對不同項目特點和需求,負責完成解決方案引導,客戶解決方案引導等工作。
3、與市場銷售人員一起,根據客戶需求進行項目落地方案引導,產品方案引導,共同完成銷售任務;
4、政府、旅游行業信息化建設、線上線下運營咨詢、規劃;
5、行業解決方案、產品資料編制和維護;
6、重大項目招投標技術支持
7、技術領域涉獵廣泛,知識面廣,并在某個領域有深入的了解,如智慧旅游、智慧城市,大互聯網,多媒體,O2O等。
數據倉庫工程師崗位的工作職責 篇12
職責:
1、維護分析集團軟件數據庫功能及故障
2、提取、轉換集團軟件數據
3、維護數據庫功能的日常運行
4、協調軟件開發
5、部門ERP系統的日常維護
6、部門安排的其他工作
要求:
1、計算機或數學專業,大專以上學歷
2、有一年以上數據庫實際相關工作經驗,熟悉sqlserver,oracle中至少一種
3、不接收應屆生,不接收實習生或學徒(有實際項目開發經驗,并能夠獨立分析、解決、編程者不限)
4、男女不限,年齡不限
數據倉庫工程師崗位的工作職責 篇13
職責:
1、存儲、服務器、云計算售后技術支持工程師;
2、負責項目主機存儲系統建設的實施方案設計、系統調試、系統測試;
3、負責主流主機、存儲、備份設備的安裝調試;
4、負責項目協調工作;
5、負責存儲、云計算項目的售后技術支持;
6、負責設備的安裝及調試。
任職要求:
1、熟悉主流Linux、Unix、Windows等平臺及應用環境;
2、對存儲、備份、容災等領域相關技術具有深刻的理解;
3、有Vmware、Oracle、Symantec(BE NBU)、IBM ITM,TSM,WAS,MS AD等軟件實施經驗優先;
4、良好的溝通表達能力和職業操守,能嚴格自律;自我學習能力強,善于思考和分析問題;
5、有紅帽證書者先考慮;能接受異地出差的優先考慮。
數據倉庫工程師崗位的工作職責 篇14
職責:
1、負責IBM、HP、DELL等業界主流品牌的服務器安裝配置及日常維護工作;
2、負責VMWare虛擬化平臺項目實施及維護工作;
3、負責EMC、DELL等企業級存儲及其SAN網絡的安裝配置及日常維護工作;
4、負責服務器集群拓撲及SAN存儲網絡部署;
5、解決實施工作中的技術難題,挖掘客戶需求,提出針對性的解決方案;
6、編寫各類維護文檔,譬如:實施方案、實施報告、巡檢報告、故障處理報告等等。
崗位要求:
1、計算機相關大專以上學歷,3年以上IT運維或機房管理工作經驗;
2、熟悉主流X86服務器(IBM/HP/華為)和存儲的運維和管理;
3、熟悉思科、華為等主流網絡設備的配置和問題排錯;
4、熟悉vmware虛擬化架構技術,具有虛擬化的搭建和運維經驗,對vmware的存儲、災備、網絡、安全、升級、虛擬機管理、監控和性能等有深刻的理解;
5、有一定的信息安全實施經驗,對VPN,防火墻,上網行為管理以及內網安全有深入理解和實操經驗;
6、熟悉服務器運維及服務器架設,包括AD域,IIS,DNS、雙機集群等各類windows服務器的配置管理;
7、熟悉openstack或者cloudstack任意一種平臺的部署實施,有成功搭建或者部署經驗優先。
數據倉庫工程師崗位的工作職責 篇15
職責:
1、根據信息分析的結果挖掘基因變異與疾病之間的關系;
2、大數據分析信息提取解讀;
3、優化和豐富解讀數據庫,提出制定,調整,優化數據處理方案;
4、 搭建遺傳咨詢的對外平臺,負責大客戶的遺傳咨詢培訓;
5、搭建位點解讀管理體系 。
職位要求:
1. 生物科學、醫學等相關專業本科及以上學歷;
2. 具有臨床咨詢師證書、遺傳咨詢師或相關培訓證書的優先;
3. 具有報告解讀經驗者優先;
4.具有大數據挖掘經驗優先。