數(shù)據(jù)倉庫工程師的工作職責

1、Word文檔數(shù)據(jù)倉庫工程師的工作職責 數(shù)據(jù)倉庫工程師需要與團隊形成良好溝通，有效傳達設(shè)計意圖，并持續(xù)跟進設(shè)計的調(diào)整和優(yōu)化。數(shù)據(jù)倉庫工程師的工作職責1職責1.負責數(shù)據(jù)ETL開發(fā)，優(yōu)化ETL流程設(shè)計;2.負責數(shù)據(jù)質(zhì)量問題的分析、跟進、解決，進行數(shù)據(jù)質(zhì)量監(jiān)測、校驗和提升;3.負責ETL開發(fā)實施文檔的編寫;4.負責梳理公司數(shù)據(jù)倉庫/數(shù)據(jù)集市數(shù)據(jù)清單、數(shù)據(jù)映射關(guān)系，優(yōu)化現(xiàn)有數(shù)據(jù)倉庫模型;5.完善和梳理數(shù)據(jù)指標體系，完成和維護數(shù)據(jù)字典的工作;6.參加數(shù)據(jù)標準的制定、數(shù)據(jù)標準管理和數(shù)據(jù)平安管理工作;7.參加公司大數(shù)據(jù)平臺的建設(shè)，包括Sugar報表或神策接口配置，用戶畫像標簽體系的開發(fā)等任職要求：1.有she

2、ll或Python腳本開發(fā)閱歷;2.有傳統(tǒng)數(shù)據(jù)庫SQL Server和MySQL，有存儲過程編寫力量;3.熟識Hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實踐閱歷，包括但不限于Sqoop、Hive、HBase、Kylin等開發(fā)閱歷;4.有kettle、azkaban或oozie工作流調(diào)度閱歷;5.熟識Hive SQL或Flink SQL的開發(fā);6.有數(shù)據(jù)倉庫模型設(shè)計，有使用kafka+Flink Streaming實時數(shù)據(jù)處理閱歷優(yōu)先;7.有Sugar、神策或Tableau使用閱歷,有用戶畫像或客戶召回標簽工作閱歷優(yōu)先;8.對數(shù)據(jù)挖掘和機器學習有所了解，包括常用的機器學習算法和數(shù)據(jù)建模過程的優(yōu)先數(shù)據(jù)倉庫工

3、程師的工作職責2職責：1、負責數(shù)據(jù)源導(dǎo)入、清洗、集成等工作，優(yōu)化ETL流程并解決ETL相關(guān)技術(shù)問題;2、負責參加數(shù)據(jù)模型體系構(gòu)建及數(shù)據(jù)主題設(shè)計和開發(fā)，數(shù)據(jù)倉庫和業(yè)務(wù)數(shù)據(jù)集市的建設(shè);3、負責數(shù)據(jù)集市需求調(diào)研和需求分析;4、基于阿里云Maxcompute，進行數(shù)據(jù)開發(fā)工作。崗位要求：1、3年或以上數(shù)據(jù)倉庫開發(fā)和模型設(shè)計閱歷;2、深化理解DW，BI相關(guān)的學問，包括：ETL、數(shù)據(jù)倉庫、OLAP、多維數(shù)據(jù)模型等;3、熟識MapReduce、Hive原理;4、精通SQL，能夠嫻熟使用HiveSQL進行數(shù)據(jù)開發(fā);5、具有良好的團隊協(xié)作精神和溝通力量，較強的規(guī)律思維，學習力量和解決問題的力量，可擔當較大的工作

4、壓力;6、熟識阿里云大數(shù)據(jù)開發(fā)平臺優(yōu)先，如Maxcompute;7、熟識跨境電商及供應(yīng)鏈業(yè)務(wù)優(yōu)先。數(shù)據(jù)倉庫工程師的工作職責3職責:1. 負責直播業(yè)務(wù)相關(guān)數(shù)據(jù)倉庫的數(shù)據(jù)模型設(shè)計;3. 參加數(shù)據(jù)倉庫ETL流程設(shè)計、開發(fā)和優(yōu)化，解決ETL過程相關(guān)技術(shù)問題;3. 參加項目規(guī)劃，數(shù)據(jù)采集設(shè)計，數(shù)據(jù)倉庫開發(fā)，模型開發(fā)，報表開發(fā)等;4. 總結(jié)數(shù)據(jù)倉庫建模的方法，負責數(shù)據(jù)產(chǎn)品平臺化和系統(tǒng)化;任職資格:1. 2年及以上的數(shù)據(jù)倉庫/BI相關(guān)研發(fā)閱歷，對數(shù)據(jù)和業(yè)務(wù)敏感，有較好的數(shù)據(jù)模型設(shè)計力量;2. 熟識數(shù)據(jù)倉庫各類模型建模理論，了解數(shù)據(jù)倉庫數(shù)據(jù)分層架構(gòu)，多維數(shù)據(jù)模型設(shè)計;3. 嫻熟使用Hadoop/Spark/H

5、ive/HBase/Mysql，有列式數(shù)據(jù)庫/Kylin/ElasticSearch等閱歷者優(yōu)先;4. 有較強的編程力量和編程閱歷，至少熟識Java/Scala/Python/PHP等其中一門編程語言;5. 參加過大型數(shù)據(jù)倉庫架構(gòu)設(shè)計、模型設(shè)計、ETL設(shè)計，具備海量數(shù)據(jù)處理、性能調(diào)優(yōu)閱歷;6. 學習力量強，熱衷開源技術(shù)，有團隊觀念，具備單獨解決問題的力量;數(shù)據(jù)倉庫工程師的工作職責4職責：1、 參加數(shù)據(jù)倉庫及ETL基礎(chǔ)架構(gòu)規(guī)劃、平安規(guī)劃制定;2、 負責數(shù)據(jù)倉庫及ETL的開發(fā)、測試和優(yōu)化，并準時解決相關(guān)技術(shù)問題;3、 負責相關(guān)數(shù)據(jù)精確性驗證及報表等日常維護;4、 報表性能優(yōu)化：對存在性能問題的數(shù)據(jù)

6、報表進行優(yōu)化;5、 數(shù)據(jù)運維：準時處理線上問題;6、 完成上級交代的其他工作。崗位要求：1.計算機相關(guān)專業(yè)本科及以上學歷，2年以上ETL開發(fā)或數(shù)倉相關(guān)工作閱歷;2.嫻熟使用Oracle、MySQL、PostgreSQL等主流數(shù)據(jù)庫，具有較強的SQL編寫、優(yōu)化力量，熟識存儲過程編寫;3.熟識數(shù)據(jù)倉庫數(shù)據(jù)處理流程，有肯定的數(shù)據(jù)建模力量;4.具有良好的溝通理解力量，能依據(jù)業(yè)務(wù)提出的需求，快速理解并落地實施;5.有Kettle、Greenplum開發(fā)閱歷者優(yōu)先。數(shù)據(jù)倉庫工程師的工作職責5職責：1. 負責數(shù)據(jù)倉庫架構(gòu)設(shè)計與開發(fā)2. 依據(jù)業(yè)務(wù)調(diào)研，設(shè)計信息模型與數(shù)據(jù)模型，負責大數(shù)據(jù)建模、ETL、數(shù)據(jù)產(chǎn)品及平臺的設(shè)計與開發(fā)3. 滿意業(yè)務(wù)數(shù)據(jù)需求，設(shè)計面對業(yè)務(wù)的數(shù)據(jù)集市模型4. 需求的溝通與數(shù)據(jù)開發(fā)項目管理5. 基于Hadoop生態(tài)的程序設(shè)計、開發(fā)和維護崗位要求：1.熟識SQL語言，至少熟識Oracle、MySQL、SQL sever一種及以上2.精通數(shù)據(jù)庫系統(tǒng)(Oracle、SQL、mysql等)：精通熟識Oracle數(shù)據(jù)庫體系結(jié)構(gòu)，基礎(chǔ)扎實;精通熟識DataGuardRAC等高可用技術(shù)，能順當?shù)呐渲煤凸芾韉ataGu