數(shù)據(jù)倉(cāng)庫(kù)工程師的主要職責(zé)

1、數(shù)據(jù)倉(cāng)庫(kù)工程師的主要職責(zé)數(shù)據(jù)倉(cāng)庫(kù)工程師負(fù)責(zé)數(shù)據(jù)質(zhì)量問(wèn)題的分析、跟進(jìn)、解決，進(jìn)行數(shù)據(jù)質(zhì)量監(jiān)測(cè)、校驗(yàn)和提升。以下是小編整理的數(shù)據(jù)倉(cāng)庫(kù)工程師的主要職責(zé)。數(shù)據(jù)倉(cāng)庫(kù)工程師的主要職責(zé)1職責(zé)：1. 負(fù)責(zé)企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)、規(guī)劃、建設(shè)、實(shí)施、管理,數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)設(shè)計(jì)與數(shù)據(jù)開(kāi)發(fā)，創(chuàng)建數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)集市2. 熟悉數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域知識(shí)，從架構(gòu)和技術(shù)層面參與建設(shè)數(shù)據(jù)倉(cāng)庫(kù)，包括元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理、性能優(yōu)化和調(diào)優(yōu)。3. 負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)平臺(tái)相關(guān)數(shù)據(jù)管理工作，如研發(fā)規(guī)范、質(zhì)量規(guī)范、保障規(guī)范的制定與推動(dòng)實(shí)施落地4. 配合和協(xié)助數(shù)據(jù)分析/數(shù)據(jù)挖掘形成底層/中間層的業(yè)務(wù)邏輯切片任職資格:1. 本科或碩士以上學(xué)歷，計(jì)算機(jī)工程相

2、關(guān)專業(yè)2. 熟悉大數(shù)據(jù)相關(guān)技術(shù)能力(Hadoop/MapReduce/Hive/Hbase等),熟練進(jìn)行數(shù)倉(cāng)Hive建設(shè)和軟件架構(gòu),較強(qiáng)的數(shù)據(jù)抽象能力3. 精通SQL，具備海量數(shù)據(jù)處理和Hive/Spark性能調(diào)優(yōu)經(jīng)驗(yàn),3年以上大規(guī)模分布式數(shù)據(jù)倉(cāng)庫(kù)建設(shè)經(jīng)驗(yàn)4. 熟練使用Druid/Kylin之一進(jìn)行數(shù)據(jù)挖掘模型設(shè)計(jì)，熟練掌握J(rèn)ava/Scala之一，具備良好的coding素養(yǎng)和習(xí)慣,了解腳本語(yǔ)言，如Python、Shell等5. 強(qiáng)烈的責(zé)任心,工作態(tài)度積極主動(dòng)，有較好的團(tuán)隊(duì)精神和溝通能力，工作細(xì)致認(rèn)真數(shù)據(jù)倉(cāng)庫(kù)工程師的主要職責(zé)2職責(zé)：1、負(fù)責(zé)ETL開(kāi)發(fā)、作業(yè)調(diào)度和數(shù)據(jù)平臺(tái)建設(shè)2、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)的設(shè)

3、計(jì)、開(kāi)發(fā)和優(yōu)化，建立結(jié)構(gòu)層次合理、靈活可擴(kuò)展的數(shù)據(jù)倉(cāng)庫(kù)3、設(shè)計(jì)并研發(fā)BI分析相關(guān)的數(shù)據(jù)產(chǎn)品4、結(jié)合對(duì)數(shù)據(jù)的理解和業(yè)務(wù)需求，對(duì)數(shù)據(jù)進(jìn)行整理、分析和挖掘任職要求1、計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷，有2年以上數(shù)據(jù)倉(cāng)庫(kù)、ETL工作經(jīng)驗(yàn)2、有海量數(shù)據(jù)處理、ETL及作業(yè)調(diào)度優(yōu)化、數(shù)據(jù)倉(cāng)庫(kù)建模等經(jīng)驗(yàn)3、熟悉Linux、SQL、Python或Java、Shell腳本，有Hadoop/Hive/Spark/HBase/Kylin/Impala等大數(shù)據(jù)技術(shù)使用經(jīng)驗(yàn)4、邏輯清晰，對(duì)數(shù)據(jù)敏感，深入了解業(yè)務(wù)，具備自己獨(dú)特的想法并能提出合理的建議數(shù)據(jù)倉(cāng)庫(kù)工程師的主要職責(zé)3職責(zé)：1、負(fù)責(zé)制定數(shù)據(jù)倉(cāng)庫(kù)平臺(tái)技術(shù)體系架構(gòu)、數(shù)據(jù)架構(gòu)

4、及規(guī)范;2、負(fù)責(zé)設(shè)計(jì)和實(shí)施公司業(yè)務(wù)數(shù)據(jù)的實(shí)時(shí)/離線數(shù)據(jù)ETL架構(gòu)方案;3、負(fù)責(zé)調(diào)度架構(gòu)設(shè)計(jì)與開(kāi)發(fā);4、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)平臺(tái)運(yùn)維以及日常數(shù)據(jù)運(yùn)營(yíng)等管理;5、負(fù)責(zé)關(guān)鍵技術(shù)攻關(guān);任職要求：1、5年以上數(shù)據(jù)倉(cāng)庫(kù)項(xiàng)目開(kāi)發(fā)經(jīng)驗(yàn)，參與過(guò)數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)設(shè)計(jì)，對(duì)ETL開(kāi)發(fā)流程、調(diào)度架構(gòu)有深入理解;2、精通mysql、oralce、greenplum等至少一種數(shù)據(jù)庫(kù)，豐富的SQL性能調(diào)優(yōu)經(jīng)驗(yàn)；3、熟練使用Java、Shell、Python、Perl等至少一種腳本語(yǔ)言;4、熟悉數(shù)據(jù)治理理論，數(shù)據(jù)質(zhì)量、元數(shù)據(jù)管理流程和方法;5、了解Hadoop/Hive/HBase/Spark/Storm等技術(shù)及其生態(tài)圈;6、溝通能力好、

5、責(zé)任心強(qiáng)，具有良好的團(tuán)隊(duì)合作精神和敬業(yè)精神;數(shù)據(jù)倉(cāng)庫(kù)工程師的主要職責(zé)4職責(zé)：1. 參與傳統(tǒng)數(shù)倉(cāng)和大數(shù)據(jù)數(shù)倉(cāng)日常開(kāi)發(fā)工作;2. 參與大數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)、規(guī)劃和開(kāi)發(fā);3. 參與日常工作的優(yōu)化，提出建設(shè)性意見(jiàn);4. 負(fù)責(zé)管理項(xiàng)目，負(fù)責(zé)板塊內(nèi)的資源協(xié)調(diào)、進(jìn)度管理、交付管理;5. 參與數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)集市體系架構(gòu)的設(shè)計(jì)、規(guī)劃與開(kāi)發(fā)，參與大數(shù)據(jù)、ETL開(kāi)發(fā)，sql性能優(yōu)化。任職要求：1.全日制本科，計(jì)算機(jī)等相關(guān)專業(yè)。3年以上數(shù)倉(cāng)開(kāi)發(fā)經(jīng)驗(yàn)，有銀行、金融從業(yè)經(jīng)驗(yàn)者優(yōu)先。2.2年以上項(xiàng)目管理經(jīng)驗(yàn)，具備PMPKE書(shū)優(yōu)先.3. 熟悉oracle/hive/spark，熟悉數(shù)據(jù)處理和性能優(yōu)化，有UDF自定義函數(shù)、M所發(fā)經(jīng)優(yōu)

6、先；4. 熟悉常用ETL工具，熟悉常用的Linux指令，熟悉shell/python任意一種腳本語(yǔ)言。數(shù)據(jù)倉(cāng)庫(kù)工程師的主要職責(zé)5職責(zé)：1. 建設(shè)公司級(jí)數(shù)據(jù)倉(cāng)庫(kù)，并根據(jù)業(yè)務(wù)變化持續(xù)迭代和優(yōu)化;2. 對(duì)業(yè)務(wù)數(shù)據(jù)進(jìn)行梳理和抽象，建設(shè)數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)模型;3. 對(duì)業(yè)務(wù)數(shù)據(jù)進(jìn)行采集、清洗、轉(zhuǎn)換和存儲(chǔ);4. 支撐BI、用戶數(shù)據(jù)、用戶運(yùn)營(yíng)、用戶畫(huà)像、房源數(shù)據(jù)、推薦系統(tǒng)等核心數(shù)據(jù)平臺(tái)產(chǎn)品;5. 研究大數(shù)據(jù)前沿技術(shù)，不斷持續(xù)優(yōu)化大數(shù)據(jù)平臺(tái)，為業(yè)務(wù)提供價(jià)值。任職資格:1. 本科及以上計(jì)算機(jī)、統(tǒng)計(jì)學(xué)、數(shù)據(jù)庫(kù)、機(jī)器學(xué)習(xí)等相關(guān)專業(yè)，5年以上數(shù)據(jù)相關(guān)工作;2. 對(duì)業(yè)務(wù)數(shù)據(jù)有敏銳的理解能力，并能快速梳理和分析業(yè)務(wù)數(shù)據(jù);3. 熟練掌握SQL語(yǔ)言、熟悉MySQL又Shell、Java（主要開(kāi)發(fā)語(yǔ)言）、Python編程非常熟悉;4. 熟悉常用的ETL技術(shù)和原則;精通數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)庫(kù)設(shè)計(jì)規(guī)范和實(shí)操;5. 熟悉Ha