數(shù)據(jù)工程師崗位職責16篇

Word———數(shù)據(jù)工程師崗位職責16篇【第1篇】推送數(shù)據(jù)工程師職位描述與崗位職責任職要求

職位描述：

工作職責：

1、負責字節(jié)跳動用戶行為的理解和建模，關心公司各項業(yè)務滿意用戶需求，提升用戶掩蓋；

2、負責在數(shù)據(jù)建設層面，對用戶隱私進行脫敏處理，保證后續(xù)數(shù)據(jù)研發(fā)過程中愛護用戶隱私；

3、探究、挖掘公司各項指標、用戶滿足度、用戶增長上的各項規(guī)律，并利用這些規(guī)律關心產(chǎn)品提升和擴展，增加用戶滿足度，擴展用戶群體。

任職要求：

1、本科及以上學歷，計算機、統(tǒng)計學、數(shù)學等相關專業(yè)；

2、較強的編程和數(shù)據(jù)工具運用力量，有hadoop，hive，spark，kafka，elasticsearch或者其他的大數(shù)據(jù)工具的使用閱歷；

3、對數(shù)據(jù)倉庫、數(shù)據(jù)建模有肯定認知；有過數(shù)據(jù)使用相關閱歷。

【第2篇】大數(shù)據(jù)開發(fā)工程師-偏數(shù)據(jù)模型方向-l80542職位描述與崗位職責任職要求

職位描述：

職責描述：

1、參加數(shù)據(jù)需求的溝通和模型設計；

2、負責大數(shù)據(jù)平臺的數(shù)據(jù)需求開發(fā)，包括實時和批量處理；

3、負責不同數(shù)據(jù)源的接入解析落地的設計開發(fā)工作；

4、負責數(shù)據(jù)質(zhì)量監(jiān)控，解決數(shù)據(jù)運行和質(zhì)量問題。

任職要求：

1、計算機本科以上學歷，至少有3年數(shù)據(jù)開發(fā)閱歷；

2、精通java/scala/python，至少有3年以上開發(fā)使用閱歷；

3、熟識spark，hive，flink，jstorm等大數(shù)據(jù)實時計算技術；

4、把握hivesql，sparksql，esquerydsl等查詢語言；擁有sql性能調(diào)優(yōu)閱歷；

5、具有較強的業(yè)務理解力量，較強的責任心、團隊合作力量和溝通力量；

6、有過圖數(shù)據(jù)庫開發(fā)或sparkmllib開發(fā)閱歷者優(yōu)先考慮。

【第3篇】數(shù)據(jù)通信系統(tǒng)工程師崗位職責數(shù)據(jù)通信系統(tǒng)工程師職責任職要求

數(shù)據(jù)通信系統(tǒng)工程師崗位職責

1、通信、電子、計算機等相關專業(yè);2、有較扎實的通信學問，具備良好的溝通、理解與語言表達力量;3、有高度的責任心、有較強的團隊協(xié)作和客戶服務意識，能較好完成團隊內(nèi)部各項工作，能承受肯定工作壓力;4、了解通信行業(yè)標準和規(guī)范，能編制通信工程概預算，嫻熟使用cad、visio等工程設計軟件者;5、熟識電信運營商網(wǎng)絡環(huán)境(核心網(wǎng)、增值業(yè)務、城域網(wǎng))，有從事運營商數(shù)據(jù)平臺規(guī)劃設計者優(yōu)先;6、熟識服務器、存儲、網(wǎng)絡、信息平安、軟件開發(fā)，有系統(tǒng)集成閱歷者優(yōu)先;7、嫻熟使用visio、cad、word、excel、ppt等軟件，有技術方案編撰力量;8、語言表達力量強、溝通力量強，能夠自立擔當客戶溝通、方案講解等工作任務;

【第4篇】數(shù)據(jù)集成工程師崗位職責

數(shù)據(jù)集成/etl工程師深圳知匯科技有限公司深圳知匯科技有限公司,知匯職責描述:1、分析醫(yī)院業(yè)務數(shù)據(jù)及數(shù)據(jù)流,參加數(shù)據(jù)模型的設計;

2、負責數(shù)據(jù)集成腳本開發(fā)、etl開發(fā),對醫(yī)院信息系統(tǒng)數(shù)據(jù)進行提取、清洗、轉(zhuǎn)換和整合;

3、進行數(shù)據(jù)任務流程調(diào)優(yōu)及精確性改進,進行數(shù)據(jù)質(zhì)量監(jiān)測、校驗和提升。

4、負責大數(shù)據(jù)平臺的開發(fā)、維護工作;

任職要求:1、2年以上數(shù)據(jù)平臺或商務智能領域開發(fā)工作閱歷,并實際參加過數(shù)據(jù)集成或etl開發(fā);

2、嫻熟把握ssis、kettle、informatica等至少一種etl工具的使用;

3、熟識sqlserver等主流數(shù)據(jù)庫(sqlserver、oracle、mysql等),有sqlserver事務復制或oracle的goldengate閱歷者優(yōu)先;

4、能嫻熟進行sql查詢優(yōu)化,嫻熟使用存儲過程、有海量數(shù)據(jù)處理閱歷者優(yōu)先;

5、有醫(yī)療信息系統(tǒng)(his、emr、集成平臺等)開發(fā)及實施閱歷優(yōu)先;

【第5篇】dba數(shù)據(jù)庫工程師崗位職責

數(shù)據(jù)庫dba工程師云天勵飛深圳云天勵飛技術有限公司,云天勵飛,深圳云天勵飛,云天勵飛職位描述:

崗位職責:

1、負責管理核心數(shù)據(jù)庫系統(tǒng);

2、數(shù)據(jù)庫維護和監(jiān)控,并進行查詢分析和優(yōu)化;

3、協(xié)作技術部項目進行數(shù)據(jù)庫設計,制定合適的數(shù)據(jù)庫架構。

4、完善數(shù)據(jù)庫文檔管理,促進學問積累和閱歷共享,及改善工作效率;

5、討論前瞻性的數(shù)據(jù)庫技術,促進數(shù)據(jù)庫應用技術的成進步化;

任職要求:

1、熟識數(shù)據(jù)庫的運行機制和體系架構,熟識mysql,oracle或者sqlserver中一種;

2、熟識數(shù)據(jù)庫的管理,擴容,備份,優(yōu)化;

3、熟識數(shù)據(jù)庫高可用可擴展解決方案,有數(shù)據(jù)庫故障檢測和恢復閱歷;

4、熟識linux操作系統(tǒng)的管理維護與使用,及常用服務的架設與維護;

5、熟識sql優(yōu)化;

6、熟識linux系統(tǒng)下shell/script編程,至少把握一門腳本編程語言(php、perl、python、ruby);

7、有自動化運維閱歷者優(yōu)先;

8、有海量數(shù)據(jù)構架閱歷者優(yōu)先;

有以下閱歷更優(yōu):

1、熟識mysql的myisam,innodb,memory引擎,精通存儲過程和事務;

2、linux系統(tǒng)硬盤,內(nèi)存數(shù)據(jù)庫調(diào)優(yōu)。

【第6篇】大數(shù)據(jù)基礎架構工程師職位描述與崗位職責任職要求

職位描述：

職位描述:

1、負責hadoop平臺集群架構、搭建、運維；

2、負責搭建分布式計算平臺、查詢引擎、中間件；

3、負責大數(shù)據(jù)平臺資源規(guī)劃、權限掌握；

4、制定平臺運營管理規(guī)范，保障平臺可持續(xù)高效、穩(wěn)定運行。

任職要求：

1、本科或以上學歷，計算機相關專業(yè)優(yōu)先；

2、熟識java后臺服務開發(fā)和面對對象程序設計；

3、熟識hadoop生態(tài)圈及hdfs、hive、kafka、spark、flink等開源產(chǎn)品；

4、精通java有較強的編碼力量，能自立解決技術難題。

附加要求：

1、熟識hbase、spark、zookeeper等任一開源代碼優(yōu)先；

2、有分布式、緩存、消息隊列等研發(fā)閱歷優(yōu)先。

【第7篇】數(shù)據(jù)庫開發(fā)工程師-南昌職位描述與崗位職責任職要求

職位描述：

工作概述：

從事數(shù)據(jù)庫開發(fā)維護相關工作。

職位要求：

1.熟識oracle或db2數(shù)據(jù)庫，并從業(yè)1年以上；

2.嫻熟把握sql語句，并有存儲過程開發(fā)閱歷；

3.熟識電信業(yè)務優(yōu)先錄用；

4.做過大數(shù)據(jù)項目優(yōu)先錄用；

5.團隊合作意識，并能適應工作壓力和肯定量加班。

【第8篇】數(shù)據(jù)抓取資深工程師職位描述與崗位職責任職要求

職位描述：

工作職責：

1、負責今日頭條、西瓜視頻、topbuzz、buzzvideo等產(chǎn)品的全球內(nèi)容接入，通過算法智能解析各語種頁面結構，自適應提取頁面關鍵信息

2、負責全網(wǎng)圖文、長短視頻、sns內(nèi)容監(jiān)控，對海量的站內(nèi)外發(fā)文、用戶關系分析挖掘；每日處理上億條數(shù)據(jù)，供應幾十億內(nèi)容在線服務

3、負責通用垂直抓取平臺建設，服務頭條、抖音等全部業(yè)務團隊，快速解決各種不同的抓取訴求，供應數(shù)據(jù)和平臺支持

4、負責項目整體架構設計與優(yōu)化，主導代碼開發(fā)測試，并樂觀推動上線；負責初、中級工程師的培育

任職要求：

1、具備強悍的編碼力量，有扎實的數(shù)據(jù)結構和算法功底

2、精通python、php、c++、java、golang中的至少一門語言

3、理解http、計算機網(wǎng)絡，熟識html、dom、xpath等

4、責任心強，樂觀主動，有良好的溝通力量和團隊合作力量

5、工作仔細細致踏實，較強的學習力量、分析解決問題力量

6、有很好的產(chǎn)品意識，對業(yè)務流程有良好的抽象和總結力量

【第9篇】地圖數(shù)據(jù)工程師崗位職責

地圖數(shù)據(jù)工程師銀泰商業(yè)集團有限公司浙江銀泰百貨有限公司,銀泰商業(yè),銀泰arcgis地圖工程師:

【崗位描述】

1、室內(nèi)地圖的采集和繪制;

2、室內(nèi)定位指紋信息的點位采集

【崗位要求】

1、地圖測繪、gis、計算機、室內(nèi)建筑設計等相關專畢業(yè),或經(jīng)過相關培訓,具有肯定的外業(yè)測繪和建筑繪圖力量;

2、嫻熟使用autocad和arcgis等制圖軟件;

3、了解gis數(shù)據(jù)和地圖圖式規(guī)范,熟識地圖數(shù)據(jù)的處理流程和方法;

4、有室內(nèi)地圖測量制作和數(shù)據(jù)處理工作閱歷者優(yōu)先(例如高德或百度室內(nèi)地圖);

5、腳本開發(fā)項目閱歷優(yōu)先。

【第10篇】高級java開發(fā)工程師（大數(shù)據(jù)）職位描述與崗位職責任職要求

職位描述：

崗位職責：

1.負責物聯(lián)網(wǎng)、大數(shù)據(jù)平臺相關的技術討論、研發(fā)與測試等工作

2.負責基于物聯(lián)網(wǎng)、大數(shù)據(jù)平臺進行業(yè)務開發(fā)

技能要求：

1.本科以上學歷，1年以上工作閱歷；

2.精通java后臺程序設計，java基礎扎實，要求把握jvm基本原理、類加載、反射、集合、并發(fā)、io、網(wǎng)絡等內(nèi)容；

3.對數(shù)據(jù)結構、算法有深刻理解；

4.熟識linux開發(fā)環(huán)境，熟識python、shell、perl中的一種；

5.有hadoop、hbase、storm、kafka等系統(tǒng)的源代碼閱讀閱歷者優(yōu)先。

【第11篇】前端開發(fā)工程師（數(shù)據(jù)可視化）職位描述與崗位職責任職要求

職位描述：

工作職責：

1、和大數(shù)據(jù)工程師共同工作，探究可視化的技術方案和產(chǎn)品應用；

2、開進展示為主的數(shù)據(jù)大屏和業(yè)務分析為主的數(shù)據(jù)產(chǎn)品以及在移動端數(shù)據(jù)可視化項目;

3、負責數(shù)據(jù)產(chǎn)品/可視化大屏的前端架構和應用后臺及通用組件的開發(fā)；

任職要求：

1、本科及以上學歷，功底扎實，視野開闊，對新技術具有敏感和熱忱；

2、熟識數(shù)據(jù)可視化開源方案，有數(shù)據(jù)分析場景/數(shù)據(jù)可視化閱歷者(echarts/highcharts/d3)優(yōu)先；

3、技術跟隨前沿，熟識servlet，html5，javascript，json，了解node/angularjs/react；

4、熟識web后臺性能優(yōu)化和前端展現(xiàn)技術;

5、熟識1-2種分析型數(shù)據(jù)庫(如db/hive/neo4j)者優(yōu)先。

【第12篇】bi數(shù)據(jù)倉庫工程師崗位職責

bi工程師-數(shù)據(jù)倉庫涂鴉智能杭州涂鴉科技有限公司,涂鴉智能,愛相機崗位職責:

1.負責業(yè)務數(shù)據(jù)調(diào)研、需求理解,數(shù)據(jù)采集方案設計及實現(xiàn);

2.負責建立數(shù)據(jù)模型,依據(jù)業(yè)務設計數(shù)據(jù)主題;

3.負責數(shù)據(jù)模型的etl編寫,參加團隊etl流程的優(yōu)化及解決etl相關技術問題;

4.理解業(yè)務方的數(shù)據(jù)需求,供應面對業(yè)務的olap、報表、數(shù)據(jù)提取等數(shù)據(jù)服務;

任職要求:

1.本科及以上學歷,計算機相關專業(yè),2-5年企業(yè)級數(shù)據(jù)平臺相關系統(tǒng)開發(fā)閱歷;

2.sql技能嫻熟,精通hive-sql,presto-sql

3.具有扎實的計算機操作系統(tǒng)、數(shù)據(jù)結構等編程基礎,熟識java或scala語言;

4.有過2年以上bi項目閱歷,熟識開源的bi工具如:metabase,superset,redash.有實際操作閱歷。

7.有良好的溝通力量,擅長主動思索和行動,有極強的責任心和自驅(qū)力。

【第13篇】數(shù)據(jù)爬蟲工程師職位描述與崗位職責任職要求

職位描述：

工作職責：

1.開發(fā)網(wǎng)頁自動化腳本。

2.負責商品信息結構化，編寫自動化腳本解析網(wǎng)頁信息。

3.商品索引系統(tǒng)：億級sku的庫存價格實時跟蹤同步，并對商品進行智能分類、本地化、圖片處理和去重。

4.設計、開發(fā)、測試、部署以及維護并改進各子系統(tǒng)；

5.管理項目優(yōu)先級并按時交付。

職位要求：

1.全日制統(tǒng)招本科、碩士畢業(yè)，1年以上軟件開發(fā)工作閱歷；

2.熟識至少一門通用靜態(tài)編譯編程語言，c/c++/java/c#/go；

3.熟識web端基礎標準，包括html、css、javascript、json等；

4.熟識python或其他腳本語言，有愛好和力量依據(jù)需求學習其他編程語言；

5.熟識unix/linux環(huán)境，memcache/redis/mongodb等存儲系統(tǒng)，能自立設計開發(fā)包括前后端交互的業(yè)務子系統(tǒng)；

6.熟識常見的設計模式、單元測試、持續(xù)開發(fā)集成、codereview，并能在日常工作踐行；

7.了解搜尋引擎、電子商務、社交類應用的系統(tǒng)基本架構，能對已有的子系統(tǒng)進行優(yōu)化調(diào)整的優(yōu)先；

8.活躍的開源項目貢獻者優(yōu)先。

【第14篇】大數(shù)據(jù)架構資深工程師職位描述與崗位職責任職要求

職位描述：

工作職責：

1、打造業(yè)界領先的存儲、計算等分布式系統(tǒng)；

2、為海量數(shù)據(jù)和大規(guī)模業(yè)務系統(tǒng)供應牢靠的基礎設施。

任職要求：

1、把握分布式系統(tǒng)原理，對存儲、計算、消息隊列、集群管理中的一項或多項有深化的理解和熟悉；

2、樂于挑戰(zhàn)沒有明顯答案的問題，能快速理解業(yè)務場景，從詳細問題中抽象出通用的解決方案；

3、存儲方向：對hdfs，rocksdb，leveldb，memcache，redis，mysql，hbase，kafka的一項或多項有閱歷者優(yōu)先；

4、計算方向：對spark，mapreduce，storm，hive，p