歡迎光臨管理者范文網(wǎng)
當前位置:管理者范文網(wǎng) > 安全管理 > 崗位職責 > 工程崗位職責

數(shù)據(jù)研發(fā)工程師崗位職責16篇

發(fā)布時間:2023-02-08 07:03:11 查看人數(shù):75
  • 目錄

數(shù)據(jù)研發(fā)工程師崗位職責

第1篇 廣告業(yè)務數(shù)據(jù)研發(fā)工程師職位描述與崗位職責任職要求

職位描述:

工作職責:

1、廣告各類在線業(yè)務的離線數(shù)據(jù)加工與在線數(shù)據(jù)服務開發(fā)與維護

2、數(shù)據(jù)服務接口及產品需求研發(fā)迭代,代碼review、bug修復及日常服務運維

3、針對海量數(shù)據(jù)處理和查詢需求,設計適應業(yè)務變化的合理的多維數(shù)據(jù)分析系統(tǒng)架構,滿足多樣性的需求

4、海量日志清洗加工,并抽象出可以多業(yè)務復用的數(shù)據(jù)模型

任職要求:

1、熟悉hadoop架構和工作原理,精通mapreduce編程;精通hive,有hql優(yōu)化經(jīng)驗

2、有web服務開發(fā)經(jīng)驗,具備獨立完成模塊開發(fā)能力,具備大規(guī)模分布式服務設計能力和經(jīng)驗

3、理解基本的設計模式,能將業(yè)務需求快速理解成技術需求

4、熟練使用mysql,熟練使用elasticsearch、druid者優(yōu)先;熟悉其原理者優(yōu)先

5、善于溝通,工作積極主動,責任心強,具備良好的團隊協(xié)作能力

6、具備良好的問題分析與解決能力,有較強學習能力和邏輯思維能力

第2篇 數(shù)據(jù)研發(fā)高級工程師崗位職責

大數(shù)據(jù)研發(fā)高級工程師 lenovo 聯(lián)想(北京)有限公司,lenovo,thinkworld俱樂部,中國數(shù)字醫(yī)療網(wǎng),樂安全,聯(lián)想,聯(lián)想服務,聯(lián)想集團,聯(lián)想 崗位職責:

1、基于海量數(shù)據(jù)進行數(shù)據(jù)挖掘、數(shù)據(jù)分析;

2、根據(jù)實際場景進行業(yè)務邏輯開發(fā),優(yōu)化離線/實時大數(shù)據(jù)計算任務的性能;

任職要求:

1.計算機、通信、信息安全或相關專業(yè)本科及以上學歷;

2.精通java語言開發(fā),熟悉spring,spring mvc,mybatis等流行開源框架;

3.熟悉常用大數(shù)據(jù)開源組件,對hadoop/hive/spark/hbase中的一項或多項有深入研究,至少1個以上大型成熟項目的經(jīng)驗,2年以上的大數(shù)據(jù)產品開發(fā)經(jīng)驗;

4.熟練使用linu_和mysql,具有數(shù)據(jù)庫設計及優(yōu)化能力;

5.清晰的邏輯分析和表達能力,熱愛技術,樂于分享,對行業(yè)和技術的發(fā)展有自己的見解;

第3篇 高級/資深大數(shù)據(jù)研發(fā)工程師職位描述與崗位職責任職要求

職位描述:

工作職責:

1、負責字節(jié)跳動用戶行為的理解和建模,幫助公司各項業(yè)務滿足用戶需求,提升用戶覆蓋;

2、負責在數(shù)據(jù)建設層面,對用戶隱私進行脫敏處理,保證后續(xù)數(shù)據(jù)研發(fā)過程中保護用戶隱私;

3、探索、挖掘公司各項指標、用戶滿意度、用戶增長上的各項規(guī)律,并利用這些規(guī)律幫助產品提升和擴展,增加用戶滿意度,擴展用戶群體。

任職要求:

1、本科及以上學歷,計算機、統(tǒng)計學、數(shù)學等相關專業(yè);

2、強的編程和數(shù)據(jù)工具運用能力,有hadoop,hive,spark,kafka,elasticsearch或者其他的大數(shù)據(jù)工具的使用經(jīng)驗;

3、對數(shù)據(jù)倉庫、數(shù)據(jù)建模有一定認知;有過數(shù)據(jù)使用相關經(jīng)驗。

第4篇 高級實時大數(shù)據(jù)研發(fā)工程師/數(shù)據(jù)技術專家職位描述與崗位職責任職要求

職位描述:

職責描述:

基于flink開源大數(shù)據(jù)計算平臺,在集團整體業(yè)務場景下,

1. 研發(fā)實時流計算數(shù)據(jù)研發(fā)平臺,支持包括核心電商、云計算、大文娛、創(chuàng)新業(yè)務在內的等各個綜合業(yè)務板塊務;

2. 研發(fā)實時olap(elasticsearch,druid)賦能業(yè)務

3. 研發(fā)實時智能化(算法加工程)賦能業(yè)務

任職要求:

1.具備扎實的計算機理論基礎, 對數(shù)據(jù)結構及算法有較強的功底

2.精通java語言編程,具備優(yōu)秀的系統(tǒng)debug/profiling能力和經(jīng)驗

3. 熟悉常見的面向對象設計模式,具備優(yōu)秀的系統(tǒng)架構設計能力

4.熟悉hadoop/hbase/flink/spark streaming等開源大數(shù)據(jù)技術,在開源社區(qū)活躍者優(yōu)先

5.熟悉elasticsearch/druid 等olap開源技術優(yōu)先

6.具備實際的大數(shù)據(jù)業(yè)務開發(fā)經(jīng)驗以及良好的項目溝通和協(xié)調能力

7. 具備實時流計算數(shù)據(jù)開發(fā)經(jīng)驗、全棧開發(fā)經(jīng)驗優(yōu)先

第5篇 大數(shù)據(jù)研發(fā)工程師-平臺服務方向職位描述與崗位職責任職要求

職位描述:

工作職責:

1、針對字節(jié)跳動全局性數(shù)據(jù)分析要求,打造行業(yè)領先的數(shù)據(jù)平臺,對全球用戶數(shù)據(jù),打造高效穩(wěn)定的batch和rt數(shù)據(jù)流;

2、利用大數(shù)據(jù)工具,打造計算,傳輸,分析,監(jiān)控平臺;滿足字節(jié)跳動全球用戶產品的指標計算,多維分析等需求;

3、構建高效穩(wěn)定的數(shù)據(jù)服務,支撐字節(jié)跳動全球各重要業(yè)務的用戶增長。

任職要求:

1、計算機、數(shù)學相關專業(yè)本科及以上學歷,一年以上大數(shù)據(jù)開發(fā)工作經(jīng)驗,數(shù)據(jù)挖掘和bi分析領域優(yōu)先;

2、熟悉多項大數(shù)據(jù)領域的開源框架,e.g. hadoop, hive, presto, storm, spark, kafka, hbase, redis, rocksdb, elasticsearch, druid等;

3、強悍的編碼和學習能力;善于發(fā)現(xiàn)問題,積極探索原因。

第6篇 地圖數(shù)據(jù)研發(fā)工程師崗位職責

csig16-地圖數(shù)據(jù)web前端研發(fā)工程師 騰訊 騰訊科技(深圳)有限公司,tencent,騰訊,騰訊開放平臺,騰訊深圳,騰訊 工作職責:

1. 負責騰訊lbs數(shù)據(jù)web相關產品的技術架構設計與功能實現(xiàn)

2. 致力于為用戶提供最專業(yè)的位置服務與出行服務

任職要求:

計算機或相關專業(yè)本科以上學歷,3年以上web前端開發(fā)工作經(jīng)驗

熟練掌握(精通更好)html5/es6/css3等web開發(fā)技能,對vue,webpack等技術非常熟悉;

具有node開發(fā)經(jīng)驗(經(jīng)驗豐富的加分)

對web性能有較深的見解和相關處理方案;

對web標準有良好認識,能夠高保真還原設計稿,兼容各種瀏覽器;

具有良好的編程思想和編碼習慣;

具有很強的學習能力和技術敏感度,有強烈的責任心和進取心,樂于學習和技術分享,抗壓能力強。

第7篇 空間大數(shù)據(jù)研發(fā)工程師職位描述與崗位職責任職要求

職位描述:

崗位職責:

1、研究空間大數(shù)據(jù)前沿技術,參與空間大數(shù)據(jù)分析平臺的設計和開發(fā);

2、與算法工程師對接,參與空間大數(shù)據(jù)分析算法的代碼實現(xiàn);

3、其它相關的gis開發(fā)工作;

任職資格:

1、計算機、地理信息等相關專業(yè)背景,本科及以上學歷;

2、對空間數(shù)據(jù)結構有深刻理解,熟悉空間數(shù)據(jù)庫引擎;

3、扎實的編程基礎,能夠熟練運用java/scala語言;

4、熟悉大數(shù)據(jù)管理系統(tǒng)和分布式計算框架,如:hbase、cassandra、mongodb、spark/flink等;

5、熟悉gis領域主流的分布式數(shù)據(jù)存儲方案,有geomesa、geowave、geotrellis、geoserver、geotools、arcgis soe使用經(jīng)驗者優(yōu)先;

6、具備較強的學習創(chuàng)新能力,能夠通過快速學習解決實際問題;

第8篇 資深數(shù)據(jù)研發(fā)工程師-(python/java)職位描述與崗位職責任職要求

職位描述:

崗位職責:

1.參與建設投融資數(shù)據(jù)體系,持續(xù)集成相關工具產品,以及搭建大數(shù)據(jù)業(yè)務統(tǒng)一計算層等相關工作;

2.參與公司數(shù)據(jù)倉庫的架構設計和研發(fā),挖掘數(shù)據(jù)價值, 實現(xiàn)高質量數(shù)據(jù)的互通與共享;

3.助力數(shù)據(jù)化運營業(yè)務,構建豐富多樣的bi應用;

4.對數(shù)據(jù)采集、數(shù)據(jù)融合、數(shù)據(jù)質量、數(shù)據(jù)應用鏈路有深入理解,并能協(xié)助業(yè)務數(shù)據(jù)集市建設,搭建業(yè)務領域模型。

任職要求:

1.數(shù)學、計算機、統(tǒng)計學等相關專業(yè)本科以上學歷,5年以上相關工作經(jīng)歷;

2.從事數(shù)據(jù)倉庫領域至少5年以上,熟悉數(shù)據(jù)倉庫模型設計與etl開發(fā)經(jīng)驗;

3.有從事分布式數(shù)據(jù)存儲與計算平臺應用開發(fā)經(jīng)驗,熟悉hadoop生態(tài)相關技術并有相關實踐經(jīng)驗著優(yōu)先,重點考察hdfs、mapreduce、hive、hbase;

4.有實時etl研發(fā)經(jīng)驗,對分布式實時大數(shù)據(jù)處理系統(tǒng)有深入理解,包括但不限于spark streaming、flink、storm...;

5.熟悉數(shù)據(jù)倉庫領域知識和技能者優(yōu)先,對數(shù)據(jù)質量管理有獨到的見解;

6.業(yè)務sense,能夠通過梳理設計業(yè)務模型發(fā)現(xiàn)業(yè)務問題,并驅動業(yè)務目標實現(xiàn);

7.有neo4j,word2vec經(jīng)驗優(yōu)先。

第9篇 ai 數(shù)據(jù)研發(fā)工程師 - 語音 & 對話方向職位描述與崗位職責任職要求

職位描述:

工作職責:

1、設計構建智能語音對話數(shù)據(jù)體系,打造一體化多媒體數(shù)據(jù)存儲、索引、處理能力

2、打造 pb 級數(shù)據(jù)處理引擎,應對日均 tb 級數(shù)據(jù)增長

3、你有機會為字節(jié)跳動全系產品(頭條、抖音、火山、西瓜等)提供 ai 數(shù)據(jù)處理及索引技術,用數(shù)據(jù)技術影響數(shù)億國內國際用戶

任職要求:

1、擁有計算機及相關專業(yè)本科以上學歷,兩年以上 c++/java/go/python 項目開發(fā)經(jīng)驗

2、精通數(shù)據(jù)結構和算法設計,熟悉系統(tǒng)性能調優(yōu)的方式,熟悉 linu_ 開發(fā)環(huán)境

3、玩轉 spark/storm/hive 等大數(shù)據(jù)工具,熟知 mysql/redis/mongodb 等常用數(shù)據(jù)庫,不再滿足于常規(guī)文本處理,渴望挑戰(zhàn)大規(guī)模多媒體數(shù)據(jù)處理任務

4、在 acm/noi/ioi/topcoder 中打遍天下無敵手,在算法領域追求極致,渴望挑戰(zhàn)更深更廣更帶感的技術算法問題

第10篇 大數(shù)據(jù)研發(fā)工程師職位描述與崗位職責任職要求

職位描述:

工作職責:

1、打造業(yè)界領先的通用數(shù)據(jù)平臺,包括實時數(shù)據(jù)流、數(shù)據(jù)倉庫、調度系統(tǒng)、查詢引擎,用戶行為分析,abtest 實驗系統(tǒng)等,降低數(shù)據(jù)的使用門檻,實現(xiàn)數(shù)據(jù)的最大價值

2、打造業(yè)界領先的存儲、計算等分布式系統(tǒng),為海量數(shù)據(jù)和大規(guī)模業(yè)務系統(tǒng)提供可靠的基礎設施

任職要求:

1、熟悉多項大數(shù)據(jù)領域的開源框架,e.g. hadoop, hive, presto, storm, spark, kafka, hbase, redis, rocksdb, elasticsearch, druid, etc.

2、強悍的編碼和 troubleshooting 能力

3、樂于挑戰(zhàn)沒有明顯答案的問題,對新技術有強烈的學習熱情

第11篇 數(shù)據(jù)研發(fā)工程師-新業(yè)務職位描述與崗位職責任職要求

職位描述:

工作職責:

1. 負責業(yè)務相關的數(shù)據(jù)平臺建設;

2. 包括數(shù)據(jù)pipeline建設、數(shù)據(jù)倉庫建設、運營系統(tǒng)建設等;

3. 通過海量數(shù)據(jù),分析用戶行為,進行特征挖掘建設。

任職要求:

1. 工作經(jīng)驗1-3年,學歷本科及以上;

2. 有扎實的編程能力,有優(yōu)秀的代碼品位,對解決具有挑戰(zhàn)性問題充滿激情;

3. 編程語言不限,有python經(jīng)驗更佳,熟悉常用算法和數(shù)據(jù)結構;

4. 熟悉常用的開源組件:hadoop/hive/kafka/flink/spark等,并了解其特性和使用場景優(yōu)先;

5. 優(yōu)秀的溝通理解能力,能快速理解業(yè)務,用數(shù)據(jù)解讀業(yè)務。

第12篇 數(shù)據(jù)研發(fā)工程師-廣告數(shù)據(jù)平臺職位描述與崗位職責任職要求

職位描述:

工作職責:

1、廣告各類在線業(yè)務的離線數(shù)據(jù)加工與在線數(shù)據(jù)服務開發(fā)與維護

2、數(shù)據(jù)服務接口及產品需求研發(fā)迭代,代碼review、bug修復及日常服務運維

3、針對海量數(shù)據(jù)處理和查詢需求,設計適應業(yè)務變化的合理的多維數(shù)據(jù)分析系統(tǒng)架構,滿足多樣性的需求

4、海量日志清洗加工,并抽象出可以多業(yè)務復用的數(shù)據(jù)模型

任職要求:

1、計算機相關專業(yè)本科以上學歷,熟悉hadoop架構和工作原理,精通mapreduce編程;精通hive,有hql優(yōu)化經(jīng)驗

2、熟悉java,python等多種編程技術,編程能力強,有web服務開發(fā)經(jīng)驗,具備獨立完成模塊開發(fā)能力

3、理解基本的設計模式,能將業(yè)務需求快速理解成技術需求

4、熟練使用mysql,熟練使用elasticsearch、druid者優(yōu)先;熟悉其原理者優(yōu)先

5、善于溝通,工作積極主動,責任心強,具備良好的團隊協(xié)作能力

6、具備良好的問題分析與解決能力,有較強學習能力和邏輯思維能力

額外加分項::

github等開源社區(qū)貢獻者

具備大規(guī)模分布式服務設計能力和經(jīng)驗

第13篇 大數(shù)據(jù)研發(fā)工程師-廣告系統(tǒng)數(shù)據(jù)平臺職位描述與崗位職責任職要求

職位描述:

工作職責:

1、廣告各類在線業(yè)務的離線數(shù)據(jù)加工與在線數(shù)據(jù)服務開發(fā)與維護;

2、數(shù)據(jù)服務接口及產品需求研發(fā)迭代,代碼review、bug修復及日常服務運維;

3、針對海量數(shù)據(jù)處理和查詢需求,設計適應業(yè)務變化的合理的多維數(shù)據(jù)分析系統(tǒng)架構,滿足多樣性的需求;

4、海量日志清洗加工,并抽象出可以多業(yè)務復用的數(shù)據(jù)模型。

任職要求:

1、計算機相關專業(yè)本科及以上學歷,熟悉hadoop架構和工作原理,精通mapreduce編程;精通hive,有hql優(yōu)化經(jīng)驗;

2、熟悉java,python等多種編程技術,編程能力強,有web服務開發(fā)經(jīng)驗,具備獨立完成模塊開發(fā)能力;

3、理解基本的設計模式,能將業(yè)務需求快速理解成技術需求;

4、熟練使用mysql,熟練使用elasticsearch、druid者優(yōu)先;熟悉其原理者優(yōu)先;

5、善于溝通,工作積極主動,責任心強,具備良好的團隊協(xié)作能力;

6、具備良好的問題分析與解決能力,有較強學習能力和邏輯思維能力。

額外加分項::

github等開源社區(qū)貢獻者;

具備大規(guī)模分布式服務設計能力和經(jīng)驗。

第14篇 實時大數(shù)據(jù)研發(fā)工程師/數(shù)據(jù)技術專家(p6-p8)職位描述與崗位職責任職要求

職位描述:

職責描述:

基于flink開源大數(shù)據(jù)計算平臺,在阿里集團整體業(yè)務場景下,

1. 研發(fā)實時流計算數(shù)據(jù)研發(fā)平臺,支持包括核心電商、云計算、大文娛、創(chuàng)新業(yè)務在內的等各個綜合業(yè)務板塊務;

2. 研發(fā)實時olap(elasticsearch,druid)賦能業(yè)務

3. 研發(fā)實時智能化(算法加工程)賦能業(yè)務

任職要求:

1.具備扎實的計算機理論基礎, 對數(shù)據(jù)結構及算法有較強的功底

2.精通java語言編程,具備優(yōu)秀的系統(tǒng)debug/profiling能力和經(jīng)驗

3. 熟悉常見的面向對象設計模式,具備優(yōu)秀的系統(tǒng)架構設計能力

4.熟悉hadoop/hbase/flink/spark streaming等開源大數(shù)據(jù)技術,在開源社區(qū)活躍者優(yōu)先

5.熟悉elasticsearch/druid 等olap開源技術優(yōu)先

6.具備實際的大數(shù)據(jù)業(yè)務開發(fā)經(jīng)驗以及良好的項目溝通和協(xié)調能力

7. 具備實時流計算數(shù)據(jù)開發(fā)經(jīng)驗、全棧開發(fā)經(jīng)驗優(yōu)先

第15篇 品牌廣告大數(shù)據(jù)研發(fā)工程師-核心廣告系統(tǒng)職位描述與崗位職責任職要求

職位描述:

工作職責:

1、負責品牌廣告業(yè)務平臺及其相關系統(tǒng)的研發(fā)

2、負責現(xiàn)有系統(tǒng)的問題分析和改進,提高系統(tǒng)性能,保證系統(tǒng)穩(wěn)定性

3、持續(xù)改進系統(tǒng)架構、核心算法或者核心技術等,保證系統(tǒng)高性能、高可用性和高可擴展性

4、新技術預研,完成項目的選型和設計,難點公關

任職要求:

1、本科及以上學歷,一年以上大數(shù)據(jù)系統(tǒng)開發(fā)經(jīng)驗

2、熟悉python語言, 熟練使用linu_

3、對常用的redis、kafka等工具系統(tǒng)有一定的了解

4、有大數(shù)據(jù)集、分布式計算工具(hadoop,spark,hive,storm, es)等應用開發(fā)經(jīng)驗優(yōu)先

5、有良好的團隊合作精神,較強的溝通能力

6、愿意深入了解業(yè)務知識,并能敏銳的發(fā)現(xiàn)業(yè)務痛點

7、有品牌廣告系統(tǒng)、dmp、輿情、指數(shù)平臺方向開發(fā)經(jīng)驗者優(yōu)先

第16篇 大數(shù)據(jù)研發(fā)工程師-抖音/火山職位描述與崗位職責任職要求

職位描述:

工作職責:

1、負責抖音/火山等多個業(yè)務線的策略算法建設與優(yōu)化工作;

2、通過海量數(shù)據(jù),分析與挖掘各種潛在關聯(lián),不斷優(yōu)化策略效果,保障用戶體驗;

4、負責實時及離線特征抽取、融合,為數(shù)據(jù)挖掘及策略平臺提供特征服務;

5、負責大數(shù)據(jù)能力在產品功能上的落地,推動產品數(shù)據(jù)化和智能化。

任職要求:

1、計算機等相關專業(yè),碩士或以上學歷,3年以上大數(shù)據(jù)、人工智能相關經(jīng)驗;

2、熟悉hive/hadoop/spark/flink/clickhouse/druid等大數(shù)據(jù)開發(fā)技術;

3、有良好的業(yè)務和產品sense,執(zhí)行力、推動力強優(yōu)先;

4、有豐富的行業(yè)經(jīng)驗,豐富的專業(yè)知識,獨特的行業(yè)見解,有戰(zhàn)略視野和規(guī)劃能力優(yōu)先;

5、優(yōu)秀的理解溝通能力,崇尚數(shù)據(jù)說話,深信數(shù)據(jù)在驅動業(yè)務、支撐決策上的價值優(yōu)先。

數(shù)據(jù)研發(fā)工程師崗位職責16篇

職位描述:工作職責:1、廣告各類在線業(yè)務的離線數(shù)據(jù)加工與在線數(shù)據(jù)服務開發(fā)與維護2、數(shù)據(jù)服務接口及產品需求研發(fā)迭代,代碼review、bug修復及日常服務運維3、針對海量數(shù)據(jù)處理和查詢需求,設計適應業(yè)務變化的合理的多維數(shù)據(jù)分析系統(tǒng)架構,滿足多樣性的需求4、海量日志清洗加工,并抽象出可以多業(yè)務復用的數(shù)據(jù)…
推薦度:
點擊下載文檔文檔為doc格式

相關數(shù)據(jù)研發(fā)信息

  • 數(shù)據(jù)研發(fā)工程師崗位職責16篇
  • 數(shù)據(jù)研發(fā)工程師崗位職責16篇75人關注

    職位描述:工作職責:1、廣告各類在線業(yè)務的離線數(shù)據(jù)加工與在線數(shù)據(jù)服務開發(fā)與維護2、數(shù)據(jù)服務接口及產品需求研發(fā)迭代,代碼review、bug修復及日常服務運維3、針對海量 ...[更多]

  • 大數(shù)據(jù)研發(fā)工程師崗位職責12篇
  • 大數(shù)據(jù)研發(fā)工程師崗位職責12篇42人關注

    職位描述:職責描述:社交廣告系統(tǒng)數(shù)據(jù)工程平臺研發(fā),偏重系統(tǒng)架構設計與實現(xiàn),參加以下一到多項工作:1.搭建數(shù)據(jù)倉庫,存儲并處理海量的實時、批量數(shù)據(jù),滿足廣告業(yè)務的定向、 ...[更多]

工程崗位職責熱門信息