大數(shù)據(jù)開(kāi)發(fā)崗位要求15篇

第1篇 大數(shù)據(jù)開(kāi)發(fā)工程師崗位職責(zé)職位要求

職責(zé)描述：

崗位職責(zé)：

1、運(yùn)用大數(shù)據(jù)分析工具和技術(shù)解決風(fēng)險(xiǎn)管理業(yè)務(wù)中遇到的實(shí)際問(wèn)題與需求，如風(fēng)險(xiǎn)評(píng)估、成長(zhǎng)評(píng)價(jià)等，包括對(duì)模型進(jìn)行設(shè)計(jì)、開(kāi)發(fā)、驗(yàn)證、測(cè)試、部署及監(jiān)控、優(yōu)化。。

2、基于海量用戶數(shù)據(jù)和特征，進(jìn)行數(shù)據(jù)質(zhì)量檢查、特征加工、數(shù)據(jù)清洗等，建立數(shù)據(jù)挖掘模型。

3、評(píng)估數(shù)據(jù)源的質(zhì)量和價(jià)值，能結(jié)合業(yè)務(wù)需求和場(chǎng)景，從各種數(shù)據(jù)維度中挖掘數(shù)據(jù)價(jià)值，并設(shè)計(jì)不同的模型，應(yīng)用于不同的業(yè)務(wù)場(chǎng)景中。

職位要求：

1. 計(jì)算機(jī)、統(tǒng)計(jì)學(xué)相關(guān)背景，熟悉常用各類機(jī)器學(xué)習(xí)算法的原理（如邏輯回歸、決策樹(shù)、svm、神經(jīng)網(wǎng)絡(luò)、隨機(jī)森林、深度學(xué)習(xí)等）；

2.熟練使用sas、r、python等至少一種分析工具；

3.熟悉大數(shù)據(jù)分析平臺(tái)和工具，如hive，hadoop， spark等優(yōu)先；

4.有較強(qiáng)的邏輯思維能力、優(yōu)秀的溝通表達(dá)能力及團(tuán)隊(duì)合作能力。

崗位要求：

學(xué)歷要求：本科

語(yǔ)言要求：不限

年齡要求：不限

工作年限：5-7年經(jīng)驗(yàn)

第2篇 大數(shù)據(jù)開(kāi)發(fā)工程師（數(shù)倉(cāng)方向）職位描述與崗位職責(zé)任職要求

職位描述：

崗位職責(zé)：

1. 理解業(yè)務(wù)需求，負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)建設(shè)、etl流程的開(kāi)發(fā)和優(yōu)化工作；

2. 解決業(yè)務(wù)數(shù)據(jù)分析、數(shù)據(jù)報(bào)表、數(shù)據(jù)異常相關(guān)的技術(shù)問(wèn)題；

3. spark/yarn/hdfs 的性能改進(jìn)、功能擴(kuò)展、故障分析；

任職資格：

1. 計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷；

2. 精通java編程語(yǔ)言，并熟悉scala、python、shell等一門以上腳本語(yǔ)言；

3. 熟悉hadoop大數(shù)據(jù)平臺(tái)架構(gòu)，熟悉spark/spark sql/yarn開(kāi)發(fā)調(diào)優(yōu)技術(shù)，具有相關(guān)項(xiàng)目經(jīng)驗(yàn)

4. 掌握數(shù)據(jù)倉(cāng)庫(kù)(dw)/olap/商業(yè)智能(bi)/數(shù)據(jù)統(tǒng)計(jì)理論，熟悉oracle/mysql數(shù)據(jù)庫(kù)；

5. 思路清晰，具備良好的溝通能力和理解能力，較強(qiáng)的學(xué)習(xí)能力以及快速解決問(wèn)題的能力；

6. 具有高度的責(zé)任感，工作認(rèn)真、踏實(shí)。

福利待遇：

1、薪酬：有競(jìng)爭(zhēng)力的薪酬體系，我們不止跟你談理想，錢也必須談一談~

2、交通：無(wú)論天涯，免費(fèi)班車直達(dá)公司，驀然回首，地鐵就在公司不遠(yuǎn)處。。。

3、工作時(shí)間：5天7小時(shí)工作制，充足的休息讓你一整天元?dú)鉂M滿！

4、各種福利：五險(xiǎn)一金小case，節(jié)日禮物福利補(bǔ)貼說(shuō)不完！

5、團(tuán)建活動(dòng)：下午茶，團(tuán)隊(duì)活動(dòng)，部門聚餐，經(jīng)費(fèi)充足不差錢，大公司就是這么壕！

6、發(fā)展平臺(tái)：想要升職加薪走向人生巔峰？上市公司晉升發(fā)展機(jī)會(huì)多多~

第3篇 大數(shù)據(jù)開(kāi)發(fā)工程師 [數(shù)倉(cāng)方向]職位描述與崗位職責(zé)任職要求

職位描述：

工作職責(zé)：

1、使用etl工具（如sqoop、kettle）進(jìn)行數(shù)據(jù)加工、清洗等流程；

2、根據(jù)業(yè)務(wù)需求，進(jìn)行數(shù)倉(cāng)日常數(shù)據(jù)分析、數(shù)據(jù)報(bào)表開(kāi)發(fā)；

3、使用hive進(jìn)行數(shù)據(jù)處理，及數(shù)據(jù)模型構(gòu)建；

4、具備良好的分析問(wèn)題和解決問(wèn)題的能力；

5、具備較強(qiáng)的溝通能力和邏輯表達(dá)能力，具備良好的團(tuán)隊(duì)合作精神和主動(dòng)溝通意識(shí)；

任職要求：

1、計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷；

2、熟練使用sql（mysql / oracle）；

3、熟練數(shù)據(jù)庫(kù)/數(shù)據(jù)倉(cāng)庫(kù)分層設(shè)計(jì)、寬表設(shè)計(jì)、星型模型設(shè)計(jì)等；

4、熟練etl工具、sqoop、kettle、spark等；

5、熟悉hadoop、hive、hdfs等常用大數(shù)據(jù)組件；

6、有互聯(lián)網(wǎng)業(yè)務(wù)分布式數(shù)據(jù)倉(cāng)庫(kù)、cube、大數(shù)據(jù)數(shù)據(jù)分析等相關(guān)經(jīng)驗(yàn)者加分；

第4篇 大數(shù)據(jù)開(kāi)發(fā)架構(gòu)師職位描述與崗位職責(zé)任職要求

職位描述：

大數(shù)據(jù)架構(gòu)師

崗位描述：

1. 負(fù)責(zé)公司大數(shù)據(jù)基礎(chǔ)框架的整體架構(gòu)設(shè)計(jì)，結(jié)合公司實(shí)際業(yè)務(wù)情況進(jìn)行技術(shù)選型；

2. 負(fù)責(zé)數(shù)據(jù)存儲(chǔ)、計(jì)算平臺(tái)的整體評(píng)估、設(shè)計(jì)以及核心功能模塊的開(kāi)發(fā)；

3. 協(xié)助團(tuán)隊(duì)解決開(kāi)發(fā)過(guò)程中的技術(shù)難題，負(fù)責(zé)新技術(shù)的調(diào)研，并能在團(tuán)隊(duì)內(nèi)推廣應(yīng)用；

崗位要求：

1. 計(jì)算機(jī)相關(guān)專業(yè)本科以上學(xué)歷，5年以上工作經(jīng)驗(yàn)，3年以上大數(shù)據(jù)相關(guān)經(jīng)驗(yàn)；

2. 熟悉常用的數(shù)據(jù)結(jié)構(gòu)、算法以及數(shù)據(jù)建模理論；

3. 有過(guò)支撐每日億級(jí)別數(shù)據(jù)的大數(shù)據(jù)平臺(tái)建設(shè)經(jīng)驗(yàn)，了解數(shù)據(jù)倉(cāng)庫(kù)實(shí)施方法論、了解數(shù)據(jù)倉(cāng)庫(kù)體系，并支撐過(guò)實(shí)際業(yè)務(wù)場(chǎng)景；

4. 具備較強(qiáng)的編碼能力，掌握 java/scala/python 開(kāi)發(fā)語(yǔ)言之一，熟練使用 sql 進(jìn)行數(shù)據(jù)訪問(wèn)；

5. 精通 hadoop 生態(tài)系統(tǒng)基礎(chǔ)設(shè)施，包括flume、kafka、hbase、hive、spark、storm等；

6. 有團(tuán)隊(duì)管理經(jīng)驗(yàn)者優(yōu)先；

第5篇 健康科技中心-高級(jí)大數(shù)據(jù)開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求

職位描述：

職位描述：

1. 基于hadoop生態(tài)系統(tǒng)進(jìn)行大數(shù)據(jù)平臺(tái)建設(shè)；

2. 負(fù)責(zé)各業(yè)務(wù)條線相關(guān)指標(biāo)數(shù)據(jù)的數(shù)據(jù)建模

3. 負(fù)責(zé)基于sqoop，hive、spark、sparksql、mysql進(jìn)行大數(shù)據(jù)開(kāi)發(fā)

4. 負(fù)責(zé)離線運(yùn)算、實(shí)時(shí)計(jì)算平臺(tái)項(xiàng)目的設(shè)計(jì)、開(kāi)發(fā)及運(yùn)維

5. 負(fù)責(zé)對(duì)數(shù)據(jù)平臺(tái)進(jìn)行性能調(diào)優(yōu)

任職要求：

1.統(tǒng)招本科或以上學(xué)歷，6年以上大數(shù)據(jù)開(kāi)發(fā)工作經(jīng)驗(yàn)；

2.熟練掌握shell、python開(kāi)發(fā)語(yǔ)言；

3.熟練掌握hadoop、hive、hbase、spark、spark sql、storm、sqoop、kafka、flume、sparkmlib等分布式框架原理，有相關(guān)的調(diào)優(yōu)、運(yùn)維、開(kāi)發(fā)經(jīng)驗(yàn)；

4.熟練掌握mysql數(shù)據(jù)庫(kù)集群；

5. 精通主流etl開(kāi)發(fā)工具，如：informatica、data services、kettle;精通主流調(diào)度工具，如：azkaban， oozie；

6.有數(shù)據(jù)倉(cāng)庫(kù)、分析系統(tǒng)、用戶畫像等產(chǎn)品開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先；

7.有較強(qiáng)的數(shù)據(jù)和業(yè)務(wù)結(jié)合能力；

8.有醫(yī)療或者大健康背景優(yōu)先；

9.有較強(qiáng)的獨(dú)立、主動(dòng)的學(xué)習(xí)能力，良好的溝通表達(dá)能力。

第6篇 高級(jí)大數(shù)據(jù)開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求

職位描述：

崗位職責(zé)：

1. 基于公司大數(shù)據(jù)產(chǎn)品進(jìn)行數(shù)據(jù)開(kāi)發(fā)，包括數(shù)據(jù)的采集，清洗，預(yù)處理，存儲(chǔ)，建模，分析挖掘等

2. 根據(jù)業(yè)務(wù)用戶需要分析數(shù)據(jù)，提供數(shù)據(jù)支持

3. 參與公司大數(shù)據(jù)產(chǎn)品的運(yùn)維和監(jiān)控，保障數(shù)據(jù)質(zhì)量和服務(wù)穩(wěn)定性

任職要求：

1. 具備本科以上學(xué)歷， 計(jì)算機(jī)， 軟件以及相關(guān)專業(yè)， 5年以上大數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn)

2. 熟悉數(shù)據(jù)倉(cāng)庫(kù)維度建模， 并能根據(jù)客戶需求進(jìn)行數(shù)據(jù)開(kāi)發(fā)， 向模型更新數(shù)據(jù)

3. 使用過(guò)至少一種以上的etl工具

4. 熟練掌握java， 對(duì)hadoop相關(guān)的技術(shù)和組件(hdfs， mr， hbase， hive， spark， storm， kafka等）有全面深入了解

5. 熟練掌握shell或者python中的一種

6. 具備spark開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先

7. 具備實(shí)時(shí)計(jì)算(kafka+storm/spark streaming) 經(jīng)驗(yàn)者優(yōu)先

8. 具備數(shù)據(jù)分析和數(shù)據(jù)挖掘方面經(jīng)驗(yàn)者優(yōu)先

第7篇 大數(shù)據(jù)開(kāi)發(fā)（實(shí)時(shí)計(jì)算）職位描述與崗位職責(zé)任職要求

職位描述：

崗位職責(zé)：

1、參與計(jì)算框架和服務(wù)的定制和改進(jìn)，為公司批處理和流式計(jì)算能力提供支撐

2、基于業(yè)務(wù)需求和應(yīng)用場(chǎng)景，設(shè)計(jì)和實(shí)現(xiàn)公司大數(shù)據(jù)相關(guān)產(chǎn)品

3、負(fù)責(zé)設(shè)計(jì)，開(kāi)發(fā)，優(yōu)化數(shù)據(jù)接入、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)計(jì)算服務(wù)框架

4、為公司所有業(yè)務(wù)線提供數(shù)據(jù)支持和服務(wù)

5、主要是為實(shí)時(shí)數(shù)倉(cāng)計(jì)算提供數(shù)據(jù)支持和服務(wù)

任職要求：

1、本科以上學(xué)歷，3年以上大數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn)，掌握數(shù)據(jù)倉(cāng)庫(kù)理論、模型設(shè)計(jì)方法等

2、對(duì)大數(shù)據(jù)實(shí)時(shí)數(shù)倉(cāng)建設(shè)有成熟的解決方案和實(shí)踐經(jīng)驗(yàn)

3、熟悉spark，flink、storm等大型分布式平臺(tái)組件

4、精通sql ，sparksql優(yōu)先，熟悉java，scala、python編程

5、有較強(qiáng)的性能優(yōu)化及問(wèn)題排查、解決能力

6、具備良好的溝通能力，做事認(rèn)真、仔細(xì)，有責(zé)任心，具有團(tuán)隊(duì)協(xié)作能力

7、對(duì)kafka消息隊(duì)列中間件有過(guò)深度使用經(jīng)驗(yàn)、對(duì)于druid、kudu、presto有過(guò)項(xiàng)目經(jīng)驗(yàn)

8、對(duì)于數(shù)據(jù)采集、數(shù)據(jù)訂閱有成熟的解決方案或是項(xiàng)目經(jīng)驗(yàn)

第8篇 大數(shù)據(jù)開(kāi)發(fā)高級(jí)工程師-etl方向職位描述與崗位職責(zé)任職要求

職位描述：

工作職責(zé):

1、 根據(jù)公司數(shù)據(jù)分析需求進(jìn)行基于hadoop 平臺(tái)的項(xiàng)目開(kāi)發(fā)；

2、 根據(jù)需求進(jìn)行數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)，熟練使用kettle工具進(jìn)行etl程序的開(kāi)發(fā)；包括實(shí)時(shí)數(shù)據(jù)加工，計(jì)算，etl，管理， 監(jiān)控等；

3、 負(fù)責(zé)針對(duì)源系統(tǒng)進(jìn)行數(shù)據(jù)抽取、處理、分析等相關(guān)工作，及項(xiàng)目中涉及到的數(shù)據(jù)庫(kù)創(chuàng)建、維護(hù)及提供數(shù)據(jù)接口工作；

4、 負(fù)責(zé)設(shè)計(jì)并優(yōu)化基于hive 的數(shù)據(jù)倉(cāng)庫(kù)的建設(shè)；

5、 制定數(shù)據(jù)庫(kù)備份和恢復(fù)策略及工作流程與規(guī)范。

6、能出具消費(fèi)品品牌制造行業(yè)應(yīng)用的數(shù)據(jù)分析技術(shù)解決方案，并落地。

任職資格:

1．從事數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域至少2年以上，熟悉數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)與etl開(kāi)發(fā)經(jīng)驗(yàn) ，具備海量數(shù)據(jù)加工處理相關(guān)經(jīng)驗(yàn)；

2. 熟悉數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域知識(shí)和技能者優(yōu)先，包括但不局限于：元數(shù)據(jù)管理、數(shù)據(jù)開(kāi)發(fā)測(cè)試工具與方法、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理；

3．有從事分布式數(shù)據(jù)存儲(chǔ)與計(jì)算平臺(tái)應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn)，熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實(shí)踐經(jīng)驗(yàn)著優(yōu)先，重點(diǎn)考察hive、hdfs、hbase;

4. 熟練掌握kettlesqoop、data_、airflow等;

5. 有消費(fèi)品品牌制造、零售行業(yè)經(jīng)驗(yàn)，尤其快消品行業(yè)和財(cái)務(wù)領(lǐng)域數(shù)據(jù)項(xiàng)目經(jīng)驗(yàn)者優(yōu)先;

6. 熟悉分布式計(jì)算presto/imapa優(yōu)先;

7．有實(shí)時(shí)計(jì)算方面的經(jīng)驗(yàn)的優(yōu)先。

第9篇 大數(shù)據(jù)開(kāi)發(fā)經(jīng)理職位描述與崗位職責(zé)任職要求

職位描述：

崗位職責(zé)：

1、參與大數(shù)據(jù)平臺(tái)、工具平臺(tái)的架構(gòu)、設(shè)計(jì)以及實(shí)現(xiàn)；

2、參與對(duì)項(xiàng)目的開(kāi)發(fā)需求進(jìn)行評(píng)審，制定項(xiàng)目的設(shè)計(jì)文檔、開(kāi)發(fā)計(jì)劃文檔等；

3、負(fù)責(zé)公司各類數(shù)據(jù)產(chǎn)品數(shù)據(jù)抽取、清洗，以及數(shù)據(jù)算法與存儲(chǔ)的設(shè)計(jì)和優(yōu)化；

4、優(yōu)化大數(shù)據(jù)平臺(tái)的性能，提高穩(wěn)定性；

5、負(fù)責(zé)大數(shù)據(jù)平臺(tái)的組件升級(jí)與參數(shù)優(yōu)化。

崗位要求：

1、本科及以上學(xué)歷，3年以上相關(guān)技術(shù)背景，具備扎實(shí)的數(shù)據(jù)結(jié)構(gòu)和算法基礎(chǔ)，扎實(shí)的工程實(shí)現(xiàn)能力；

2、熟悉hadoop大數(shù)據(jù)相關(guān)技術(shù)體系，包括但不限于hbase、hdfs、storm、kafka、spark、hive、flume等；

3、精通java或python，能熟練編寫規(guī)范代碼，有較強(qiáng)的數(shù)據(jù)庫(kù)及sql開(kāi)發(fā)調(diào)優(yōu)能力；

4、熟悉自然語(yǔ)言處理/機(jī)器學(xué)習(xí)/數(shù)據(jù)挖掘領(lǐng)域，熟悉常用的機(jī)器學(xué)習(xí)算法優(yōu)先考慮；

5、有大規(guī)模數(shù)據(jù)收集，日志處理經(jīng)驗(yàn)，有電商數(shù)據(jù)分析背景優(yōu)先考慮；

6、深入研究過(guò)大數(shù)據(jù)框架的運(yùn)行機(jī)制、實(shí)現(xiàn)原理、源碼者優(yōu)先考慮。

第10篇 大數(shù)據(jù)開(kāi)發(fā)主管職位描述與崗位職責(zé)任職要求

職位描述：

崗位職責(zé)：

負(fù)責(zé)大數(shù)據(jù)平臺(tái)項(xiàng)目架構(gòu)設(shè)計(jì)；

負(fù)責(zé)與客戶進(jìn)行具體業(yè)務(wù)需求溝通，引導(dǎo)客戶需求并確認(rèn)；

負(fù)責(zé)需求分析以及平臺(tái)設(shè)計(jì)、數(shù)據(jù)模型設(shè)計(jì)工作，并輸出相關(guān)文檔，與第三方進(jìn)行溝通，并確認(rèn)項(xiàng)目關(guān)鍵節(jié)點(diǎn)進(jìn)度。

任職要求：

國(guó)家正規(guī)院校統(tǒng)招本科以上學(xué)歷，有5年以上工作經(jīng)驗(yàn)，至少1年以上大數(shù)據(jù)架構(gòu)師工作經(jīng)驗(yàn)、熟悉大數(shù)據(jù)平臺(tái)項(xiàng)目的操作流程；

熟練掌握python、hadoop、spark、kafka等工具；

較好的溝通理解能力和主動(dòng)性。

第11篇 java大數(shù)據(jù)開(kāi)發(fā)高級(jí)工程師崗位職責(zé)職位要求

職責(zé)描述：

崗位要求:

1、計(jì)算機(jī)或相關(guān)專業(yè)本科以上學(xué)歷，3年以上專業(yè)java開(kāi)發(fā)經(jīng)驗(yàn)，有過(guò)大型項(xiàng)目經(jīng)驗(yàn)優(yōu)先；

2、精通 jdbc、jsp / ibatis /spring/ struts2等java主流技術(shù)；

3、熟悉web容器及主流開(kāi)源框架，熟悉http的基本工作原理；

4、熟悉io、多線程、集合類等基礎(chǔ)框架，熟悉緩存、消息、搜索等機(jī)制；

5、熟悉linu_操作系統(tǒng)，熟悉mysql數(shù)據(jù)庫(kù)；，精通sql語(yǔ)言；

6、有大型項(xiàng)目架構(gòu)設(shè)計(jì)開(kāi)發(fā)和數(shù)據(jù)庫(kù)優(yōu)化經(jīng)驗(yàn)優(yōu)先；

7、具有良好的團(tuán)隊(duì)協(xié)作精神，較強(qiáng)的溝通能力，具備良好的問(wèn)題定位分析能力和新興技術(shù)學(xué)習(xí)能力。

崗位職責(zé)：

1.負(fù)責(zé)研發(fā)公司自主呼叫中心產(chǎn)品；

2.協(xié)助實(shí)施部門定位跟蹤產(chǎn)品問(wèn)題；

3.客戶化項(xiàng)目定制開(kāi)發(fā)

崗位要求：

學(xué)歷要求：大專

語(yǔ)言要求：不限

年齡要求：不限

工作年限：3-5年

第12篇 中級(jí)大數(shù)據(jù)開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求

職位描述：

職責(zé)描述：

1、參與公司商業(yè)智能平臺(tái)的研發(fā)工作；

2、參與公司商業(yè)智能平臺(tái)的升級(jí)改造工作，包括運(yùn)維工作。

任職要求：

1、正規(guī)院校本科及以上學(xué)歷，軟件、計(jì)算機(jī)、通信、信息安全、網(wǎng)絡(luò)工程等相關(guān)專業(yè)；

2、良好的java開(kāi)發(fā)背景，熟悉spring/mybatis技術(shù)體系；

3、良好的sql功底，熟悉mysql或oracle數(shù)據(jù)庫(kù)；

4、熟悉linu_；

5、了解開(kāi)源pentaho產(chǎn)品，包括prd、mondrian、saiku、kettle等；

6、熟悉hadoop、hive、hbase、storm、spark等大數(shù)據(jù)平臺(tái)；

7、溝通能力強(qiáng)，有較強(qiáng)的學(xué)習(xí)能力，有較強(qiáng)的責(zé)任心與良好的團(tuán)隊(duì)協(xié)作能力。

第13篇 大數(shù)據(jù)開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求

職位描述：

工作職責(zé):

1、根據(jù)業(yè)務(wù)需求進(jìn)行數(shù)據(jù)模型的調(diào)研、設(shè)計(jì)、開(kāi)發(fā)及驗(yàn)證工作，并持續(xù)進(jìn)行模型的優(yōu)化；

2、負(fù)責(zé)數(shù)據(jù)模型架構(gòu)的構(gòu)建，建立數(shù)據(jù)抽取、清洗、校驗(yàn)等數(shù)據(jù)加工流程規(guī)范及olap多維數(shù)據(jù)分析模型；

3、持續(xù)對(duì)系統(tǒng)的技術(shù)架構(gòu)進(jìn)行改進(jìn)和優(yōu)化，提升海量數(shù)據(jù)的查詢性能和用戶體驗(yàn)。

任職資格:

1、統(tǒng)招本科或以上學(xué)歷，計(jì)算機(jī)、數(shù)據(jù)挖掘等相關(guān)專業(yè)，工作至少3年以上；

2、熟悉java開(kāi)發(fā)，有腳本語(yǔ)言（shell，python)開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先；

3、至少熟悉一種大數(shù)據(jù)處理技術(shù)，如hadoop、spark；

4、掌握hbase、redis、elastic search等開(kāi)源大數(shù)據(jù)存儲(chǔ)技術(shù)，并能結(jié)合不同的業(yè)務(wù)場(chǎng)景深入使用；

5、精通sql，精通mysql、oracle、sql server等一種大型數(shù)據(jù)庫(kù)，以及數(shù)據(jù)庫(kù)的維護(hù)和優(yōu)化。

6、熟悉常用java web開(kāi)發(fā)框架，如：spring、mybatis等；

7、熟悉多線程編程，并對(duì)java自帶線程池有一定研究；

8、對(duì)解決具有挑戰(zhàn)性的問(wèn)題充滿激情，具有良好的分析問(wèn)題和解決問(wèn)題的能力。

第14篇 java大數(shù)據(jù)開(kāi)發(fā)職位描述與崗位職責(zé)任職要求

職位描述：

職責(zé)描述：

1. 參與大數(shù)據(jù)平臺(tái)和大數(shù)據(jù)處理框架的架構(gòu)規(guī)劃設(shè)計(jì)；

2. 參與數(shù)據(jù)治理工作，提升數(shù)據(jù)易用性及數(shù)據(jù)質(zhì)量；

3. 理解并合理抽象業(yè)務(wù)需求，發(fā)揮數(shù)據(jù)價(jià)值，主動(dòng)思考不斷優(yōu)化，與業(yè)務(wù)團(tuán)隊(duì)緊密合作；

4. 配合大數(shù)據(jù)負(fù)責(zé)人完成hadoop、spark等集群的管理、優(yōu)化和維護(hù)，保證集群規(guī)模持續(xù)、穩(wěn)定。

任職要求：

1. 兩年以上相關(guān)工作經(jīng)驗(yàn)；

2. 熟練掌握java語(yǔ)言，熟練使用linu_，強(qiáng)悍的編碼和處理問(wèn)題能力；

3. 熟悉大數(shù)據(jù)開(kāi)源棧spark/hadoop、hive、hbase、elasticsearch、kafka、redis， strom/spark-streaming/flink，有至少tb以上級(jí)大數(shù)據(jù)處理經(jīng)驗(yàn). 有sparkstreaming的實(shí)時(shí)統(tǒng)計(jì)開(kāi)發(fā)經(jīng)驗(yàn)優(yōu)先；

4. 對(duì)數(shù)據(jù)敏感，認(rèn)真細(xì)致，善于從數(shù)據(jù)中發(fā)現(xiàn)疑點(diǎn)；

5. 善于溝通，具備優(yōu)秀的技術(shù)與業(yè)務(wù)結(jié)合能力；

6. 學(xué)習(xí)能力強(qiáng)，喜歡研究開(kāi)源新技術(shù)，有團(tuán)隊(duì)觀念，具備獨(dú)立解決問(wèn)題的能力

第15篇 大數(shù)據(jù)開(kāi)發(fā)（數(shù)據(jù)倉(cāng)庫(kù)）職位描述與崗位職責(zé)任職要求

職位描述：

崗位職責(zé)：

1、參與計(jì)算框架和服務(wù)的定制和改進(jìn)，為公司批處理和流式計(jì)算能力提供支撐

2、基于業(yè)務(wù)需求和應(yīng)用場(chǎng)景，設(shè)計(jì)和實(shí)現(xiàn)公司大數(shù)據(jù)相關(guān)產(chǎn)品

3、負(fù)責(zé)設(shè)計(jì)，開(kāi)發(fā)，優(yōu)化數(shù)據(jù)接入、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)計(jì)算服務(wù)框架

4、為公司所有業(yè)務(wù)線提供數(shù)據(jù)支持和服務(wù)

任職要求：

1、本科以上學(xué)歷，3年以上大數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn)，掌握數(shù)據(jù)倉(cāng)庫(kù)理論、模型設(shè)計(jì)方法、etl設(shè)計(jì)理論等

2、對(duì)大數(shù)據(jù)離線數(shù)倉(cāng)有成熟的解決方案和實(shí)踐經(jīng)驗(yàn)

3、深入理解公司業(yè)務(wù)，建立指標(biāo)分析體系，利用數(shù)據(jù)分析，不斷驅(qū)動(dòng)業(yè)務(wù)優(yōu)化，策略分析經(jīng)驗(yàn)豐富優(yōu)先

4、了解sql， hive sql，sparksql優(yōu)先，熟悉python編程，java基礎(chǔ)編程

5、有較強(qiáng)的性能優(yōu)化及問(wèn)題排查、解決能力

6、具備良好的溝通能力，做事認(rèn)真、仔細(xì)，有責(zé)任心，具有團(tuán)隊(duì)協(xié)作能力