- 目錄
崗位職責(zé)是什么
大數(shù)據(jù)技術(shù)崗位是企業(yè)信息化建設(shè)中的關(guān)鍵角色,負(fù)責(zé)管理和處理海量的數(shù)據(jù),通過(guò)分析挖掘數(shù)據(jù)價(jià)值,為企業(yè)決策提供依據(jù),推動(dòng)業(yè)務(wù)創(chuàng)新與發(fā)展。
崗位職責(zé)要求
1. 精通各種大數(shù)據(jù)處理工具和技術(shù),如hadoop、spark、hive等。
2. 具備扎實(shí)的編程基礎(chǔ),熟悉java、python、scala等至少一種編程語(yǔ)言。
3. 深入理解數(shù)據(jù)結(jié)構(gòu)、算法和數(shù)據(jù)庫(kù)原理。
4. 有強(qiáng)烈的數(shù)據(jù)敏感性和業(yè)務(wù)洞察力,能從數(shù)據(jù)中發(fā)現(xiàn)問(wèn)題并提出解決方案。
5. 良好的溝通能力,能與業(yè)務(wù)部門有效協(xié)作,理解業(yè)務(wù)需求并轉(zhuǎn)化為數(shù)據(jù)項(xiàng)目。
6. 掌握數(shù)據(jù)可視化工具,如tableau、powerbi等,能夠清晰呈現(xiàn)數(shù)據(jù)分析結(jié)果。
7. 對(duì)云計(jì)算技術(shù)有所了解,如aws、azure、google cloud等。
8. 具備持續(xù)學(xué)習(xí)和適應(yīng)新技術(shù)的能力,保持對(duì)大數(shù)據(jù)領(lǐng)域的前沿關(guān)注。
崗位職責(zé)描述
大數(shù)據(jù)技術(shù)崗位的日常工作包括但不限于數(shù)據(jù)清洗、數(shù)據(jù)集成、數(shù)據(jù)建模、數(shù)據(jù)分析和數(shù)據(jù)報(bào)告。他們需要構(gòu)建和優(yōu)化數(shù)據(jù)平臺(tái),確保數(shù)據(jù)的安全、準(zhǔn)確和高效。他們需要與業(yè)務(wù)團(tuán)隊(duì)緊密合作,將數(shù)據(jù)轉(zhuǎn)化為有價(jià)值的洞察,支持企業(yè)的戰(zhàn)略決策和業(yè)務(wù)優(yōu)化。
有哪些內(nèi)容
1. 數(shù)據(jù)架構(gòu)設(shè)計(jì):設(shè)計(jì)和實(shí)施高效的大數(shù)據(jù)存儲(chǔ)和處理架構(gòu),確保數(shù)據(jù)的可訪問(wèn)性和可用性。
2. 數(shù)據(jù)處理與分析:編寫和優(yōu)化數(shù)據(jù)處理腳本,進(jìn)行大數(shù)據(jù)的清洗、轉(zhuǎn)換和分析,以揭示隱藏的模式和趨勢(shì)。
3. 數(shù)據(jù)挖掘與預(yù)測(cè):運(yùn)用機(jī)器學(xué)習(xí)和統(tǒng)計(jì)方法,進(jìn)行預(yù)測(cè)性分析,為業(yè)務(wù)發(fā)展提供預(yù)測(cè)模型。
4. 數(shù)據(jù)報(bào)告與可視化:制作直觀的數(shù)據(jù)報(bào)告,通過(guò)圖表和儀表板展示分析結(jié)果,幫助管理層理解和應(yīng)用數(shù)據(jù)洞察。
5. 項(xiàng)目管理:協(xié)調(diào)跨部門數(shù)據(jù)項(xiàng)目,確保按時(shí)交付并滿足業(yè)務(wù)需求。
6. 技術(shù)研究與創(chuàng)新:跟蹤大數(shù)據(jù)領(lǐng)域的新技術(shù)和趨勢(shì),評(píng)估其對(duì)企業(yè)的影響,并適時(shí)引入新的工具和方法。
7. 數(shù)據(jù)安全與合規(guī):遵守?cái)?shù)據(jù)保護(hù)法規(guī),確保數(shù)據(jù)的安全性和隱私性,防止數(shù)據(jù)泄露。
大數(shù)據(jù)技術(shù)崗位是企業(yè)數(shù)字化轉(zhuǎn)型的重要推動(dòng)力,從業(yè)者需不斷學(xué)習(xí)和適應(yīng)變化,以應(yīng)對(duì)日益復(fù)雜的數(shù)據(jù)挑戰(zhàn),驅(qū)動(dòng)企業(yè)的智能化進(jìn)程。
大數(shù)據(jù)技術(shù)崗位職責(zé)范文
第1篇 大數(shù)據(jù)技術(shù)經(jīng)理職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1,管理項(xiàng)目團(tuán)隊(duì)整體技術(shù),根據(jù)業(yè)務(wù)需求分析實(shí)施方案和數(shù)據(jù)計(jì)算
2,指導(dǎo)團(tuán)隊(duì)成員, 負(fù)責(zé)項(xiàng)目團(tuán)隊(duì)成員的建設(shè)和管理
3,負(fù)責(zé)完成項(xiàng)目相關(guān)技術(shù)的方案設(shè)計(jì),參與團(tuán)隊(duì)項(xiàng)目代碼評(píng)審
4,規(guī)劃項(xiàng)目團(tuán)隊(duì)的大數(shù)據(jù)技術(shù)體系和團(tuán)隊(duì)成員技術(shù)成長(zhǎng)
職位要求:
1,本科及以上學(xué)位,計(jì)算機(jī),數(shù)學(xué),工程學(xué)相關(guān)專業(yè),碩士學(xué)位優(yōu)先
2,5年以上大數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn)或數(shù)據(jù)倉(cāng)庫(kù)/模型/報(bào)表開(kāi)發(fā)經(jīng)驗(yàn)
3,豐富的大中型大數(shù)據(jù)架構(gòu)/數(shù)據(jù)倉(cāng)庫(kù)項(xiàng)目的規(guī)劃、方案設(shè)計(jì)、實(shí)施等相關(guān)經(jīng)驗(yàn)
4,熟悉hadoop生態(tài)圈的各組件,系統(tǒng)及引擎
5,參與過(guò)商業(yè)項(xiàng)目的大數(shù)據(jù)平臺(tái)建設(shè)的優(yōu)先
6,良好的學(xué)習(xí)能力,對(duì)技術(shù)前沿的發(fā)展有很大的好奇心
7,邏輯思維能力強(qiáng),思路清晰, 良好的溝通協(xié)調(diào)能力
第2篇 大數(shù)據(jù)技術(shù)經(jīng)理崗位職責(zé)
大數(shù)據(jù)技術(shù)經(jīng)理 工作職責(zé):
1、 參與打造數(shù)據(jù)中內(nèi)容的規(guī)劃、設(shè)計(jì)、開(kāi)發(fā)和優(yōu)化工作,實(shí)現(xiàn)高質(zhì)量數(shù)據(jù)的互通與共享;
2、 參與數(shù)據(jù)模型體系構(gòu)建及數(shù)據(jù)主題設(shè)計(jì)和開(kāi)發(fā),搭建離線、實(shí)時(shí)數(shù)據(jù)公共層;
3、 參與數(shù)據(jù)產(chǎn)品與應(yīng)用的數(shù)據(jù)研發(fā),發(fā)掘數(shù)據(jù)商業(yè)價(jià)值,打造良好體驗(yàn)的數(shù)據(jù)產(chǎn)品;
4、 深入理解數(shù)據(jù)產(chǎn)品的使用場(chǎng)景,為業(yè)務(wù)方在可用性、成本上做更好的設(shè)計(jì)做參考。;
5、 團(tuán)隊(duì)成員的搭建與培養(yǎng),任務(wù)劃分,進(jìn)度監(jiān)控,代碼規(guī)范,質(zhì)量保證。
任職要求:
1、 熟悉數(shù)據(jù)倉(cāng)庫(kù)建模理論,5年以上相關(guān)領(lǐng)域?qū)嵺`經(jīng)驗(yàn);
2、 hadoop、hive、hbase、storm、spark等技術(shù)框架;
3、 精通java、python、scala、go等開(kāi)發(fā)語(yǔ)言中的1到2種;
4、 熟練使用python/java/scala或其他語(yǔ)言進(jìn)行復(fù)雜業(yè)務(wù)邏輯的數(shù)據(jù)處理工作,具備海量數(shù)據(jù)處理以及性能優(yōu)化的能力;
5、 對(duì)mysql、redis、hbase等數(shù)據(jù)庫(kù)有一定的了解和使用經(jīng)驗(yàn);
6、 對(duì)olap,多維分析及kylin熟悉的更好;
7、 思路清晰,具備良好的溝通能力和理解能力,較強(qiáng)的學(xué)習(xí)能力以及快速解決問(wèn)題的能力;
8、 對(duì)新技術(shù),新事物有很好的探索和求知欲;
9、 熟悉常規(guī)的機(jī)器學(xué)習(xí)算法:降維(pca、svd)、svm、邏輯回歸(logistics regression)、決策樹(shù)(gbdt、randomforest)、關(guān)聯(lián)規(guī)則(apriori、fp-growth)、聚類(k-means)等優(yōu)先。 工作職責(zé):
1、 參與打造數(shù)據(jù)中內(nèi)容的規(guī)劃、設(shè)計(jì)、開(kāi)發(fā)和優(yōu)化工作,實(shí)現(xiàn)高質(zhì)量數(shù)據(jù)的互通與共享;
2、 參與數(shù)據(jù)模型體系構(gòu)建及數(shù)據(jù)主題設(shè)計(jì)和開(kāi)發(fā),搭建離線、實(shí)時(shí)數(shù)據(jù)公共層;
3、 參與數(shù)據(jù)產(chǎn)品與應(yīng)用的數(shù)據(jù)研發(fā),發(fā)掘數(shù)據(jù)商業(yè)價(jià)值,打造良好體驗(yàn)的數(shù)據(jù)產(chǎn)品;
4、 深入理解數(shù)據(jù)產(chǎn)品的使用場(chǎng)景,為業(yè)務(wù)方在可用性、成本上做更好的設(shè)計(jì)做參考。;
5、 團(tuán)隊(duì)成員的搭建與培養(yǎng),任務(wù)劃分,進(jìn)度監(jiān)控,代碼規(guī)范,質(zhì)量保證。
任職要求:
1、 熟悉數(shù)據(jù)倉(cāng)庫(kù)建模理論,5年以上相關(guān)領(lǐng)域?qū)嵺`經(jīng)驗(yàn);
2、 hadoop、hive、hbase、storm、spark等技術(shù)框架;
3、 精通java、python、scala、go等開(kāi)發(fā)語(yǔ)言中的1到2種;
4、 熟練使用python/java/scala或其他語(yǔ)言進(jìn)行復(fù)雜業(yè)務(wù)邏輯的數(shù)據(jù)處理工作,具備海量數(shù)據(jù)處理以及性能優(yōu)化的能力;
5、 對(duì)mysql、redis、hbase等數(shù)據(jù)庫(kù)有一定的了解和使用經(jīng)驗(yàn);
6、 對(duì)olap,多維分析及kylin熟悉的更好;
7、 思路清晰,具備良好的溝通能力和理解能力,較強(qiáng)的學(xué)習(xí)能力以及快速解決問(wèn)題的能力;
8、 對(duì)新技術(shù),新事物有很好的探索和求知欲;
9、 熟悉常規(guī)的機(jī)器學(xué)習(xí)算法:降維(pca、svd)、svm、邏輯回歸(logistics regression)、決策樹(shù)(gbdt、randomforest)、關(guān)聯(lián)規(guī)則(apriori、fp-growth)、聚類(k-means)等優(yōu)先。
第3篇 大數(shù)據(jù)平臺(tái)技術(shù)經(jīng)理崗位職責(zé)
大數(shù)據(jù)平臺(tái)高級(jí)技術(shù)經(jīng)理 招銀 招銀金融租賃有限公司,招銀,招銀 職責(zé)描述:
1. 負(fù)責(zé)租賃行業(yè)大數(shù)據(jù)平臺(tái)架構(gòu)規(guī)劃、技術(shù)落地、與開(kāi)發(fā)團(tuán)隊(duì)協(xié)同實(shí)施;
2. 負(fù)責(zé)需求調(diào)研、需求分析,編寫需求分析說(shuō)明書(shū),負(fù)責(zé)項(xiàng)目全周期管理;
3. 組織uat測(cè)試方案制定、測(cè)試案例準(zhǔn)備,負(fù)責(zé)測(cè)試環(huán)境搭建、以及對(duì)項(xiàng)目進(jìn)行驗(yàn)收測(cè)試 。
任職要求:
1. 計(jì)算機(jī)軟件或信息系統(tǒng)相關(guān)專業(yè)碩士以上學(xué)歷;
2. 具有三年及以上大數(shù)據(jù)系統(tǒng)架構(gòu)規(guī)劃及系統(tǒng)建設(shè)相關(guān)的工作經(jīng)驗(yàn);
3. 精通大數(shù)據(jù)平臺(tái)存儲(chǔ)、計(jì)算及算法相關(guān)技術(shù),精通機(jī)器學(xué)習(xí)相關(guān)模型與算法、或nlp或計(jì)算機(jī)圖像識(shí)別等相關(guān)理論及技術(shù),熟悉精益(敏捷)項(xiàng)目管理、瀑布式項(xiàng)目管理流程,有項(xiàng)目經(jīng)驗(yàn)者優(yōu)先;
4. 有強(qiáng)烈的技術(shù)思維及自我突破的欲望,性格外向、善于組織溝通、文字表達(dá)能力強(qiáng)。
第4篇 大數(shù)據(jù)技術(shù)總監(jiān)職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
1、負(fù)責(zé)大數(shù)據(jù)工作坊部門管理工作,組建、管理和帶領(lǐng)團(tuán)隊(duì)承擔(dān)公司大數(shù)據(jù)技術(shù)研發(fā)相關(guān)工作;
2、負(fù)責(zé)牽頭研究制定跨域多維平臺(tái)城市級(jí)大數(shù)據(jù)技術(shù)體系規(guī)劃、數(shù)據(jù)標(biāo)準(zhǔn)制定及建模等;制定大數(shù)據(jù)技術(shù)路線;
3、負(fù)責(zé)牽頭研究制定大橫琴科技企業(yè)級(jí)大數(shù)據(jù)技術(shù)體系規(guī)劃、數(shù)據(jù)標(biāo)準(zhǔn)制定及建模等;
4、參與跨域多維城市大數(shù)據(jù)云平臺(tái)項(xiàng)目,全面負(fù)責(zé)大數(shù)據(jù)平臺(tái)系統(tǒng)搭建、關(guān)鍵技術(shù)選型及落地實(shí)施等工作;
5、負(fù)責(zé)數(shù)據(jù)建模相關(guān)的關(guān)鍵算法研究,及核心代碼實(shí)現(xiàn);
6、負(fù)責(zé)城市及企業(yè)數(shù)據(jù)資產(chǎn)建設(shè),包括采集、清洗、管理、對(duì)外共享服務(wù);
7、負(fù)責(zé)數(shù)據(jù)資產(chǎn)運(yùn)營(yíng),挖掘數(shù)據(jù)資產(chǎn)價(jià)值,對(duì)外提供數(shù)據(jù)服務(wù);
8、負(fù)責(zé)大數(shù)據(jù)前沿技術(shù)的追蹤及研究,跟蹤行業(yè)平臺(tái)產(chǎn)品和相關(guān)解決方案。
任職要求:
1、教育背景:數(shù)學(xué)/統(tǒng)計(jì)學(xué)/計(jì)算機(jī)相關(guān)專業(yè)碩士研究生以上學(xué)歷優(yōu)先;
2、工作經(jīng)驗(yàn):5年以上大數(shù)據(jù)/人工智能相關(guān)工作經(jīng)驗(yàn),有10人以上團(tuán)隊(duì)管理經(jīng)驗(yàn),具有2個(gè)以上大規(guī)模數(shù)據(jù)平臺(tái)落地實(shí)施經(jīng)驗(yàn)者優(yōu)先;
3、知識(shí)技能:
(1)對(duì)業(yè)務(wù)數(shù)據(jù)和業(yè)務(wù)敏感,有緊密跟蹤業(yè)務(wù)運(yùn)營(yíng)和發(fā)展的數(shù)據(jù)運(yùn)營(yíng)經(jīng)驗(yàn),比如bi、數(shù)據(jù)分析和挖掘;在用戶行為日志采集、海量數(shù)據(jù)處理、數(shù)據(jù)建模、業(yè)務(wù)理解方面有豐富經(jīng)驗(yàn);
(2)對(duì)業(yè)務(wù)數(shù)據(jù)模型、數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)分析、數(shù)據(jù)挖掘等整個(gè)大數(shù)據(jù)系統(tǒng)的架構(gòu)有清晰的思路和落地執(zhí)行的方案,對(duì)數(shù)據(jù)服務(wù)、數(shù)據(jù)產(chǎn)品的模式有清晰的理解,并能帶領(lǐng)團(tuán)隊(duì)實(shí)施;
(3)至少熟悉一種編程語(yǔ)言,如:java、python、r、shell、sql等;熟悉當(dāng)前主流的開(kāi)源數(shù)據(jù)平臺(tái)和工具以及數(shù)據(jù)云服務(wù),如:hadoop、hbase、spark等;并具有hand-on能力;
(4)具備非常強(qiáng)的學(xué)習(xí)能力、較好的邏輯思維能力,較強(qiáng)的抽象、概括、總結(jié)能力;較好的溝通交流能力,善于主動(dòng)思考和行動(dòng),樂(lè)于解決具有挑戰(zhàn)性的問(wèn)題;
第5篇 高級(jí)實(shí)時(shí)大數(shù)據(jù)研發(fā)工程師/數(shù)據(jù)技術(shù)專家職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
基于flink開(kāi)源大數(shù)據(jù)計(jì)算平臺(tái),在集團(tuán)整體業(yè)務(wù)場(chǎng)景下,
1. 研發(fā)實(shí)時(shí)流計(jì)算數(shù)據(jù)研發(fā)平臺(tái),支持包括核心電商、云計(jì)算、大文娛、創(chuàng)新業(yè)務(wù)在內(nèi)的等各個(gè)綜合業(yè)務(wù)板塊務(wù);
2. 研發(fā)實(shí)時(shí)olap(elasticsearch,druid)賦能業(yè)務(wù)
3. 研發(fā)實(shí)時(shí)智能化(算法加工程)賦能業(yè)務(wù)
任職要求:
1.具備扎實(shí)的計(jì)算機(jī)理論基礎(chǔ), 對(duì)數(shù)據(jù)結(jié)構(gòu)及算法有較強(qiáng)的功底
2.精通java語(yǔ)言編程,具備優(yōu)秀的系統(tǒng)debug/profiling能力和經(jīng)驗(yàn)
3. 熟悉常見(jiàn)的面向?qū)ο笤O(shè)計(jì)模式,具備優(yōu)秀的系統(tǒng)架構(gòu)設(shè)計(jì)能力
4.熟悉hadoop/hbase/flink/spark streaming等開(kāi)源大數(shù)據(jù)技術(shù),在開(kāi)源社區(qū)活躍者優(yōu)先
5.熟悉elasticsearch/druid 等olap開(kāi)源技術(shù)優(yōu)先
6.具備實(shí)際的大數(shù)據(jù)業(yè)務(wù)開(kāi)發(fā)經(jīng)驗(yàn)以及良好的項(xiàng)目溝通和協(xié)調(diào)能力
7. 具備實(shí)時(shí)流計(jì)算數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn)、全棧開(kāi)發(fā)經(jīng)驗(yàn)優(yōu)先
第6篇 大數(shù)據(jù)技術(shù)開(kāi)發(fā)崗職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
1、負(fù)責(zé)面向各業(yè)務(wù)條線,與業(yè)務(wù)部門溝通,分析處理業(yè)務(wù)相關(guān)數(shù)據(jù);
2、負(fù)責(zé)專項(xiàng)數(shù)據(jù)的業(yè)務(wù)邏輯分析和數(shù)據(jù)挖掘,充分理解挖掘用戶需求,負(fù)責(zé)構(gòu)建數(shù)據(jù)挖掘模型;
3、負(fù)責(zé)大數(shù)據(jù)應(yīng)用、數(shù)據(jù)采集加工、數(shù)據(jù)分析等領(lǐng)域的開(kāi)發(fā)工作;
4、參與大數(shù)據(jù)應(yīng)用項(xiàng)目的建設(shè),包括項(xiàng)目開(kāi)發(fā)及項(xiàng)目管理等工作;
5、跟蹤大數(shù)據(jù)領(lǐng)域的技術(shù)應(yīng)用趨勢(shì),進(jìn)行技術(shù),加強(qiáng)大數(shù)據(jù)應(yīng)用能力。
任職要求:
1、大學(xué)本科及以上學(xué)歷,計(jì)算機(jī)相關(guān)專業(yè);
2、3年以上相關(guān)行業(yè)工作經(jīng)驗(yàn),2年以上軟件開(kāi)發(fā)經(jīng)驗(yàn);有互聯(lián)網(wǎng)金融、金融行業(yè)、大數(shù)據(jù)行業(yè)開(kāi)發(fā)經(jīng)驗(yàn)優(yōu)先;
3、熟練掌握一種編程語(yǔ)言,java、vc、python等,熟悉當(dāng)下互聯(lián)網(wǎng)前沿的技術(shù),并具有一定運(yùn)用實(shí)踐經(jīng)驗(yàn),熟練使用tomcat,ngin_服務(wù)器,linu_常用命令。了解或熟悉數(shù)據(jù)倉(cāng)庫(kù)建模,擅長(zhǎng)業(yè)務(wù)系統(tǒng)的數(shù)據(jù)分析;具備證券從業(yè)資格;
4、有良好的職業(yè)心態(tài),包括高度的責(zé)任心、踏實(shí)的工作作風(fēng)、較強(qiáng)的學(xué)習(xí)能力、良好的團(tuán)隊(duì)合作精神、敢于接受壓力和挑戰(zhàn)、具有較強(qiáng)的溝通表達(dá)能力、組織協(xié)調(diào)能力和文檔編制能力,善于總結(jié)經(jīng)驗(yàn),開(kāi)拓思路勇于創(chuàng)新等。
第7篇 架構(gòu)師/技術(shù)專家(云平臺(tái)、大數(shù)據(jù)方向)職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
1. 負(fù)責(zé)研發(fā)網(wǎng)絡(luò)、系統(tǒng)安全評(píng)估和安全加固產(chǎn)品;
2. 負(fù)責(zé)對(duì)客戶的應(yīng)用系統(tǒng)進(jìn)行滲透測(cè)試和代碼審計(jì);
3. 開(kāi)發(fā)安全攻防產(chǎn)品,對(duì)流量攻擊、web方向、軟件逆向方向和軟件安全周期展開(kāi)研究;
4. 在出現(xiàn)網(wǎng)絡(luò)攻擊或安全事件時(shí),為運(yùn)維提供緊急響應(yīng)支撐服務(wù),開(kāi)發(fā)調(diào)查取證
任職要求:
1、學(xué)歷:本科及以上
2、專業(yè):計(jì)算機(jī)、軟件工程、電子信息、網(wǎng)絡(luò)空間安全、信息安全等
3、年齡:28~40
4、性別:不限
5、工作經(jīng)驗(yàn):5~10年
6、其他要求:無(wú)
第8篇 大數(shù)據(jù)技術(shù)架構(gòu)專家崗位職責(zé)職位要求
職責(zé)描述:
1、負(fù)責(zé)企業(yè)級(jí)數(shù)據(jù)中臺(tái)規(guī)劃、架構(gòu)設(shè)計(jì)、組件封裝以及疑難技術(shù)問(wèn)題解決
2、深入理解企業(yè)級(jí)數(shù)據(jù)中臺(tái)需求,進(jìn)行整體架構(gòu)設(shè)計(jì)、技術(shù)選型、關(guān)鍵核心模塊的研發(fā)以及疑難問(wèn)題解決
3、針對(duì)具體業(yè)務(wù)需求提出合適的算法解決方案,應(yīng)用先進(jìn)的統(tǒng)計(jì)建模、數(shù)據(jù)挖掘,機(jī)器學(xué)習(xí)等方法建立數(shù)據(jù)模型,優(yōu)化算法,推動(dòng)該方案在業(yè)務(wù)系統(tǒng)的實(shí)現(xiàn)。算法包括但不限于機(jī)器學(xué)習(xí),推薦算法,自然語(yǔ)言處理等;
4、負(fù)責(zé)大數(shù)據(jù)應(yīng)用項(xiàng)目的模型技術(shù)設(shè)計(jì)、數(shù)據(jù)提取清洗、數(shù)據(jù)衍生變換、模型開(kāi)發(fā)、模型驗(yàn)證評(píng)估到最終模型實(shí)施的項(xiàng)目全生命周期,解決不同場(chǎng)景下的業(yè)務(wù)問(wèn)題,包含但不限于客戶畫像、精準(zhǔn)營(yíng)銷、業(yè)務(wù)預(yù)測(cè)、路由規(guī)劃、線路優(yōu)化等
任職資格:
1、精通java、scala、python、sql、r等開(kāi)發(fā)語(yǔ)言中至少2到3種
2、精通cdh、ambari、yarn/mesos、zookeeper等安裝配置與參數(shù)調(diào)優(yōu),并在中大型項(xiàng)目中有trouble shooting的實(shí)際經(jīng)驗(yàn)
3、熟練掌握hadoop、spark、storm、flink、kylin、druid等大數(shù)據(jù)計(jì)算技術(shù),并在中大型項(xiàng)目中有trouble shooting的實(shí)際經(jīng)驗(yàn)
4、熟練掌握hdfs、hbase、hive、elasticsearch、casandra、mongodb等大數(shù)據(jù)存儲(chǔ)技術(shù)的安裝配置與性能調(diào)優(yōu),并在中大型項(xiàng)目中有trouble shooting的實(shí)際經(jīng)驗(yàn)
5、熟練掌握kafka、nifi、flume、sqoop等大數(shù)據(jù)集成技術(shù)的安裝配置與性能調(diào)優(yōu),并在中大型項(xiàng)目中有trouble shooting的實(shí)際經(jīng)驗(yàn)
6、熟練掌握redis、ignite、geode等分布式緩存和數(shù)據(jù)網(wǎng)格技術(shù)的安裝配置與性能調(diào)優(yōu),并在中大型項(xiàng)目中有trouble shooting的實(shí)際經(jīng)驗(yàn)
7、熟練掌握impala、spark sql、drill等大數(shù)據(jù)即席查詢技術(shù),并在中大型項(xiàng)目中有trouble shooting的實(shí)際經(jīng)驗(yàn)
8、熟練掌握數(shù)據(jù)庫(kù)技術(shù),對(duì)mysql等數(shù)據(jù)庫(kù)有一定的了解和使用經(jīng)驗(yàn)
9、熟悉docker/kubernetes等大數(shù)據(jù)分布式集群技術(shù)的安裝配置與性能調(diào)優(yōu)者優(yōu)先
10、熟悉jm_大數(shù)據(jù)監(jiān)控管理技術(shù),并具有相關(guān)開(kāi)源監(jiān)控管理組件的使用經(jīng)驗(yàn)者優(yōu)先
11、有企業(yè)數(shù)據(jù)中臺(tái)建設(shè)實(shí)施開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先
12、有zepplin、jupyter note等實(shí)際應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先
13、有janusgraph、opentsdb等實(shí)際應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先
14、有tensorflow安裝配置調(diào)優(yōu)以及實(shí)際應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先
15、具有良好的商業(yè)敏感度、數(shù)據(jù)敏感度和優(yōu)秀的數(shù)據(jù)分析技能,能夠開(kāi)發(fā)創(chuàng)新而實(shí)際的分析方法以解決復(fù)雜的商業(yè)問(wèn)題,注重業(yè)務(wù)邏輯與數(shù)據(jù)邏輯相結(jié)合,接地氣意識(shí)和落地能力都要強(qiáng)
16、熟悉常用機(jī)器學(xué)習(xí)和數(shù)據(jù)挖掘算法,包括但不限于gbdt、隨機(jī)森林、支持向量機(jī)、logistic回歸以及深度學(xué)習(xí)等算法
17、良好的溝通能力和團(tuán)隊(duì)合作精神,能夠協(xié)同工作,樂(lè)于在技術(shù)上指導(dǎo)幫助團(tuán)隊(duì)成員
18、優(yōu)先考慮具備bat或知名互聯(lián)網(wǎng)或高科技公司數(shù)據(jù)挖掘以及大型數(shù)據(jù)系統(tǒng)或平臺(tái)的架構(gòu)設(shè)計(jì)者經(jīng)驗(yàn)
19、向開(kāi)源社區(qū)貢獻(xiàn)過(guò) patch 者優(yōu)先
崗位要求:
學(xué)歷要求:大專
語(yǔ)言要求:不限
年齡要求:不限
工作年限:8-9年經(jīng)驗(yàn)
第9篇 大數(shù)據(jù)技術(shù)經(jīng)理崗位職責(zé)任職要求
大數(shù)據(jù)技術(shù)經(jīng)理崗位職責(zé)
大數(shù)據(jù)技術(shù)經(jīng)理職位描述:
1、主要負(fù)責(zé)產(chǎn)品和項(xiàng)目的開(kāi)發(fā)管理工作,帶領(lǐng)團(tuán)隊(duì)保質(zhì)保量完成開(kāi)發(fā)任務(wù);
2、參與產(chǎn)品需求分析、架構(gòu)設(shè)計(jì)、技術(shù)選型等工作,參與技術(shù)框架構(gòu)建;
3、負(fù)責(zé)項(xiàng)目開(kāi)發(fā)進(jìn)程管理,核心代碼編寫;
4、負(fù)責(zé)制定相關(guān)技術(shù)解決方案,解決開(kāi)發(fā)中的技術(shù)問(wèn)題;
5、負(fù)責(zé)對(duì)外的產(chǎn)品技術(shù)支持
任職要求:
1、有2-3年的技術(shù)管理經(jīng)驗(yàn),參與過(guò)企業(yè)級(jí)產(chǎn)品研發(fā)過(guò)程;
2、精通java、熟悉spring mvc開(kāi)發(fā)架構(gòu)
3、精通hadoop生態(tài)圈中常用技術(shù),如hbase、hive、zookeeper、storm、spark等,有華為fi、騰訊tbds、cdh或hdp實(shí)際應(yīng)用經(jīng)驗(yàn);
4、精通linu_平臺(tái),熟悉shell、python其一或多種;
5、熟悉系統(tǒng)部署、開(kāi)發(fā)、測(cè)試、維護(hù)過(guò)程與方法;
6、能夠及時(shí)地跟進(jìn)項(xiàng)目進(jìn)度、管理項(xiàng)目風(fēng)險(xiǎn),及時(shí)發(fā)現(xiàn)并解決項(xiàng)目問(wèn)題,推動(dòng)項(xiàng)目團(tuán)隊(duì)朝目標(biāo)前進(jìn);
7、綜合素質(zhì)高,具有良好的執(zhí)行力和責(zé)任心,有較強(qiáng)的組織能力和溝通能力;
8、具有pmp證書(shū)優(yōu)先。
職位描述:
1、主要負(fù)責(zé)產(chǎn)品和項(xiàng)目的開(kāi)發(fā)管理工作,帶領(lǐng)團(tuán)隊(duì)保質(zhì)保量完成開(kāi)發(fā)任務(wù);
2、參與產(chǎn)品需求分析、架構(gòu)設(shè)計(jì)、技術(shù)選型等工作,參與技術(shù)框架構(gòu)建;
3、負(fù)責(zé)項(xiàng)目開(kāi)發(fā)進(jìn)程管理,核心代碼編寫;
4、負(fù)責(zé)制定相關(guān)技術(shù)解決方案,解決開(kāi)發(fā)中的技術(shù)問(wèn)題;
5、負(fù)責(zé)對(duì)外的產(chǎn)品技術(shù)支持
任職要求:
1、有2-3年的技術(shù)管理經(jīng)驗(yàn),參與過(guò)企業(yè)級(jí)產(chǎn)品研發(fā)過(guò)程;
2、精通java、熟悉spring mvc開(kāi)發(fā)架構(gòu)
3、精通hadoop生態(tài)圈中常用技術(shù),如hbase、hive、zookeeper、storm、spark等,有華為fi、騰訊tbds、cdh或hdp實(shí)際應(yīng)用經(jīng)驗(yàn);
4、精通linu_平臺(tái),熟悉shell、python其一或多種;
5、熟悉系統(tǒng)部署、開(kāi)發(fā)、測(cè)試、維護(hù)過(guò)程與方法;
6、能夠及時(shí)地跟進(jìn)項(xiàng)目進(jìn)度、管理項(xiàng)目風(fēng)險(xiǎn),及時(shí)發(fā)現(xiàn)并解決項(xiàng)目問(wèn)題,推動(dòng)項(xiàng)目團(tuán)隊(duì)朝目標(biāo)前進(jìn);
7、綜合素質(zhì)高,具有良好的執(zhí)行力和責(zé)任心,有較強(qiáng)的組織能力和溝通能力;
8、具有pmp證書(shū)優(yōu)先。
大數(shù)據(jù)技術(shù)經(jīng)理崗位
第10篇 實(shí)時(shí)大數(shù)據(jù)研發(fā)工程師/數(shù)據(jù)技術(shù)專家(p6-p8)職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
基于flink開(kāi)源大數(shù)據(jù)計(jì)算平臺(tái),在阿里集團(tuán)整體業(yè)務(wù)場(chǎng)景下,
1. 研發(fā)實(shí)時(shí)流計(jì)算數(shù)據(jù)研發(fā)平臺(tái),支持包括核心電商、云計(jì)算、大文娛、創(chuàng)新業(yè)務(wù)在內(nèi)的等各個(gè)綜合業(yè)務(wù)板塊務(wù);
2. 研發(fā)實(shí)時(shí)olap(elasticsearch,druid)賦能業(yè)務(wù)
3. 研發(fā)實(shí)時(shí)智能化(算法加工程)賦能業(yè)務(wù)
任職要求:
1.具備扎實(shí)的計(jì)算機(jī)理論基礎(chǔ), 對(duì)數(shù)據(jù)結(jié)構(gòu)及算法有較強(qiáng)的功底
2.精通java語(yǔ)言編程,具備優(yōu)秀的系統(tǒng)debug/profiling能力和經(jīng)驗(yàn)
3. 熟悉常見(jiàn)的面向?qū)ο笤O(shè)計(jì)模式,具備優(yōu)秀的系統(tǒng)架構(gòu)設(shè)計(jì)能力
4.熟悉hadoop/hbase/flink/spark streaming等開(kāi)源大數(shù)據(jù)技術(shù),在開(kāi)源社區(qū)活躍者優(yōu)先
5.熟悉elasticsearch/druid 等olap開(kāi)源技術(shù)優(yōu)先
6.具備實(shí)際的大數(shù)據(jù)業(yè)務(wù)開(kāi)發(fā)經(jīng)驗(yàn)以及良好的項(xiàng)目溝通和協(xié)調(diào)能力
7. 具備實(shí)時(shí)流計(jì)算數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn)、全棧開(kāi)發(fā)經(jīng)驗(yàn)優(yōu)先