欧美成人永久免费_欧美日本五月天_A级毛片免看在线_国产69无码,亚洲无线观看,精品人妻少妇无码视频,777无码专区,色大片免费网站大全,麻豆国产成人AV网,91视频网络,亚洲色无码自慰

當(dāng)前位置:網(wǎng)站首頁 >> 作文 >> 最新大數(shù)據(jù)架構(gòu)工程師是干嘛的(十三篇)

最新大數(shù)據(jù)架構(gòu)工程師是干嘛的(十三篇)

格式:DOC 上傳日期:2023-04-02 06:14:02
最新大數(shù)據(jù)架構(gòu)工程師是干嘛的(十三篇)
時(shí)間:2023-04-02 06:14:02     小編:admin

在日常學(xué)習(xí)、工作或生活中,大家總少不了接觸作文或者范文吧,,通過文章可以把我們那些零零散散的思想,,聚集在一塊。那么我們該如何寫一篇較為完美的范文呢,?這里我整理了一些優(yōu)秀的范文,,希望對大家有所幫助,下面我們就來了解一下吧,。

大數(shù)據(jù)架構(gòu)工程師是干嘛的篇一

1.負(fù)責(zé)過多個(gè)大數(shù)據(jù)項(xiàng)目的架構(gòu);

2.精通hadoop,、spark, hbase等主流的大數(shù)據(jù)平臺、精通各組件優(yōu)化設(shè)計(jì)原理;

3.精通大數(shù)據(jù)實(shí)時(shí)流式處理的設(shè)計(jì)和應(yīng)用;

3.熟悉大數(shù)據(jù)平臺調(diào)優(yōu),,具備大數(shù)據(jù)生產(chǎn)平臺調(diào)優(yōu)經(jīng)驗(yàn);

4.金融行業(yè),,運(yùn)營商行業(yè)大數(shù)據(jù)架構(gòu)經(jīng)驗(yàn)更優(yōu);

5.研究大數(shù)據(jù)技術(shù)的最新發(fā)展,并引入到公司技術(shù)架構(gòu);

6.指導(dǎo)大數(shù)據(jù)工程師的日常工作,,并培養(yǎng)技術(shù)骨干,。

任職資格:

1.計(jì)算機(jī)相關(guān)專業(yè)本科或以上學(xué)歷;

2.具有5年以上大數(shù)據(jù)相關(guān)開發(fā)經(jīng)驗(yàn);

3.具有2年以上帶團(tuán)隊(duì)經(jīng)驗(yàn)

4.對hadoop/hive/spark/hbase/es等等大數(shù)據(jù)常用技術(shù)有深刻理解,,能夠帶領(lǐng)團(tuán)隊(duì)進(jìn)行技術(shù)攻堅(jiān),,完成中間件的實(shí)施、改造,、調(diào)優(yōu);

5.精通海量數(shù)據(jù)和實(shí)時(shí)數(shù)據(jù)的分析處理,能對線上的數(shù)據(jù)處理性能問題做調(diào)優(yōu);

6.精通數(shù)據(jù)倉庫以及維度建模原理,,有大型數(shù)據(jù)倉庫建設(shè)經(jīng)驗(yàn);

7.精通關(guān)系型數(shù)據(jù)庫和nosql數(shù)據(jù)庫的使用,,熟悉相關(guān)理論;

8.溝通順暢,重點(diǎn)突出,,高效,。

大數(shù)據(jù)架構(gòu)工程師是干嘛的篇二

職責(zé):

1、大數(shù)據(jù)平臺的規(guī)劃,、設(shè)計(jì)、實(shí)施,,并優(yōu)化數(shù)據(jù)庫;

2,、對數(shù)據(jù)庫進(jìn)行管理,,負(fù)責(zé)數(shù)據(jù)庫應(yīng)用系統(tǒng)的運(yùn)營及監(jiān)控;

3、對數(shù)據(jù)庫性能分析與調(diào)優(yōu),,排錯,保證數(shù)據(jù)正確率;

4,、配合其他部門進(jìn)行的數(shù)據(jù)處理,、查詢,統(tǒng)計(jì)和分析工作;

5,、完成公司下達(dá)的項(xiàng)目開發(fā)任務(wù),。

任職要求:

1,、計(jì)算機(jī)及相關(guān)專業(yè)本科以上學(xué)歷,5年以上軟件開發(fā)從業(yè)經(jīng)驗(yàn),,其中包括至少2年以上的大數(shù)據(jù)開發(fā)工作經(jīng)驗(yàn);

2、熟悉hive,hadoop/spark,hbase等大數(shù)據(jù)相關(guān)技術(shù)架構(gòu),,有管理或優(yōu)化大型分布式集群經(jīng)驗(yàn);

3,、熟悉linux基本命令,精通sql腳本的編寫,,有豐富的數(shù)據(jù)庫管理,、運(yùn)維調(diào)優(yōu)經(jīng)驗(yàn);

4、熟悉c++,、java、c#等開發(fā)語言;

5,、有互聯(lián)網(wǎng)電商行業(yè)大數(shù)據(jù)分析處理和大型數(shù)據(jù)倉庫的設(shè)計(jì)和實(shí)施經(jīng)驗(yàn);

6,、有分布式系統(tǒng)分析及架構(gòu)設(shè)計(jì)經(jīng)驗(yàn)和大型計(jì)算集群的基礎(chǔ)設(shè)施開發(fā)維護(hù)經(jīng)驗(yàn);

7、快速處理系統(tǒng)突發(fā)事件的能力,,較強(qiáng)的學(xué)習(xí)和創(chuàng)新能力;

8,、良好的溝通能力和團(tuán)隊(duì)合作精神,。

大數(shù)據(jù)架構(gòu)工程師是干嘛的篇三

職責(zé):

1.負(fù)責(zé)公司新業(yè)務(wù)方向平臺大數(shù)據(jù)基礎(chǔ)架構(gòu)的搭建及后期數(shù)據(jù)處理體系的升級和優(yōu)化,不斷提升系統(tǒng)的穩(wěn)定性和效率,。為公司未來方向性產(chǎn)品提供大數(shù)據(jù)底層平臺的支持和保證,。

2.負(fù)責(zé)制定大數(shù)據(jù)平臺調(diào)用約束和規(guī)范;

3.負(fù)責(zé)大數(shù)據(jù)方向技術(shù)難題的解決,以及代碼質(zhì)量的把控;

4.作為大數(shù)據(jù)開發(fā)團(tuán)隊(duì)的leader,負(fù)責(zé)大數(shù)據(jù)系統(tǒng)平臺開發(fā)團(tuán)隊(duì)建設(shè)與人才梯隊(duì)培養(yǎng),,分享技術(shù)經(jīng)驗(yàn),撰寫相關(guān)技術(shù)文檔指導(dǎo)和培訓(xùn)工程師,。

任職要求:

1.熱衷于大數(shù)據(jù)技術(shù),,并能平衡大數(shù)據(jù)性能、穩(wěn)定性,、擴(kuò)展性多重要素進(jìn)行設(shè)計(jì)和優(yōu)化;

2.熟悉服務(wù)器基本知識,,能夠評估系統(tǒng)硬件性能瓶頸;

3.掌握linux操作系統(tǒng)的配置,管理及優(yōu)化,,能夠獨(dú)立排查及解決操作系統(tǒng)層的各類問題,,并能提供解決問題的理論依據(jù);

4.精通java服務(wù)器編程,熟悉jvm原理,,對數(shù)據(jù)結(jié)構(gòu)和算法設(shè)計(jì)有較為深刻的理解;

5.精通elasticsearch、redis,、hadoop,、kafka,、zookeeper、yarn,、hbase,、spark底層架構(gòu),,熟悉原理,、源碼,、集群部署,包括參數(shù)優(yōu)化,、bug修復(fù),,貢獻(xiàn)過代碼或提交過bug者優(yōu)先

6.具備數(shù)據(jù)中心資源管理、監(jiān)控,、調(diào)度等系統(tǒng)研發(fā)經(jīng)驗(yàn)者優(yōu)先,具備分布式系統(tǒng)研發(fā)經(jīng)驗(yàn)者優(yōu)先;

7.具有應(yīng)用大數(shù)據(jù)技術(shù)處理的項(xiàng)目開發(fā),、維護(hù)超過兩年的經(jīng)驗(yàn)者優(yōu)先;

8.具有良好的文檔編寫能力,,可進(jìn)行方案設(shè)計(jì)、架構(gòu)設(shè)計(jì),。

大數(shù)據(jù)架構(gòu)工程師是干嘛的篇四

職責(zé):

1.負(fù)責(zé)企業(yè)數(shù)據(jù)中心建設(shè),設(shè)計(jì)數(shù)據(jù)邏輯模型和物理模型,,并完成相關(guān)開發(fā)

2.梳理公司各業(yè)務(wù)線常用的指標(biāo)和維度,,統(tǒng)一指標(biāo)定義口徑

3.根據(jù)數(shù)據(jù)應(yīng)用開發(fā)和數(shù)據(jù)分析需求,,設(shè)計(jì)數(shù)據(jù)倉庫信息層模型,,提高數(shù)據(jù)開發(fā)的效率

4.負(fù)責(zé)數(shù)據(jù)模型的運(yùn)營和優(yōu)化,及時(shí)響應(yīng)業(yè)務(wù)邏輯變更,,保證模型的數(shù)據(jù)質(zhì)量和穩(wěn)定性

5.負(fù)責(zé)公司數(shù)據(jù)標(biāo)簽體系的建設(shè),并推動標(biāo)簽體系在實(shí)際業(yè)務(wù)場景中落地

崗位要求:

1.5年以上dw/bi數(shù)據(jù)架構(gòu)設(shè)計(jì),、模型設(shè)計(jì)和性能調(diào)優(yōu)等相關(guān)經(jīng)驗(yàn)

2.有較強(qiáng)的數(shù)據(jù)分析能力,,精通數(shù)據(jù)倉庫架構(gòu),熟悉erwin或powerdesigner建模工具

3.精通一種主流關(guān)系數(shù)據(jù)庫(如mysql等),熟悉hive開發(fā)

4.有電商業(yè)務(wù)經(jīng)驗(yàn),,元數(shù)據(jù)管理,數(shù)據(jù)質(zhì)量管理或標(biāo)簽體系搭建經(jīng)驗(yàn)者優(yōu)先

5.優(yōu)秀的協(xié)調(diào)溝通與團(tuán)隊(duì)協(xié)作能力,,極強(qiáng)的責(zé)任心,能承受一定的工作壓力,,認(rèn)同企業(yè)文化和團(tuán)隊(duì)價(jià)值

大數(shù)據(jù)架構(gòu)工程師是干嘛的篇五

職責(zé):

負(fù)責(zé)公司大數(shù)據(jù)產(chǎn)品架構(gòu)的設(shè)計(jì)與實(shí)現(xiàn);

配合大數(shù)據(jù)產(chǎn)品經(jīng)理完成產(chǎn)品的快速研發(fā)與交付;

負(fù)責(zé)大數(shù)據(jù)產(chǎn)品架構(gòu)的持續(xù)優(yōu)化設(shè)計(jì);

負(fù)責(zé)大數(shù)據(jù)產(chǎn)品核心組件設(shè)計(jì);

負(fù)責(zé)大數(shù)據(jù)相關(guān)數(shù)據(jù)架構(gòu)規(guī)劃,、數(shù)據(jù)建模、數(shù)據(jù)庫設(shè)計(jì)以及大數(shù)據(jù)產(chǎn)品研發(fā)工作;

為應(yīng)用開發(fā)團(tuán)隊(duì)提供技術(shù)支撐,。

及時(shí)向上級反饋工作進(jìn)度,、遇到的問題或者對現(xiàn)有工作的建議等;

完成上級領(lǐng)導(dǎo)交辦的其它各項(xiàng)工作。

任職資格:

985/211本科及以上學(xué)歷,,3年以上的大數(shù)據(jù)開發(fā)經(jīng)驗(yàn)、

2年以上大數(shù)據(jù)架構(gòu)設(shè)計(jì)經(jīng)驗(yàn);

豐富的java研發(fā)經(jīng)驗(yàn),,精通java,,熟悉python scala等編程語言;具備深厚的分布式系統(tǒng)或數(shù)據(jù)庫系統(tǒng)的理論基礎(chǔ),熟悉分布式計(jì)算系統(tǒng)的工作機(jī)制,,具有分布式文件系統(tǒng)、分布式數(shù)據(jù)庫系統(tǒng),、集群存儲系統(tǒng)等架構(gòu)設(shè)計(jì)經(jīng)驗(yàn);

熟悉整個(gè)大數(shù)據(jù)的完整處理流程(數(shù)據(jù)的采集,、清洗、預(yù)處理,、存儲、分析挖掘,、機(jī)器學(xué)習(xí)和數(shù)據(jù)可視化);

精通各種大數(shù)據(jù)相關(guān)技術(shù)體系:hadoop,、spark,、storm、elasticsearch,、kafka;

有數(shù)據(jù)挖掘,、機(jī)器學(xué)習(xí)相關(guān)應(yīng)用或研究背景;

溝通能力較好,積極主動意識較強(qiáng),,責(zé)任心較強(qiáng)。

具備優(yōu)秀的邏輯思維能力,,對解決挑戰(zhàn)性問題充滿熱情,善于解決問題和分析問題;

良好的團(tuán)隊(duì)合作精神,,較強(qiáng)的溝通能力和學(xué)習(xí)能力 ;

大數(shù)據(jù)架構(gòu)工程師是干嘛的篇六

職責(zé):

1.能夠帶領(lǐng)技術(shù)人員基于hadoop平臺進(jìn)行海量數(shù)據(jù)應(yīng)用系統(tǒng)開發(fā);

2.負(fù)責(zé)結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的解析和清洗,海量數(shù)據(jù)查詢和報(bào)表展現(xiàn);

3.負(fù)責(zé)超大規(guī)模數(shù)據(jù)平臺的搭建、維護(hù)和優(yōu)化;

4.負(fù)責(zé)大數(shù)據(jù)采集,、存儲框架研究,,參與在線或離線數(shù)據(jù)存儲模型設(shè)計(jì);

5.負(fù)責(zé)大數(shù)據(jù)平臺新技術(shù)的開發(fā)使用和性能優(yōu)化,測試,。

任職資格:

1.計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷;

2. 熟悉hadoop相關(guān)各種開源項(xiàng)目,,比如hdfs/hive/hbase等有實(shí)際應(yīng)用,。(5年以上開發(fā)經(jīng)驗(yàn)者優(yōu)先);

3.兩年以上熟練編寫mapreduce代碼經(jīng)驗(yàn),有三年以上網(wǎng)絡(luò)日志分析,、etl經(jīng)驗(yàn),。熟悉日志分析框架chukwa,flume,scribe者優(yōu)先;

4.兩年以上海量數(shù)據(jù)存儲的安裝部署,、優(yōu)化,、二次開發(fā)經(jīng)驗(yàn),對大規(guī)模數(shù)據(jù)存儲,、傳輸、處理等有豐富的經(jīng)驗(yàn);

5.在數(shù)據(jù)挖掘,、數(shù)據(jù)密集型處理,、分布式計(jì)算,、網(wǎng)格計(jì)算領(lǐng)域有深入理論基礎(chǔ);

6.具有較強(qiáng)的文檔撰寫能力,較強(qiáng)的團(tuán)隊(duì)精神和合作精神,,對工作有熱情,,能承受壓力。

大數(shù)據(jù)架構(gòu)工程師是干嘛的篇七

職責(zé):

1.參與公司數(shù)據(jù)平臺系統(tǒng)規(guī)劃和架構(gòu)工作,,主導(dǎo)系統(tǒng)的架構(gòu)設(shè)計(jì)和項(xiàng)目實(shí)施,,確保項(xiàng)目質(zhì)量和關(guān)鍵性能指標(biāo)達(dá)成;

2.統(tǒng)籌和推進(jìn)制造工廠內(nèi)部數(shù)據(jù)系統(tǒng)的構(gòu)建,搭建不同來源數(shù)據(jù)之間的邏輯關(guān)系,,能夠?yàn)楣具\(yùn)營診斷,、運(yùn)營效率提升提供數(shù)據(jù)支持;

3.負(fù)責(zé)數(shù)據(jù)系統(tǒng)需求對接、各信息化系統(tǒng)數(shù)據(jù)對接,、軟件供應(yīng)商管理工作

5.根據(jù)現(xiàn)狀制定總體的數(shù)據(jù)治理方案及數(shù)據(jù)體系建立,,包括數(shù)據(jù)采集,、接入,、分類、開發(fā)標(biāo)準(zhǔn)和規(guī)范,,制定全鏈路數(shù)據(jù)治理方案;深入挖掘公司數(shù)據(jù)業(yè)務(wù),,超強(qiáng)的數(shù)據(jù)業(yè)務(wù)感知力,,挖掘數(shù)據(jù)價(jià)值,,推動數(shù)據(jù)變現(xiàn)場景的落地,,為決策及業(yè)務(wù)賦能;

6.定義不同的數(shù)據(jù)應(yīng)用場景,,推動公司的數(shù)據(jù)可視化工作,提升公司數(shù)據(jù)分析效率和數(shù)據(jù)價(jià)值轉(zhuǎn)化,。

任職要求:

1.本科以上學(xué)歷,8年以上軟件行業(yè)從業(yè)經(jīng)驗(yàn),,5年以上大數(shù)據(jù)架構(gòu)設(shè)計(jì)經(jīng)驗(yàn),,熟悉bi平臺、大數(shù)據(jù)系統(tǒng)相關(guān)技術(shù)架構(gòu)及技術(shù)標(biāo)準(zhǔn);

2.熟悉數(shù)據(jù)倉庫,、熟悉數(shù)據(jù)集市,,了解數(shù)據(jù)挖掘,、數(shù)據(jù)抽取、數(shù)據(jù)清洗,、數(shù)據(jù)建模相關(guān)技術(shù);

3.熟悉大數(shù)據(jù)相關(guān)技術(shù):hadoop,、hive,、hbase,、storm、flink,、spark,、kafka、rabbitmq;

4.熟悉制造企業(yè)信息化系統(tǒng)及相關(guān)數(shù)據(jù)庫技術(shù);

5.具備大數(shù)據(jù)平臺,、計(jì)算存儲平臺,、可視化開發(fā)平臺經(jīng)驗(yàn),,具有制造企業(yè)大數(shù)據(jù)系統(tǒng)項(xiàng)目開發(fā)或?qū)嵤┙?jīng)驗(yàn)優(yōu)先;

6.對數(shù)據(jù)敏感,,具備優(yōu)秀的業(yè)務(wù)需求分析和報(bào)告展示能力,,具備制造企業(yè)數(shù)據(jù)分析和數(shù)據(jù)洞察、大數(shù)據(jù)系統(tǒng)的架構(gòu)設(shè)計(jì)能力,,了解主流的報(bào)表工具或新興的前端報(bào)表工具;

7.有較強(qiáng)的溝通和組織協(xié)調(diào)能力,,具備結(jié)果導(dǎo)向思維,,有相關(guān)項(xiàng)目管理經(jīng)驗(yàn)優(yōu)先。

大數(shù)據(jù)架構(gòu)工程師是干嘛的篇八

職責(zé):

1,、負(fù)責(zé)公司的大數(shù)據(jù)處理框架的研發(fā)設(shè)計(jì)工作,梳理可實(shí)現(xiàn)方案和技術(shù)規(guī)范;

2,、開發(fā)、完善公司大數(shù)據(jù)平臺;參與公司離線,、實(shí)時(shí)大數(shù)據(jù)處理系統(tǒng)的設(shè)計(jì),、開發(fā),、測試及多個(gè)業(yè)務(wù)模塊的自動化集成;

3,、負(fù)責(zé)業(yè)務(wù)平臺數(shù)據(jù)統(tǒng)計(jì)分析模塊的設(shè)計(jì)與規(guī)劃;

4、負(fù)責(zé)公司產(chǎn)品研發(fā)過程中的數(shù)據(jù)及存儲設(shè)計(jì);

5,、帶領(lǐng)和培養(yǎng)團(tuán)隊(duì)完成組織分解的目標(biāo);

任職要求:

1,、統(tǒng)招本科及以上學(xué)歷,計(jì)算機(jī),、軟件工程相關(guān)專業(yè),至少8年以上工作經(jīng)驗(yàn),,5年以上大數(shù)據(jù)開發(fā)經(jīng)驗(yàn);

2、熟悉java,、hadoop、hdfs,、hive、hbase,、spark、storm,、flume等相關(guān)技術(shù)的基礎(chǔ)架構(gòu)

3,、熟悉數(shù)據(jù)倉庫,,數(shù)據(jù)算法,,分布式計(jì)算技術(shù)理論,,具有大數(shù)據(jù)整體系統(tǒng)架構(gòu)設(shè)計(jì)經(jīng)驗(yàn);

4,、熟悉linux系統(tǒng),,熟練使用shell/perl/python腳本處理問題;

5、對深度學(xué)習(xí)框架(tensorflow)和機(jī)器學(xué)習(xí)(svm 隨機(jī)深林貝葉斯等)有一定了解的優(yōu)先;

6,、能夠組織項(xiàng)目開發(fā)組協(xié)同工作,,包括團(tuán)隊(duì)溝通,、計(jì)劃,、開發(fā)環(huán)境管理等

大數(shù)據(jù)架構(gòu)工程師是干嘛的篇九

職責(zé):

1,、 負(fù)責(zé)大數(shù)據(jù)倉庫,、數(shù)據(jù)集市的規(guī)劃及實(shí)現(xiàn),,負(fù)責(zé)大數(shù)據(jù)中臺的設(shè)計(jì)和核心開發(fā)工作;

2、 負(fù)責(zé)數(shù)據(jù)基礎(chǔ)架構(gòu)和數(shù)據(jù)處理體系的升級和優(yōu)化,,不斷提升系統(tǒng)的穩(wěn)定性和效率,,為公司的業(yè)務(wù)提供大數(shù)據(jù)底層平臺的支持和保證;

3,、 大數(shù)據(jù)平臺的數(shù)據(jù)采集,、處理,、存儲以及挖掘分析的架構(gòu)實(shí)現(xiàn);

4、 研究未來數(shù)據(jù)模型和計(jì)算框架的創(chuàng)新與落地,,包括但不限于以下領(lǐng)域:大規(guī)模數(shù)據(jù)實(shí)時(shí)化,、研發(fā)模式敏捷化、數(shù)據(jù)計(jì)算框架輕量化,、數(shù)據(jù)模型組織方式業(yè)務(wù)化等方面,參與制定并實(shí)踐團(tuán)隊(duì)的技術(shù)發(fā)展路線

任職資格:

1,、 精通數(shù)據(jù)建模、數(shù)據(jù)標(biāo)準(zhǔn)管理,、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理;

2,、 有作為技術(shù)負(fù)責(zé)人系統(tǒng)化解決問題的成功案例;有海量數(shù)據(jù)實(shí)踐經(jīng)驗(yàn)優(yōu)先;

3,、 熟悉目前正在發(fā)展的大數(shù)據(jù)分布式平臺前沿技術(shù)的應(yīng)用;包括但不僅僅限于:hadoop、flink,、spark等;

4,、 性格積極樂觀,誠信,,能自我驅(qū)動,有較強(qiáng)的語言表達(dá)能力;具備強(qiáng)烈的進(jìn)取心,、求知欲及團(tuán)隊(duì)合作精神;具有良好的溝通,、團(tuán)隊(duì)協(xié)作,、計(jì)劃和創(chuàng)新的能力; 在數(shù)據(jù)業(yè)界有一定的影響力優(yōu)先,,具有風(fēng)控經(jīng)驗(yàn)背景的人優(yōu)先;

5、 具備獨(dú)立的深度思考能力,,給出結(jié)合實(shí)際情況的較為理想的技術(shù)解決方案。

大數(shù)據(jù)架構(gòu)工程師是干嘛的篇十

職責(zé):

1,、負(fù)責(zé)大數(shù)據(jù)平臺的技術(shù)選型,基于spark,、hadoop大數(shù)據(jù)平臺建設(shè)和開發(fā);

2、完成包括數(shù)據(jù)模型設(shè)計(jì),、數(shù)據(jù)采集、數(shù)據(jù)存儲等方面的大數(shù)據(jù)系統(tǒng)架構(gòu)的設(shè)計(jì)和數(shù)據(jù)層架構(gòu)設(shè)計(jì);

3,、構(gòu)建數(shù)據(jù)中臺,為多種行業(yè)應(yīng)用提供主數(shù)據(jù)(畫像標(biāo)簽/關(guān)系圖譜),、數(shù)據(jù)模型、人工智能業(yè)務(wù)算法及數(shù)據(jù)服務(wù),。

4、對海量數(shù)據(jù)處理的業(yè)務(wù)需求進(jìn)行評估和方案設(shè)計(jì),、拆分任務(wù)并指導(dǎo)工程師完成開發(fā);

5、帶領(lǐng)大數(shù)據(jù)技術(shù)團(tuán)隊(duì)提供并實(shí)現(xiàn)大數(shù)據(jù)平臺上各項(xiàng)數(shù)據(jù)分析和數(shù)據(jù)可視化的架構(gòu)設(shè)計(jì),,支撐解決方案實(shí)施。

任職要求:

1,、本科及以上學(xué)歷,,具有5年及以上大數(shù)據(jù)架構(gòu)設(shè)計(jì)和開發(fā)經(jīng)驗(yàn);2年及以上帶領(lǐng)團(tuán)隊(duì)經(jīng)驗(yàn);溝通能力強(qiáng)。在大型互聯(lián)網(wǎng)企業(yè)從事大數(shù)據(jù)架構(gòu)設(shè)計(jì)者優(yōu)先考慮;有分布式大型商業(yè)軟件系統(tǒng)設(shè)計(jì)經(jīng)驗(yàn),、主導(dǎo)過大型商業(yè)軟件的架構(gòu)設(shè)計(jì)并取得過市場商業(yè)成功者優(yōu)先考慮;

2、熟悉整個(gè)大數(shù)據(jù)的完整處理流程,,包括數(shù)據(jù)的采集、清洗,、預(yù)處理、存儲,、分析挖據(jù)、機(jī)器學(xué)習(xí)和數(shù)據(jù)可視化;

3,、精通oracle/mysql/postgresql/greenplum/mongodb等其中至少一種主流數(shù)據(jù)庫的使用,并能進(jìn)行性能調(diào)優(yōu);

4,、具備優(yōu)秀的團(tuán)隊(duì)意識和溝通能力,學(xué)習(xí)能力和主動性強(qiáng),,具有鉆研精神,,充滿激情,,樂于接受挑戰(zhàn)。

大數(shù)據(jù)架構(gòu)工程師是干嘛的篇十一

職責(zé):

1. 負(fù)責(zé)設(shè)計(jì)企業(yè)級大數(shù)據(jù)平臺的整體架構(gòu),,從技術(shù)層面制定清晰的大數(shù)據(jù)產(chǎn)品與系統(tǒng)技術(shù)架構(gòu),,并負(fù)責(zé)實(shí)現(xiàn)關(guān)鍵技術(shù)和產(chǎn)品。

2. 負(fù)責(zé)設(shè)計(jì)具有創(chuàng)新價(jià)值的大數(shù)據(jù)底層平臺,、大數(shù)據(jù)上層應(yīng)用系統(tǒng)等,帶領(lǐng)團(tuán)隊(duì)完成有質(zhì)變的技術(shù)解決方案,。

3. 負(fù)責(zé)組織同事研究行內(nèi)最前沿的技術(shù)發(fā)展方向,突破現(xiàn)有的技術(shù)難題,。

4. 負(fù)責(zé)研究院對外項(xiàng)目合作協(xié)調(diào)與支持,編寫項(xiàng)目建設(shè)方案及后期項(xiàng)目建設(shè)支持,。

任職要求:

1. 碩士及以上學(xué)歷,,計(jì)算機(jī)相關(guān)專業(yè)。

2. java基礎(chǔ)扎實(shí),不少于8年的一線開發(fā)經(jīng)驗(yàn),,精通spring boot/mybatis/restful api的開發(fā)與管理. 熟悉reactjs/angular/vue之一前端開發(fā)技術(shù),熟悉maven或ant.,,熟悉python語言開發(fā)加分。

3. 不少于4年大數(shù)據(jù)的直接研發(fā)經(jīng)驗(yàn),,精通hadoop/spark系統(tǒng),,有hands-on的架構(gòu)設(shè)計(jì),、性能調(diào)優(yōu),、開發(fā)經(jīng)驗(yàn),。有mongodb、kafka,、hbase/cassandra/storm/hive 等系統(tǒng)的開發(fā)經(jīng)驗(yàn)。

4. 掌握分布式系統(tǒng)原理,,對分布式存儲、流式計(jì)算,、消息隊(duì)列中的一項(xiàng)或多項(xiàng)有深入的理解和認(rèn)識。

5. 熟悉分布式系統(tǒng)的監(jiān)控,、運(yùn)維、故障恢復(fù),,高可用原理和設(shè)計(jì)理念。

6. 算法基礎(chǔ)扎實(shí),,熟悉常見的數(shù)據(jù)結(jié)構(gòu),掌握大規(guī)模高并發(fā)訪問,、大數(shù)據(jù)開發(fā)等處理經(jīng)驗(yàn);熟練的linux系統(tǒng), 網(wǎng)絡(luò), 內(nèi)存和存儲等方面知識,。

7. 必須要有千萬級別的項(xiàng)目管理經(jīng)驗(yàn),,包括但不限于前期需求溝通,,建設(shè)方案編寫,,中期項(xiàng)目實(shí)施,,進(jìn)度匯報(bào),,后期項(xiàng)目維護(hù),。

大數(shù)據(jù)架構(gòu)工程師是干嘛的篇十二

職責(zé):

1、負(fù)責(zé)企業(yè)大數(shù)據(jù)平臺的基礎(chǔ)建設(shè),、管理及制定拓展規(guī)劃;

2,、負(fù)責(zé)大數(shù)據(jù)平臺相關(guān)自動化服務(wù)工具的設(shè)計(jì),、開發(fā);

3,、參與hadoop,、hbase、spark等核心平臺組件的開發(fā),、優(yōu)化;

4、對平臺特殊場景化的數(shù)據(jù)應(yīng)用制定相關(guān)實(shí)踐方案;

5,、大數(shù)據(jù)團(tuán)隊(duì)的搭建,。

任職資格:

1,、統(tǒng)招本科以上學(xué)歷,計(jì)算機(jī)等相關(guān)專業(yè),,5年以上工作經(jīng)驗(yàn);

2、具有hadoop等大規(guī)模集群管理經(jīng)驗(yàn),、海量(pb)數(shù)據(jù)處理經(jīng)驗(yàn);

3,、精通hadoop,、hive,、hbase等離線平臺相關(guān)組件的原理機(jī)制;

4,、了解或熟悉storm/spark/redis/kafka/mongodb等分布式系統(tǒng);

5,、熟悉高并發(fā)、分布式開發(fā)等相關(guān)知識,,具有后端服務(wù)優(yōu)化相關(guān)經(jīng)驗(yàn);

6、熟悉爬蟲常用框架以及反爬技術(shù);

7,、具有良好的溝通能力、分析問題與攻關(guān)問題的能力;

8,、有責(zé)任心,工作積極,,對新領(lǐng)域新技術(shù)有熱情。

大數(shù)據(jù)架構(gòu)工程師是干嘛的篇十三

職責(zé):

1.負(fù)責(zé)數(shù)據(jù)倉庫建設(shè),,基于數(shù)據(jù)驅(qū)動構(gòu)建企業(yè)級數(shù)據(jù)模型,根據(jù)架構(gòu)設(shè)計(jì)進(jìn)行各層數(shù)據(jù)模型開發(fā),。

2.面向pb級別超大規(guī)模數(shù)據(jù)處理和查詢需求,設(shè)計(jì)適合業(yè)務(wù)變化的合理的多維數(shù)據(jù)分析系統(tǒng)架構(gòu),,滿足多樣性需求,。

3.構(gòu)建設(shè)計(jì)良好的數(shù)據(jù)流、調(diào)度系統(tǒng),、查詢引擎、監(jiān)控系統(tǒng),,保證系統(tǒng)穩(wěn)定高效運(yùn)行,以實(shí)現(xiàn)數(shù)據(jù)的最大價(jià)值,。

4.指導(dǎo)團(tuán)隊(duì)成員開展數(shù)據(jù)倉庫建設(shè)。

5.參與重點(diǎn)項(xiàng)目的評審,,參與企業(yè)數(shù)據(jù)管理體系建設(shè)。

任職要求:

1.統(tǒng)招本科及以上學(xué)歷,。

2.從事數(shù)據(jù)倉庫領(lǐng)域至少5年以上,熟悉數(shù)據(jù)倉庫模型設(shè)計(jì)與etl開發(fā)經(jīng)驗(yàn) ,,掌握kimball的維度建模設(shè)計(jì)方法,具備海量數(shù)據(jù)加工處理(etl)相關(guān)經(jīng)驗(yàn) ,。

3.具有一定數(shù)據(jù)模型和數(shù)據(jù)架構(gòu)基礎(chǔ),,熟悉hadoop\hive和常用數(shù)據(jù)庫,。

4. 精通sql,有一定的sql性能調(diào)優(yōu)經(jīng)驗(yàn),,熟悉hive sql的開發(fā),。

5.具有管理團(tuán)隊(duì)開發(fā)經(jīng)驗(yàn),具備良好的組織能力,、協(xié)調(diào)能力及項(xiàng)目管理能力,。

6.具有較好的文字功底及語言表達(dá)能力,,能夠快速,、準(zhǔn)確地理解需求。

7.具有專研,、快速學(xué)習(xí)和創(chuàng)新精神,,具備獨(dú)立分析問題和解決問題的能力,。

8.具有責(zé)任心,,時(shí)間觀念強(qiáng),工作獨(dú)立性強(qiáng),,有良好的團(tuán)隊(duì)合作精神,。

9.全日制普通本科畢業(yè),。

全文閱讀已結(jié)束,,如果需要下載本文請點(diǎn)擊

下載此文檔
a.付費(fèi)復(fù)制
付費(fèi)獲得該文章復(fù)制權(quán)限
特價(jià):5.99元 10元
微信掃碼支付
已付款請點(diǎn)這里
b.包月復(fù)制
付費(fèi)后30天內(nèi)不限量復(fù)制
特價(jià):9.99元 10元
微信掃碼支付
已付款請點(diǎn)這里 聯(lián)系客服