在工作崗位上,大數(shù)據(jù)工程師需要基于Hadoop,Spark等構(gòu)建數(shù)據(jù)分析平臺(tái),進(jìn)行設(shè)計(jì)、開(kāi)發(fā)分布式計(jì)算業(yè)務(wù)。負(fù)責(zé)大數(shù)據(jù)平臺(tái)(Hadoop,HBase,Spark等)集群環(huán)境的搭建,性能調(diào)優(yōu)和日常維護(hù)。負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì),數(shù)據(jù)ETL的設(shè)計(jì)、開(kāi)發(fā)和性能優(yōu)化。參與構(gòu)建大數(shù)據(jù)平臺(tái),依托大數(shù)據(jù)技術(shù)建設(shè)用戶畫(huà)像。
除開(kāi)以上是需要負(fù)責(zé)處理的工作,還需要負(fù)責(zé)分析新的數(shù)據(jù)需求,完成數(shù)據(jù)處理的設(shè)計(jì)(文檔)和實(shí)現(xiàn)。對(duì)大數(shù)據(jù)應(yīng)用產(chǎn)品設(shè)計(jì)及解決方案設(shè)計(jì),通過(guò)大數(shù)據(jù)挖掘用戶需求。負(fù)責(zé)數(shù)據(jù)處理程序設(shè)計(jì)框架改善,數(shù)據(jù)處理性能優(yōu)化, 系統(tǒng)數(shù)據(jù)處理的能力提高等等。
能夠純熟處理以上工作的大數(shù)據(jù)工程師,月薪輕松突破15K不難。當(dāng)下行業(yè)極缺人才,一名合格的大數(shù)據(jù)工程師是諸多企業(yè)爭(zhēng)搶的對(duì)象,并且開(kāi)出來(lái)的薪資都不菲。以北京為例,大數(shù)據(jù)工程師的起步薪資,都是10000起,隨著工作能力的提升,薪資待遇也會(huì)跟著提升。
-
工程師
+關(guān)注
關(guān)注
59文章
1596瀏覽量
70381 -
大數(shù)據(jù)
+關(guān)注
關(guān)注
64文章
8996瀏覽量
142471
發(fā)布評(píng)論請(qǐng)先 登錄
學(xué)習(xí)物聯(lián)網(wǎng)可以做什么工作?

硬件工程師面試必會(huì):10個(gè)核心考點(diǎn)#硬件設(shè)計(jì) #硬件工程師 #電路設(shè)計(jì) #電路設(shè)計(jì)
測(cè)試工程師都在用的Linux命令清單(建議收藏)



硬件工程師看了只會(huì)找個(gè)角落默默哭泣#硬件工程師 #MDD #MDD辰達(dá)半導(dǎo)體 #產(chǎn)品經(jīng)理 #軟件工程師

(仰天長(zhǎng)嘯)為什么受傷的總是硬件工程師...#MDD#MDD辰達(dá)半導(dǎo)體 #電子工程師




硬件工程師的終極幻想:焊板子焊上人生巔峰!#半導(dǎo)體器件 #硬件工程師 #MDD辰達(dá)半導(dǎo)體

硬件工程師工作前VS工作后!抱歉!是我想的太簡(jiǎn)單了!# #電工 #電子愛(ài)好者

不同時(shí)期的硬件工程師,最怕發(fā)生的事 #電子工程師 #硬件工程師 #內(nèi)容過(guò)于真實(shí) #YXC晶振 #揚(yáng)興科技
為什么嵌入式驅(qū)動(dòng)開(kāi)發(fā)工程師可以拿高薪?

當(dāng)硬件工程師穿越到霸總劇: 以他性格肯定忍不到第二集? #硬件工程師 #電路設(shè)計(jì) #晶振 #揚(yáng)興科技

評(píng)論