大數(shù)據(jù)最典型,人們最熟悉的應(yīng)用場景就是精準(zhǔn)營銷,根據(jù)用戶既往的行為數(shù)據(jù)做出分析,然后做出預(yù)測,以此輔助企業(yè)的營銷過程,除此之外,大數(shù)據(jù)還能做什么?還有哪些應(yīng)用場景呢?
Splunk是一家特別的大數(shù)據(jù)分析服務(wù)公司,它的數(shù)據(jù)分析與傳統(tǒng)的數(shù)據(jù)處理的方式有所不同。
Splunk的工作對象主要是機(jī)器數(shù)據(jù),所謂機(jī)器數(shù)據(jù)是指IT環(huán)境中包括操作系統(tǒng),數(shù)據(jù)庫應(yīng)用,ERP,移動終端、電腦、服務(wù)器、路由器等任何設(shè)備上產(chǎn)生的數(shù)據(jù),Splunk可基于任何來源,任何類型,任何數(shù)量的數(shù)據(jù)源,進(jìn)行關(guān)聯(lián)處理,關(guān)聯(lián)分析最后為用戶服務(wù)。
比如,Splunk可以提供智能化的IT的運(yùn)維,利用大數(shù)據(jù)精準(zhǔn)定位用戶的問題,快速處理問題,用AIOps來解決運(yùn)維問題;Splunk可以提供成面,成體系的安全服務(wù),通過分析來發(fā)現(xiàn)未知的安全威脅;Splunk的業(yè)務(wù)分析服務(wù)可用來改善產(chǎn)品和用戶體驗(yàn),監(jiān)控用戶的使用數(shù)據(jù),使用APP的數(shù)據(jù),以此來改善他的產(chǎn)品和服務(wù)。
在實(shí)際應(yīng)用中,Splunk有很多實(shí)踐案例可以分享。
納斯達(dá)克用Splunk做內(nèi)部外部的威脅分析,作為一家金融交易機(jī)構(gòu),安全是至關(guān)重要的。事實(shí)上,納斯達(dá)克與許多企業(yè)一樣,有很多來自于外部內(nèi)部的安全威脅。比如系統(tǒng)會發(fā)現(xiàn)離職員工訪問企業(yè)賬戶的異常,結(jié)合其他相關(guān)數(shù)據(jù)判定行為是否正常,比如防止人員流動造成的IP知識產(chǎn)權(quán)流失,或者及早發(fā)現(xiàn)IP知識產(chǎn)權(quán)流失的問題。
國內(nèi)某大型金融機(jī)構(gòu)使用Splunk做運(yùn)維。一方面,IT架構(gòu)越來復(fù)雜,故障定位也越來越難。交換機(jī)報錯找交換機(jī),數(shù)據(jù)讀寫錯誤找數(shù)據(jù)庫,交換機(jī)的報錯可能是數(shù)據(jù)庫造成的,有些東西沒法一下找到問題,Splunk平臺能對所有數(shù)據(jù)進(jìn)行關(guān)聯(lián)分析,能清楚定位報警。一方面,100個報警提示其實(shí)可能只有一個真正問題,Splunk關(guān)聯(lián)分析之后能做告警壓縮。報警壓縮的價值在哪兒?一天幾十萬條報警要怎么處理呢?有的人外包,有的人認(rèn)為刪掉一部分,面對茫茫多的報警信息,處理起來非常麻煩,想解決的話,只有加派人手了,這是成本。
制造業(yè)里的寶馬新能源車也在用Splunk,寶馬新能源車的設(shè)計研發(fā)模擬交付用戶跟蹤都在用Splunk,用前期記錄的數(shù)據(jù)來做流程返工,迅速找出問題的所在,Splunk可以監(jiān)控所有電動車的使用過程,通過對所有電動車行駛規(guī)矩,停留的地點(diǎn),停留時間的分析判斷在哪兒放充電站。寶馬會利用收集到的各種信息來分析和改善產(chǎn)品。
Splunk幫特斯拉監(jiān)控特斯拉汽車從研發(fā)到生產(chǎn),到后續(xù)的交付,到用戶的使用,信息的采集的全過程,能收集到用戶的駕駛習(xí)慣、踩剎車的習(xí)慣、打方向盤的習(xí)慣,能記錄開車的頻率、習(xí)慣的速度,給出一些提醒建議,幫助改善產(chǎn)品,實(shí)現(xiàn)快速迭代。
Splunk能分析的數(shù)據(jù)非常全,然后能對數(shù)據(jù)做全面的關(guān)聯(lián),這就是Splunk最大的特點(diǎn)了。
天學(xué)網(wǎng)是一家以智能學(xué)習(xí)產(chǎn)品和平臺服務(wù)為主的教育服務(wù)的公司,每天有幾百萬付費(fèi)用戶,這些用戶非常重視使用體驗(yàn),這為運(yùn)營提出了很多挑戰(zhàn),因?yàn)橛脩魧τ阱e誤基本上是零容忍。
天學(xué)網(wǎng)副總裁劉文(左)和Splunk 中國區(qū)總經(jīng)理嚴(yán)立忠(右)
天學(xué)網(wǎng)副總裁劉文表示,故障出現(xiàn)后的響應(yīng)時間只有分鐘級,以往小時級的響應(yīng)是完全不行的。
為了提升保障用戶的使用體驗(yàn),六年前開始,天學(xué)網(wǎng)自主開發(fā)了一部分監(jiān)控系統(tǒng),也有一部分使用了開源的監(jiān)控系統(tǒng),所以,天學(xué)網(wǎng)本身其實(shí)有技術(shù)積累的。
盡管如此,但是面對一些具體的問題時也是無從下手,或者說自己投入辛辛苦苦做出來的東西效果達(dá)不到預(yù)期,或者達(dá)到預(yù)期后的代價非常高。
大約從三年前開始,天學(xué)網(wǎng)開始使用Splunk的方案。天學(xué)網(wǎng)副總裁劉文這樣說道,我從當(dāng)前60分水平想要做到80分的話,需要花很大代價,我現(xiàn)在用Splunk的方案能做到90分以上,而代價遠(yuǎn)比我自己做的要小。Splunk的使用體驗(yàn)讓劉文深刻體會到了什么叫術(shù)業(yè)有專攻。
劉文將與Splunk的合作過程總結(jié)為三個需求階段
據(jù)了解,天學(xué)網(wǎng)跟Splunk的合作不到三年,當(dāng)前能做到快速,定位和解決問題,這是第一階段,在Splunk的幫助下,天學(xué)網(wǎng)的技術(shù)團(tuán)隊(duì)得以能專注于研究教學(xué)技術(shù),將智能技術(shù)注入其中,下一階段,天學(xué)網(wǎng)想在問題出現(xiàn)之前解決問題。
評論