雖然大數(shù)據(jù)是一個泛泛的概念詞,但是關(guān)于大數(shù)據(jù),關(guān)于大數(shù)據(jù)處理分析的話題近來持續(xù)升溫,現(xiàn)在基本成了新一輪工業(yè)革命級別的話題。
大數(shù)據(jù)是什么,作為數(shù)據(jù)采集團隊 ,我們很長的時間里一直也在思考,什么是大數(shù)據(jù),大數(shù)據(jù)的前景和價值在哪里。
這篇文章里,我會跟大家一起分享我的看法以及各種有趣的內(nèi)容和資源,它們關(guān)于:
1. 什么是大數(shù)據(jù)
2. 大數(shù)據(jù)的實踐
3. 大數(shù)據(jù)的應(yīng)用場景
作者:造數(shù)科技
來源:知乎
【一、什么是大數(shù)據(jù)】
先聽聽行家的說法:
大數(shù)據(jù)就是多,就是多。原來的設(shè)備存不下、算不動。 ——啪菠蘿·畢加索
曾經(jīng)人們以為最愛吃的派都是蘋果派,不過當(dāng)你有了更細(xì)致的數(shù)據(jù),你會發(fā)現(xiàn),蘋果派受歡迎其實是一種妥協(xié)的結(jié)果:蘋果派是每個人第二喜歡的口味。
拿到小尺寸派的數(shù)據(jù)以后你更發(fā)現(xiàn),其實蘋果派只能排到第四,第五位的樣子了。
你有了更多數(shù)據(jù),你就能看到之前你看不到的信息。
大數(shù)據(jù)是大數(shù)據(jù)的采集
大數(shù)據(jù)行業(yè),本身是依托于數(shù)據(jù)源存在的服務(wù)性行業(yè)。
大數(shù)據(jù)最根本之處在于信息收集方式出現(xiàn)了重大變化與革新。大數(shù)據(jù)的出現(xiàn)與大量信息直接在網(wǎng)絡(luò)呈現(xiàn)關(guān)系非常緊密。
微博、天貓、淘寶、微信等等都直接產(chǎn)生了大量包括定位、消息記錄、消費記錄、評價、閱讀等等殊為龐大的信息,可以說互聯(lián)網(wǎng)企業(yè)都自然的帶有數(shù)據(jù)企業(yè)的標(biāo)簽。不過如果我們從數(shù)據(jù)的源頭看的更仔細(xì)一些,還是會發(fā)現(xiàn),其實很多數(shù)據(jù)依然是有巨大的采集與歸類的需求。
現(xiàn)在人人都說大數(shù)據(jù),但其實大家說的是 facebook,twitter,streaming 等等站點上每天產(chǎn)生的信息,做大數(shù)據(jù)的人呢,會覺得我們有的數(shù)據(jù)量實在太大了。
許多有效的數(shù)據(jù)還完全不在網(wǎng)絡(luò)上,要依靠原始的方法來收集。數(shù)據(jù)方面還有很多基本層面的問題在非常多的領(lǐng)域非常明顯。
【二、大數(shù)據(jù)的實踐】
最近看到個例子,說pokemon go 帶給玩家運動量上的變化:
1、應(yīng)用中的數(shù)據(jù)分析示例:·
六個月以后,大部分pokemon go 的玩家的運動量逐漸和 non-player基本一致了。
看來確實是一個能用相當(dāng)效果的游戲。
2、交通狀況大數(shù)據(jù)分析示例:
【三、大數(shù)據(jù)的應(yīng)用場景】
如今,在政策上,國家戰(zhàn)略層面上,大數(shù)據(jù)受到的重視程度都越來越高。
應(yīng)用場景上,現(xiàn)在分布在:
- 供應(yīng)鏈和渠道分析&優(yōu)化
- 定價分析與優(yōu)化
- 欺詐行為分析&檢測
- 設(shè)備管理
- 社交媒體分析&客戶分析
《大數(shù)據(jù)時代》一書作者維克托認(rèn)為大數(shù)據(jù)時代有三大轉(zhuǎn)變:
第一,我們可以分析更多的數(shù)據(jù),有時候甚至可以處理和某個特別現(xiàn)象相關(guān)的所有數(shù)據(jù),而不是依賴于隨機采樣。更高的精確性可使我們發(fā)現(xiàn)更多的細(xì)節(jié)。
第二,研究數(shù)據(jù)如此之多,以至于我們不再熱衷于追求精確度。適當(dāng)忽略微觀層面的精確度,將帶來更好的洞察力和更大的商業(yè)利益。
第三,不再熱衷于尋找因果關(guān)系,而是事物之間的相關(guān)關(guān)系。例如,不去探究機票價格變動的原因,但是關(guān)注買機票的最佳時機。”大數(shù)據(jù)打破了企業(yè)傳統(tǒng)數(shù)據(jù)的邊界,改變了過去商業(yè)智能僅僅依靠企業(yè)內(nèi)部業(yè)務(wù)數(shù)據(jù)的局面,而大數(shù)據(jù)則使數(shù)據(jù)來源更加多樣化,不僅包括企業(yè)內(nèi)部數(shù)據(jù),也包括企業(yè)外部數(shù)據(jù),尤其是和消費者相關(guān)的數(shù)據(jù)
據(jù)野史記載,中亞古國花剌子模有一古怪的風(fēng)俗,凡是給君王帶來好消息的信使,就會得到提升,給君王帶來壞消息的人則會被送去喂老虎。從前的人喜歡批評這位君王的天真品性,以為獎勵帶來好消息的人,就能鼓勵好消息的到來,處死帶來壞消息的人,就能根絕壞消息。
在今天這個信息爆炸的時代,我們不一定能讓信使一定送來好消息,但你可以讓我們的爬蟲定時給你送來最有用最合你需求的信息。
【聯(lián)系青藍(lán)咨詢】
地址: 深圳市南山區(qū)高新南一道06號TCL大廈B座3樓309室 (公交站:大沖 地鐵站:一號線高新園C出口)
郵編:518057
電話:0755-86950769
網(wǎng)址:http://www.qhqingxinjp.com