圖文直播，標(biāo)簽，大數(shù)據(jù)應(yīng)用。數(shù)字經(jīng)濟(jì)，大數(shù)據(jù)分析。
為讀者提供專(zhuān)業(yè)的大數(shù)據(jù)信息交流平臺(tái)。專(zhuān)注大數(shù)據(jù)、同時(shí)涉及移動(dòng)互聯(lián)網(wǎng)、云計(jì)算等領(lǐng)域，征信、數(shù)據(jù)觀(guān)是一個(gè)大數(shù)據(jù)新聞門(mén)戶(hù)網(wǎng)站，大數(shù)據(jù)分析和大數(shù)據(jù)應(yīng)用。
大數(shù)據(jù)是繼云計(jì)算、物聯(lián)網(wǎng)之后IT產(chǎn)業(yè)又一次顛復(fù)性的技術(shù)變革。云計(jì)算主要為數(shù)據(jù)資產(chǎn)提供了保管、訪(fǎng)問(wèn)的場(chǎng)所和渠道，而數(shù)據(jù)才是真正有價(jià)值的資產(chǎn)。企業(yè)內(nèi)部的經(jīng)營(yíng)交易信息、物聯(lián)網(wǎng)世界中的商品物流信息，互聯(lián)網(wǎng)世界中的人與人交互信息、位置信息等，其數(shù)量將遠(yuǎn)遠(yuǎn)超越現(xiàn)有企業(yè)IT架構(gòu)和基礎(chǔ)設(shè)施的承載能力，實(shí)時(shí)性要求也將大大超越現(xiàn)有的計(jì)算能力。如何盤(pán)活這些數(shù)據(jù)資產(chǎn)，使其為國(guó)家治理、企業(yè)決策乃至個(gè)人生活服務(wù)，是大數(shù)據(jù)的核心議題，也是云計(jì)算內(nèi)在的靈魂和必然的升級(jí)方向。
大數(shù)據(jù)時(shí)代網(wǎng)民和消費(fèi)者的界限正在消弭，企業(yè)的疆界變得模糊，數(shù)據(jù)成為核心的資產(chǎn)，并將深刻影響企業(yè)的業(yè)務(wù)模式，甚至重構(gòu)其文化和組織。因此，大數(shù)據(jù)對(duì)國(guó)家治理模式、對(duì)企業(yè)的決策、組織和業(yè)務(wù)流程、對(duì)個(gè)人生活方式都將產(chǎn)生巨大的影響。如果不能利用大數(shù)據(jù)更加貼近消費(fèi)者、深刻理解需求、高效分析信息并作出預(yù)判，所有傳統(tǒng)的產(chǎn)品公司都只能淪為新型用戶(hù)平臺(tái)級(jí)公司的附庸，其衰落不是管理能扭轉(zhuǎn)的。
因此，大數(shù)據(jù)時(shí)代將引發(fā)新一輪信息化投資和建設(shè)熱潮。據(jù)IDC預(yù)測(cè)，到2020年全球?qū)⒖偣矒碛?5ZB的數(shù)據(jù)量，而麥肯錫則預(yù)測(cè)未來(lái)大數(shù)據(jù)產(chǎn)品在三大行業(yè)的應(yīng)用就將產(chǎn)生7千億美元的潛在市場(chǎng)，未來(lái)中國(guó)大數(shù)據(jù)產(chǎn)品的潛在市場(chǎng)規(guī)模有望達(dá)到1.57萬(wàn)億元，給IT行業(yè)開(kāi)拓了一個(gè)新的黃金時(shí)代。數(shù)據(jù)處理技術(shù)和設(shè)備提供商、IT系統(tǒng)咨詢(xún)和ERP/CRM/BI改造服務(wù)商、智能化和人機(jī)交互應(yīng)用以及信息安全提供商將獲巨大需求，相應(yīng)公司將獲得機(jī)會(huì)。
當(dāng)前我們還處在大數(shù)據(jù)時(shí)代的前夜，預(yù)計(jì)今明兩年將是大數(shù)據(jù)市場(chǎng)的培育期，2014年以后大數(shù)據(jù)產(chǎn)品將會(huì)形成業(yè)績(jī)。由于國(guó)際巨頭在硬件層和基礎(chǔ)軟件層壟斷優(yōu)勢(shì)明顯，本土企業(yè)將主要依靠對(duì)客戶(hù)需求的了解和客戶(hù)資源優(yōu)勢(shì)，以及本地化服務(wù)的優(yōu)勢(shì)，在應(yīng)用軟件層分得蛋糕，擁有大數(shù)據(jù)處理、挖掘技術(shù)、數(shù)據(jù)分析人才以及數(shù)據(jù)資產(chǎn)的公司值得看好。
對(duì)于“大數(shù)據(jù)”（Big data）研究機(jī)構(gòu)Gartner給出了這樣的定義。“大數(shù)據(jù)”是需要新處理模式才能具有更強(qiáng)的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力的海量、高增長(zhǎng)率和多樣化的信息資產(chǎn)。
根據(jù)維基百科的定義，大數(shù)據(jù)是指無(wú)法在可承受的時(shí)間范圍內(nèi)用常規(guī)軟件工具進(jìn)行捕捉、管理和處理的數(shù)據(jù)集合。
大數(shù)據(jù)技術(shù)的戰(zhàn)略意義不在于掌握龐大的數(shù)據(jù)信息，而在于對(duì)這些含有意義的數(shù)據(jù)進(jìn)行專(zhuān)業(yè)化處理。換言之，如果把大數(shù)據(jù)比作一種產(chǎn)業(yè)，那么這種產(chǎn)業(yè)實(shí)現(xiàn)盈利的關(guān)鍵，在于提高對(duì)數(shù)據(jù)的“加工能力”，通過(guò)“加工”實(shí)現(xiàn)數(shù)據(jù)的“增值”。
從技術(shù)上看，大數(shù)據(jù)與云計(jì)算的關(guān)系就像一枚硬幣的正反面一樣密不可分。大數(shù)據(jù)必然無(wú)法用單臺(tái)的計(jì)算機(jī)進(jìn)行處理，必須采用分布式架構(gòu)。它的特色在于對(duì)海量數(shù)據(jù)進(jìn)行分布式數(shù)據(jù)挖掘，但它必須依托云計(jì)算的分布式處理、分布式數(shù)據(jù)庫(kù)和云存儲(chǔ)、虛擬化技術(shù)。
隨著云時(shí)代的來(lái)臨，大數(shù)據(jù)（Big data）也吸引了越來(lái)越多的關(guān)注。《著云臺(tái)》的分析師團(tuán)隊(duì)認(rèn)為，大數(shù)據(jù)（Big data）通常用來(lái)形容一個(gè)公司創(chuàng)造的大量非結(jié)構(gòu)化數(shù)據(jù)和半結(jié)構(gòu)化數(shù)據(jù)，這些數(shù)據(jù)在下載到關(guān)系型數(shù)據(jù)庫(kù)用于分析時(shí)會(huì)花費(fèi)過(guò)多時(shí)間和金錢(qián)。大數(shù)據(jù)分析常和云計(jì)算聯(lián)系到一起，因?yàn)閷?shí)時(shí)的大型數(shù)據(jù)集分析需要像MapReduce一樣的框架來(lái)向數(shù)十、數(shù)百或甚至數(shù)千的電腦分配工作。
大數(shù)據(jù)需要特殊的技術(shù)，以有效地處理大量的容忍經(jīng)過(guò)時(shí)間內(nèi)的數(shù)據(jù)。適用于大數(shù)據(jù)的技術(shù)，包括大規(guī)模并行處理（MPP）數(shù)據(jù)庫(kù)、數(shù)據(jù)挖掘電網(wǎng)、分布式文件系統(tǒng)、分布式數(shù)據(jù)庫(kù)、云計(jì)算平臺(tái)、互聯(lián)網(wǎng)和可擴(kuò)展的存儲(chǔ)系統(tǒng)。
最小的基本單位是bit，按順序給出所有單位：bit、Byte、KB、MB、GB、TB、PB、EB、ZB、YB、BB、NB、DB。
它們按照進(jìn)率1024（2的十次方）來(lái)計(jì)算：
1 Byte =8 bit
1 KB = 1，024 Bytes = 8192 bit
1 MB = 1，024 KB = 1，048，576 Bytes
1 GB = 1，024 MB = 1，048，576 KB
1 TB = 1，024 GB = 1，048，576 MB
1 PB = 1，024 TB = 1，048，576 GB
1 EB = 1，024 PB = 1，048，576 TB
1 ZB = 1，024 EB = 1，048，576 PB
1 YB = 1，024 ZB = 1，048，576 EB
1 BB = 1，024 YB = 1，048，576 ZB
1 NB = 1，024 BB = 1，048，576 YB
1 DB = 1，024 NB = 1，048，576 BB
1887–1890年
美國(guó)統(tǒng)計(jì)學(xué)家赫爾曼·霍爾瑞斯為了統(tǒng)計(jì)1890年的人口普查數(shù)據(jù)發(fā)明了一臺(tái)電動(dòng)器來(lái)讀取卡片上的洞數(shù)，該設(shè)備讓美國(guó)用一年時(shí)間就完成了原本耗時(shí)8年的人口普查活動(dòng)，由此在全球范圍內(nèi)引發(fā)了數(shù)據(jù)處理的新紀(jì)元。
1935–1937年
美國(guó)總統(tǒng)富蘭克林·羅斯福利用社會(huì)保障法開(kāi)展了美國(guó)政府最雄心勃勃的一項(xiàng)數(shù)據(jù)收集項(xiàng)目，IBM最終贏(yíng)得競(jìng)標(biāo)，即需要整理美國(guó)的2600萬(wàn)個(gè)員工和300萬(wàn)個(gè)雇主的記錄。共和黨總統(tǒng)候選人阿爾夫蘭登scoffs嘲笑地說(shuō)，“要整理如此繁多的職工檔案，還必須而調(diào)用大規(guī)模的現(xiàn)場(chǎng)調(diào)查人員去核實(shí)那些信息不完整的人員記錄。”
1943年
一家英國(guó)工廠(chǎng)為了破譯二戰(zhàn)期間的納粹密碼，讓工程師開(kāi)發(fā)了系列開(kāi)創(chuàng)性的能進(jìn)行大規(guī)模數(shù)據(jù)處理的機(jī)器，并使用了*臺(tái)可編程的電子計(jì)算機(jī)進(jìn)行運(yùn)算。該計(jì)算機(jī)被命名為“巨人”，為了找出攔截信息中的潛在模式，它以每秒鐘5000字符的速度讀取紙卡——將原本需要耗費(fèi)數(shù)周時(shí)間才能完成的工作量壓縮到了幾個(gè)小時(shí)。破譯德國(guó)部隊(duì)前方陣地的信息以后，幫助盟軍成功登陸了諾曼底。
1997年
美國(guó)宇航局研究員邁克爾·考克斯和大衛(wèi)·埃爾斯沃斯首次使用“大數(shù)據(jù)”這一術(shù)語(yǔ)來(lái)描述20世紀(jì)90年代的挑戰(zhàn)：超級(jí)計(jì)算機(jī)生成大量的信息——在考克斯和埃爾斯沃斯按案例中，模擬飛機(jī)周?chē)臍饬鳌遣荒鼙惶幚砗涂梢暬摹?shù)據(jù)集通常之大，超出了主存儲(chǔ)器、本地磁盤(pán)，甚至遠(yuǎn)程磁盤(pán)的承載能力。”他們稱(chēng)之為“大數(shù)據(jù)問(wèn)題。”
2002年
在9/11襲擊后，美國(guó)政府為阻止恐怖主義已經(jīng)涉足大規(guī)模數(shù)據(jù)挖掘。前國(guó)家安全顧問(wèn)約翰·波因德克斯特領(lǐng)導(dǎo)國(guó)防部整合現(xiàn)有政府的數(shù)據(jù)集，組建一個(gè)用于篩選通信、犯罪、教育、金融、醫(yī)療和旅行等記錄來(lái)識(shí)別可疑人的大數(shù)據(jù)庫(kù)。一年后國(guó)會(huì)因擔(dān)憂(yōu)公民自由權(quán)而停止了這一項(xiàng)目。
2004年
9/11委員會(huì)呼吁反恐機(jī)構(gòu)應(yīng)統(tǒng)一組建“一個(gè)基于網(wǎng)絡(luò)的信息共享系統(tǒng)”，以便能快處理應(yīng)接不暇的數(shù)據(jù)。到2010年，美國(guó)國(guó)家安全局的30000名員工將攔截和存儲(chǔ)17億年電子郵件、電話(huà)和其它通訊日?qǐng)?bào)。與此同時(shí)，零售商積累關(guān)于客戶(hù)購(gòu)物和個(gè)人習(xí)慣的大量數(shù)據(jù)，沃爾瑪自吹已擁有一個(gè)容量為460字節(jié)的緩存器——比當(dāng)時(shí)互聯(lián)網(wǎng)上的數(shù)據(jù)量還要多一倍。
2007–2008年
隨著社交網(wǎng)絡(luò)的激增，技術(shù)博客和專(zhuān)業(yè)人士為“大數(shù)據(jù)” 概念注入新的生機(jī)。“當(dāng)前世界范圍內(nèi)已有的一些其他工具將被大量數(shù)據(jù)和應(yīng)用算法所取代”。《連線(xiàn)》的克里斯·安德森認(rèn)為當(dāng)時(shí)處于一個(gè)“理論終結(jié)時(shí)代”。一些政府機(jī)構(gòu)和美國(guó)的*計(jì)算機(jī)科學(xué)家聲稱(chēng)，“應(yīng)該深入?yún)⑴c大數(shù)據(jù)計(jì)算的開(kāi)發(fā)和部署工作，因?yàn)樗鼘⒅苯佑欣谠S多任務(wù)的實(shí)現(xiàn)。”
2009年1月
印度政府建立印度*身份識(shí)別管理局，對(duì)12億人的指紋、照片和虹膜進(jìn)行掃描，并為每人分配12位的數(shù)字ID號(hào)碼，將數(shù)據(jù)匯集到世界*生物識(shí)別數(shù)據(jù)庫(kù)中。官員們說(shuō)它將會(huì)起到提高政府的服務(wù)效率和減少腐敗行為的作用，但批評(píng)者擔(dān)心政府會(huì)針對(duì)個(gè)別人進(jìn)行剖面分析并與分享這些人的私密生活細(xì)節(jié)。
2009年5月
美國(guó)總統(tǒng)巴拉克·奧巴馬政府推出data網(wǎng)站作為政府開(kāi)放數(shù)據(jù)計(jì)劃的部分舉措。該網(wǎng)站的超過(guò)4.45萬(wàn)量數(shù)據(jù)集被用于保證一些網(wǎng)站和智能手機(jī)應(yīng)用程序來(lái)跟蹤從航班到產(chǎn)品召回再到特定區(qū)域內(nèi)失業(yè)率的信息，這一行動(dòng)激發(fā)了從肯尼亞到英國(guó)范圍內(nèi)的政府們相繼推出類(lèi)似舉措。
2009年7月
應(yīng)對(duì)全球金融危機(jī)，聯(lián)合國(guó)秘書(shū)長(zhǎng)潘基文承諾創(chuàng)建警報(bào)系統(tǒng)，抓住“實(shí)時(shí)數(shù)據(jù)帶給貧窮國(guó)家經(jīng)濟(jì)危機(jī)的影響” 。聯(lián)合國(guó)全球脈沖項(xiàng)目已研究了對(duì)如何利用手機(jī)和社交網(wǎng)站的數(shù)據(jù)源來(lái)分析預(yù)測(cè)從螺旋價(jià)格到疾病爆發(fā)之類(lèi)的問(wèn)題。
2011年2月
掃描2億年的頁(yè)面信息，或4兆兆字節(jié)磁盤(pán)存儲(chǔ)，只需幾秒即可完成。IBM的沃森計(jì)算機(jī)系統(tǒng)在智力競(jìng)賽節(jié)目《危險(xiǎn)邊緣》中打敗了兩名人類(lèi)挑戰(zhàn)者。后來(lái)紐約時(shí)報(bào)配音這一刻為一個(gè)“大數(shù)據(jù)計(jì)算的勝利。”
2012年3月
美國(guó)政府報(bào)告要求每個(gè)聯(lián)邦機(jī)構(gòu)都要有一個(gè)“大數(shù)據(jù)”的策略，作為回應(yīng)，奧巴馬政府宣布一項(xiàng)耗資2億美元的大數(shù)據(jù)研究與發(fā)展項(xiàng)目。國(guó)家衛(wèi)生研究院將一套人類(lèi)基因組項(xiàng)目的數(shù)據(jù)集存放在亞馬遜的計(jì)算機(jī)云內(nèi)，同時(shí)國(guó)防部也承諾要開(kāi)發(fā)出可“從經(jīng)驗(yàn)中進(jìn)行學(xué)習(xí)”的“自主式”防御系統(tǒng)。中央情報(bào)局局長(zhǎng)戴維·彼得雷烏斯將軍在發(fā)帖討論阿拉伯之春機(jī)構(gòu)通過(guò)云計(jì)算收集和分析全球社會(huì)媒體信息之事時(shí)，不禁驚嘆我們已經(jīng)被自卸卡車(chē)倒進(jìn)了“‘?dāng)?shù)字塵土”中。
2012年7月
美國(guó)國(guó)務(wù)卿希拉里·克林頓宣布了一個(gè)名為“數(shù)據(jù)2X”的公私合營(yíng)企業(yè)用來(lái)收集統(tǒng)計(jì)世界各地的婦女和女童在經(jīng)濟(jì)、政治和社會(huì)地位方面的信息。“數(shù)據(jù)不只是測(cè)量過(guò)程——它能給予我們啟發(fā)，”她解釋說(shuō)。“一旦人們開(kāi)始對(duì)某個(gè)問(wèn)題實(shí)施測(cè)量時(shí)，就更傾向于采取行動(dòng)來(lái)解決它們，因?yàn)闆](méi)有人愿意排到名單的*端去。”讓大數(shù)據(jù)開(kāi)始競(jìng)賽吧。
2013年底，在這占地僅僅1.6萬(wàn)平方公里的地方，北京常住人口2114.8萬(wàn)人，其中，常住外來(lái)人口為802.7萬(wàn)人，占比38%。在人口分布上，朝陽(yáng)區(qū)和海淀區(qū)常住人口最多，均在300萬(wàn)人以上;門(mén)頭溝區(qū)人最少，只有30.3萬(wàn)人。
與日俱增的人口壓力下，人們的衣，食，住，行，讓這座城市慢慢的變得厚重起來(lái)。
微軟亞洲研究院主管研究員鄭宇博士在做客2014WGDC地理信息開(kāi)發(fā)者大會(huì)時(shí)提到，在城市中，從社交媒體到道路結(jié)構(gòu)，到氣象條件，產(chǎn)生了各種各樣的大數(shù)據(jù)，如果使用得當(dāng)?shù)脑?huà)可以利用這些數(shù)據(jù)發(fā)現(xiàn)這個(gè)城市的問(wèn)題，并且自動(dòng)解決這些問(wèn)題。基于這樣的愿景微軟提出了城市計(jì)算的框檻，包括城市感知、城市服務(wù)提供和數(shù)據(jù)挖掘，形成一個(gè)環(huán)路不斷的自動(dòng)的改進(jìn)這各城市。“簡(jiǎn)單來(lái)說(shuō)就是用大數(shù)據(jù)解決大城市大挑戰(zhàn)。較后做到人、城市運(yùn)轉(zhuǎn)效率和自然環(huán)境三贏(yíng)的系統(tǒng)。”
關(guān)于人們的“衣食”人們的生活以及消費(fèi)方式已經(jīng)發(fā)生了驚天的轉(zhuǎn)變。不光是北京，自淘寶創(chuàng)立以來(lái)，大眾的消費(fèi)方式越發(fā)多元化，O2O、B2B等方式越來(lái)越豐富人們的日常生活。
大數(shù)據(jù)以及地圖的基礎(chǔ)應(yīng)用，已經(jīng)對(duì)人們的生活產(chǎn)生了很大的影響。現(xiàn)今類(lèi)似的網(wǎng)站應(yīng)用有很多都與數(shù)據(jù)以及地理信息相關(guān)，作為其代表之一，大眾點(diǎn)評(píng)正是數(shù)據(jù)與地理信息的相互結(jié)合的優(yōu)質(zhì)結(jié)晶。
關(guān)于人們的“住”對(duì)于住來(lái)說(shuō)，有幾個(gè)決定因素：區(qū)位、人口、環(huán)境。人口數(shù)據(jù)對(duì)于城市的商業(yè)數(shù)據(jù)來(lái)說(shuō)是至關(guān)重要的。
超精細(xì)格網(wǎng)化人口數(shù)據(jù)根據(jù)國(guó)家統(tǒng)計(jì)局2010年人口普查數(shù)據(jù)，結(jié)合遙感、地理信息等數(shù)十種背景信息數(shù)據(jù)，通過(guò)定量空間模型制作而成的超精細(xì)(160米左右)格網(wǎng)化人口分布數(shù)據(jù)，涵蓋全國(guó)328個(gè)城市(包括其所轄的所有縣、縣級(jí)市、區(qū)和街道)格網(wǎng)總數(shù)約3億個(gè)，數(shù)據(jù)項(xiàng)包括總?cè)丝跀?shù)、不同性別人口數(shù)、兒童人口數(shù)、成人人口數(shù)、老年人人口數(shù)、網(wǎng)格的經(jīng)緯度等數(shù)據(jù)項(xiàng)。人口格網(wǎng)化是目前人口空間分布研究的熱點(diǎn)，超精細(xì)格網(wǎng)化人口數(shù)據(jù)根據(jù)國(guó)家統(tǒng)計(jì)局2010年人口普查數(shù)據(jù)，結(jié)合遙感、地理信息等數(shù)十種背景信息數(shù)據(jù)產(chǎn)成。
關(guān)于人們的“行”對(duì)于人們出行來(lái)說(shuō)，人們的出行組成了大數(shù)據(jù)，同時(shí)大數(shù)據(jù)可以實(shí)時(shí)反應(yīng)交通狀況，因此大數(shù)據(jù)與交通的辯證關(guān)系一直為社會(huì)所重視;近年來(lái)交通所帶來(lái)的能耗問(wèn)題被逐漸重視起來(lái)，這不光是對(duì)個(gè)人資金的節(jié)省，更是對(duì)自己所在這個(gè)環(huán)境的一種責(zé)任。
鄭宇認(rèn)為通過(guò)導(dǎo)航軟件所用的傳感器來(lái)感知每個(gè)路段的流量和速度，利用環(huán)境學(xué)經(jīng)典公式即可算出該汽車(chē)的排放量，具體做法是：利用已有GPS數(shù)據(jù)算出有限道路上的速度，按照單位時(shí)間通過(guò)車(chē)的流量的速度，最終得出某一行車(chē)路段的污染指數(shù)。可以算出這個(gè)城市里每一個(gè)區(qū)域，每一個(gè)時(shí)間、每一種污染物的成分和比例。隨著時(shí)間的變化，各個(gè)地方污染程度。
大數(shù)據(jù)情懷大數(shù)據(jù)北京，我們可以看到幾個(gè)焦點(diǎn)，文化底蘊(yùn)，科技創(chuàng)新，還有為了夢(mèng)想前進(jìn)的現(xiàn)代化人們。有個(gè)詞叫物是人非，時(shí)代變了，主角變了，但是古跡還在，我們正在創(chuàng)造歷史，書(shū)寫(xiě)歷史，這亦是一個(gè)城市的延續(xù)。故宮的歷史對(duì)于現(xiàn)如今的我們來(lái)說(shuō)已經(jīng)永遠(yuǎn)沉睡在北京的正中心，對(duì)于故宮我們只是過(guò)客，對(duì)于歷史，我們也是一個(gè)過(guò)客。
有人把數(shù)據(jù)比喻為蘊(yùn)
藏能量的煤礦。煤炭按照性質(zhì)有焦煤、無(wú)煙煤、肥煤、貧煤等分類(lèi)，
而露天煤礦、深山煤礦的挖掘成本又不一樣。與此類(lèi)似，大數(shù)據(jù)并不在“大”，而在于“有用”。價(jià)值含量、挖掘成本比數(shù)量更為重要。對(duì)于很多行業(yè)而言，如何利用這些大規(guī)模數(shù)據(jù)是成為贏(yíng)得競(jìng)爭(zhēng)的關(guān)鍵。大數(shù)據(jù)的價(jià)值體現(xiàn)在以下幾個(gè)方面：1)對(duì)大量消費(fèi)者提供產(chǎn)品或服務(wù)的企業(yè)可以利用大數(shù)據(jù)進(jìn)行精準(zhǔn)營(yíng)銷(xiāo);2) 做小而美模式的中長(zhǎng)尾企業(yè)可以利用大數(shù)據(jù)做服務(wù)轉(zhuǎn)型;3) 面臨互聯(lián)網(wǎng)壓力之下必須轉(zhuǎn)型的傳統(tǒng)企業(yè)需要與時(shí)俱進(jìn)充分利用大數(shù)據(jù)的價(jià)值。
經(jīng)李克強(qiáng)總理簽批，2015年9月，國(guó)務(wù)院印發(fā)《促進(jìn)大數(shù)據(jù)發(fā)展行動(dòng)綱要》（以下簡(jiǎn)稱(chēng)《綱要》），系統(tǒng)部署大數(shù)據(jù)發(fā)展工作。
《綱要》明確，推動(dòng)大數(shù)據(jù)發(fā)展和應(yīng)用，在未來(lái)5至10年打造精準(zhǔn)治理、多方協(xié)作的社會(huì)治理新模式，建立運(yùn)行平穩(wěn)、安全高效的經(jīng)濟(jì)運(yùn)行新機(jī)制，構(gòu)建以人為本、惠及全民的民生服務(wù)新體系，開(kāi)啟大眾創(chuàng)業(yè)、萬(wàn)眾創(chuàng)新的創(chuàng)新驅(qū)動(dòng)新格局，培育高端智能、新興繁榮的產(chǎn)業(yè)發(fā)展新生態(tài)。
《綱要》部署三方面主要任務(wù)。一要加快政府?dāng)?shù)據(jù)開(kāi)放共享，推動(dòng)資源整合，提升治理能力。大力推動(dòng)政府部門(mén)數(shù)據(jù)共享，穩(wěn)步推動(dòng)公共數(shù)據(jù)資源開(kāi)放，統(tǒng)籌規(guī)劃大數(shù)據(jù)基礎(chǔ)設(shè)施建設(shè)，支持宏觀(guān)調(diào)控科學(xué)化，推動(dòng)政府治理精準(zhǔn)化，推進(jìn)商事服務(wù)便捷化，促進(jìn)安全保障高效化，加快民生服務(wù)普惠化。二要推動(dòng)產(chǎn)業(yè)創(chuàng)新發(fā)展，培育新興業(yè)態(tài)，助力經(jīng)濟(jì)轉(zhuǎn)型。發(fā)展大數(shù)據(jù)在工業(yè)、新興產(chǎn)業(yè)、農(nóng)業(yè)農(nóng)村等行業(yè)領(lǐng)域應(yīng)用，推動(dòng)大數(shù)據(jù)發(fā)展與科研創(chuàng)新有機(jī)結(jié)合，推進(jìn)基礎(chǔ)研究和核心技術(shù)攻關(guān)，形成大數(shù)據(jù)產(chǎn)品體系，完善大數(shù)據(jù)產(chǎn)業(yè)鏈。三要強(qiáng)化安全保障，提高管理水平，促進(jìn)健康發(fā)展。健全大數(shù)據(jù)安全保障體系，強(qiáng)化安全支撐。
2015年9月18日貴州省啟動(dòng)我國(guó)*大數(shù)據(jù)綜合試驗(yàn)區(qū)的建設(shè)工作，力爭(zhēng)通過(guò)3至5年的努力，將貴州大數(shù)據(jù)綜合試驗(yàn)區(qū)建設(shè)成為全國(guó)數(shù)據(jù)匯聚應(yīng)用新高地、綜合治理示范區(qū)、產(chǎn)業(yè)發(fā)展聚集區(qū)、創(chuàng)業(yè)創(chuàng)新*地、政策創(chuàng)新先行區(qū)。
圍繞這一目標(biāo)，貴州省將重點(diǎn)構(gòu)建“三大體系”，重點(diǎn)打造“七大平臺(tái)”，實(shí)施“十大工程”。
“三大體系”是指構(gòu)建先行先試的政策法規(guī)體系、跨界融合的產(chǎn)業(yè)生態(tài)體系、防控一體的安全保障體系；“七大平臺(tái)”則是指打造大數(shù)據(jù)示范平臺(tái)、大數(shù)據(jù)集聚平臺(tái)、大數(shù)據(jù)應(yīng)用平臺(tái)、大數(shù)據(jù)交易平臺(tái)、大數(shù)據(jù)金融服務(wù)平臺(tái)、大數(shù)據(jù)交流合作平臺(tái)和大數(shù)據(jù)創(chuàng)業(yè)創(chuàng)新平臺(tái)；“十大工程”即實(shí)施數(shù)據(jù)資源匯聚工程、政府?dāng)?shù)據(jù)共享開(kāi)放工程、綜合治理示范提升工程、大數(shù)據(jù)便民惠民工程、大數(shù)據(jù)三大業(yè)態(tài)培育工程、傳統(tǒng)產(chǎn)業(yè)改造升級(jí)工程、信息基礎(chǔ)設(shè)施提升工程、人才培養(yǎng)引進(jìn)工程、大數(shù)據(jù)安全保障工程和大數(shù)據(jù)區(qū)域試點(diǎn)統(tǒng)籌發(fā)展工程。
此外，貴州省將計(jì)劃通過(guò)綜合試驗(yàn)區(qū)建設(shè)，探索大數(shù)據(jù)應(yīng)用的創(chuàng)新模式，培育大數(shù)據(jù)交易新的做法，開(kāi)展數(shù)據(jù)交易的市場(chǎng)試點(diǎn)，鼓勵(lì)產(chǎn)業(yè)鏈上下游之間的數(shù)據(jù)交換，規(guī)范數(shù)據(jù)資源的交易行為，促進(jìn)形成新的業(yè)態(tài)。
國(guó)家發(fā)展改革委有關(guān)專(zhuān)家表示，大數(shù)據(jù)綜合試驗(yàn)區(qū)建設(shè)不是簡(jiǎn)單的建產(chǎn)業(yè)園、建數(shù)據(jù)中心、建云平臺(tái)等，而是要充分依托已有的設(shè)施資源，把現(xiàn)有的利用好，把新建的規(guī)劃好，避免造成空間資源的浪費(fèi)和損失。探索大數(shù)據(jù)應(yīng)用新的模式，圍繞有數(shù)據(jù)、用數(shù)據(jù)、管數(shù)據(jù)，開(kāi)展先行先試，更好地服務(wù)國(guó)家大數(shù)據(jù)發(fā)展戰(zhàn)略。
大數(shù)據(jù)正在以不可阻攔的磅礴氣勢(shì)，與當(dāng)代同樣具有革命意義的*科技進(jìn)步 (如納米技術(shù)、生物工程、全球化等)一起，揭開(kāi)人類(lèi)新世紀(jì)的序幕。可以簡(jiǎn)單地說(shuō)，以往人類(lèi)社會(huì)基本處于蒙昧狀態(tài)中的不發(fā)展階段，即自然發(fā)展階段。現(xiàn)在，這一不發(fā)展階段隨著2012年的所謂“世界末日”之說(shuō)而永遠(yuǎn)成為了過(guò)去。大數(shù)據(jù)宣告了21世紀(jì)是人類(lèi)自主發(fā)展的時(shí)代，是不以所謂“上帝”的意志為轉(zhuǎn)移的時(shí)代，是“上帝”失業(yè)的時(shí)代。
對(duì)于地球上每一個(gè)普通居民而言，大數(shù)據(jù)有什么應(yīng)用價(jià)值呢?只要看看周?chē)谧兓囊磺校憔涂梢灾溃髷?shù)據(jù)對(duì)每個(gè)人的重要性不亞于人類(lèi)初期對(duì)火的使用。大數(shù)據(jù)讓人類(lèi)對(duì)一切事物的認(rèn)識(shí)回歸本源;大數(shù)據(jù)通過(guò)影響經(jīng)濟(jì)生活、政治博弈、社會(huì)管理、文化教育科研、醫(yī)療保健休閑等等行業(yè)，與每個(gè)人產(chǎn)生密切的聯(lián)系。
大數(shù)據(jù)技術(shù)離你我都并不遙遠(yuǎn)，它已經(jīng)來(lái)到我們身邊，滲透進(jìn)入我們每個(gè)人的日常生活消費(fèi)之中，時(shí)時(shí)刻刻，事事處處，我們無(wú)法逃遁，因?yàn)樗鼰o(wú)微不至：它提供了光怪陸離的全媒體，難以琢磨的云計(jì)算，無(wú)法抵御的仿真環(huán)境。大數(shù)據(jù)依仗于無(wú)處不在的傳感器，比如手機(jī)、發(fā)帶，甚至是能夠收集司機(jī)身體數(shù)據(jù)的汽車(chē)，或是能夠監(jiān)控老人下床和行走速度與壓力的“魔毯”(由GE與Intel聯(lián)合開(kāi)發(fā))，洞察了一切。通過(guò)大數(shù)據(jù)技術(shù)，人們能夠在醫(yī)院之外得悉自己的健康情況;而通過(guò)收集普通家庭的能耗數(shù)據(jù)，大數(shù)據(jù)技術(shù)給出人們切實(shí)可用的節(jié)能提醒;通過(guò)對(duì)城市交通的數(shù)據(jù)收集處理，大數(shù)據(jù)技術(shù)能夠?qū)崿F(xiàn)城市交通的優(yōu)化。
隨著科學(xué)技術(shù)的發(fā)展，人類(lèi)必將實(shí)現(xiàn)數(shù)千年的機(jī)器人夢(mèng)想。早在古希臘、古羅馬的神話(huà)中就有冶煉之神用黃金制造機(jī)械仆人的故事。《論衡》中也記載有魯班曾為其母巧公制作一臺(tái)木馬車(chē)，“機(jī)關(guān)具備，一驅(qū)不還”。而到現(xiàn)代，人類(lèi)對(duì)于機(jī)器人的向往，從機(jī)器人頻繁出現(xiàn)在科幻小說(shuō)和電影中已不難看出。公元2035年，智能型機(jī)器人已被人類(lèi)廣泛利用，送快遞、遛狗、打掃衛(wèi)生……這是電影《我，機(jī)器人》里描繪的場(chǎng)景。事實(shí)上，今天人們已經(jīng)享受到了部分家用智能機(jī)器人給生活帶來(lái)的便利。比如，智能吸塵器以及廣泛應(yīng)用于汽車(chē)工業(yè)領(lǐng)域的機(jī)器手等等。有意思的是，2010年松下公司專(zhuān)門(mén)為老年人開(kāi)發(fā)了“洗發(fā)機(jī)器人”，它可以自動(dòng)完成從涂抹洗發(fā)水、按摩到用清水洗凈頭發(fā)的全過(guò)程。未來(lái)的智能機(jī)器人不會(huì)是電影《變形金剛》中的龐然大物，而會(huì)越來(lái)越小。目前，科學(xué)家研發(fā)出的智能微型計(jì)算機(jī)只和雪花一樣大，卻能夠執(zhí)行復(fù)雜的計(jì)算任務(wù)，將來(lái)可以把這些微型計(jì)算機(jī)安裝在任何物件上用以監(jiān)測(cè)環(huán)境和發(fā)號(hào)施令。隨著大數(shù)據(jù)時(shí)代的到來(lái)和技術(shù)的發(fā)展，科技最終會(huì)將我們帶進(jìn)神奇的智能機(jī)器人時(shí)代。
在大數(shù)據(jù)時(shí)代，人腦信息轉(zhuǎn)換為電腦信息成為可能。科學(xué)家們通過(guò)各種途徑模擬人腦，試圖解密人腦活動(dòng)，最終用電腦代替人腦發(fā)出指令。正如今天人們可以從電腦上下載所需的知識(shí)和技能一樣，將來(lái)也可以實(shí)現(xiàn)人腦中的信息直接轉(zhuǎn)換為電腦中的圖片和文字，用電腦施展讀心術(shù)。2011年，美國(guó)軍方啟動(dòng)了“讀心頭盔”計(jì)劃，憑借讀心頭盔，士兵無(wú)需語(yǔ)言和手勢(shì)就可以互相“閱讀”彼此的腦部活動(dòng)，在戰(zhàn)場(chǎng)上依靠“心靈感應(yīng)”，用意念與戰(zhàn)友互通訊息。目前，“讀心頭盔”已經(jīng)能正確“解讀”45%的命令。隨著這項(xiàng)“讀心術(shù)”的發(fā)展，人們不僅可以用意念寫(xiě)微博、打電話(huà)，甚至連夢(mèng)中所見(jiàn)都可以轉(zhuǎn)化為電腦圖像。據(jù)美國(guó)《紐約時(shí)報(bào)》報(bào)道，奧巴馬政府將繪制完整的人腦活動(dòng)地圖，全面解開(kāi)人類(lèi)大腦如何思考、如何儲(chǔ)存和檢索記憶等思維密碼作為美國(guó)科技發(fā)展的重點(diǎn)，美國(guó)科學(xué)家已經(jīng)成功繪出鼠腦的三維圖譜。2012年，美國(guó)IBM計(jì)算機(jī)專(zhuān)家用運(yùn)算速度最快的96臺(tái)計(jì)算機(jī)，制造了世界上*“人造大腦”，電腦*模擬大腦不再是癡人說(shuō)夢(mèng)。試想一下，如果人類(lèi)大腦實(shí)現(xiàn)了數(shù)據(jù)模擬，或許你的下一個(gè)BOSS是機(jī)器人也不一定。
總而言之，大數(shù)據(jù)技術(shù)的發(fā)展有可能解開(kāi)宇宙起源的奧秘。因?yàn)椋?jì)算機(jī)技術(shù)將一切信息無(wú)論是有與無(wú)、正與負(fù)，都?xì)w結(jié)為0與1，原來(lái)一切存在都在于數(shù)的排列組合，在于大數(shù)據(jù)。
容量（Volume）：數(shù)據(jù)的大小決定所考慮的數(shù)據(jù)的價(jià)值的和潛在的信息；
種類(lèi)（Variety）：數(shù)據(jù)類(lèi)型的多樣性；
速度（Velocity）：指獲得數(shù)據(jù)的速度；
可變性（Variability）：妨礙了處理和有效地管理數(shù)據(jù)的過(guò)程。
真實(shí)性（Veracity）：數(shù)據(jù)的質(zhì)量
復(fù)雜性（Complexity）：數(shù)據(jù)量巨大，來(lái)源多渠道
HadoopMapReduce
思維模式轉(zhuǎn)變的催化劑是大量新技術(shù)的誕生，它們能夠處理大數(shù)據(jù)分析所帶來(lái)的3個(gè)V的挑戰(zhàn)。扎根于開(kāi)源社區(qū)，Hadoop已經(jīng)是目前大數(shù)據(jù)平臺(tái)中應(yīng)用率*技術(shù)，特別是針對(duì)諸如文本、社交媒體訂閱以及視頻等非結(jié)構(gòu)化數(shù)據(jù)。除分布式文件系統(tǒng)之外，伴隨Hadoop一同出現(xiàn)的還有進(jìn)行大數(shù)據(jù)集處理MapReduce架構(gòu)。根據(jù)權(quán)威報(bào)告顯示，許多企業(yè)都開(kāi)始使用或者評(píng)估Hadoop技術(shù)來(lái)作為其大數(shù)據(jù)平臺(tái)的標(biāo)準(zhǔn)。
NoSQL數(shù)據(jù)庫(kù)
我們生活的時(shí)代，相對(duì)穩(wěn)定的數(shù)據(jù)庫(kù)市場(chǎng)中還在出現(xiàn)一些新的技術(shù)，而且在未來(lái)幾年，它們會(huì)發(fā)揮作用。事實(shí)上，NoSQL數(shù)據(jù)庫(kù)在一個(gè)廣義上派系基礎(chǔ)上，其本身就包含了幾種技術(shù)。總體而言，他們關(guān)注關(guān)系型數(shù)據(jù)庫(kù)引擎的限制，如索引、流媒體和高訪(fǎng)問(wèn)量的網(wǎng)站服務(wù)。在這些領(lǐng)域，相較關(guān)系型數(shù)據(jù)庫(kù)引擎，NoSQL的效率明顯更高。
內(nèi)存分析
在Gartner公司評(píng)選的2012年十大戰(zhàn)略技術(shù)中，內(nèi)存分析在個(gè)人消費(fèi)電子設(shè)備以及其他嵌入式設(shè)備中的應(yīng)用將會(huì)得到快速的發(fā)展。隨著越來(lái)越多的價(jià)格低廉的內(nèi)存用到數(shù)據(jù)中心中，如何利用這一優(yōu)勢(shì)對(duì)軟件進(jìn)行*限度的優(yōu)化成為關(guān)鍵的問(wèn)題。內(nèi)存分析以其實(shí)時(shí)、高性能的特性，成為大數(shù)據(jù)分析時(shí)代下的“新寵兒”。如何讓大數(shù)據(jù)轉(zhuǎn)化為*洞察力，也許內(nèi)存分析就是答案。大數(shù)據(jù)背景下，用戶(hù)以及IT提供商應(yīng)該將其視為長(zhǎng)遠(yuǎn)發(fā)展的技術(shù)趨勢(shì)。
集成設(shè)備
隨著數(shù)據(jù)倉(cāng)庫(kù)設(shè)備(Data Warehouse Appliance)的出現(xiàn)，商業(yè)智能以及大數(shù)據(jù)分析的潛能也被激發(fā)出來(lái)，許多企業(yè)將利用數(shù)據(jù)倉(cāng)庫(kù)新技術(shù)的優(yōu)勢(shì)提升自身競(jìng)爭(zhēng)力。集成設(shè)備將企業(yè)的數(shù)據(jù)倉(cāng)庫(kù)硬件軟件整合在一起，提升查詢(xún)性能、擴(kuò)充存儲(chǔ)空間并獲得更多的分析功能，并能夠提供同傳統(tǒng)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)一樣的優(yōu)勢(shì)。在大數(shù)據(jù)時(shí)代，集成設(shè)備將成為企業(yè)應(yīng)對(duì)數(shù)據(jù)挑戰(zhàn)的一個(gè)重要利器。
溫馨提醒：文章觀(guān)點(diǎn)來(lái)源網(wǎng)絡(luò)，隨時(shí)光飛逝，歲月變遷，準(zhǔn)確性、可靠性、難免有所變動(dòng)，因此本文內(nèi)容僅供參考！
