有哪些有趣的大數據?
這個問題問我算撞到槍口上了。在中國,大數據不是技術,而是宗教。「Big Data」里的「Big」,其實就是音譯自漢語的「逼格」,請參我下面我的學術文章:達則兼妓天下,窮則獨佔妻身——論大數據教的起源本文的標題語,來自我的高中同學,現就職於阿里集團,擅長跳探戈的某非著名仁波切,在這裡對他表示言不由衷的感謝。
與廣告技術公司有關的討論到上一篇告一段落了。作為嚴肅的學術性自媒體,我們從今天開始進入一個更加聖潔的領域——大數據(big data)。請諸位讀者找一個面朝大海、春暖花開的小木屋(把你的手機壁紙換成這樣一副圖也可以),慢慢地閉上眼晴,從心靈深處蕩漾起一串串的0和1,隨著本文的展開,進入令人激動和顫抖的大數據之國,用虔誠的祈禱讓它去解決你生命中的一切悲哀與彷徨吧!
為什麼這段話飽含淚水?因為我對大數據愛得深沉。在當今的中國,你不能把大數據僅僅看成是一項技術,它已經成為互聯網時代的一種新宗教。現在,IT相關或不相關從業者們最關心的三個終極哲學問題就是:我從哪裡來?我要到哪裡去?我為什麼會出現在大數據群里(見下圖)?當然,筆者並非此宗教的神職人員,因此更多的是從旁觀者的角度,來探討大數據宗教的源流與發展。
首先,要解釋一下「big data」這個詞本身。大多數讀者可能並不知道,其中的「big」這個詞,實際上是音譯自漢語的借詞,而原文諸位都不陌生,就是「逼格」。為什麼要在「data」前面加上這樣的定語呢?大數據在宗教化之前有什麼實際功用么?大數據相關的社會階級現狀與訴求又如何呢?別著急,聽我慢慢道來。
我們先來看看歷史上狹義的大數據是什麼樣的。在互聯網紀元之前,主要的數據處理是針對交易數據。什麼是交易數據呢?也就是業務運營過程中不得不記錄的數據,例如銀行的轉帳、存款、利息,運營商的充值、流量減免等。由於一致性要求高、時延控制嚴格、價值密度高,交易數據的加工和處理並不簡單,而傳統的IT廠商,特別是IOE,在這方面積累了大量的產品和經驗。而互聯網誕生以後,以用戶上網行為為代表的行為數據,也被無心插柳地記錄下來了。這些行為數據的體量巨大,但是在一開始並沒有得到真正的重視。不過,隨著個性化推薦、計算廣告、個人徵信等業務優化和變現應用的開展,大家發現,這些行為數據里也蘊含著巨大的總量價值。不過,由於價值密度低、一致性要求不高,行為數據的加工處理,往往並不適用IOE的方案,而是為成本大大降低、吞吐量大大提高的開源框架所替代,並且其輸出的結果一般是服務於自動的機器,而非領導與人工決策者。簡單來說,以開源框架為基礎大規模地處理用戶行為數據,並服務於自動化的決策過程,是大數據在宗教化之前基本的外延。
然而,當主流媒體和專家討論大數據時,你看到的卻往往是這樣的語錄:
大數據科學家=統計學家+程序員+講故事的人+藝術家
「體會、體驗、直覺、靈機一動、內省」這些看似與大數據無關的東西有可能恰恰就是大數據的核心
全球數據量每18個月翻番,到2015年,中國專用大數據人才預計缺口將達到1400萬
大數據將改變{你的生活|全球貿易|傳統教育|石油開採|…}
如果將這些語錄收集在一起,一本新的經書就誕生了。與《聖經》或《古蘭經》一樣,它涉及到你生活的方方面面,從靈魂深處對你中午吃面應該打什麼鹵、出門應該先邁哪只腳、以及是否應該帶著尿布喝啤酒等問題,給予哲學上和方法論的指導。這就是讓每一個互聯網人瘋狂的大數據教。大數據教的影響已經滲透到了我們身邊的每一個細節之中:去年,一位快板表演藝術家曾經找到我,跟我探討是不是能把他們這種藝術形式改名為「大數來寶";前兩天,我幾歲的兒子困惑與我與別人通話時經常提到的「大數據」一詞,滿臉狐疑地問我:「爸爸,你為什麼要把大樹鋸了啊?」
大數據能夠在中國的土壤上開枝散葉,取代陰陽五行成為解釋和指導世間萬物的第一法則,並不是偶然的,這與中國人的宗教觀大有關係。中東閃含民族對待宗教,不但自己虔誠,也要別人虔誠,於是飄洋過海四處傳教,甚至用戰爭獲得信眾;南亞印度民族對待宗教,自己非常虔誠,但並不強求別人虔誠,有時還會主動向人介紹別的宗教以維護百花齊放的市場格局;而東亞漢字圈民族對待宗教,自己並不虔誠,卻要求別人假裝虔誠。這是為什麼呢?因為渡一個有一個的提成。筆者有位朋友的遠方親戚,在西北三次皈依天主教,因為每皈依一次可以領一袋面。聽說遠在地中海之濱不明真相的教皇老人家,看著中國教徒數量的增長沾沾自喜,我有點莫名的悲哀:難道他連積分牆的留存差都不懂么?
既然宗教已經由目的變成了手段,那麼信什麼,怎麼信,就不再是一成不變的,而且可以與時俱進,不斷發展和演變的。這樣的宗教觀在越南人的高台教那裡達到了頂峰,看看他們的諸神列表就明白了:高台仙翁大菩薩摩柯薩、釋迦牟尼、耶穌、老子、孔子、觀世音、李白、關公、姜太公、牛頓、維克多·雨果、莎士比亞、丘吉爾、克里孟梭、孫中山。您還打算信什麼?都給您預備齊了!那麼大數據這樣一個讓萬民興奮的概念,自然不會被中國的宗教締造者們放過。
一門宗教的興起,少不了兩個必要的條件:首先要有大多數人的認識層次不能解釋的的自然或社會現象;其次是某些特定的人或階級能夠從中獲得權力或者利益。而大數據完美地滿足了這兩個條件。
先說第一個條件。在中國傳統的商業運營中,數據的作用是被嚴重忽視了的。大量以個人崇拜和價值觀為核心競爭力的中小企業,從來沒有想到過用數據來輔助老闆們的神諭。因此,當他們聽說大洋彼岸的互聯網眾巨頭們居然在數據神的幫助下,建立起一套躺著掙錢的商業體系,頓時感到無比錯愕。於是,他們在生命中第一次拿起了計算器,打開了excel,面對著跳動的小數點激動地流下淚來。「I got it! I got it! Big data! My god!」而大數據,也就理所當然地成為他們心目中心的神祗,和自己後半生財富無可替代的守護者。至於Hadoop、Spark這些神物,就如同新宗教里的雲、羅、傘、蓋、花、罐、魚、腸,無需窺視其中天機,只要虔心禮讚與宣傳。
再來看第二個條件。大數據這樣一個宗教化概念,能夠為其教士群體帶來什麼樣的利益呢?在中國,一個概念要想成功宗教化,成為政府、企業、資本和不明真相的群眾共同膜拜的對象,關鍵要看其是否能「落地」。這裡的落地,指的是落實到房地產行業。對下層信眾而言,管你是基督教、天主教還是印度教,誰能分給我一袋面,我就信誰!對上層教士而言,管你是物聯網、電子商務還是雲計算、大數據,誰能讓我找個由頭拿地,我就傳誰的教!你看看這些概念,電子商務,可以建倉儲基地;雲計算,可以建計算中心;而大數據,可以建數據中心。管他是倉儲基地還是數據中心,總免不了有些配套的寫字樓乃至住宅,這才是整個體系關鍵的杵門子。
於是,在萬民頂禮大數據的時代狂歡中,上層集團通過對教義(白皮書)、教會(行業聯盟)、仁波切(大數據專家)的組織與控制,可以獲得土地與財富,盡情地享受供養與雙修的特權,即使是正當地與多名異性保持不正當關係,明確地達到巨額財產來源不明這樣的理想,也未必僅僅是理想,正所謂「達則兼妓天下」;而中層教士們通過宣教大數據烏托邦,為各品種的豬插上數據的雙翼,順利地飛上風口,自己也可以在大數據時代繼續中產與社會中堅的地位,正所謂「窮則獨佔妻身」。而廣大底層碼畜與群眾,請打開你的味蕾,盡情地跪舔大數據美妙的滋味,無私地供養大數據仁波切們吧!
令人遺憾的是,在這樣的時代里,還有部分企業和偽專家,置改造世界的偉業於不顧,拘泥於站在陰暗面上報Hadoop和Spark的Bug、指摘個性化推薦演算法的局限性,深深地陷入工具主義和實用主義的泥潭。這樣狹隘的視野與思維,恐怕遲早為行業洪流所淘汰。
http://weixin.qq.com/r/0TvP163EU-Asrem0927D (二維碼自動識別)
工作原因,我能夠接觸到全國大量的公司數據,當時想看看中國公司名稱都喜歡用哪些詞語,因此工作之餘統計分析了下400多w的公司名稱,具體千強詞語在這裡,左邊是詞語,右邊是出現次數:公司 2425485
有限 2183313科技 274006北京 171379廣州 168186設備 139325貿易 132687機械 127759
責任 122719電子 117978經營 108991工程 102506深圳 95726製品 95121中心 90215服務 88895商貿 76751上海 75500
天津 72963技術 71749杭州 70063山東 68270化工 66503銷售 66041汽車 65291材料 64828裝飾 61304河北 59709
個體 59645寧波 58260製造 57181發展 56565開發 56305浙江 56187五金 52457青島 52156南京 52110蘇州 51754
電器 51623實業 50776成都 50721用品 48913集團 47575國際 46480東莞 46049諮詢 45703武漢 45619食品 44975
機電 41782管理 40835塑料 40750重慶 40635工藝 40415加工 40359鄭州 40196廣告 39824文化 39129工貿 39100
河南 38334配件 38289廈門 37822商行 36626濟南 36091包裝 35703信息 35552物資 34518服飾 34480江蘇 34417金屬 34335無錫 33316建築 33093設計 32625大連 32414瀋陽 32345溫州 31346西安 30077建材 29587紡織 29439石家莊 28365服裝 27653中國 27160佛山 26940投資 26379網路 26263福建 25810地產 25563物流 24294四川 23284傢具 22904廣東 22644股份 22593器材 22558經銷 22364長沙 22238合肥 21877義烏 21696工業 21331生物 21203印刷 21070進出 20767環保 20735崑山 20464代理 20432揚州 19907南寧 19843福州 19380陝西 19215江西 18780塑膠 18253廣西 18128商務 18089淄博 18054玻璃 17966模具 17942傳播 17862學校 17647湖南 17433教育 17410哈爾濱 17219南通 17199電腦 17127維修 16845培訓 16797安徽 16677酒店 16519企業 16412保定 16337市場 16291中山 16241經貿 16204電氣 16202批發 15988辦事 15567秦皇島 15517產品 15485湖北 15337煙台 15278台州 15118山西 15053自動 14852工作 14408醫院 14274貨運 14062辦公 14005唐山 14004石油 13999精密 13633研究 13561數碼 13377泉州 13371柳州 13324傳媒 13269工具 13223餘姚 13177木業 13162昆明 13026徐州 12966農業 12828慈溪 12677藝術 12674臨沂 12627南昌 12514桂林 12496儀器 12434制衣 12351回收 12256禮品 12180建設 12157運輸 12083世紀 11963邯鄲 11899養殖 11831濰坊 11694新疆 11644不鏽鋼 11553滄州 11551紹興 11526專業 11313張家港 11305電力 11274合作社 11153經濟 11131營銷 11048策劃 10909永康 10802軸承 10541醫療 10365通訊 10290業務 10272飾品 10193通信 10118租賃 10073太原 10035事務 10021旅行 9970照明 9892吉林 9844軟體 9816旅遊 9768洛陽 9687閥門 9611陶瓷 9557醫藥 9417光電 9415科貿 9412石材 9377漳州 9372鞋業 9279樂清 9199攝影 9156基地 9150橡膠 9115長春 9052貴陽 8973邢台 8921海南 8869物業 8867蘭州 8857蒼南 8618嘉興 8488餐飲 8457園林 8433東方 8369惠州 8331遼寧 8330安裝 8310偉業 8269鑄造 8263製作 8155常熟 8105生產 8065美容 8059商店 8039體育 7964汽配 7927瑞安 7918能源 7904加油 7881顧問 7864鄞州 7854經紀 7821吳江 7803特種 7782玩具 7748紙業 7693儀錶 7692針織 7688鹽城 7664陽光 7574空調 7546貴州 7510順德 7457專賣 7381安平 7333酒業 7324液壓 7314廊坊 7248常州 7162珠海 7151保健 7090家居 7073門業 7063金華 7061智能 7027協會 7006自治 7004節能 7002濟寧 7002威海 7001南海 6992烏魯木齊 6906番禺 6892個人 6885橡塑 6848聊城 6824塗料 6790製冷 6778黑龍江 6686連鎖 6683門窗 6630器械 6621葯業 6574太陽 6564綜合 6563家電 6560雲南 6506化妝 6456供應 6428誠信 6425消防 6381承德 6358機床 6324衡水 6319環境 6217房產 6198安陽 6177新鄉 6158鎮江 6124鋼鐵 6104高新 6067鋼管 6044時代 6017內蒙古 6005礦業 5953系統 5953泰安 5947資源 5879皮具 5813處理 5792聯合 5776電纜 5774供銷 5761泰州 5736白雲 5726保溫 5707燈飾 5685香港 5674湖州 5666電機 5660職業 5649外貿 5646江陰 5597計算機 5494東營 5486防水 5458宜興 5448電動 5435交通 5427苗木 5418展覽 5381部件 5359俱樂部 5342百貨 5329彩印 5322大慶 5263塑業 5258新型 5229結構 5209學院 5204飼料 5156鞍山 5139新華 5133潔具 5119綠化 5111海寧 5085家政 5061宏達 5060化學 5028中學 4991衛生 4983德州 4983婚紗 4957印務 4928大學 4928置業 4915蕪湖 4887城區 4838門市 4828日照 4828糧油 4819淮安 4805贛州 4801生態 4781合金 4777石化 4667泊頭 4630營業 4626律師 4614衡陽 4600水泥 4598包頭 4578潤滑 4577晉江 4571連雲港 4531數控 4524天河 4515文具 4481超市 4468保潔 4443都市 4442山市 4426冶金 4425南平 4384玉環 4365煤炭 4364汕頭 4334賓館 4304輔料 4292勞務 4252園藝 4240任丘 4238通達 4237搬家 4231寶安 4211莆田 4198小學 4197黃岩 4191摩托 4189產業 4165時尚 4144江門 4120衛浴 4120霸州 4112航空 4110諸暨 4097綿陽 4097密封 4085東陽 4059園區 4050起重 4046皮革 4030精細 4024清潔 4024營口 4004箱包 3994音響 3982順達 3972婚慶 3953檢測 3952萍鄉 3947水產 3945海口 3936溫嶺 3927鑫源 3922丹陽 3913絲網 3907南陽 3887商城 3866健康 3859原料 3854珠寶 3853甘肅 3843上虞 3832馬鞍 3819宿遷 3813北方 3810宜昌 3791廢舊 3772現代 3762影視 3749管道 3734凈化 3729城市 3716海曙 3715撫順 3708修理 3691商業 3682盛世 3674永嘉 3667娛樂 3659再生 3648水晶 3641織造 3633焊接 3620興達 3618交易 3617保稅 3606保險 3574休閑 3570丹東 3569水電 3552動力 3547茶業 3541牧業 3532信用 3530耐火 3516財務 3516標準 3503會計 3503青州 3500寧海 3492十堰 3480展示 3479設施 3448人民 3443太倉 3439二手 3408錦州 3401興隆 3392呼和浩特 3382精品 3372購銷 3358生活 3333清洗 3328安全 3321利達 3318海珠 3313鋼材 3285安防 3281鞏義 3268擔保 3263裝潢 3239寶雞 3238花都 3233浦江 3231茶葉 3221裝修 3220桐鄉 3208複合 3208鍋爐 3203富陽 3203燃料 3197管件 3191蔬菜 3187創新 3180泵業 3177成套 3165濮陽 3158禮儀 3144張家口 3144平陽 3137路橋 3136蕭山 3136長城 3131天成 3125礦山 3122天地 3122菏澤 3104奉化 3099永興 3096遼陽 3087嘉善 3084眼鏡 3081健身 3060實驗 3033龍岩 3032品牌 3022電梯 3008中天 3006會所 3003開封 2980長安 2975採購 2974機構 2971濱州 2956萊州 2939騰達 2924水暖 2916綠色 2911房屋 2910花卉 2890控制 2887天然 2871製藥 2869科學 2866越秀 2863防腐 2862農機 2856彈簧 2837江北 2833棗莊 2822江東 2820運動 2815農村 2815岳陽 2810船舶 2805兒童 2795家紡 2785金牛 2778藥房 2772纖維 2772赤峰 2764景觀 2763鋁業 2758幼兒 2752輪胎 2747油脂 2746種植 2744華夏 2740興業 2739河間 2730安裝工程 2727紙箱 2724萊蕪 2714鐵路 2713北侖 2710裝備 2701中醫 2686增城 2658助劑 2648電視 2643氣動 2636長興 2634恆通 2632騰飛 2631齊齊哈爾 2627大同 2611南方 2610衢州 2607苗圃 2606兄弟 2603滕州 2600湛江 2598泰興 2593電池 2591藍天 2582天下 2581糧食 2580元件 2573化纖 2570電源 2561通用 2560光明 2552安吉 2543推廣 2533木材 2530安慶 2530激光 2527人力 2517創意 2512振興 2500環球 2499圖文 2493煤礦 2490電線 2489嵊州 2480石獅 2475龍港 2467平安 2466龍灣 2462金龍 2457華泰 2457新興 2452商場 2451日用 2449勞動 2445線纜 2444海洋 2444附件 2443工商 2441九江 2433快遞 2430車輛 2421凈水 2415焦作 2392商丘 2391安縣 2387恆信 2384臨安 2375天宇 2365福利 2363分廠 2362信達 2359車業 2355創業 2355東升 2351邗江 2337燈具 2337株洲 2337配送 2332信陽 2322金鑫 2302許昌 2300地板 2298靖江 2296世界 2291勞保 2284環宇 2271龍騰 2265印花 2265江南 2264花木 2262事業 2260新區 2260中原 2257荊州 2254電信 2251華興 2249美術 2248膠粘 2244恆達 2241自貢 2236宜賓 2228裝璜 2227精工 2224塗裝 2218分店 2217標牌 2207交流 2205公路 2203荔灣 2200平湖 2194合作 2191牡丹江 2190福田 2189美髮 2189潮州 2183室內 2181廚房 2180無紡布 2172章丘 2171內衣 2166高郵 2156華東 2147盤錦 2140壽光 2138收購 2137大地 2136清河 2135戶外 2134長江 2131藥材 2130鎮海 2128沭陽 2128農資 2114南安 2112廚具 2108海鹽 2097恆泰 2094北海 2094三河 2092飲料 2085傳動 2076時裝 2075特產 2069畜牧 2068勝利 2053寵物 2052商標 2043龍崗 2041滿族 2041中科 2038東海 2038總匯 2037東風 2032燃氣 2027武義 2019重工 2018發電 2016中介 2011刀具 2011緊固 2009首飾 2004黃石 2000雕刻 1998會展 1997光學 1996華北 1987平頂 1987運城 1978方圓 1978順發 1977興華 1976市政 1969地區 1968模型 1967華美 1966黃山 1965昌盛 1965永年 1965監理 1964黃驊 1962臨海 1961市區 1958門診 1951武安 1949安溪 1939德陽 1938欽州 1937遠大 1929正大 1920桐廬 1918永盛 1909慶典 1907專用 1907磨具 1903合夥 1899印染 1898輝煌 1897鶴壁 1895輕工 1894龍口 1894空間 1888鴻運 1887衝壓 1887古鎮 1879中興 1878配套 1874萬達 1867海城 1866臨汾 1866機動 1865購物 1863布藝 1863鞋材 1862萬通 1860雄縣 1858普通 1855日化 1853大眾 1852大豐 1851長治 1848美國 1848雕塑 1847工廠 1845寶應 1842葫蘆 1840磚廠 1840建德 1836天天 1834定州 1832安達 1827濾清 1824咸陽 1824樂器 1824水利 1821動物 1817南充 1817農場 1813造紙 1811臨朐 1808東台 1802沙河 1800高科 1798金源 1798林業 1794如皋 1794廣場 1789電熱 1788竹木 1788玉田 1785蚌埠 1784翻譯 1784瑞達 1783興化 1782德清 1782滙豐 1779天龍 1779總部 1775倉儲 1774貨物 1770涿州 1770郴州 1765地毯 1765宏偉 1765梁山 1764博山 1761漯河 1759農副 1757圖書 1754吉祥 1753櫥櫃 1750鞋廠 1745鄂爾多斯 1743洗滌 1743象山 1742電鍍 1741彩鋼 1741寧德 1738產權 1737專營 1733銀河 1730機器 1722天長 1722出租 1714遵化 1713麵粉 1712貨架 1712鼎盛 1711暖通 1709景德鎮 1707過濾 1698廣播 1697耐磨 1696壯族 1696通風 1690視覺 1688藥店 1685耗材 1684三亞 1683家私 1682濱海 1680海門 1676阜新 1675氣體 1673卓越 1673疏通 1668華通 1667海安 1665飲食 1663常德 1663遷安 1661鳳凰 1661人才 1659絲印 1658鵬程 1657飯店 1655自行車 1653代表 1643塑鋼 1641商品 1641佳木斯 1634瑞豐 1633江山 1631揚中 1629甌海 1618大城 1617遠東 1616東光 1616華鑫 1615電工 1614郊區 1613恆豐 1612宣化 1612廢品 1609鴻達 1607湘潭 1607數字 1604永安 1603編織 1598直銷 1597海港 1597家用 1596童裝 1592拍賣 1592委員 1585磨料 1584星光 1584手袋 1581手機 1580齒輪 1579熱水 1579駕駛 1577形象 1577進口 1576大廈 1572和平 1572玉林 1570朝陽 1570控股 1568興旺 1568叉車 1567香河 1562三和 1559知識 1557供電 1557中華 1556麗水 1555宏發 1553對外 1553恆源 1550活動 1550薌城 1549博興 1549旭日 1545泰山 1545高密 1543飛龍 1540宏業 1540項目 1537葡萄 1534禪城 1532水泵 1532南宮 1531南市 1529織帶 1527鑫鑫 1526銀杏 1524華龍 1518啟東 1518石英 1516鐵嶺 1512風機 1511種業 1510沙發 1506匯通 1501天一 1501重型 1500紅星 1500燈光 1499振華 1498書店 1497金剛 1496絲綢 1493龍海 1487真空 1480自控 1478臨清 1477飛達 1476邳州 1473襄樊 1472防護 1471四方 1469網吧 1468邵陽 1467神州 1467植物 1467開關 1465固安 1462金山 1461資訊 1459龍泉 1457散熱 1455新星 1453新昌 1453東興 1450動漫 1448新城 1446馬店 1445三星 1445
推薦閱讀: