寫在前面——個人的努力在時代的進步面前不值一提

在知乎上看到這個標題特別有感觸，回頭看過去幾年的工作，總有一種沒有干成什麼事情的悲哀。

大數據和人工智慧炒作了這麼多年，終於看到應用越來越多了。但是又有多少是我們這一個個工程師的功勞呢？大多都是時代進步帶來的。四五年之前，Dynamic Remarketing還可以稱作是黑科技，然而今天，又有哪個廣告技術公司做不了這一點呢？並不是廣告技術公司的技術進步，只是時代進步了而已。

五六年以前，Hadoop都還只有 0.20 版本，無論是Pig還是Hive都是Bug滿滿，處理Stream Data唯一可選的是Scribe，SSD還沒有大規模應用，所以KV Storage的選擇，要麼是只能用一個CPU的Redis，要麼是Overhead無窮大的HBase/Cassandra。在那個年代，需要幾億個Cookie的實時的Dynamic Remarketing，還有很多基礎技術研發上的挑戰要應對。寫個分散式的Logistic Regression，要麼MPI，要麼巨慢的Hadoop Job一個迭代一個迭代跑，高級一點，也就是搞個專有集群像Yahoo LDA那樣Hack Hadoop來做一點工作。

回到今天，SSD已經大規模鋪開，連AeroSpike這樣的商業系統都已經開源，Spark使得很多演算法實現變成了一個API Call。對於計算廣告來說，無論是書，論文，乃至各種開源系統和Talk，都遍地都是，沒有什麼秘密可言了。所以今天再說Dynamic Remarketing，實在和做一個電商網站一樣沒有什麼技術挑戰上的差別了。

時代的潮流滾滾而來，個人的努力在這個面前不值一提。據說現在是一個人工智慧的時代，各種計算框架已經火了一段時間了，相信過一端時間，各種演算法包會越來越多，然後是Cloud上的各種API，相信在2018年，實現一個AlphaGo，應該只需要5行代碼了。

所以，做一些記錄，回顧一下過去幾年的互聯網廣告生涯，也想一想，這個世界的未來在哪裡。希望五年之後再回頭看，能夠有勇氣說，自己也為時代帶來了一些進步。
推薦閱讀：