如何評價 Facebook 今年的開發者大會 F8 2017 ?

F8 2017 ,

Messenger Platform 升級到2.0(終於用真AI了),亮點是AR Platform,但Social VR的畫風一點長進都沒有啊……


舊金山時間4月18日,Facebook F8開發者大會拉開了帷幕。大會首日,Facebook首席執行官Zuckerberg做了主題演講,宣布公司將發布第一個AR開發者平台,他認為AR在社區構建中發揮著至關重要的作用。

Facebook將依賴大量的外部開發人員,為公司新的Camera Effects平台帶來AR圖像濾鏡和互動體驗。 在今天的Facebook F8會議之後,Facebook將在智能手機客戶端的相機功能中,加入第一個發布的AR效果。但是,Camera Effects平台的主要目標是,最終能與未來的AR硬體(如AR眼鏡)兼容。

雖然,很多專業評論家認為,Facebook僅僅只是整合了Snapchat、Facebook Messenger、Instagram和WhatsApp中最新Stories 及Camera的功能, 但是,Zuckerberg告訴TechCrunch,公司所做的一切,都是在為今天Camera Effects平台的發布奠定基礎。

由於目前的AR眼鏡離時尚美觀、經濟實惠等特性還有很遠的距離,但是智能手機卻早已實現人手一部。Zuckerberg表示,「要成為首個主流的AR平台,我們目前要考慮的載體一定不會是可穿戴設備,而是智能手機的相機功能。」他補充道,很多其他應用(比如Snapchat),一直將自己的AR體驗相關的開發方法限制在自己的產品上,但是,「我認為,建立一個開放的平台,將是推進AR體驗進步的重要一步。所有開發人員都可以在平台上工作、共享,這樣我們就不僅僅會得到10個或20個效果,而是會有數千個不同的效果。「

現在,Facebook已經向AR開發人員開放該平台的AR Studio測試版。它能讓開發人員利用精確的位置、對象識別和深度檢測來創建他們的效果。 Facebook的相機將能夠識別特定的物體,比如咖啡杯,還可以讓用戶關聯不同的效果,比如讓鯊魚在咖啡中游泳。

與此同時,任何人都可以使用Frame Studio來上傳簡單的靜態重疊圖像濾鏡,上傳後的文件將會在Facebook Camera中,對他們的朋友或頁面的粉絲可見。使用Frame Studio並不需要編程知識,用戶只需上傳一張圖片,用戶的名字就會出現在Frame的預覽和新鮮事帖子中。Frame Studio現在已公開發布,但鏈接目前還未激活。

目前,Facebook還不會允許任何品牌或廣告的植入,除非事先獲得批准。但最終,平台還是會通過這樣的方式盈利。Facebook發言人稱:「在考慮商業參與前,我們的重點將放在如何讓產品變得更好。」

AR的三大分類

Zuckerberg認為,AR體驗大約分為三大類:

  • 第一類即在物理世界中增強物體的附加信息,如在街道上添加具體的方向指示,或者在餐廳門口添加餐廳評價等;
  • 第二類即將全新的虛擬物體添加到現實物體上,比如棋盤或正在播放的電視機等;
  • 第三類即為已存在的物體增加額外的效果,比如讓你的鬍子能閃閃發光,或是添加一個城堡炮塔到你的公寓樓上。

Zuckerberg認為,人們普遍低估了AR,大家只是覺得「噢,很這只是年輕人們現在追逐的潮流」。 但他相信,隨著技術的不斷發展,開發人員將越來越有創造性,我們要實現的將不僅僅是在我們的臉上添加假鬍鬚。

開發人員可以使用三種不同的輸入來實現其AR效果:面部跟蹤器(Face Tracker),感測器數據(Sensor data)。這些都用於從其他應用程序中提取數據,並實時響應用戶,進行輸入。聯合開發的合作夥伴目前包括了曼徹斯特聯足球俱樂部、遊戲開發商EA和耐克運動等。合作夥伴將提供相關數據,來實現獨特的AR效果。

AR Studio的開發者們還可以為Facebook直播功能製作AR效果,今日大會後發布的效果將包括觀眾實時投票功能、標籤評論功能,另外,直播者還能在屏幕上添加GIF動畫,在直播中向觀眾展示。

Zuckerberg對未來 AR世界的願景

對於Facebook的定位,目前,Zuckerberg 認為,「我們絕對更偏向於把自己定位在軟體和服務方面」。幸運的是,相機和手機上的AR體驗,在下一個階段也不需要特殊的硬體來支持。 「我們不需要開發手機,因為手機的製造技術已經夠成熟了。」但他也承認,「在任何平台發展的初步階段,硬體和軟體是不可分割的。」所以,當AR穿戴設備技術成熟時,Facebook也應該會開發自己的硬體。

針對這一點,在Zuckerberg的宏偉遠景中,他將AR視為一種經濟均衡器。「可穿戴設備最終將可能會升級到隱形設備(如隱形眼鏡),用戶可以在自己家的電視上加入1美元的軟體,便可體驗AR,而不是非得去購買價值500美元、很多人都買不起的設備。這樣一來,用戶就可以節省一大筆錢了。」

這也恰恰是AR與Zuckerberg關於未來社會6000字闡述相呼應的點。他在闡述中,探討了自動化將如何把一些人類工作者擠出傳統崗位,並讓他們開始從事一些更直接服務於社區的工作,或是藝術創作。AR可以讓這一切更簡易且更經濟。

「我覺得,更多的人會從事不同的工作,並在工作上花費更多的時間。他們需要花時間與人交往、表達自己的想法、創造藝術。」 Zuckerberg說道,「而且,我認為,這與未來的AR世界完美融合,我們人類將要做的,大部分只是創造想法並分享它們。」

以前的計算平台完全是數字化的,並且可以讓連接到互聯網的所有人進行訪問。 但現實世界是巨大的,比Facebook的世界更大,可以加強AR體驗。通過開放這個開發者平台,Facebook將不必自己構建一切。雖然Snapchat在把AR帶給用戶方面開了個頭,但是,Facebook則恰恰制定了如何進一步發展AR的方案。


有兩個有意思的小東西大家可能沒注意到,一個叫 Frame Studio,另一個叫 AR Studio,可能設計師們會感興趣~

先說 Frame Studio 吧,這個很好理解。

這個小東西就是一個允許用戶創建靜態畫框的在線編輯工具。你可以上傳一個你自己的靈魂畫作到 Facebook 上,然後你的朋友、粉絲們都可以在拍照的時候把你的塗鴉放到照片上。說起來其實這個東西沒有技術難度,除了把提交許可權開放給所有用戶外,沒什麼值得好說的。那為什麼 FB 想要做這件事呢?我小人之心地猜測一下……感覺這東西未來會被用於品牌營銷。估計沒過多久就會出現什麼「使用可口可樂畫框發自拍,獲贊100+ 即可贏得 iPhone 手機一部」之類的 campaign 吧……

第二個 AR Studio 呢就比較有意思了。這是一個看起來非常簡潔的 AR 設計工具(軟體界面有點像 Sketch + Framer),但是這是給 AR 用的,不是做平面 UI 的。

正如其他答案提到的,這次 F8 大會上的兩個主題詞:相機 + 增強現實(AR)。小扎說要把手機相機變成第一個(實際上也是短期內最現實的)增強現實平台。(FB 這樣的公司肯定是想做平台)那平台的責任除了和大家分享願景,還有很重要的一塊兒就是提供更廉價、更好用的工具。

我們都知道 VR / AR 的設計門檻要比扁平 UI 設計高,除了要有 3D 功底,設計師還要能在 Unity 之類的軟體里寫一些簡單程序邏輯。如果這個設計門檻不降下去,勢必會影響到整個 VR / AR 生態的發展速度,所以 FB 有動力(也有能力)來做這件好事。

我貼一下官方的功能介紹吧:

  • Face Tracker is a real-time computer vision algorithm that tracks the face and allows the creator to make masks that fit and respond to facial movements without writing a line of code.
  • Sensor data is used to allow developers to create effects where people can move their phone to pan around a virtual world.
  • Scripting APIs allow developers to access and download data, respond to user interactions, and modify the effect in real time.

簡單來說,設計師可以不需要寫任何程序,就能創建自動跟隨人臉的濾鏡和特效(比如讓綻放的煙花一直跟隨你的頭頂)

如果你想要獲取手機的感測器數據、或者是創建基於用戶數據和交互行為的效果,你可以寫一點程序來實現,介紹里沒有詳細寫明會提供哪些感測器和用戶數據介面(這將很大程度上決定開發者可以有多大發揮空間)。

另外值得一提的是,從軟體的截圖來看,AR Studio 似乎允許你實時在手機設備上預覽你的設計效果。

這個工具目前是在 Public Beta 階段(可以填表申請內測),很多詳情還未可知。

說到 AR 相機,我想到下面這個場景:

如果 NBA 轉播可以用上 AR 攝像機 —— 某球員在場上,「身披紅光」(代表手感熱的發燙),持球突破與對手發生身體接觸,「火花四濺」(是不是太誇張了?),在三分線外出手,只見籃球劃著一道白光穿過網心,壓哨絕殺!回頭對著鏡頭,高舉手臂,微微一笑,背景立即加入「光芒萬丈」!——這 AR 鏡頭不就是灌籃高手裡的常用技法嘛?!以後 NBA 大概可以實時加入動漫特效了,而且還是根據你的用戶資料自定義的特效,每個人看到的都不一樣。。。你給這球員點個贊,說不定你會看到他頭上突然冒出個「Thanks!」…腦洞一開有點停不下來了……

哦對了,在家做菜的時候讓 ta 給你拍張照,你的菜刀會發亮,你的衣服會發光!


Facebook開發者大會全程回顧,增強現實是否是Facebook的「第二春」?

舊金山時間4月18日,一年一度的Facebook開發者大會F8開幕了,整個大會將持續2天,Facebook的開發者和一眾粉絲迎來了這場期待已久的「大聯歡」。

而就在昨晚,扎克伯格在他Facebook的主頁上發布了一張照片,既描繪了他準備大會的忙碌情態,也暗示了會上的一大重點 —— AR相機。

Facebook開發者大會全程回顧,增強現實是否是Facebook的「第二春」? - 知乎專欄

--------------------------------------

關注 @矽谷密探

緊盯全球創新趨勢


Facebook是哪門子大神呢?

日活躍用戶12億,月活躍用戶18.6億。中國No.1微信月活躍用戶約9億,是Facebook的二分之一。

Facebook旗下主要應用:

Facebook(月活躍18.6億),Messenger(月活躍過12億),WhatsApp(月活躍過10億),Instagram(月活躍過6億)。哪個挑出來都是估值幾百上千億美元的大塊頭。

開發者面向的就是這麼一群用戶,你可以直接說全球最大的用戶群。

這次開發者大會,主要集中在視覺技術和AI,勾勒一些方向,概念大於實際。AI技術有谷歌在前,Facebook不佔優勢。Oculus Rift去年銷量小几十萬,也算有了虛擬現實經濟的苗頭。

無論VR/AR還是AI,只要技術成熟了,產品成熟了,和Facebook手上的資源、近20億用戶都能產生化學反應。Facebook要真做出來,市值翻一番也是沒問題的。

問題是目前技術產品還很初級,劃時代產品不知2020年還是2030年才出現。現在說再多只是:展望未來,表達決心,為實現共產主義而努力奮鬥。


想要理解 Facebook AR 這個動作,需要先了解它的競爭對手 Snap。

簡單看一下 Snap 的演變。 從最初的閱後即焚,到 Story,再到貼圖濾鏡,再到最近上線的 AR 濾鏡。如果你深度體驗過 Snap,會發現他把去年大熱的 Prisma 的藝術濾鏡功能,iOS 市場份額第一的私密圖片 Keepsafe 的功能,全部無縫整合到了小小的 Snap 客戶端裡面。

Snap 的戰略非常清晰:Camera 作為入口,與之相關的所有圖片流量,都經過 Snapchat。

Snap 將會取代移動端相機+圖片處理+照片存儲。通過壟斷圖形相關的流量,再慢慢吃下社交,佔領用戶更多時間。沉澱用戶之後,做內容,廣告。當然,這時候的廣告,已經不是現在的視奸廣告了,而是像變形金剛電影植入諾基亞手機,蒙牛這種無縫的下一代廣告。

Facebook 抄襲 Story 那會兒,認知並沒有跟得上 Snap,只是在機械的模仿。但 Snap 16年的一系列動作,這個 Camera 戰略已經暴露的非常明顯了,Facebook 獲得了這個認知。所以,可能從半年前,兩家公司就在堅決執行 Camera 先行戰略。為什麼這麼說,因為不論是從 Snap 最近上線的 AR 濾鏡效果,還是 Facebook 開發網站API演示效果看,技術都比較成熟,基礎設施做的比較完善。

https://developers.facebook.com/products/camera-effects/ar-studio/

之前寫過的:

未來是一個「Camera World」。從柯達到諾基亞,再到蘋果,再到Snapchat。相機技術在變,相機的使用場景在變。人們展示自己的需求沒變:照片不再只是記憶,更成為一種交流的語言。

目前的 AR/VR 領域,識別技術、處理技術都已經成熟了。Facebook、高通這些公司都有成熟的SDK。相信 Google 在即將到來的開發者大會上,也會有大動作。

之所以AR/VR沒大規模爆發,應用。是因為還沒有像滑鼠之於個人電腦,多點觸控之於智能手機這種,「完美」的交互設備出來。「完美」的交互設備可能是Snap眼鏡,可能是亞馬遜、Google語音助理,可能是蘋果 Airpods,可能是 Leap Motion,或者其他的更屌炸天的視網膜顯示技術。那巨頭要做的,就是內容先行,再把開發者這種核心資源圈起來,先坐到牌桌上。到那個時候,或收購,或抄襲。不就是一觸而就么。

「The main contradiction of today"s society is the contradiction between the growing demands of the people"s drunbility and the backward content production tools. 」——Neil Wang

綜上。Facebook,Snap 現階段就利用輕 AR,滿足人們的裝逼,展示個性需求,繼續開展廣告業務。同時,布局 AR,在未來時機成熟的時候引領時代。


(本文無利益關係,純個人喜好,誠意創作,所有圖片截圖自2017年Facebook F8的視頻)

(不清楚Facebook F8是什麼,或者不知道去哪觀看Facebook F8的小夥伴可以去文章末尾看附錄)

太長不看版:

這次F8的重點有兩個:

1 增強現實(AR)平台:Facebook準備把攝像頭這個設備打造成第一個主流AR平台。Facebook以前認為未來的AR主流平台會是眼鏡,但現在看來手機會成為通向終點的過渡平台。 這個平台現在包括兩個具體的產品:Frame Studio和AR Studio。

2 虛擬現實(VR)社交應用:Facebook Spaces。這個應用可以讓用戶在虛擬的世界裡控制虛擬的任務、並和朋友們社交,讓在物理空間上分隔的人們在虛擬世界裡在一起玩耍。

完整版:

看點1:增強現實(AR)平台

1.1 AR平台概念:

去年F8大會上小馬哥提到了Facebook的10年計劃,10年計劃的終極目標是讓這個世界上所有人可以在任何時間分享給任何人任何東西。今年F8小馬哥表示AR技術對這個終極目標有很重要的意義。

Facebook的10年計劃

小馬哥主要關注AR在三個應用場景:

a)Information:展示信息,比如路線,消息

b)Digital Objects:在物理場景中增加虛擬物品,比如在一個空桌子上增加一個棋盤

c)Enhancements:增強物理世界的已有物品,比如把已有的一個房子變得更好看

AR的三個應用場景

小馬哥本來以為眼鏡(比如google glass,oculus 眼鏡)會是運用AR技術的主要載體(可能需要10年時間來完善)。但在過去幾年中發現,前面提到的三個應用場景的早期版本已經在手機上普及開來。對於展示信息,我們可以在app照的圖片上再加上自己的塗鴉。在物理場景中增加虛擬物品這個應用場景中,我們有Pokemon Go這種app,讓我們可以在物理世界中抓虛擬的怪獸。在物理世界物品增強這方面,我們有app可以給你的自拍視頻或照片加效果(比如視頻聊天中本熊貓就喜歡給自己的臉上加個熊貓特效)。

很多人認為這些app的火熱只是因為年輕人的標新立異。但小馬哥認為這是一個新的AR載體的起點。大家都在用不同的app來實現AR的不同部分,本質原因是沒有一個平台讓你體驗任意的AR效果。

小馬哥說從今天起,我們要來一起構建這個大一統的平台。而這個平台就是我們的攝像頭,攝像頭是第一個應用增強現實技術的主流載體。小馬哥演講中的原話是:「if you take away today, this is it. we are making the camera the first mainstream augmented reality platform. 」說完這句話台下立刻響起熱烈掌聲。

通過這個平台,任何人可以設計和上傳視頻或照片的AR效果。通過這個AR平台,我們就不再局限於可選的幾十個效果,而是成千上萬的由全世界人設計的AR效果。這個平台今天開始發布。

1.2 AR平台具體分為兩個軟體:

a)Frame Studio: 讓用戶可以設計並上傳2D濾鏡或效果,這些濾鏡或者效果可以應用在圖片上,也可以應用在視頻中。

2D濾鏡和效果

b)AR Studio:用戶可以設計並上傳AR效果

AR效果

1.3 AR studio背後的AI技術支持:

除了在平面的圖片上加效果,我們也想在3D的真實世界加效果。這個平台提供了這些技術來支持3D效果:

a)precision location - simultaneous localization and mapping (slam). 這個技術可以讓虛擬物品的位置相對某個物理物品固定。舉個例子,這個技術可以讓你在一張桌子上放一行字,無論你怎麼移動你的攝像頭,這行字一直固定在桌子的一個地方上,就像物理世界真實的物品一樣。

precision location舉例

b)3D effects - Capture interact with scenes in 3D with high precision 通過2D的圖片實現3D的效果。

這是一張2D圖片,通過AI技術,我們可以檢測出這張圖片里各個物品的深度(depth),從而讓那些球在房間里彈來彈去(就像那些球真的在一個物理空間里彈一樣)▲

c)object recognition - real-time visual understanding 實時的對象識別。

在這張圖片中,手機app在手晃動的情況下依然精確的識別出了花盆酒瓶杯子這三個物品的位置和類別。這樣用戶可以對物理世界的物品進行操作。比如點擊那個花盆,就會給花盆增加些花▲

d)除了以上的ai技術,我們還需要精確的定位技術。

平台的這些技術可以讓我們開發很多的AR應用。

1.4 AR應用

比如這個效果就是由Nike開發,讓用戶展示運動里程的視頻濾鏡▲

比如這個遊戲,可以把一個空桌子上變成戰場▲

我們也可以通過攝像頭在這面空白的牆填上美麗的圖案▲

比如你喜歡某家飯店的某一款pizza,你可以在那款pizza的菜單上加一個note,下次你的朋友來的這家餐館的時候,把攝像頭對準菜單,就能看到你加的標籤▲

或是給自己在的桌子加個特效。你的朋友打開攝像頭,就能看到你加了特效的桌子▲

又或是在冰箱上給你老婆留個虛擬的紙條▲

看點2:虛擬現實(VR)社交應用

今天Oculus上線了Facebook Spaces。這是一個VR社交應用,讓你可以控制VR里你的化身(Avatar)和朋友們進行社交。

首先,在用戶註冊時,需要選擇一個自己的化身。Facebook Spaces會基於用戶的Facebook頭像用機器學習演算法生成一些候選化身供用戶選擇:

Facebook Spaces中的化身(Avatar)

然後,用戶和朋友們控制的化身可以在Facebook Spaces一起做很多有意思的事情,比如做一個頭盔給朋友戴上:

在VR中做一個虛擬頭盔

如果你的朋友不在VR裡面怎麼辦(比如沒攢錢買下oculus頭盔)?不要緊,Facebook Spaces集成了Messenger。化身可以在VR里和在真實世界中的朋友打視頻電話~是不是超科幻?就好像我們在走向了黑客帝國里的矩陣社會。大家的精神一起在虛擬的世界中生活,而大家的肉體則分別在一個個充滿營養液的罐子里。本熊貓陡然冒出了一種世界末日的孤寂感~

VR里化身和在真實世界中的朋友打視頻電話

看點3:其他

3.1 上線新一代的Messenger,之前Facebook做了很多工作讓business可以在Messenger上找到他們的目標用戶,而現在新一代的Messenger能夠幫助用戶找到TA感興趣的business和Messenger Bots。

3.2 討論Aquila(我們新一代的太陽能無人機),這個無人機會給沒有網路的地區的人們帶去互聯網。

Aquila

附錄1: 什麼是Facebook F8?

這個問題有人在馬克扎克伯格的Facebook主頁上問過他,他的回答是:「It"s our annual developer conference where we discuss technology we"re building.」 也就是說,這是Facebook年度最隆重的對外發布的大會。

說到這小馬哥還講了個段子,這幾天《速度與激情8》正在上映,簡稱F8。兩個F8湊在一起真是傻傻分不清。

附錄2: 去哪裡看Facebook F8?

F8於2017.4.18-19兩天在加州San Jose舉行,現場版是肯定看不到了,但是視頻可以在Facebook網站上看到:https://developers.facebook.com/videos/?category=all

(內容編輯:panda,文字編輯:panda)

關於作者:矽谷碼農和他老婆,舊金山灣區的詩和遠方,走心的吃喝玩樂。在居住的城市旅行,幫你探路帶你玩。

微信公眾號/微博/知乎/秒拍/FB/YouTube:@灣區玩去


今年Facebook F8開發者大會還是有很多亮點的,但在應用層面確實少了很多創新,很多新的動作,要麼向Snapchat致敬,要麼向微信致敬。Facebook在AR和VR上的布局還是領先其他巨頭好幾個身位的,在AI上相比Google和蘋果落後了不少,但別忘了Facebook在用戶畫像方面的優勢,Facebook想在AI上做的更智能,只是時間和投入資源的問題。

更詳細信息請移步我在知乎的專欄文章:

Facebook 2017 F8開發者大會8大要點總結 - 知乎專欄


ar功能的相機效果真的很酷炫。之前寵物小精靈把它用於遊戲,沒想到用於軟體也能有這麼棒的效果。

ar技術是以後的主旋律,只需要手機就可以實現許多獨特的功能,真的很有潛力。


雖然大家說,Fb變成了snapbook,但是能召集那麼多的媒體資源宣告自己的計劃才是會用行動打動人的,snapchat真的很低調啊,但是他們越低調越能和fb形成巨大的差別宣傳,到最後其實還是看誰的內容夠好!fb做這個是想讓更多人加入到測試還有期盼當中,肯定有不小的技術籌碼。重要的不是他說了什麼,而是他做了什麼。


雖然提了很多AR場景,但實際上所有的動作都是對應snap的。

從AR落地的角度來說,試圖通過AR和LBS合作內容服務都有一個先天劣勢。沒有一個有效的提醒來引導用戶注意到LBS位置的AR內容,而AR服務基於手機又不能實時的發覺AR內容。

之前我認為地圖服務會是結合AR服務的一個好結合點,但是從現在來看,很難有足夠的服務驅動力來引導用戶。比如均衡用戶在室內的內容服務,引導用戶在戶外使用內容服務。話句話來說,用戶在室內AR服務用不到,在戶外想不起來用AR服務。

基於手機這種硬體模式要實現AR服務,估計還有很長的路要探索。

VR這塊估計之後會對虛擬社交市場有很大的推動作用,不過現在硬體形態還是個問題。手機版VR手柄的操作體驗目前還處於很糟糕的狀態中。要實現VR社交,不但需要實現顯示,還需要做一種快速廉價的通用交互解決方案才行。不然的話,社交內容很難有效的建立起來。畢竟不是誰和朋友互動,只給好友畫個鼻子,戴頂帽子就能滿足的。這只是VR社交服務的剛剛開始。

從現在來看,這兩者都輸入前景廣闊,但是技術和產品都屬於非常早期的階段。



推薦閱讀:

小冰能通过图灵测试么?
5-10年後,高速公路收費員這個職位還存在嗎?
如何評價 2013 年電影《Her》?
程序員對圖靈的認識是怎樣的?
如何評價深度學習框架Keras?

TAG:Facebook | 人工智慧 | 增強現實AR | 虛擬現實VR | FacebookF8 |