計算機視覺技術+無人機,有哪些想像空間?


個人比較看好兩個方向:

1、無人機輔助進行大型場景三維重建,感興趣的可以去查一下「SFM」三維重建演算法,很適合用無人機來做圖像採集,比如大型建築甚至整個城市的三維重建,這方面的實踐也有很多,比如瑞士的一家公司Pix4D在去年底聯合了無人機製造商Aeryon Labs以及巴西里約PUC大學開展了一個項目:利用無人機為里約的標誌性建築,高達30米的基督像進行高精度3D立體掃描,最後得到的基督像的3D數字模型精確度非常高,誤差可能只有2-5厘米左右。

上圖中的綠點就是SFM演算法求得的各個相機位置
參考:無人機又一項新技能get√ :對里約基督像進行高精度3D立體掃描

2、無人機+VR做模擬飛行,想像一下,如果把無人機上相機的圖像實時傳輸到VR設備,是不是能讓你體驗一把空中飛行?Parrot就在做這方面的實踐,讓你可以把無人機的數據連接到Oculus Rift,身臨其境地去飛,那可比Google Earth的模擬飛行爽多了,如果再加點東西,搞個「真實地圖模擬空戰遊戲」也不是沒有可能。不過目前來說,無人機的續航還是個頭疼的問題。

上面這兩點是我認為CV+無人機比較有潛力也具有可行性的方向,對CV來說,無人機相當於提供了一個可控的大範圍移動的相機,而對無人機來說,CV技術可看作是給它裝上了眼睛


用無人機拍照,非常適合用來對城市進行三維建模。相比傳統的固定翼飛機,四旋翼無人機
1. 精度高 可以更貼近地面,重建出更多細節。
2. 價格平 採集數據的成本大大降低,普通用戶也可以玩。
3. 靈活方便 不受航空管制(有些區域貌似還是需要飛行許可)。

長遠來看,有了視覺,期待無人機成為機器小寵!電池是目前主要局限……

其實我主要是想打個廣告:
我們實驗室正在開發的三維重建雲端平台 Altizure (&<-- 點我點我)將在近期發布,會有針對無人機的優化,希望大家多多關注!歡迎同好交流!


無人機可以看做數據採集平台,因此高空中採集的圖像信息(地理信息,圖形信息,圖片,影音,光譜等等)非常豐富,且數據量巨大。
視覺技術我的理解(因為我不是這個領域的,只是偶爾會用到一些演算法,或者一些任務涉及這方面,如有不專業還請見諒),視覺技術涉及到數據重構,數據識別等等。因此一個是採集,一個是重構,兩者匹配,非常有前景。
比如無人機採集大量地理系統,然後通過視覺技術或者其他技術實現虛擬地理呈現,會很酷。


國內DJI在這方面已經作出了很多嘗試,並且投入資金舉辦了「無人機應用創意大賽」。

上屆比賽的一些看點有
1. 高速公路的交通事故取證。
2. 重點公共場所的人流密度檢測。
3. 場景3D建模。

隱約記得DJI正在開發的一個產品是給違停開罰單的,大概就是用位置檢測,車牌識別。

另外,MIT的航天控制實驗室(好像是這個,翻過幾篇四軸相關的論文,名字記不太清楚了)在這方面的研究動向可以關注。


想像空間當然很大,畢竟可以想像有一雙眼睛在天上,那麼能做的事情就很多了。
如果說計算機視覺+駕駛=無人駕駛,計算機視覺+監控視頻=無人安防,這些都只是取代人眼的技術,但是「計算機視覺+無人機」就更像是給人類增加了一雙眼睛,去看到曾經看不到的東西。
除了樓上幾位的「想像」:3D建模,人流密度預警等等外,我所知道的還有以下的「想像空間」:
1. 利用無人機+計算機視覺對無人區域、太大片的區域甚至是不適宜人進入的區域進行安全監控。
例如農田是否有安全區域被進入了,又例如一些危險區域,如強電流地方和強酸強鹼地方的常規檢查。
2. 飛行機器人的視覺系統。
例如無人機的視覺避障,DJI確實做了很多工作,但是運算力,續航能力確實會增加負擔。
3. 無人機拍攝。
例如之前國外的Lily,GoPro都是用無人機做拍攝記錄,其中一個技術點就在於通過視覺系統自動識別到要跟拍的目標,解放雙手。
4. 。。。


不過,歸根結底,無人機是多了一個應用場景,至於技術難點還是在視覺系統,控制系統等,至於要使「想像空間」足夠大,還需要有足夠的數據和穩定成熟的演算法。


就看了那麼多科幻片和警匪片來說,只要自動圖像識別和定位成熟了,無人機非常適合執行特殊任務,例如掛載炸藥,手槍,燃燒彈,劇毒氣體之類的,設定好執行時間,路線,目標特徵,可以定時幾天之後,到幾公里之外定點執行任務,安全無風險,就算目前攝像頭遍布的情況下,都能神不知鬼不覺。
這個無人機如果不管理好,將來可以輕鬆威脅任何人的安全,現有的安保措施都將實效。


正在搞這方面
打算從無人機城市建模開始。
祝好運!

無人機已經入手,圖像處理程序alpha版已經完成。暑假開始試機開搞。


FPV(first person view,第一人稱視角)。在四軸飛行器上裝攝像頭,攝像頭旁用LED燈照明,然後戴上一種特殊眼鏡裝置,飛行器攝像頭的視野回傳到眼鏡裝置上,你就像坐在飛行器里控制其升降進退,體驗在天上飛的感覺。(無人機出來的時候就想這麼幹了)
來源:微博@計算機世界


前一段時間剛好參加了個會議,講的是傾斜攝影的方面的內容。其中有一個思路感覺屌炸天。
講的是在以後的智慧城市建設中,可以用航拍無人機上掛載多組合相機,利用smart3d之類的軟體作出高精度的三維模型,然後可以在這個模型中給添加上各種屬性。
比如做了一棟樓的三維模型,然後可以把這棟樓的信息添加到屬性里,到期自動提示做需要的監測,維護;也可以把這棟樓上每戶的信息(比如姓名,年齡,工作單位,balabalabala~~~;總之你能想到的都可以加入)錄入到3d模型上對應房間里。把一個城市所有的三維模型建立完成後政府就可以把他們的系統和居民的系統連接起來,這樣就可以使政府更好的來管理整個城市。
--------簡單了回答了下,有空了好好理理----


==
所有樓上想像的都有對應的一搜索一大把論文

所以說,目前我是沒有什麼想像空間


計算機視覺技術顧名思義是擴闊人類視界的技術,而無人機(本文是指市面上流通的民用機)則拓展人類的移動空間。兩種技術的結合,總的來說就是增加視覺信息量、增強視覺信息的判斷、加強視覺感官的刺激、通過視覺發送指令完成任務。

計算機視覺技術如VR,主要使用虛擬化技術為人類帶來感官享受,這方面和無人機結合可以用於競技比賽,尤其是室內、森林等複雜環境的飛行競技比賽,現實場景無人機虛擬化空中格鬥(如果街道攝像頭提供數據的話,無人機就變成雞肋,可有可無),VR如果說用來3D建模的話,實在無須飛行器。
視頻封面戴上VR眼鏡 參加無人機障礙賽—在線播放—優酷網,視頻高清在線觀看視頻

AR+無人機才是重點。現實增強擴闊人類視覺範圍,與無人機搭配擴充人類視界,無論是空間上(上天下海)還是視覺信息(增強判斷解讀)上。經改裝的無人機在AR配合下可以精確投送物品(快遞)、配合其他光學感測器可以跟蹤偵察目標(主要是軍事或動物記錄片)、拍空中或海里的相片/電影/視頻、安全救援任務(獲取並記錄現場信息、搜救)、森林山谷探險活動(探路以降低危險性,GPS無信號下迷路可作導航指引)、打獵、監控檢測施工現場(不僅監督工人有無偷懶,而且通過AR直觀顯示有無錯誤發生)、測量樓宇等大型建築、移動投影廣播等等。

還有一個業界用會到AR+無人機,那就是新聞界,AR搭上無人機對記者來說簡直如虎添翼,跑得比以前快多了,哦,講錯,是飛才對。
視頻封面黑客用Google Glass控制AR Drone無人機飛行—在線播放—優酷網,視頻高清在線觀看視頻講了這麼多,其實也就是智能眼鏡+四軸飛行器【doge】

關於視覺技術與無人機的結合,還有個大家很熟悉但常忽略的例子----Iron Man Armor
視頻封面CG欣賞:鋼鐵俠科技動態UI製作合成流程—在線播放—優酷網,視頻高清在線觀看視頻


無人機公司大疆有和一個製作地圖的公司合作用無人機繪製地圖


目前相對比較成熟,並且應用較為廣泛的是三維重建,即應用無人機搭載相機進行地面影像拍攝,再應用例如Skyline的Photomesh等三維建模軟體,進行諸如城市、景區等大小場景的三維重現。完全客觀的還原真實世界的場景,從而進行例如三維實景導航、農林水利等政府行業規劃、景區預覽及路線設計等多方面應用。其效果較二維場景而言更加客觀真實,並且應用三維模型,可以使規劃設計等更加精細準確。
此外,個人能夠想像的有應用無人機搭載體感設備進行飛行體驗,無人機搭載攝像機輔助電影拍攝,無人機搭載測速儀作為移動測速站輔助交通管理,搭載監控攝像頭進行河道或森林等監控及危險排查等諸多方面的應用。


我是做無人機視覺導航的,我覺得主要方向有:場景三維重建,地面目標跟蹤,無人機視覺輔助的自主導航以及無人機slam


無人機+Project Tango怎麼樣


1.結合圖形學。3維重建,包括地形、地圖繪製,建築室外室內重建。
2.結合VR。實現沉浸式飛行體驗,進入不適合人類進入的環境作業。
3.結合人工智慧。這部分可開發的應用十分豐富,如自動跟拍,智能搜救,導遊,車位導引,快遞等


開罰單送快遞什麼的真的不考慮下續航么?這玩意最多留空不超過40分鐘啊!我覺得最近以四軸為主的航模(叫無人機真是抬舉了)泡沫不小。你說自己拍點東西玩玩還行,但是留空時間在那放著奇思妙想之前先看看電池還有幾格電吧


見 南方公園。


無人機優勢在於能夠獲取大量的航片數據,地理位置信息數據。計算機視覺技術是將數據三維可視化,這樣結合起來就是構建大範圍的三維可視化場景


我比較看好的是利用無人機+虛擬現實技術來模擬真實情況下的飛行體驗。


推薦閱讀:

如何用航拍+ps做出這種效果?
如何評價央視紀錄片《航拍中國》?

TAG:計算機視覺 | 無人機Drone | 航拍 |