有哪些可以獲取數據的網站?[大數據]

做數據可視化或者數據分析的朋友可能經常會碰到的問題就是有想法沒有數據。想到我有幾位朋友就是這樣,因此每次我抓取了數據我會第一時間輸出給他們。

有些可視化或者數據分析的朋友可能自己會爬蟲所以當自己有想法的時候他們就回自己手動取做爬蟲去抓取一些數據。但是往往是有可能有些數據抓取不到,還有可能有些人根本不會爬蟲。這時候為了更加方便我們快捷的學習可視化和數據分析的知識,我們的時間應該投入到後續的研究而不是數據的獲取。

但是 如果你很倔強(比如我)非要通過爬蟲方式抓取數據進行研究分析那麼同樣可以給你推薦一個學習爬蟲的路線和學習資料,助你10天入門爬蟲:如何學習Python爬蟲[入門篇]

沖著以上的一些方面,於是在今天想給大家推薦一些可以免費或者只需要花費很小的代價就可以獲取數據的網站或者方式,一下推薦的網站格式為標題加簡單那介紹加網站的一張配圖,你可以按照介紹取尋找你需要的資源。

第一推薦這樣一個獲取數據的方式:有哪些「神奇」的數據獲取方式? - Liu Cao 的回答

(1)、數據分析報告,數據報告,數據圈論壇

不得不說這真是一個獲取數據的好地方,

主要包含:國內宏觀、區域數據、世界經濟、價格數據、工業行業、區域數據、國內宏觀、區域數據、世界經濟、價格數據、工業行業、區域數據。

是否免費:否(花費論壇金幣)

(2)、海量數據免費下載

此網站數據就比較多涉及的方面也比較多了,合適各種行業各種朋友。

主要包括數據:語音識別、醫療健康、交通地理、電子商務、社交網路、圖像識別、統計年鑒、研發數據等領域。

是否免費:否(論壇金幣,部分免費,部分花費少量金幣)

(3)、國雲數據市場

主要包含數據:生活服務、教育、能源、建築、交通運輸、政府、金融、農業、醫療、衛生

是否免費:否(大部分免費,根據自己選擇)

(4)、數據包下載列表

主要數據包括:社交網路、電子商務、企業名錄、 金融數據、生活服務、科研數據、知識庫

是否免費:否(不全免費,部分需要rmb)

(5)、微盛投資:滬深市場5分鐘數據 wdz格式 轉 txt、通達信,大智慧dad,飛狐dad,錢龍,同花順等(此網站界面有點low,不截圖解釋請自行訪問查看)

(6)、國家地球系統科學數據共享平台全球變化研究出版數據直接下載 (有部分數據)

(7)、中華人民共和國國家統計局>>統計數據

聽名字就知道是什麼數據了吧,而且所有數據都是免費,當然這個網站還有彩蛋。在文末的友情鏈接裡面有很多地方的數據以及國外各國的數據。所以不要簡單的認為只有本網站那麼點數據喔。網站最後的友情鏈接請仔細查看,不要說我沒告訴你。

(8)、分類: 地球物理相關資源

這一位博主的博客,maybe出於研究目的,他整理了一些 地球物理相關的資,如果有人需要研究這方面的東西可以這裡去下載你想要的資源,當然全部是免費的資源了。

(9)、國家數據

同樣包含了國家的各種數據,點進去你可能會發現新世界的大門,而且所有數據均是免費!果然黨是不會騙你錢的,好好跟黨混沒錯。

(10)、產業數據_統計數據

數據主要包括:能源、電力、冶金、化工、機電、電子、汽車、物流、房產、建材、農林、安防、包裝、環保、食品、煙酒、醫藥、保健品、IT、通信、數碼、家電、家居、傢具、文化、傳媒、辦公、文教、服務、金融、培訓、旅遊、服裝、玩具、禮品、工藝品

是否免費:全部免費

(11)、百度數據開放平台

不噴不噴不噴!重要的事情說三次。這點數據還是有用的!

掘金是一個高質量的技術社區,從 Swift 到 React Native,性能優化到開源類庫,讓你不錯過互聯網開發的每一個技術乾貨。當然你可以選擇下載他們的app:點擊鏈接或者各大應用市場搜索「掘金」,技術乾貨盡在掌握中。趕緊去看看吧。


推薦閱讀:

Python爬蟲實戰入門五:獲取JS動態內容—爬取今日頭條
Python多進程編程中進程池鎖共享問題

TAG:大数据 | 程序员 | 编程 |