有什麼工具能批量下載豆瓣相冊的圖片?


這個問題,簡直就是為我最近的研究成果設定的啊!!哈哈哈哈哈哈!!!!

-------------------老司機要開車了,請買票上車

先放圖,寫了個python爬蟲,輸入相冊網址,然後就開始自己嘩啦啦地開始下,爬的最大的相冊目測幾百張,大約10分鐘,只用了單線程,沒做任何優化。

但是省心啊!!!一點就自己開始下載,然後根據相冊名字自動命名,圖片按照作者名字+數字自動往下排。

至於為啥要爬這些相冊,嘿嘿嘿嘿嘿嘿嘿嘿(一張老司機臉

不說了,我還有好多相冊沒爬完


這個問題更適合去問搜索:

  1. chrome瀏覽器安裝豆瓣助手 Douban Helper For Chrome

  2. 使用chrome瀏覽器配合迅雷來實現 http://www.douban.com/note/104594415/

  3. 火狐瀏覽器用戶的方法 http://wenku.baidu.com/view/ddfaf10d4a7302768e993908.html
  4. 小林豆瓣相冊批量下載器 http://xiazai.zol.com.cn/detail/43/423745.shtml


以上說的大部分用過,最後留下來了豆瓣相冊下載器。

簡單的說一下為什麼我選擇它,與同類軟體相比:

  1. 能保存圖片介紹,相冊介紹。在碰到有的相冊的文字介紹內容也有用時,可以一併下載瀏覽。
  2. 能夠自動分析豆列,下載成批的相冊。搜集了豆友的精選集,或者自己建立精選豆列之後,再一起批量下載,不用反覆操作,一個一個相冊點,爽。
  3. 界面簡單幹凈,不用註冊也沒有亂七八糟的(丑到爆的)花紋和花哨的功能(每張下載的圖片都預覽一下之類)。在java環境下就可以使用。
  4. 在同一個文件夾內,不重命名的情況下,下載過的相冊會自動掃描,不會再次下載。

缺點:

  1. 下載量太大(比如說幾百個相冊)的時候,有一定幾率出現異常暫停。不過也沒關係,從上次下載的地方接著下就行了。
  2. 網路不佳的情況,下載的圖片可能破損(只顯示一半)。可以重新下載未下載成功的。

以下是官方介紹:

豆瓣相冊批量下載 =_,=||

————————————————————————

豆瓣相冊下載器(已支持Mac OS)

最新版本:v0.5.5

最後更新時間:2013-12-30

Q群:225969044

---------------------------------------------------------------------------

軟體介紹

[主界面]

特點:

1.可下載圖片描述。

2.可下載大圖。

3.可生成瀏覽網頁,網頁支持查詢。

4.支持Windows,Mac OS等系統。

------------------------------------

【使用說明】

【下載相冊】輸入地址(可輸入多個地址,請保證一行),點擊下載,O了。

可點住相冊封面拖放至「相冊地址」,多個地址會自動換行。

【更新相冊】拖住相冊文件夾到「相冊地址」內,會自動識別相冊原始地址,點擊下載,

可更新照片和網頁。

【支持下載類型】

1. 豆瓣相冊下載,如:

袋鼠的相冊-亂拍

2. 下載指定用戶所有相冊,如:

袋鼠的相冊

※ 如果該用戶相冊過多,慎用。

3. 豆瓣活動下載,如:

活動照片- 瞬間被自己的小時候秒殺了!!!【老照片兼囧照最有愛】

4. 豆瓣小站下載,如:

Book Odyssey (豆瓣)

5. 豆瓣小站公共相冊下載,如:

?旅行的意義 (豆瓣)

6. 影人相冊下載,如:

相冊首頁:蘇菲·瑪索 Sophie Marceau 圖片

影人首頁:瑪蒂娜·加西亞 (豆瓣)

7. 電影相冊下載,如:

首頁:一天 (豆瓣)

列表:一天的全部圖片

劇照:一天 One Day 劇照

海報:一天 One Day 海報

壁紙:一天 One Day 壁紙

※ 如果地址為首頁或列表,下載該電影所有相冊(劇照、海報、壁紙)

8. 相冊豆列下載,如:

測試相冊豆列

9. 其他網站單頁面圖片下載,如:

百度一下,你就知道

【生成網頁說明】

為了方便瀏覽,下載相冊後會在相冊目錄下自動生成網頁。文件名為"index.html"。

(相冊:維城亂馬的相冊)

[網頁功能圖解]

網頁分為五部分:

一、標題

默認使用相冊名做標題,點擊標題可跳轉至豆瓣原始相冊。

二、編號

會根據圖片排序,自動生成編號。

三、照片

點擊有興趣的照片,可以跳轉到照片原始地址,查看照片評論。

四、照片描述

普通相冊和小站相冊會顯示照片描述。活動相冊除顯示照片描述外,會顯示照片所有者名字,點擊名字,可打開其主頁。

五、工具欄

工具欄功能為回到頂部、上一頁、下一頁、跳轉、改變分頁大小、查詢和排序。

其中,排序為正序和倒敘,有時候能用上~

分頁大小慎用,電腦配置不高的,不要一次顯示太多圖片,瀏覽器會掛掉的~

查詢功能:

普通相冊和小站相冊可以根據照片描述查詢。

活動相冊可以根據照片所有者ID、用戶名、照片描述查詢。

如圖:

普通相冊根據描述查詢照片(相冊:[已註銷]的相冊)

活動相冊根據用戶名查詢圖片(圖為福根兒小時候~)

[活動相冊 - 查詢]

【關於原始大圖】:

個人相冊和小站相冊圖片總共有三類:縮略圖、顯示用圖、原始大圖。(豆瓣改版後個人相冊開始支持原始大圖)。

其中顯示用圖和原始大圖的圖片大小可能相同,但顯示用圖是經過壓縮的,可能質量有損。

如果下載相冊時,會在執行完處理單元後,檢查每張圖是否存在原始大圖,如果存在則下載。

下載的圖片文件保存在相冊目錄中的raw文件夾中。

生成的網頁中也有註明:

「編號」字體如果為藍色,代表此圖無大圖,或大圖與顯示用圖大小相同,可點擊查看無壓縮的原始圖圖。

如果為紅色,代表這張圖有原始大圖,點擊編號,可以查看原始大圖。

【v0.5.5(2013-12-30)新增功能】

1.標題下方增加相冊信息顯示,包含:照片數、下載時間、相冊描述。

配圖(相冊:.捉摸不透姑娘.的相冊):

標題下方增加相冊信息顯示

局部:

增加相冊信息顯示

2.增加評論數信息顯示,工具欄增加「HOT」按鈕,點擊後照片根據評論數排序,方便查看最熱門照片。

配圖(相冊:[已註銷]的相冊):

局部:

增加評論數顯示

有時也有意外發現。。。囧:

裸男評論最多

點擊評論數,可跳轉至照片評論頁面:

點擊評論數,顯示具體評論

3.增加地址格式化功能:批量下載多個相冊,輸入多個地址後,每個地址必須分開單行顯示。格式化用於自動換行,如圖:

輸入多個地址:

格式化前

右鍵菜單選擇「格式化」或使用快捷鍵「Ctrl+F」:

右鍵菜單格式化,或者Ctrl+F格式化

格式化後:

格式化後

4.增加新版本提示:程序啟動時檢測軟體是否有更新,如果有,顯示提示框,點擊「是」,自動調用默認瀏覽器打開此日誌頁面。

5.增加下載錯誤圖片自動重下功能,默認嘗試5次,超出5次仍有失敗圖片,則在列表中顯示,可人工查看或下載。

【關於「處理單元」】

下載器原理是抓取網頁,通過正則解析內容,獲取照片地址並下載。

短時間內抓取過多頁面,程序會被禁(瀏覽器能正常訪問,程序第二天才能正常下載)。

為了能正常下載相冊,程序改為每50個頁面作為一個處理單元。一個單元抓取、分析、下載完成後,啟動第二個單元,直至完成所有單元,下載完整相冊。

為了防止每個處理單元時間間隔過短,程序經過判斷,如果單元啟動間隔沒有超過1分鐘,自動休眠1分鐘。

配圖:

[休眠]

[下載大相冊]

※請勿用於盜圖 = =||

------運行環境------

程序使用Java語言編寫,運行需要有JRE環境,如果沒裝,可以在這下載:

java.com: Java 與您

------相冊下載器 - 最新版本(2013-12-30)------

程序地址(豆瓣相冊下載器v0.5.5) - 微盤:

豆瓣相冊下載 v0.5.5.jar

備用地址 - 百度網盤

http://pan.baidu.com/s/1bnCaPXH

備用地址 - 金山快盤:

快盤網頁版快盤

------相冊下載器 - 歷史版本------

v0.5.4 (2013-10-14)

豆瓣相冊下載 v0.5.4.jar

豆瓣相冊下載 v0.5.4.jar_免費高速下載

快盤網頁版快盤

v0.5.3(2013-05-06)

http://vdisk.weibo.com/s/AlN1g

豆瓣相冊下載 v0.5.3.jar_免費高速下載

快盤網頁版快盤

v0.5.2(2013-04-22)

http://vdisk.weibo.com/s/yBnlV

豆瓣相冊下載 v0.5.2.jar_免費高速下載

快盤網頁版快盤

v0.5.1(2013-04-10):

http://vdisk.weibo.com/s/x5xK6

快盤網頁版快盤

v0.5:

http://vdisk.weibo.com/s/bs7-5

快盤網頁版快盤

【常見問題】

==========================

@離落

相冊下載器程序後綴是.jar

是java的可執行文件,同時也是壓縮文件。

如果安裝了winRAR、好壓等解壓縮軟體,可能默認關聯了.jar格式。

在雙擊程序時,不能執行,而是用WinRAR打開。

解壓縮後會得到兩個文件。

如圖:

[錯誤操作 - 不需要解壓縮]

上述操作是錯誤的。。

※豆瓣相冊下載器v0.5.jar雙擊可執行,不需要解壓縮。

取消WinRAR或好壓對.jar的文件關聯,可正常雙擊運行程序。

文件修改位置:

打開winRAR——選項——設置——綜合——關聯文件

如圖:

[WinRAR文件關聯修改位置]

======================================================

其他解決方法:

WIN7、XP中jar文件無法雙擊打開的解決方法

WIN7中jar文件無法雙擊打開的解決方法

could not find the main class win7/xp 雙擊執行jar包出現:could not find the main class

【2013-12-30 更新修復】

1.支持影人下載

2.支持電影相冊下載(劇照、海報、壁紙)

3.支持小站公共相冊下載

4.支持相冊豆列下載

5.HTML頁面增加相冊描述、照片數量、下載時間顯示

6.HTML頁面照片描述增加評論數顯示

7.HTML頁面增加評論數排序功能(方便查看最熱門的圖片)

8.增加軟體更新提示(啟動時檢查是否有新版本,如果有,提示是否更新)

9.下載超時自動終止下載線程(默認超時時間10秒)

10.調整HTML頁面生成順序,防止異常圖片重下完畢後生成文件缺失

11.圖片尺寸對比處理中,保留BufferedImage,增加ImageReader處理方式,提高HTML生成效率。

12.自動重下失敗圖片(默認重試次數5次,失敗後轉入手動選擇界面)

13.增加資源是否存在校驗,減少下載錯誤率

14.支持不同類型相冊批量下載(此前程序只支持同類型相冊批量下載)

15.地址欄支持地址格式化,快捷鍵Ctrl+F

16.增加默認下載線程數

【2013-10-14 Bug修復】

1.修復圖片下載停頓,網頁無法生成的bug

【2013-05-06 Bug修復】

1.修復活動相冊無法正常下載bug

2.修復小站相冊無法正常獲取描述的bug

3.其他已知bug

【2013-04-22 Bug修復】

1.調整同時下載線程數

2.修復mac下無法正常下載的bug(因目錄分隔符造成的低級錯誤。囧。。)

3.調整生成後的html頁面

【2013-04-10 Bug修復】

1.可下載個人相冊原始圖片。 - @ ?歐德伯裔@法雲地學士郎

2.修復地址尾部帶有「?start=」分頁信息時,無法下載全部圖片的bug。

3.修復小站相冊下載。(因豆瓣改版,小站相冊地址更變格式而無法下載的bug。) - @月島雯_Orange

【2012-06-24 更新】

1. 支持豆瓣活動下載

2. 支持豆瓣小站相冊下載

3. 增加處理單元,優化頁面獲取和分析處理

4. 去除相冊首頁地址輸入框,只保留"相冊地址"輸入,程序會自動判斷輸入地址的類型。

5. "相冊地址"增加右鍵菜單,提供基礎的剪切、複製、粘貼和全選功能

6. "相冊地址"支持地址拖放,自動換行

7. "相冊地址"支持文件夾拖放,自動識別相冊地址 – 用於更新

8. HTML新增評論連接,點擊圖片跳轉至圖片原始出處,方便查看評論~

9. HTML修改CSS樣式,統一字體。

10. 頁面圖片顯示改為JavaScript生成,

防止活動相冊等超大相冊在一個頁面一次性顯示圖片過多,造成瀏覽器掛掉~

11. HTML增加工具欄,功能分別為:回到頂部,上一頁,下一頁,跳轉,

分頁大小,搜索,排序。

12. 多線程下載,默認5線程,優化下載。

修復bug:

1.根據用戶下載時,出錯

2.相冊封面判斷不準確

3.其他bug若干

【2012-03-31更新】

1.HTML增加TOP按鈕,快速返回頂部。

2.菜單增加手動生成HTML頁面選項。

3.可以下載非豆瓣相冊的圖片(有公共訪問許可權的)。

4.自動轉換字符集,解決頁面字符集不同,生成文件的亂碼問題。

5.增加HTML頁面特殊字元轉換

6.修復bug若干,囧

【2012-03-27更新】

1.獲取照片描述

2.生成HTML文件,方便瀏覽

【附:其他相冊下載器地址】

xDou 豆瓣相冊下載器

xDou 使用說明 下載地址

DofePhoto豆肥小圖V1.2

最好的豆瓣相冊下載工具——DofePhoto豆肥小圖V1.2

豆佩克(Doupic):

豆佩克豆瓣相冊下載器小組

-------------------------------------------------------

下載器很多,可選擇最適合自己的~


chrome下有個叫豆瓣精靈的擴展,配合迅雷等下載工具可以輕鬆實現


豆佩克

有專門的小組,搜一下就能找到


同意樓上~

豆佩克小組:http://www.douban.com/group/doupic/

豆佩克豆瓣相冊下載器2015旗艦版本下載地址(無需註冊,歡迎使用 )

http://vdisk.weibo.com/u/5594636289


Mac下載可以參考這個帖子

豆瓣相冊批量下載 =_,=||

Java很適合mac下運行~


pip install douban-dl

douban-dl &

源代碼 http://github.com/einverne/douban-dl


啄木鳥下載器可以


剛好知道。

豆皮,不僅豆瓣,花瓣的畫板也輕鬆拿下。其他網站不知道,沒下過。


使用小樂圖客-極客版(Chrome軍工級圖片批量下載擴展),應用豆瓣相冊規則即可


最近寫了一個批量下載圖片的工具,正好針對豆瓣相冊進行了優化,題主不妨試試。

https://appsto.re/cn/3KDabb.i


推薦閱讀:

abaqus怎麼做出想要的裂紋並計算?
軟體的一出來真的可以到一萬一個月?
求推薦CMDB(Configuration Management Database)軟體?
請問雲桌面的概念是什麼,現在出了多少種雲桌面?
有什麼看英語新聞的軟體?

TAG:軟體 | 軟體開發 | 工具 | 信息技術IT | 豆瓣相冊 | 工具軟體 | 豆瓣 |