找回密碼 或 安全提問
 註冊
|註冊|登錄

伊莉討論區

搜索
尊貴會員無限使用任何功能你準備好成為出色的版主了嗎?安全提問(回答) 和 永久尊貴會員 事宜
mgofficesiro鬼滅之刃office
heroinejuq 590莊巧涵知らなか日文遊戲阿斯加得マジック

休閒聊天興趣交流學術文化旅遊交流飲食交流家庭事務PC GAMETV GAME
熱門線上其他線上感情感性寵物交流家族門派動漫交流貼圖分享BL/GL
音樂世界影視娛樂女性頻道潮流資訊BT下載區GB下載區下載分享短片
電腦資訊數碼產品手機交流交易廣場網站事務長篇小說體育運動時事經濟
上班一族博彩娛樂

[繁]迷宮飯11-

[繁]肌肉魔法使-MASHL

✡ 斗破蒼穹 年番/鬥

[繁]香格里拉・開拓異

老媽沒收兒子的手機

[繁]我獨自升級08-
電腦新資訊電腦軟體討論電腦軟體資訊分享電腦硬體討論電腦硬體資訊分享電腦萌化版電腦系統 OS 討論電腦程式設計
電腦設計技術交流圖像設計及交流各類下載工具教學寬頻上網討論
查看: 15541|回復: 5

[求助] python爬蟲抓不到圖[複製鏈接]

Rank: 1

帖子
113
積分
54 點
潛水值
30168 米
發表於 2018-5-3 03:07 PM|顯示全部樓層
回覆中加入附件並不會使你增加積分,請使用主題方式發佈附件。
本帖最後由 yaksa1105 於 2018-5-4 03:33 PM 編輯

我是學python的新手,以爬蟲為主題找了一些網上的資料,
抓資料的都OK,抓圖的部份也有幾個成功了。

昨天遇到一個教學帖是抓百度貼吧的圖,跟著實做後出現問題了,
抓網頁原始碼OK,我用正則表達式處理資料,得到圖片位址OK,
下載圖片卻出現連線嘗試失敗的問題,有時候抓到一張有時候二張,
...
瀏覽完整內容,請先 註冊登入會員

使用道具檢舉

帖子
3
積分
0 點
潛水值
4630 米
發表於 2018-5-9 06:21 PM|顯示全部樓層
若有安裝色情守門員,可用無界、自由門等軟件瀏覽伊莉。或使用以下網址瀏覽伊莉: http://www.eyny.com:81/index.php
res = requests.get(url, params=data, headers=headers)
試下print res.status_code睇下成唔成功先, 另外data無提供到唔知會唔會錯data
分享使你變得更實在,可以使其他人感到快樂,分享是我們的動力。今天就來分享你的資訊、圖片或檔案吧。

使用道具檢舉

Rank: 1

帖子
113
積分
54 點
潛水值
30168 米
發表於 2018-5-10 09:59 AM|顯示全部樓層
成為伊莉的版主,你將獲得更高級和無限的權限。把你感興趣的版面一步步地發展和豐盛,那種滿足感等著你來嚐嚐喔。
用requests.get會出錯,還是搞不懂那裡出問題,
用urllib.request.urlretrieve和request.urlopen就不會,
很正常的下完圖片了,網路上找的下載圖片方法,
requests.get這佪指令就是不行
分享使你變得更實在,可以使其他人感到快樂,分享是我們的動力。今天就來分享你的資訊、圖片或檔案吧。

使用道具檢舉

  小學生(200/1000)

政宗君【農曆新年--喜從豬來換頭像拿積分活動】

Rank: 2Rank: 2

帖子
342
積分
397 點
潛水值
8120 米
發表於 2019-2-2 11:09 PM|顯示全部樓層
成為伊莉的版主,你將獲得更高級和無限的權限。把你感興趣的版面一步步地發展和豐盛,那種滿足感等著你來嚐嚐喔。
可否放一下截圖,我想應該不是反爬蟲喔,如果是的話應該還是會有資料被載下來,但是是錯誤的資料(大多都是空白圖片),with open('{0}.{1}'.format(name, 'jpg'), 'wb')as f:
    f.write(res.content)是不是這裡出錯了?

使用道具檢舉

Rank: 5Rank: 5Rank: 5Rank: 5Rank: 5

帖子
933
積分
21158 點
潛水值
38230 米
發表於 2019-2-16 11:07 AM|顯示全部樓層
Website Image Crawler的話已經有人寫過Python模組囉~
它是用urllib.request
Github -
下載: 訪客無法瀏覽下載點,請先 註冊登入會員

可以直接Import它,或者參考看看它的寫法




The quieter you become, the more you are able to hear.


資訊安全,你我做起!

使用道具檢舉

帖子
164
積分
3 點
潛水值
5015 米
發表於 2019-2-21 11:46 AM|顯示全部樓層
有測試過是否為 Client Rendering 的問題嗎?

使用道具檢舉

您需要登錄後才可以回帖 登錄 | 註冊

Powered by Discuz!

© Comsenz Inc.

重要聲明:本討論區是以即時上載留言的方式運作,對所有留言的真實性、完整性及立場等,不負任何法律責任。而一切留言之言論只代表留言者個人意見,並非本網站之立場,用戶不應信賴內容,並應自行判斷內容之真實性。於有關情形下,用戶應尋求專業意見(如涉及醫療、法律或投資等問題)。 由於本討論區受到「即時上載留言」運作方式所規限,故不能完全監察所有留言,若讀者發現有留言出現問題,請聯絡我們。有權刪除任何留言及拒絕任何人士上載留言,同時亦有不刪除留言的權利。切勿上傳和撰寫 侵犯版權(未經授權)、粗言穢語、誹謗、渲染色情暴力或人身攻擊的言論,敬請自律。本網站保留一切法律權利。
回頂部