(4月新番)[繁]THE NEW	衝進中橫水溝紅牌重	[繁]海賊王航海王 11
[簡]假面騎士GOTCHARD	快艇正妹豪乳吸睛	女子搧別人耳光的後果

電腦新資訊	電腦軟體討論	電腦軟體資訊分享	電腦硬體討論	電腦硬體資訊分享	電腦萌化版	電腦系統 OS 討論	電腦程式設計
電腦設計技術交流	圖像設計及交流	各類下載工具教學	寬頻上網討論

返回列表

查看: 41377|回復: 5

[求助]關於爬蟲的小問題[複製鏈接]

yoop123

初級幼兒生(0/30)

帖子: 4
積分: 4 點
潛水值: 21800 米

電梯直達

樓主

發表於 2020-3-23 01:31 PM|只看該作者|倒序瀏覽

若瀏覽伊莉的時侯發生問題或不正常情況，請使用Internet Explorer(I.E)。

本帖最後由 yoop123 於 2020-3-25 12:03 AM 編輯

我是一名爬蟲照片收集者，平時無聊就在網路上爬取各網站照片

有天我心血來潮決定爬伊莉會員的照片，結果發生了錯誤，如下

def img_parse(response):
html = bsp(response.text,"html.parser")
ig = 0
personal_id = bsp.find_all(html,"div",{"id":r.compile(r'post_\d+')})
...

瀏覽完整內容，請先註冊或登入會員

分享0收藏0支持0

若瀏覽伊莉的時侯發生問題或不正常情況，請使用Internet Explorer(I.E)。

使用道具檢舉

54041817 該用戶已被刪除

頭香

發表於 2020-3-23 04:05 PM|只看該作者

回覆中加入附件並不會使你增加積分，請使用主題方式發佈附件。

下載: 訪客無法瀏覽下載點，請先註冊或登入會員

9:30 開始看看我在想是網站防止機器人的機制

上傳頭像立即獲得 1 點積分。

使用道具檢舉

kwj

中學生(1000/4000)

Rank: 3 Rank: 3 Rank: 3

帖子: 3470
積分: 3983 點
潛水值: 62680 米

3樓

發表於 2020-3-24 09:34 PM|只看該作者

若登入不正常或變回訪客狀態，請先刪除COOKIE再登入。

感覺你好像連基本的網路知識都還不是太了解....
先問一下，你知道 403 代表什麼嗎？

若有安裝色情守門員，可用無界、自由門等軟件瀏覽伊莉。或使用以下網址瀏覽伊莉: http://www.eyny.com:81/index.php

使用道具檢舉

yoop123

初級幼兒生(0/30)

帖子: 4
積分: 4 點
潛水值: 21800 米

4樓

發表於 2020-3-24 11:58 PM|只看該作者

若有安裝色情守門員，可用無界、自由門等軟件瀏覽伊莉。或使用以下網址瀏覽伊莉: http://www.eyny.com:81/index.php

kwj 發表於 2020-3-24 09:34 PM
下載: 訪客無法瀏覽下載點，請先註冊或登入會員

感覺你好像連基本的網路知識都還不是太了解....
先問一下，你知道 403 代表什麼嗎？ ...

請求拒絕?是吧?
然而我在進行用戶登入時連結也被擋住了，嚴格說起來我也有根據網站要求的Network加入header，但那明顯不只擋住了爬蟲...

瀏覽完整內容，請先註冊或登入會員

如果發覺自己無法使用一些功能或出現問題，請按重新整理一次，並待所有網頁內容完全載入後5秒才進行操作。

使用道具檢舉

kwj

中學生(1000/4000)

Rank: 3 Rank: 3 Rank: 3

帖子: 3470
積分: 3983 點
潛水值: 62680 米

5樓

發表於 2020-3-25 09:23 PM|只看該作者

回覆中加入附件並不會使你增加積分，請使用主題方式發佈附件。

本帖最後由 kwj 於 2020-3-25 09:30 PM 編輯

yoop123 發表於 2020-3-24 11:58 PM
下載: 訪客無法瀏覽下載點，請先註冊或登入會員

請求拒絕?是吧?
然而我在進行用戶登入時連結也被擋住了，嚴格說起來我也有根據網站要求的Network加入head ...

...

瀏覽完整內容，請先註冊或登入會員

上傳頭像立即獲得 1 點積分。

使用道具檢舉

yoop123

初級幼兒生(0/30)

帖子: 4
積分: 4 點
潛水值: 21800 米

6樓

發表於 2020-3-30 09:10 PM|只看該作者

若新密碼無法使用，可能是數據未更新。請使用舊密碼看看。

kwj 發表於 2020-3-25 09:23 PM
下載: 訪客無法瀏覽下載點，請先註冊或登入會員

403 代表的不只是請求拒絕。4xx 系列全都是請求拒絕的意思，而 403 代表的是權限不足。
所以問題是在於伺 ...

感謝回復，我之後嘗試了幾次之後沒有找到必須的cookie，但我發現一個現象
...

瀏覽完整內容，請先註冊或登入會員

若對尊貴或贊助會員有任何疑問，歡迎向我們查詢。我們的即時通或MSN: admin@eyny.com

使用道具檢舉

返回列表

Archiver|手機版|廣告|聯絡我們|廣告查詢|廠商合作|伊莉

GMT+8, 2024-4-20 02:20 AM

重要聲明：本討論區是以即時上載留言的方式運作，對所有留言的真實性、完整性及立場等，不負任何法律責任。而一切留言之言論只代表留言者個人意見，並非本網站之立場，用戶不應信賴內容，並應自行判斷內容之真實性。於有關情形下，用戶應尋求專業意見(如涉及醫療、法律或投資等問題)。由於本討論區受到「即時上載留言」運作方式所規限，故不能完全監察所有留言，若讀者發現有留言出現問題，請聯絡我們。有權刪除任何留言及拒絕任何人士上載留言，同時亦有不刪除留言的權利。切勿上傳和撰寫侵犯版權(未經授權)、粗言穢語、誹謗、渲染色情暴力或人身攻擊的言論，敬請自律。本網站保留一切法律權利。