找回密碼
 註冊
|註冊|登錄

伊莉討論區

搜索
尊貴會員無限使用任何功能搞笑、娛樂、精彩的影片讓你看迅雷電影正式開放,齊來分享!
三上悠亞mg七龍珠超259luxu陰屍路進擊的巨新竹
pppd 762mount & 美娜不起眼女重生的貓keita三浦歩美

休閒聊天興趣交流學術文化旅遊交流飲食交流家庭事務PC GAMETV GAME
熱門線上其他線上感情感性寵物交流家族門派動漫交流貼圖分享BL/GL
音樂世界影視娛樂女性頻道潮流資訊BT下載區GB下載區下載分享短片
電腦資訊數碼產品手機交流交易廣場網站事務長篇小說體育運動時事經濟
上班一族博彩娛樂
電腦新資訊電腦軟體討論電腦軟體資訊分享電腦硬體討論電腦硬體資訊分享電腦萌化版電腦系統 OS 討論電腦程式設計
電腦設計技術交流圖像設計及交流各類下載工具教學寬頻上網討論
查看: 5450|回復: 3

[討論] 爬...文?[複製鏈接]

Rank: 2Rank: 2

帖子
585
積分
387 點
潛水值
7180 米
發表於 2019-12-26 10:28 AM|顯示全部樓層
若對尊貴或贊助會員有任何疑問,歡迎向我們查詢。我們的即時通或MSN: admin@eyny.com
小弟,雖然有寫過python,但沒爬過,  想跟大家討論一下.
如果你要爬一個網站, 比如說我現在發文的網站
需要哪些關鍵技術以及細節?
若新密碼無法使用,可能是數據未更新。請使用舊密碼看看。

使用道具檢舉

Rank: 6Rank: 6Rank: 6Rank: 6Rank: 6Rank: 6

帖子
118
積分
1296 點
潛水值
34365 米
發表於 2019-12-27 08:45 AM|顯示全部樓層
本帖最後由 tryit244178 於 2019-12-27 10:09 AM 編輯

如果是用google的搜尋引擎,想要找特定網站的內容,
可以用「site:url」來尋找。
例如想找伊莉這網站裡的程式的關鍵字就是:
「程式 site:
下載: 訪客無法瀏覽下載點,請先 註冊登入會員


...
瀏覽完整內容,請先 註冊登入會員
哇~~是不會說謝謝的朋友~~

使用道具檢舉

Rank: 4Rank: 4Rank: 4Rank: 4

帖子
3463
積分
4013 點
潛水值
48770 米
發表於 2019-12-28 10:17 PM|顯示全部樓層
若新密碼無法使用,可能是數據未更新。請使用舊密碼看看。
在講的是寫爬蟲去爬某個指定的網站(例如伊莉)嗎?
是的話,無關語言的部份就是要搞懂 HTTP 協定,包括 Header 裡的內容是什麼意思等等。因為要寫一支可以拿到網頁內容的程式很容易,但要拿到「想要的內容」就不見得很容易。

「想要的內容」指的是比如說在伊莉基本上沒登入的使用者是沒辦法看到文章的全文的,因此如果你什麼特別的事情都沒做,直接讓程式去看某一篇伊莉的文章,只會拿到一段 HTML 上面寫了一堆要登入的文字,而不會拿到你真的想要看到的文章內容。所以你必須先搞懂 Header 裡都在寫什麼,這樣你才能搞懂網站到底怎麼判斷像是使用者有沒有登入,以便讓你能夠用程式去模擬出一樣的動作。...
瀏覽完整內容,請先 註冊登入會員
如果瀏覽伊莉時速度太慢或無法連接,可以使用其他分流瀏覽伊莉,www01.eyny.com(02,03)。

使用道具檢舉

Rank: 6Rank: 6Rank: 6Rank: 6Rank: 6Rank: 6

帖子
118
積分
1296 點
潛水值
34365 米
發表於 2019-12-29 09:57 AM|顯示全部樓層
原來在講爬蟲…我搞成爬文了……
標題就是那樣寫的!我沒有錯!!

使用道具檢舉

您需要登錄後才可以回帖 登錄 | 註冊

Powered by Discuz!

© Comsenz Inc.

重要聲明:本討論區是以即時上載留言的方式運作,對所有留言的真實性、完整性及立場等,不負任何法律責任。而一切留言之言論只代表留言者個人意見,並非本網站之立場,用戶不應信賴內容,並應自行判斷內容之真實性。於有關情形下,用戶應尋求專業意見(如涉及醫療、法律或投資等問題)。 由於本討論區受到「即時上載留言」運作方式所規限,故不能完全監察所有留言,若讀者發現有留言出現問題,請聯絡我們。有權刪除任何留言及拒絕任何人士上載留言,同時亦有不刪除留言的權利。切勿上傳和撰寫 侵犯版權(未經授權)、粗言穢語、誹謗、渲染色情暴力或人身攻擊的言論,敬請自律。本網站保留一切法律權利。
回頂部