文章詳情頁

python爬取頁面時，一個URL無法訪問導致報錯，然后跳過這個報錯繼續抓取？

瀏覽：73日期：2022-09-13 09:16:56

問題描述

1.抓取到一個錯誤的URl python爬取頁面時，一個URL無法訪問導致報錯，然后跳過這個報錯繼續抓取？

2.我的比蠢笨的辦法：

python爬取頁面時，一個URL無法訪問導致報錯，然后跳過這個報錯繼續抓取？

問題解答

回答1：

curl里面有個可以設置返回header的，如果取到的數據非200狀態，直接跳過處理就好了。

Python 編程

上一條：python - 用開源軟件快速搭建數據分析平臺，請指教下一條：網頁爬蟲 - Python+Selenium+PhantomJs爬蟲,如何取得新打開頁面的源碼？

排行榜

					
					docker  下面創建的IMAGE 他們的 ID 一樣？這個是怎么回事？？？？
mac連接阿里云docker集群，已經卡了2天了，求問？
javascript - Express 和 request 如何代理遠程圖片？
pycharm運行python3.6突然出現R6034問題，請問如何處理？
javascript - 有什么兼容性比較好的辦法來判斷瀏覽器窗口的類型？
如何使用git對word文檔進行版本控制？
javascript - vue2如何獲取v-model變量名
android - react-native 的headless.js Java API 的代碼怎么使用？
javascript - 你們怎樣實現前端分頁的？
javascript - 原生canvas中如何獲取到觸摸事件的canvas內坐標?
每個大神有沒有什么學習MySQL的好資料啊
				

熱門標簽

久久r热视频,国产午夜精品一区二区三区视频,亚洲精品自拍偷拍,欧美日韩精品二区

python爬取頁面時，一個URL無法訪問導致報錯，然后跳過這個報錯繼續抓取？