文章詳情頁(yè)
python - pyspider爬pdf爬了一小段時(shí)間后就不動(dòng)了
瀏覽：143日期：2022-08-06 15:07:58
問(wèn)題描述
下載了一小部分之后就不動(dòng)了，stop之后重新跑也沒(méi)有任何反應(yīng)，有人知道是怎么回事嗎？謝謝大家。
問(wèn)題解答
回答1：放代碼吧 騷年
回答2：根據(jù) dashboard 最上方的信息
scheduler 到 fetcher 有100條隊(duì)列中的任務(wù)fetcher 到 processor 也有100條隊(duì)列中的任務(wù)processor 下游都是空的
因?yàn)槟J(rèn)的隊(duì)列容量為 100，這說(shuō)明在 processor 發(fā)生了堵塞，那就要看 processor 在干什么，是不是死掉了。
上一條：網(wǎng)頁(yè)爬蟲(chóng) - python爬蟲(chóng)翻頁(yè)問(wèn)題，請(qǐng)問(wèn)各位大神我這段代碼怎樣翻頁(yè)，還有價(jià)格要登陸后才能看到，應(yīng)該怎么解決下一條：python - 如何獲取rabbitmq連接的celery的個(gè)數(shù)
相關(guān)文章：
1. Docker for Mac 創(chuàng)建的dnsmasq容器連不上/不工作的問(wèn)題2. javascript - 使用angular 的ui-sref 中出現(xiàn)了中文參數(shù)，點(diǎn)擊跳轉(zhuǎn)后瀏覽器的地址欄里出現(xiàn)轉(zhuǎn)義后的%AE....%a%43. javascript - 用JS 七牛上傳圖片出現(xiàn)文件已存在的錯(cuò)誤（file exists）4. java - 郵箱如何發(fā)送html內(nèi)容5. javascript - 求賜教：網(wǎng)易郵箱Web端模擬登錄看信的加密參數(shù)_ntes_nnid、_ntes_nuid6. html5 - 這個(gè)代碼顯示功能如何實(shí)現(xiàn)？7. css3 - 圖片等比例縮放8. java - ConcurrentHashMap中的get()方法為什么可以不加鎖？9. css3 - animation屬性，safari瀏覽器不支持相關(guān)效果10. 工作近5年，3年Java Web ，近2年前端，未來(lái)何去何從？
排行榜
熱門(mén)標(biāo)簽
網(wǎng)公網(wǎng)安備