久久r热视频,国产午夜精品一区二区三区视频,亚洲精品自拍偷拍,欧美日韩精品二区

您的位置:首頁(yè)技術(shù)文章
文章詳情頁(yè)

selenium-python。如何捕獲網(wǎng)絡(luò)流量的響應(yīng)

瀏覽:2日期:2022-08-07 09:28:00
如何解決selenium-python。如何捕獲網(wǎng)絡(luò)流量的響應(yīng)?

您可以訪問(wèn)瀏覽器或chromedriver日志,它們?cè)诰W(wǎng)絡(luò)響應(yīng)方面略有不同。稱為瀏覽器日志,稱為performance驅(qū)動(dòng)程序日志driver。它們返回一個(gè)類似json的對(duì)象,您可以解析該對(duì)象以使用其中的Network方法提取事件:

{’level’: ’INFO’, ’message’: ’{'message':{'method':'Page.frameStoppedLoading','params':{'frameId':'FB10764A3ABF7FFC83110C39C5F7BF77'}},'webview':'C2D13BD13CF743B6D0695B35E9CC935C'}’, ’timestamp’: 1538607113832}, {’level’: ’INFO’, ’message’: ’{'message':{'method':'Page.frameDetached','params':{'frameId':'FB10764A3ABF7FFC83110C39C5F7BF77'}},'webview':'C2D13BD13CF743B6D0695B35E9CC935C'}’, ’timestamp’: 1538607113838}, {’level’: ’INFO’, ’message’: ’{'message':{'method':'Network.requestwillBeSent','params':{'documentURL':'https://stackoverflow.com/questions/52633697/selenium-python-how-to-capture-network-traffics-response','frameId':'C2D13BD13CF743B6D0695B35E9CC935C','hasUserGesture':false,'initiator':{'type':'other'},'loaderId':'5331BFDC4F466FCED920CFC9F033D2EC','request':{'headers':{'Upgrade-Insecure-Requests':'1','User-Agent':'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.100 Safari/537.36'},'initialPriority':'VeryHigh','method':'GET','mixedContentType':'none','referrerPolicy':'no-referrer-when-downgrade','url':'https://stackoverflow.com/questions/52633697/selenium-python-how-to-capture-network-traffics-response'},'requestId':'5331BFDC4F466FCED920CFC9F033D2EC','timestamp':104499.729,'type':'Document','wallTime':1538607113.838206}},'webview':'C2D13BD13CF743B6D0695B35E9CC935C'}’, ’timestamp’: 1538607113839},...}

您需要啟用登錄DesiredCapabilities,然后使用JSON模塊進(jìn)行解析:

import jsonfrom selenium import webdriverfrom selenium.webdriver.common.desired_capabilities import DesiredCapabilitiescaps = DesiredCapabilities.CHROMEcaps[’loggingPrefs’] = {’performance’: ’ALL’}driver = webdriver.Chrome(desired_capabilities=caps)driver.get(’https://stackoverflow.com/questions/52633697/selenium-python-how-to-capture-network-traffics-response’)def process_browser_log_entry(entry): response = json.loads(entry[’message’])[’message’] return responsebrowser_log = driver.get_log(’performance’) events = [process_browser_log_entry(entry) for entry in browser_log]events = [event for event in events if ’Network.response’ in event[’method’]]

我不知道是否可以使用此方法訪問(wèn)響應(yīng)數(shù)據(jù)本身,但是可以獲取響應(yīng)的URL。

解決方法

我正在使用pythonDjango創(chuàng)建一個(gè)Web應(yīng)用程序。我正在使用selenium來(lái)啟動(dòng)無(wú)頭瀏覽器(phantomjs)并單擊幾次,直到到達(dá)特定頁(yè)面。我希望捕獲網(wǎng)絡(luò)流量并獲得特定網(wǎng)絡(luò)呼叫的響應(yīng)。該網(wǎng)絡(luò)調(diào)用實(shí)際上包含一個(gè)html文檔作為其響應(yīng)。

有什么辦法可以做到這一點(diǎn)?

標(biāo)簽: Python 編程
相關(guān)文章:
主站蜘蛛池模板: 漠河县| 民勤县| 榆树市| 常德市| 广安市| 威信县| 天水市| 衡阳市| 鄂州市| 蒲城县| 剑川县| 水城县| 乐亭县| 醴陵市| 文安县| 梧州市| 盐源县| 舞钢市| 弋阳县| 昌乐县| 玉屏| 镇远县| 临泉县| 曲沃县| 利辛县| 巴彦淖尔市| 漳浦县| 亚东县| 盘锦市| 永善县| 诏安县| 文登市| 万盛区| 台中县| 铜川市| 牡丹江市| 伊吾县| 固始县| 台中市| 肇东市| 宁陵县|