文章詳情頁
想寫一個python分析統計apache 日志文件的腳本
瀏覽:173日期:2022-07-27 15:36:57
問題描述
想寫一個python分析統計apache 網站日志文件并將統計后的數據存入mysql中的的腳本,有沒有參考的,沒有思路主要是統計 哪些url被爬取了 及 被爬取次數,以及IP這兩個
問題解答
回答1:先把原始數據 規整化,然后 key 值自己定,然后用 collections 的 Counter 統計,然后再遍歷寫入 db, 大概代碼如下:
data = [’/a 1.2.1.2’, ’/b 2.2.2.2’, ’/c 1.1.1.1’, ’/d 2.2.2.2’, ’/d 2.2.2.2’]from collections import Counterc = Counter(data)print c
Counter({’/d 2.2.2.2’: 2, ’/b 2.2.2.2’: 1, ’/a 1.2.1.2’: 1, ’/c 1.1.1.1’: 1})
你也可以自己維護字典,鍵為:/PATH:IP 或者什么,自己定,然后一邊遍歷,一邊添加就好了
相關文章:
1. python3.x - python連oanda的模擬交易api獲取json問題第五問2. docker - 如何修改運行中容器的配置3. nignx - docker內nginx 80端口被占用4. docker-machine添加一個已有的docker主機問題5. java - SSH框架中寫分頁時service層中不能注入分頁類6. 關于docker下的nginx壓力測試7. 為什么我ping不通我的docker容器呢???8. node.js - 我是一個做前端的,求教如何學習vue,node等js引擎?9. javascript - js代碼獲取驗證碼倒計時問題10. html5 - 百度echart官網下載的地圖json數據亂碼
排行榜
