1.request:最基本的http請求模塊,用來模擬發送請求,就像是在瀏覽器中輸入一個網址然后回車一樣,只需要傳入uel,timeout等參數就可以實現一個模擬請求。
主要功能:用于模擬發送請求打開和讀取URL。
成都創新互聯公司堅持“要么做到,要么別承諾”的工作理念,服務領域包括:做網站、成都做網站、企業官網、英文網站、手機端網站、網站推廣等服務,滿足客戶于互聯網時代的米林網站設計、移動媒體設計的需求,幫助企業找到有效的互聯網解決方案。努力成為您成熟可靠的網絡建設合作伙伴!
2.error:異常處理模塊,如果出現請求錯誤,我們可以捕獲這些請求,然后進行重試或其他操作以保證程序不會意外終止。
主要功能:進行異常處理
3.parse:一個工具模塊,提供了許多URL處理方法,比如拆分,解析,合并等2
主要功能:用于解析URL
robotparser:主要用來識別網站的robots.txt文件,然后判斷哪些網站可以爬,哪些網站不可以爬,它其實用的比較少。
主要功能:用來解析robots.txt文件
下載模塊需要win + r 在終端輸入 pip install 模塊名 即可完成下載
ps:requests 模塊真的非常好用,會簡化很多操作,請求,獲取等操作往往只需要幾行代碼就可以完成,真的c!
網頁名稱:Urllib的4個模板
網站地址:http://m.kartarina.com/article24/dsogpje.html
成都網站建設公司_創新互聯,為您提供關鍵詞優化、外貿建站、自適應網站、靜態網站、域名注冊、移動網站建設
聲明:本網站發布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創新互聯