新聞中心
這里有您想知道的互聯(lián)網(wǎng)營銷解決方案
使用python爬蟲怎么處理有密碼的網(wǎng)站
小編給大家分享一下使用python爬蟲怎么處理有密碼的網(wǎng)站,相信大部分人都還不怎么了解,因此分享這篇文章給大家參考一下,希望大家閱讀完這篇文章后大有收獲,下面讓我們一起去了解一下吧!
創(chuàng)新互聯(lián)公司2013年至今,先為太子河等服務建站,太子河等地企業(yè),進行企業(yè)商務咨詢服務。為太子河企業(yè)網(wǎng)站制作PC+手機+微官網(wǎng)三網(wǎng)同步一站式服務解決您的所有建站問題。
步驟一:查看要爬取的網(wǎng)站信息
進入登錄頁面 。你會看到如下圖所示的頁面。
然后進行查看元素,查看到name、password,最終我們得到以下內容
payload = { "username": "", "password": " ", "csrfmiddlewaretoken": " " }
步驟二、配置網(wǎng)站登錄設置
創(chuàng)建一個登錄對象。
session_requests = requests.session()
設置一個登錄的url
result = session_requests.post( login_url, data = payload, headers = dict(referer=login_url) )
步驟三、爬取信息內容
到了這個步驟,我們已經(jīng)成功進行登錄了,用以下方式進行爬?。?/p>
url = '鏈接' result = session_requests.get( url, headers = dict(referer = url) )
以上是“使用python爬蟲怎么處理有密碼的網(wǎng)站”這篇文章的所有內容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內容對大家有所幫助,如果還想學習更多知識,歡迎關注創(chuàng)新互聯(lián)行業(yè)資訊頻道!
標題名稱:使用python爬蟲怎么處理有密碼的網(wǎng)站
網(wǎng)站地址:http://fisionsoft.com.cn/article/peidjp.html