Python爬蟲已經成為了網絡上最熱門的抓取數據的工具之一。當我們需要獲取某些網站上的文字內容時,Python爬蟲就可以派上用場了。下面就是一個Python爬蟲抓文字的示例。
# 導入所需的模塊 import requests from bs4 import BeautifulSoup # 設置要獲取的網頁鏈接 url = 'https://www.example.com' # 請求網頁 res = requests.get(url) # 解析網頁 soup = BeautifulSoup(res.content, 'html.parser') # 查找并打印文字內容 text_list = soup.find_all('p') for text in text_list: print(text.text)
通過上述代碼,我們先導入了requests和BeautifulSoup模塊,然后設置了一個要獲取的網頁鏈接。接下來,我們使用requests模塊向該鏈接發送請求,并通過BeautifulSoup模塊對網頁內容進行解析。接著,我們使用find_all方法查找所有的p標簽,然后遍歷每個標簽,并打印標簽中的文字內容。
上一篇vue中的mocks
下一篇python 爬蟲庫安裝