自學Python來做出一個能爬些信息的爬蟲需要多久時間呢？

如果知識單一的需求，不考慮深度學習的話。大概兩個小時左右，大概的流程是，下載安裝python，15分鐘左右找到爬蟲的教程，15分鐘pip庫，然后就開始復制粘貼修改目標網址和數據存儲路徑。然后開始爬一直到結束。整個過程2小時。

我覺得帶著目的去學習，是最有效的學習方法。

學習python爬蟲的話必備知識點如下：

最首先要學的是基本的python語法知識學習python爬蟲經常用到的幾個內之苦：urllib、http這些用于下載網頁學習正則表達式re、BeautifulSoup（bs4）、Xpath等網頁解析工具之后就可以了解一些簡單的網站爬取，可以從百度開始。了解爬取數據的過程在上一步之后就可以了解一些爬蟲的反爬機制。header，robot，時間間隔，代理ip。隱含字段等等之后還要了解一些特殊的網站爬取，解決登陸問題比如cookie還有動態頁面js模擬等問題學習selenium自動化工具，目的是可以應對異步加載頁面在之后就是爬蟲和數據庫之間的結合，如何將我們爬取的數據進行存儲，Mysql還要學習多線程和異步，這樣可以提高效率還有要了解的是爬蟲的框架如果有較大的數據需求的話，要學習redis分布式

第一個爬蟲建議從urllib開始，應該很多人的第一個爬蟲代碼都是從這里開始的。短短的幾行代碼就可以搞定一個看似很難的任務。從這里給大家介紹一下：

urllib庫：這是python的內置庫，可以說爬蟲非常重要的一個部分。這個內之苦可以使用的就是完成向服務器發出請求并且獲得網頁的功能。這里說一下，python2.x和3.x是有一些出入的。

如何用python抓取一個指定的頁面？

首先創建一個urllib2_test01.py，然后輸入下面的代碼：

最簡單的獲取一個url信息代碼只需要4行就可以搞定的，執行寫的python代碼：

會得到下面的內容：

下面是編輯urllib_test03.py的過程

這里知識一個初步的介紹。黑馬程序員的視頻庫里面好像有15分鐘學習爬蟲的視頻，大家可以作為參考。

剛剛寫的代碼，打開之后看的不清楚，又重新更新的了圖片。