python的爬蟲的論壇有CSDN論壇,CSDN是全球知名中文IT技術(shù)交流平臺,可以通過這個論壇進行爬蟲技術(shù)的交流
前言:近幾年來,Python學(xué)習(xí)熱潮越來越大,因為Python它是一門非常注重可讀性的語言,所以相比于C/C++,java這些語言來說更容易上手。本人也非常喜歡Python,雖然從事的是C/C++工作,但在日常工作中,Python主要是作為一種輔助性語言使用。相關(guān)網(wǎng)站
1:嗶哩嗶哩
搜索教程這么多年,還沒有一個(也不能說絕對)教程是我不能在B站找到的,每當(dāng)在百度網(wǎng)盤,各大資源網(wǎng)站搜尋無望時,我總是把目光轉(zhuǎn)向“小破站”。如果學(xué)習(xí)Python,你可以去搜一下,畫面如下
Python搜尋結(jié)果大家可以看到,搜尋結(jié)果五花八門,不止是Python基礎(chǔ),Python爬蟲,Python數(shù)據(jù)分析也是應(yīng)有盡有。但是視頻一多,問題也就隨之而來,最大的問題就是質(zhì)量層次不齊,這些視頻絕對不能以播放量論英雄,不同的人適合不同的講課風(fēng)格與節(jié)奏,比如大家比較喜歡的小甲魚的視頻,我個人(僅代表個人意見)就感覺不是特別適合,它的風(fēng)格太過花里胡哨。樓主既然想要學(xué)習(xí)Python,又苦于不知視頻的質(zhì)量,我在這里根據(jù)我多年的心得,給大家列出一份在B站上學(xué)習(xí)Python的路線,這是一份編程資源的匯總,只需搜索Python即可找到,而且全部帶有鏈接
Python資源資源大家只需私信我,然后回復(fù)【路線】即可發(fā)送給大家
2.我要自學(xué)網(wǎng)
這個網(wǎng)站我真的是特別有感觸,可以說我的編程之路就是從這個網(wǎng)站開始的,前幾年免費資源還沒有像今天如此泛濫,想要在網(wǎng)上找到像樣一點的免費教程更是難上加難,找到的更是遠古時期的視頻,那是我要自學(xué)網(wǎng)映入了我的眼簾
我要自學(xué)網(wǎng)我要自學(xué)網(wǎng)大部分視頻是半免費的狀態(tài),我之所以推薦的原因是它的質(zhì)量很高,不是隨便那種爛攤子里找來的,所以樓主可以去這里看一看,如果找到自己喜歡的教程了,你會情不自禁付費了,而且它付費的視頻也不貴,很良心了。
3.菜鳥教程
這個網(wǎng)站,不是視頻網(wǎng)站,而是類似手冊一樣的博客網(wǎng)站。這個網(wǎng)站特點就是各方各面都寫得很全,所以對于樓主,我的建議是,將這個網(wǎng)站作為后備力量,先去其他網(wǎng)站的視頻教程,然后學(xué)的差不多了,再去看這些文本類的,你會發(fā)現(xiàn)看的很舒服。類似于還有W3school等等,這里我就不多說了
菜鳥教程W3school其實類似的網(wǎng)站還有很多很多,但是我就不再多說了。其余的網(wǎng)站都是打著免費的幌子吸引你購買,我承認這個世界是一個知識付費的時代,但是面對網(wǎng)上這種鋪天蓋地,真假不明的情況,我們普通人還是擦亮眼睛,小心為好,如果你真覺得自己可以學(xué)下東西了,那么自然而然你會心甘情愿的付費了。
重磅推薦馬云曾經(jīng)說過的:“免費的就是最貴的”,這句話放在如今泛濫的教程資源也是如此,沒有一個人會把知識,技術(shù)這樣公開,像黑馬這些比較熟知的培訓(xùn)機構(gòu),在B站上他們的視頻播放量都是第一,但是大家仔細觀察就可以發(fā)現(xiàn),他們的視頻都是無關(guān)痛癢的,比如Python,你只學(xué)會一門語言幾乎做不了什么,所以免費的背后其實是更大的付費
但是話說回來,你不得不承認付費的資源的確是非常棒,其質(zhì)量,服務(wù)都非常好,但無奈,現(xiàn)在教程動輒幾百,多則幾千,對于大部分人來說,都抱著試一試的心態(tài),所以也不敢亂來。
這里我推薦慕課網(wǎng),號稱程序員的夢工廠,其上的教程好的基本都是付費的,但是質(zhì)量真的好,講師也非常牛逼
慕課網(wǎng)當(dāng)然我這里自然有資源,私信我,回復(fù)【Python】可以獲取,Python教程+Python分布式爬蟲相關(guān)資源,都是精品
謝謝大家,歡迎大家與我一起交流,共同進步
首先我想問下題主對爬蟲工作的是怎么理解的?
是指單純的從網(wǎng)絡(luò)上爬取指定數(shù)據(jù)呢,還是包括需要對爬取到的數(shù)據(jù)進行有效組織、分析處理?
如果是前者那么只是互聯(lián)網(wǎng)公司后端開發(fā)工程師工作的一部分而已,用java、php、python、nodejs等都可以實現(xiàn),
如果題主的工作期望僅限于爬取數(shù)據(jù)而不包括其他方面的話,那么從工作能力與范圍來說都是比較局限,而且爬蟲工作相對來說技術(shù)門檻較低,很難說有什么核心競爭力。
所以后期技能的擴展延伸也是必不可少的。
如果是后者那么就涉及到數(shù)據(jù)存儲、處理、轉(zhuǎn)化、分析、使用等相關(guān)操作,涉及到多個細分專業(yè)崗位,并對服務(wù)器、數(shù)學(xué)、甚至相關(guān)的行業(yè)經(jīng)驗等都會有一定的要求。
所以通過培訓(xùn)機構(gòu)短期流水線培訓(xùn)的學(xué)生在面對實際需求工作的時候一般都難以勝任。
市面上的培訓(xùn)機構(gòu)們?yōu)榱死娑紩谛麄魃隙紩捎帽苤鼐洼p、夸大培訓(xùn)結(jié)果的方式來吸引學(xué)生報名 。
培訓(xùn)機構(gòu)主要會向?qū)W生傳遞一下兩點信息
1.學(xué)習(xí)難度非常低,不用擔(dān)心,你一定能學(xué)會的
2.就業(yè)前景超級好,你只要學(xué)完了,出去之后就被企業(yè)搶著要,成為高富帥,迎娶白富美。
而實際授課的方式往往是標(biāo)準(zhǔn)化、流水線式的,老師們只管教,學(xué)生怎么學(xué)、學(xué)的怎么樣老師是不管的,就更別談針對不同層次的學(xué)生進行輔導(dǎo)了。
編程是一項實戰(zhàn)性工程技術(shù),需要投入大量的時間學(xué)習(xí)并不斷通過實踐才能熟練掌握,說編程簡單的人一般都是有一定開發(fā)經(jīng)驗的人,就是所謂會者不難。
實際上對于沒有任何編程經(jīng)驗的人想通過短短1~2個月時間的培訓(xùn)而達到熟練也是不容易的,想要精通是幾乎不太可能的,甚至有些授課老師本身也是個半桶水而已。
所以我們要明確通過培訓(xùn)能給我們帶來什么
1.能讓題主對爬蟲是什么有個相對較為深入的了解
2.能理解爬蟲是如何實現(xiàn)的并能對一些常規(guī)站點開發(fā)爬蟲
3.能了解python常用類庫及函數(shù)的使用
認真學(xué)習(xí)的情況下最好的結(jié)果也就是通過培訓(xùn)方式讓達到我們“入門”了,剩下的修行就要靠個人了,不要過度期望通過短期培訓(xùn)給你解決所有問題。
在實際工作中需求場景是靈活多變的,我們會碰到各種各樣的意見之外問題,到時候只能根據(jù)現(xiàn)場情況通過自主分析思考甚至及時學(xué)習(xí)來解決問題。
關(guān)于程序設(shè)計思想,解決問題的辦法等核心經(jīng)驗都需要我們在項目實戰(zhàn)中的不斷思考、學(xué)習(xí)、實驗、總結(jié)。
可以玩,可以爬學(xué)習(xí)資料或數(shù)據(jù)匯總