首先回答你,是可行的,python爬蟲能當副業,副業的方式比較多,等下我會講幾種。
那學到哪個層次可以接單呢?主要看你是接什么樣的單,爬一些資料,視頻這種簡單的學一兩個月就沒什么問題,復雜的那就需要系統的學習,爬蟲原理,html相關知識,urllib,urllib2庫,scrapy,requests模塊,xpath和lxml模塊,多線程編程,HTTP協議相關,反爬蟲機制登等這些都要學。
講一些身邊朋友的經歷吧,朋友做了4年Python工程師,期間寫了各種奇葩爬蟲,掙各種奇葩的錢。Python爬蟲做副業起碼也掙了20W+,我自己也做了些,但掙的沒我朋友多,下面總結下用爬蟲掙錢的幾種方式。
1、最典型的就是找爬蟲外包活兒。
這個真是體力活,最早是在國外各個freelancer網站上找適合個人做的小項目,看見了就趕緊去bid一下,把價格標得死死的,由于是掙dollar,別人標幾百刀,我就標幾十刀,價格戰。就是這樣做些體力活,不過有個問題是我們跟老美時差是12小時,剛好是顛倒的,他們白天干活的時候,我們剛好是凌晨,所以在回復他們信息時就很延遲,另外又加上有阿三來競爭,那個bid價格慘目忍睹,做了半年多就放棄了。
國內有豬八戒,A5,程序員客棧等外包平臺,如果是一個人的話,你只能接到一些小活做做。大活都是一個團隊才能接下,甲方要的時間又緊,一個人做不下來。
2、爬數據做網站
那會兒開始接觸運營,了解到一些做流量,做網盟掙錢的一些方法。挺佩服做運營的熱,覺得鬼點子挺多的(褒義),總是會想到一些做流量的方法,但是他們就是需要靠技術去幫忙實現,去幫忙抓數據,那會我就在思考我懂做網站,抓數據都沒問題,只要我能融匯運營技巧,就可以靠個人來掙錢錢了,于是就學習了一些SEO,和做社群的運營方法。開始抓數據,來做網站掙錢,每個月有小幾千塊錢,雖然掙得不多,但做成之后不需要怎么維護,也算是有被動收入了。
做網站掙網盟的好處是,只要網站有流量就有網盟收入,不需要你花時間去接廣告這些。能做到每天數萬IP的話,每年的網盟收入也能有數萬,乃至數十萬RMB。
這里抓數據做網站不是去做垃圾網站,也不是去非法抓取內容。我不建議去抓有內容版權的網站,這樣你容易進去蹲幾年。我說的是結構化數據,數據整合,把原本分散在各個地方無版權的數據抓取過來,抽取整合成完整的信息,提供給用戶,這樣對用戶是增益。因為原本信息是分散在各處的,需要用戶在不同渠道,不同網站上查看。典型的諸如企業工商信息,這些信息是公開的,沒有版權。
3、做公眾號/自媒體/獨立博客
學Python,寫爬蟲的人越來越多,很多又是非計算機科班出身。所以把用Python寫爬蟲這一塊的需求撐大了,但凡工作上的實踐經驗多一點,其實是有很多可以寫的經驗總結的。
不要認為一定要輸出多么高深的內容,才能寫公眾號,做博客。其實寫太技術了沒有人看,剛才我也說了,大部分受眾是非計算機科班的,他們需要的是你能較為簡單易懂的說明白怎么上手,怎么入門,有一些小程序,演示示例來練手。所以寫的內容要接地氣,推廣公號相對還是容易,幾個公號主做下互推,做做送書活動,就有基礎的關注量了。其它就取決于你寫文章的勤奮程度和內容是否吸引人了。
Python爬蟲可以爬取的東西有很多,例如我用來爬取斗圖用的圖片。
Python爬蟲怎么學?
如果你仔細觀察,就不難發現,懂爬蟲、學習爬蟲的人越來越多,一方面,互聯網可以獲取的數據越來越多,另一方面,像 Python這樣的編程語言提供越來越多的優秀工具,讓爬蟲變得簡單、容易上手。
利用爬蟲我們可以獲取大量的價值數據,從而獲得感性認識中不能得到的信息,比如:
某乎:爬取優質答案,為你篩選出各話題下最優質的內容。
淘寶、京東:抓取商品、評論及銷量數據,對各種商品及用戶的消費場景進行分析。
安居客、鏈家:抓取房產買賣及租售信息,分析房價變化趨勢、做不同區域的房價分析。
拉勾網、智聯:爬取各類職位信息,分析各行業人才需求情況及薪資水平。
爬蟲是入門Python最好的方式,沒有之一。Python有很多應用的方向,比如后臺開發、web開發、科學計算等等,但爬蟲對于初學者而言更友好,原理簡單,幾行代碼就能實現基本的爬蟲,學習的過程更加平滑,你能體會更大的成就感。
掌握基本的爬蟲后,你再去學習Python數據分析、web開發甚至機器學習,都會更得心應手。因為這個過程中,Python基本語法、庫的使用,以及如何查找文檔你都非常熟悉了。
對于小白來說,爬蟲可能是一件非常復雜、技術門檻很高的事情。比如有人認為學爬蟲必須精通 Python,然后哼哧哼哧系統學習 Python 的每個知識點,很久之后發現仍然爬不了數據;有的人則認為先要掌握網頁的知識,遂開始 HTMLCSS,結果入了前端的坑,瘁……
掌握正確的方法,在短時間內做到能夠爬取主流網站的數據,其實非常容易實現,但建議你從一開始就要有一個具體的目標。
在目標的驅動下,你的學習才會更加精準和高效。那些所有你認為必須的前置知識,都是可以在完成目標的過程中學到的。這里給你一條平滑的、零基礎快速入門的學習路徑。
1.學習 Python 包并實現基本的爬蟲過程
2.了解非結構化數據的存儲
3.學習scrapy,搭建工程化爬蟲
4.學習數據庫知識,應對大規模數據存儲與提取
5.掌握各種技巧,應對特殊網站的反爬措施
6.分布式爬蟲,實現大規模并發采集,提升效率。
這里先給大家展示一下我進的兼職群和最近接單的截圖,小伙伴有需要也可繼續往下看.
有需要Python兼職爬蟲資料和兼職內推的小伙伴可掃下方二維碼

題外話
感謝你能看到最后,給大家準備了一些福利!
感興趣的小伙伴,贈送全套Python學習資料,包含面試題、簡歷資料等具體看下方。
一、Python所有方向的學習路線
Python所有方向的技術點做的整理,形成各個領域的知識點匯總,它的用處就在于,你可以按照下面的知識點去找對應的學習資源,保證自己學得較為全面。
二、Python兼職渠道推薦
學的同時助你創收,每天花1-2小時兼職,輕松稿定生活費.
三、最新Python學習筆記
當我學到一定基礎,有自己的理解能力的時候,會去閱讀一些前輩整理的書籍或者手寫的筆記資料,這些筆記詳細記載了他們對一些技術點的理解,這些理解是比較獨到,可以學到不一樣的思路。
四、實戰案例
紙上得來終覺淺,要學會跟著視頻一起敲,要動手實操,才能將自己的所學運用到實際當中去,這時候可以搞點實戰案例來學習。