「爬蟲職海錄」三鎮爬蟲

HI，朋友們好

「爬蟲職海錄」第三期更新啦！

本欄目的內容方向會以爬蟲相關的“崗位分析”和“職場訪談”為主，方便大家了解一下當下的市場行情。

本欄目持續更新，暫定收集國內主要城市的爬蟲崗位相關招聘信息，有求職和跳槽打算的小伙伴們，可以多多關注。

本期為武漢篇！

新年伊始，傳說中找工作、換工作的“金三銀四”馬上就要到了。

這次我也從招聘網站找來了200+份當前武漢的爬蟲崗位JD，整理了數據并做了一定的分析。

目前在武漢或者以后打算在武漢發展的小伙伴可要搬好小板凳仔細看啦！

盡管武漢不在一線城市之列，但作為九省通衢的中部地區城市之首，我還是用北上廣深杭來進行比較。

且武漢在校大學生近170W，居全國第一，每年都會產生大量的畢業生。

而這么多的畢業生，尤其是計算機專業，對爬蟲崗感興趣或者是打算從事爬蟲崗的同學，是該留在武漢，還是流向發展更好的一線城市呢？

這時候拿武漢來與其他一線城市作比較得出的數據，對同學們就具有一定參考意義了。

（各大城市當前爬蟲工程師崗位收入）

從上邊可以看到，目前武漢的爬蟲工程師們，平均收入為11207元，收入中位數是10500元。

同時我找來了武漢市統計局已公布的官方數據：2022年武漢市城鎮單位在崗職工年平均工資103308元。(2023年數據尚未公布)

也就是月均8609元。假設按5％的年增速來看，那么2023年武漢市城鎮在崗職工的平均月收入大致就是9039元左右。

武漢的爬蟲崗薪資雖然低于北上廣深杭，但畢竟是IT行業，還是跑的贏當地社會平均收入的。

工資較低的同時，生活成本也相對較低，這就看大家怎么取舍了。

（各大城市當前爬蟲工程師崗位需求）

但爬蟲崗的崗位數量，確實是遠遠落后。目前BOSS直聘上顯示在招爬蟲崗的公司不過百十家，初中高級的崗位共計也就兩百左右。

所以若是想找到一份在薪資待遇、職業發展、通勤時間、工作強度各方面都符合自己要求的爬蟲工作，還是比較不容易的！

下邊我們再看看當下的實際招聘薪資。

（廣州當前爬蟲崗位招聘薪資）

招聘信息上掛出的薪酬，月薪大多在5~10K，10~15K這兩個區間內，合計占據了全部爬蟲崗的三分之二，這基本也代表了大部分爬蟲工程師在初級崗和中級崗能拿到的薪資收入。

老樣子，K哥在收集招聘信息時，順便為大家整理了一些關鍵詞，包括公司行業、公司規模、崗位title、技能標簽、學歷要求、福利待遇等方面，兄弟們可以瞅瞅。

（武漢爬蟲崗位招聘信息詞云圖）

可以看到，“python”、“20~99人”、“本科”、“帶薪年假”、“爬蟲”、“大專”、“1~3年”這些詞在招聘jd里高頻出現，反映了大部分公司當前的招聘情況。

(這里提醒一下大家，武漢的公司也許加班沒那么多，但雙休和公積金繳納情況，相當堪憂)

K哥銳評—城市&崗位

wu han

崗位情況：★★（2）

武漢的爬蟲崗數量只有北京的1/8，也遠低于其他一線城市，崗位競爭壓力相對較大。

但另一方面，工作經驗在3年內就符合條件的崗位占比達到三分之一，武漢對初級或者剛畢業的爬蟲工程師還算友好。

薪酬水平：★★★（3）

武漢的爬蟲崗工資是高于當地社會平均收入的，雖不及一線城市，但生活成本也相對較低，工作幾年后能夠拿到一份每月過萬的薪水，生活是不至于過的太差的，還能稍有盈余。

城市魅力：★★★（3）

一方面武漢每年都會涌進大量的年輕人，還算是一座比較年輕化的城市。

另一方面武漢具有得天獨厚的地理位置優勢，不管你籍貫何處，回家都不會太遠。

盡管收入和崗位并不占優，但也只是相對幾座一線城市而言，況且并不是所有人能接受一線城市的壓力和“內卷”。

綜合得分：★★★★★★★★（8）

工資水平是選擇城市&崗位的重要標準，但不會是唯一標準。

若你喜歡熱情滾燙的風土人情，大江大湖的地理稟賦，那么武漢也許會適合你！

武漢丨爬蟲崗位

（以下崗位為隨機列舉，信息來源——BOOS直聘）

01 集度

-1000-9999人

-互聯網 AI 汽車

地址｜武漢洪山區國采中心T3

Spider工程師

15-25K·16薪

職位詳情：
1.負責爬蟲系統的架構設計與研發，管理分布式爬蟲服務器，開發任務調度引擎；
2.負責指定網頁或APP的定向爬取以及內容的抽取和去重等分析工作
3.負責爬蟲核心算法的策略優化和研究，提升爬蟲抓取效率和質量
任職要求：
1.熟悉Python/PHP/JavaScript等腳本語言中至少一種；
2.熟悉html/css/xpath等常用的web知識和正則表達式
3.有分布式爬蟲系統的開發、架構經驗，至少熟悉并使用過一種主流的爬蟲架構，如Scrapy、Gocolly、Webmagic等優先；
4.熟悉Linux系統環境和Mysql、Redis、MongoDB等數據庫。
其他：
上午09:30 - 下午06:30
雙休、彈性工作

02 超越芯科技

-100~499人

-電子/半導體/集成電路

地址｜武漢洪山區銘豐大廈1510

python爬蟲開發工程師

11-18K·13薪

職位詳情：
1.負責相關網站、論壇、app的爬蟲設計和開發，以及策略持續優化；
2.分析項目的可行性和數據采集方案，負責核心算法的策略優化研究，充分利用資源，避免限制；
3.參與開發數據采集程序，對目標站點/app進行結構化和非結構化數據數據分析，并對數據抓取，對各種目標數據進行信息提取、清洗、去重、整理及優化；
4.不斷完善數據采集框架，對框架進行優化和改進；
5.參與數據分析處理流程、數據分析匯總報告的設計與開發；
6.優化和管理入庫的數據。
任職要求：
1.專科及以上學歷，計算機軟件或相關專業，3年及以上python開發經驗；
2.掌握爬取的各類實現方式和技術細節，包括不限于：熟悉常見的反爬策略、掌握網絡協議分析（http1.1/http2等）、有JavaScript反爬/逆向（AST）、APP反爬/逆向等；
3.掌握tls指紋ja3,能夠對抗akamai，PerimeterX，cloudflare風控優先；
4.掌握網絡爬蟲開發原理，熟悉互聯網各種類型數據交互模式，熟悉TCP/IP、HTTP、HTTPS等網絡協議，熟悉web前端；
5.熟悉使用python主流爬蟲框架，有分布式爬蟲經驗；
6.熟練掌握正則表達式、XPath等信息抽取技術；
7.熟悉Redis、Mysql、MongoDB等常用的數據庫；
8.具有較強的分析和解決問題的能力；
9.具備良好的溝通能力和團隊協作能力。
其他：
上午09:30 - 下午06:30
雙休、不加班