Python爬蟲工程師薪資多少?發展前景好不好?

python學習_小雨發表於2019-03-13

現在Python爬蟲工程師的薪資大概多少啊?爬蟲工程師的前景怎麼樣?發展方向是什麼呢?

熟悉前端、資料庫,懂點基本的linux

會各種庫爬、解析取頁面,會資料儲存,會ajax資料爬取,會selenium,會驗證碼識別,會使用代理,會模擬登入,會APP爬取,會pyspider、scrapy,會分散式爬蟲。

做過的比較大的專案是12306搶票專案

1、

爬蟲薪資,看城市公司

答主在成都,成都爬蟲的上限就是美團的20k起

也有二貨公司要求懂爬蟲+ETL 起薪8k

一般金融公司給8-12k + 2年以上的經驗

玩大資料的公司給10-20k + 2年以上經驗

。。。。。。。等等等等

北京的工資高啊,經常在拉鉤上看的流口水,可我也不會去北漂,只能含恨了

2、

爬蟲工程師的前景怎麼樣?

爬蟲這工作看你怎麼理解了,如果你覺得會get、post會資料解析就是爬蟲,那它很簡單,很容易被替代。

其實爬蟲涉及的東西挺多的,包括JS逆向,安卓逆向、架構設計這些比較複雜的知識,尤其是安卓逆向,算是雜學了,門檻挺高的,競爭力肯定也是可以的。

爬蟲所做的工作的結果,得到的是基礎的資料。

基礎資料之上,有哪些發揮用途的地方,就有哪些拓寬職業道路的地方。

在基礎資料上往上走,資料處理、資料分析、資料展示(視覺化或Web)、資料應用(挖掘),都可以在這些領域繼續向前。

大資料和人工智慧時代下,爬蟲工程師這幾年是路越走越寬的,但是初級爬蟲工程師基本會被八爪魚這類軟體替代,高階爬蟲工程師的能力重點不在於會寫幾個get,post請求,使用正則解析下文字這麼簡單,而是在對資料和業務本身的立即深刻,對於從資料中如何整合挖掘價值有一整套的思路和方法,包括精通資料分析,精通各種資料庫。

我覺得未來爬蟲工程師應該朝全棧工程師的方向發展,並且積極學習人工智慧技術,真正有價值的高技術人才應該是以下幾個方面的交集:大資料+人工智慧+應用場景。

相關文章