我利用Python爬蟲技術年掙10萬被動收入的方式,在正式聊Python爬蟲技術之前,先來說說掙錢的事,說說作為一個自由職業或兼職者怎麼利用爬蟲來掙錢。
個人爬蟲掙錢方法大致如下
爬蟲技術掙錢方法1:接外包爬蟲專案
這是網路爬蟲最通常的的掙錢方式,通過外包網站,熟人關係接一個個中小規模的爬蟲專案,一般向甲方提供資料抓取,資料結構化,資料清洗等服務。
各位新入行的猿人看官大多都會先嚐試這個方向,直接靠技術手段掙錢,這是我們技術人最擅長的方式,但是競爭也是最激烈的,外包接單網站上的爬蟲專案已經被砍到了白菜價,因為專案競價的人太多。接外包的地方在國內有豬八戒網,a5外包等,國外有freelancer,freelancer上掙的是美刀,看官要接外包可以試試,不過要跟印度阿三競爭。美國學生也懶,老猿09年接觸freelancer時,上面還有美國學生python作業沒完成,在freelancer上花60美刀找人幫忙做作業。
做外包越來越難,做的人太多,網上能接爬蟲外包的人從在校大學生、兩鬢白髮的老猿,到幾個人團隊作戰都在搶幾千元一個的專案,交付時間又很緊,你如果沒有客戶資源,現成的解決方案,和穩定,高效率的爬蟲技術來支撐,是搶不到好單的。
不過有一個方向從老猿10年前知道開始,到現在的觀察來看都還有錢途,就是寫發貼機。老猿對發貼機一直記憶猶新的原因是剛工作那會在freelancer上了解到一個老外靠寫發貼機,一年掙了50萬。
什麼是發貼機?就是自動往論壇,社交媒體自動發帖子,發評論等,甲方通常使用發貼機在大量的網站上使用大量的賬號灌水,去達到甲方的商業目的。這是一個體力活,你要研究大量網站的登陸流程,發帖流程,網站一改版,你就又要重寫流程,現在發貼機任然有市場,不過現在對登陸限制,發帖限制等反爬措施都比以前先進很多, 寫一個好的穩定的發帖機很難。
爬蟲技術掙錢方法2:整合資訊、整合資料做產品
簡單說就是抓取分散在各個角落的資訊,整合後用網站或微信或APP呈現出來,以通過網盟廣告,電商佣金,直接售賣電商產品或知識付費來變現。
別被產品這個詞嚇到,一個技術人員通過自學開發一個簡單的網站,APP,小程式,直接使用wordpress,或者接入別人的電商系統不是難事。關鍵是需要一些運營技巧,這方面個人站長是做得最好的,自己摸索運營方法,自己還學習技術開發。我們們技術人員也要了解運營和產品知識。
有句話叫著:流氓不可怕,就怕流氓有文化。 我想說的是:技術不可怕,就怕技術懂運營。(哎,不押韻啊!)
在當下網際網路和移動網際網路盛行的時代,作為技術人也要去了解和明白運營技巧,在公司裡你能更好跟產品和運營溝通,也會有更多的晉升空間;作為自由職業者和創業者就更加需要。(跑題了)
關於資訊整合,資料整合老猿在《爬蟲是如何成就了這些商業公司的》中提到的去哪兒和天眼查這兩家公司是比較典型的,去哪兒是整合各家航空公司的機票價格,方便使用者比對哪個航班的價格便宜;天眼查是整合各個省市的企業工商資訊,提供多緯度的企業資訊,股東資訊查詢,節省了使用者不少時間。
機票資訊和工商資訊在沒有這兩家公司之前也都是存在的,但是都散落在不同的網站上,使用者查詢時就比較費勁,這兩家就是把這些資訊抓取,處理,聚合到一塊來提供查詢服務。
你整合後的資訊要能提高使用者的使用效率才有價值。
類似的還有商標查詢,專利查詢這些,現有的都很難用,你可以從商標局中把幾千萬個商標抓取出來,提供一個更好的查詢網站或者小程式,每天都會有不錯的流量。
別以為這些沒有機會了,告訴你,老猿在17年還抓了幾千萬家企業工商資訊做成一個網站薅SEO流量,每個月還能帶來小几千元的網盟收入。
當然這些你要去了解一些流量技巧,社群運營技巧等,我相信猿們週末少花些時間去研究片子,研究妹子,用點時間在學習上肯定手到擒來。
提醒:抓取的資料如果要商業化,要小心智慧財產權問題噢。
還要提醒一點:抓取和處理這些資料的代價要小於人工處理的代價,使用爬蟲代替人工才有價值。
爬蟲技術掙錢方法3:做自媒體,做知識社群
這是隨著微信興起,移動支付興起後的一個方向。當你具備了紮實的程式設計功底和實戰經驗後,無論是想塑造個人品牌還是做自媒體謀生,對外輸出技術文章,這是當下一個不錯的選擇,比如老猿就在嘗試做猿人學,呵呵。做自媒體寫文章貴在堅持,不要擔心筆桿子功夫不行,老猿這篇文章寫到這裡花了兩天8小時,見笑了。做自媒體不敢寫得太多,因為鄙人也是在學習中,但是我相信做永遠比不做好。
爬蟲掙錢方法4:做決策的資料依據,比如買賣股票
首先,買賣股票有風險,這裡不提倡噢。老猿在17年買美股,用8萬本金,半年後翻到24萬,操作太激進後來在2周內本金只剩3萬,哭到在廁所。
針對C端使用者的網際網路公司的產品在社交媒體上大都會被熱烈討論,這些產品賣的好還是不好,可以通過抓取社交媒體上的使用者討論來分析。
比如蘋果最近釋出的iPhone XS,iPhone XR(寫這篇文章的時間點是2018年10月30日),可以通過抓取微博上最近發微博的使用者裝置情況來觀察新款iPhone在中國的銷售情況,還可以跟iPhone以前每款新品上市時,那時的使用者發微博裝置情況來對比,是比以前賣的好還是差。
一點淺見,不要輕易入市,風險較大。
本來寫了第5點,但是有些灰產,跟正能量不相符,還是刪掉,我們們私下裡交流。
我的更多Python爬蟲掙錢文章:
用爬蟲掙錢就先說這麼多吧,我們進入正題,下一篇講:
什麼是網路爬蟲
我的公眾號:猿人學 Python 上會分享更多心得體會,敬請關注。
***版權申明:若沒有特殊說明,文章皆是猿人學 yuanrenxue.com 原創,沒有猿人學授權,請勿以任何形式轉載。***