奇伢爬蟲專案

githubshare發表於2018-10-08

專案地址:https://github.com/qiyaTech/javaCrawling

專案介紹:奇伢爬蟲基於spring boot 、 WebMagic 實現 微信公眾號文章、新聞、csdn、info等網站文章爬取,可以動態設定文章爬取規則、清洗規則,基本實現了爬取大部分網站的文章。

專案截圖:

在這裡插入圖片描述

在這裡插入圖片描述

在這裡插入圖片描述

在這裡插入圖片描述在這裡插入圖片描述歡迎關注我的公眾號:【菜鳥要飛】 ,面試寶典、學習路線、原始碼分享等等你來學

相關文章