Python Selenium+PhantomJs 爬煎蛋妹子圖
第一次爬蟲,程式碼很簡單,借鑑了很多前輩的程式碼。
import re import os import requests from bs4 import BeautifulSoup from selenium import webdriver #設定phantomjs路徑 driver = webdriver.PhantomJS(executable_path='D:/phantomjs-2.1.1-windows/bin/phantomjs') def jiandanSpider(Url,basePath): page = 1 #遍歷url並解析 for urlPools in Url: driver.get(urlPools) driver.implicitly_wait(10) html_text = driver.page_source #轉換格式,並找到連結 img_url = [] soup = BeautifulSoup(html_text,'html.parser') imges = soup.select("a.view_img_link") for i in imges: wx = i.get('href') if str('gif') in str(wx): pass else: http_url = 'http:' + wx img_url.append(http_url) #開始下載 n = 1 for url in img_url: print("第 %s 張" % (n)) with open(basePath + '妹子圖 %s-%s'%(page,n) + url[-4:],'wb' ) as f: f.write(requests.get(url).content) print('下載完成') n = n + 1 page = page + 1 if __name__ == '__main__': urlPool = ('http://jandan.net/ooxx/page-{}#comments'.format(i) for i in range(1, 5)) basePath = 'D:/jiandanImage/' jiandanSpider(urlPool,basePath)
相關文章
- Python爬蟲之煎蛋網圖片下載Python爬蟲
- python利用selenium+phantomJS爬淘寶PythonJS
- 教你用Python爬取妹子圖APPPythonAPP
- 老司機帶你用python來爬取妹子圖Python
- 爬蟲Selenium+PhantomJS爬取動態網站圖片資訊(Python)爬蟲JS網站Python
- Scrapy框架爬取海量妹子圖框架
- Python爬蟲入門教程 2-100 妹子圖網站爬取Python爬蟲網站
- Node.js爬取妹子圖-crawler爬蟲的使用Node.js爬蟲
- Python爬蟲入門教程 18-100 煎蛋網XXOO圖片抓取Python爬蟲
- 爬蟲福利----妹子圖網MM批量下載爬蟲
- Python3--妹子圖實戰Python
- 爬蟲福利二 之 妹子圖網MM批量下載爬蟲
- [Python爬蟲] Selenium+Phantomjs動態獲取CSDN下載資源資訊和評論Python爬蟲JS
- Python3.x:Selenium+PhantomJS爬取帶Ajax、Js的網頁及獲取JS返回值PythonJS網頁
- 【python爬蟲】python爬蟲demoPython爬蟲
- 【Python學習】爬蟲爬蟲爬蟲爬蟲~Python爬蟲
- go實現抓妹子圖片Go
- python就是爬蟲嗎-python就是爬蟲嗎Python爬蟲
- python爬蟲---網頁爬蟲,圖片爬蟲,文章爬蟲,Python爬蟲爬取新聞網站新聞Python爬蟲網頁網站
- python 爬蟲Python爬蟲
- python爬蟲Python爬蟲
- python 爬蟲 爬取 learnku 精華文章Python爬蟲
- python爬蟲——爬取大學排名資訊Python爬蟲
- Python爬蟲入門教程 50-100 Python3爬蟲爬取VIP視訊-Python爬蟲6操作Python爬蟲
- python例項,python網路爬蟲爬取大學排名!Python爬蟲
- python爬蟲初探--第一個python爬蟲專案Python爬蟲
- Python asyncio 爬蟲Python爬蟲
- python爬蟲2Python爬蟲
- Python爬蟲——XPathPython爬蟲
- Python 爬蟲系列Python爬蟲
- Python爬蟲-xpathPython爬蟲
- Python爬蟲--2Python爬蟲
- python網路爬蟲_Python爬蟲:30個小時搞定Python網路爬蟲視訊教程Python爬蟲
- python爬蟲--爬取鏈家租房資訊Python爬蟲
- python爬蟲如何爬知乎的話題?Python爬蟲
- Python爬蟲爬取美劇網站Python爬蟲網站
- python爬蟲爬取糗事百科Python爬蟲
- 什麼是Python爬蟲?python爬蟲入門難嗎?Python爬蟲