用Jupyter—Notebook爬取網頁資料例項12

用selenium庫爬取58同城售房資訊

程式碼呢？咋是這

程式碼來了

#引入selenium、 pandas、openpyxl庫
from selenium import webdriver
import pandas as pd
import openpyxl
#定義儲存變數
xq=[]
hxmj=[]
dj=[]
zj=[]
#獲取網頁原始碼
for i in range(5):
    url='https://cd.58.com/ershoufang/pn'+str(i)+'/'
    browser = webdriver.Chrome()
    browser.get(url)
#解析原始碼，提取所需資料資訊     
    for i in browser.find_elements_by_class_name('sendsoj'):
        xq.append(i.find_elements_by_class_name('baseinfo')[1].text)
        hxmj.append(i.find_elements_by_class_name('baseinfo')[0].text.replace('\n',''))
        dj.append(i.find_elements_by_class_name('price')[0].find_elements_by_class_name('unit')[0].text)
        zj.append(i.find_elements_by_class_name('price')[0].find_elements_by_class_name('sum')[0].text)
pd.DataFrame({'小區':xq,'戶型/面積':hxmj,'單價':dj,'總價':zj})         
data=pd.DataFrame({'小區':xq,'戶型/面積':hxmj,'單價':dj,'總價':zj})  
writer=pd.ExcelWriter('58.xlsx')
data.to_excel(writer,'爬蟲資料')
writer.save()