爬蟲
爬蟲一個網頁並下載:
const https=require(‘https’) 爬的網站是http的就引入http模組,是https的就引入https模組
const fs=require(‘fs’)
let url=‘https://www.mi.com’
https.get(url, (res) => {
res.setEncoding(‘utf8’); //網頁的格式是utf8,圖片的格式是binary
let rawData=’’
res.on(‘data’,(chunk)=>{
rawData+=chunk
})
res.on('end',()=>{
fs.writeFileSync('./mi.html',rawData,'utf8')
})
}).on('error', (e) => {
// 如果請求失敗會觸發error 回撥
console.error(Got error: ${e.message}
);
}); 最後在中端開啟,寫入node 本檔案.js 按enter即可穿件一個爬的html。
爬取一個網站 2.將網站的所有圖片下載到本地
相關文章
- 【Python學習】爬蟲爬蟲爬蟲爬蟲~Python爬蟲
- 爬蟲:多程式爬蟲爬蟲
- python爬蟲---網頁爬蟲,圖片爬蟲,文章爬蟲,Python爬蟲爬取新聞網站新聞Python爬蟲網頁網站
- 通用爬蟲與聚焦爬蟲爬蟲
- 爬蟲--Scrapy簡易爬蟲爬蟲
- 爬蟲進階:反反爬蟲技巧爬蟲
- 反爬蟲之字型反爬蟲爬蟲
- 【爬蟲】爬蟲專案推薦 / 思路爬蟲
- 網路爬蟲——爬蟲實戰(一)爬蟲
- 2個月精通Python爬蟲——3大爬蟲框架+6場實戰+反爬蟲技巧+分散式爬蟲Python爬蟲框架分散式
- Python爬蟲教程-01-爬蟲介紹Python爬蟲
- Java爬蟲與Python爬蟲的區別?Java爬蟲Python
- python就是爬蟲嗎-python就是爬蟲嗎Python爬蟲
- 爬蟲與反爬蟲技術簡介爬蟲
- request爬蟲爬蟲
- nodejs 爬蟲NodeJS爬蟲
- 科普:爬蟲爬蟲
- python 爬蟲Python爬蟲
- app爬蟲APP爬蟲
- 爬蟲案例爬蟲
- 爬蟲概述爬蟲
- 爬 蟲包
- python爬蟲Python爬蟲
- 【爬蟲】python爬蟲從入門到放棄爬蟲Python
- 分散式爬蟲原理之分散式爬蟲原理分散式爬蟲
- C#爬蟲與反爬蟲--字型加密篇C#爬蟲加密
- 【python--爬蟲】彼岸圖網高清桌布爬蟲Python爬蟲
- Python爬蟲(1.爬蟲的基本概念)Python爬蟲
- python爬蟲實戰,爬蟲之路,永無止境Python爬蟲
- 什麼是爬蟲?Python爬蟲框架有哪些?爬蟲Python框架
- Python爬蟲與Java爬蟲有何區別?Python爬蟲Java
- Python爬蟲之路-chrome在爬蟲中的使用Python爬蟲Chrome
- Python爬蟲之路-selenium在爬蟲中的使用Python爬蟲
- Python分散式爬蟲(三) - 爬蟲基礎知識Python分散式爬蟲
- Java 爬蟲專案實戰之爬蟲簡介Java爬蟲
- Python爬蟲教程-34-分散式爬蟲介紹Python爬蟲分散式
- Python爬蟲教程-30-Scrapy 爬蟲框架介紹Python爬蟲框架
- 實用爬蟲-01-檢測爬蟲的 IP爬蟲