爬蟲
爬蟲一個網頁並下載:
const https=require(‘https’) 爬的網站是http的就引入http模組,是https的就引入https模組
const fs=require(‘fs’)
let url=‘https://www.mi.com’
https.get(url, (res) => {
res.setEncoding(‘utf8’); //網頁的格式是utf8,圖片的格式是binary
let rawData=’’
res.on(‘data’,(chunk)=>{
rawData+=chunk
})
res.on('end',()=>{
fs.writeFileSync('./mi.html',rawData,'utf8')
})
}).on('error', (e) => {
// 如果請求失敗會觸發error 回撥
console.error(Got error: ${e.message}
);
}); 最後在中端開啟,寫入node 本檔案.js 按enter即可穿件一個爬的html。
爬取一個網站 2.將網站的所有圖片下載到本地
相關文章
- 【Python學習】爬蟲爬蟲爬蟲爬蟲~Python爬蟲
- 爬蟲:多程式爬蟲爬蟲
- 通用爬蟲與聚焦爬蟲爬蟲
- 爬蟲--Scrapy簡易爬蟲爬蟲
- python爬蟲---網頁爬蟲,圖片爬蟲,文章爬蟲,Python爬蟲爬取新聞網站新聞Python爬蟲網頁網站
- 反爬蟲之字型反爬蟲爬蟲
- 爬蟲進階:反反爬蟲技巧爬蟲
- 【爬蟲】爬蟲專案推薦 / 思路爬蟲
- 網路爬蟲——爬蟲實戰(一)爬蟲
- 【python爬蟲】python爬蟲demoPython爬蟲
- 爬蟲那些事-爬蟲設計思路爬蟲
- 爬蟲專案(一)爬蟲+jsoup輕鬆爬知乎爬蟲JS
- 爬蟲與反爬蟲技術簡介爬蟲
- 爬蟲技術(二)-客戶端爬蟲爬蟲客戶端
- 2個月精通Python爬蟲——3大爬蟲框架+6場實戰+反爬蟲技巧+分散式爬蟲Python爬蟲框架分散式
- request爬蟲爬蟲
- 爬蟲2爬蟲
- 科普:爬蟲爬蟲
- scrapy爬蟲爬蟲
- 爬蟲案例爬蟲
- C#爬蟲與反爬蟲--字型加密篇C#爬蟲加密
- Python爬蟲教程-01-爬蟲介紹Python爬蟲
- Java爬蟲與Python爬蟲的區別?Java爬蟲Python
- 分散式爬蟲原理之分散式爬蟲原理分散式爬蟲
- 在scrapy框架下建立爬蟲專案,建立爬蟲檔案,執行爬蟲檔案框架爬蟲
- 【python--爬蟲】彼岸圖網高清桌布爬蟲Python爬蟲
- 什麼是爬蟲?Python爬蟲框架有哪些?爬蟲Python框架
- Java 爬蟲專案實戰之爬蟲簡介Java爬蟲
- 實用爬蟲-01-檢測爬蟲的 IP爬蟲
- 【爬蟲】python爬蟲從入門到放棄爬蟲Python
- python就是爬蟲嗎-python就是爬蟲嗎Python爬蟲
- Python爬蟲之路-chrome在爬蟲中的使用Python爬蟲Chrome
- Python爬蟲與Java爬蟲有何區別?Python爬蟲Java
- 爬蟲(1) - 爬蟲基礎入門理論篇爬蟲
- python爬蟲實戰,爬蟲之路,永無止境Python爬蟲
- 爬蟲的小技巧之–如何尋找爬蟲入口爬蟲
- Python爬蟲(1.爬蟲的基本概念)Python爬蟲
- 圖靈樣書爬蟲 - Python 爬蟲實戰圖靈爬蟲Python