利用WebClient進行資料抓取
//2011-08-15 gb2312方式獲取網頁原始碼
public string getGB2312HTML(string url)
{
string str;
using (System.Net.WebClient client = new System.Net.WebClient())
{
using (System.IO.Stream stream = client.OpenRead(url))
{
using (System.IO.StreamReader reader = new System.IO.StreamReader(stream, System.Text.Encoding.GetEncoding("gb2312")))
{
str = reader.ReadToEnd();
reader.Close();
}
stream.Close();
}
}
return str;
}
//2011-08-15 UTF-8方式獲取網頁原始碼
public string getUTF8HTML(string url)
{
string str;
using (System.Net.WebClient client = new System.Net.WebClient())
{
using (System.IO.Stream stream = client.OpenRead(url))
{
using (System.IO.StreamReader reader = new System.IO.StreamReader(stream, System.Text.Encoding.GetEncoding("UTF-8")))
{
str = reader.ReadToEnd();
reader.Close();
}
stream.Close();
}
}
return str;
}
相關文章
- python:利用asyncio進行快速抓取Python
- 如何使用代理IP進行資料抓取,PHP爬蟲抓取亞馬遜商品資料PHP爬蟲亞馬遜
- 利用IP代理進行網路抓取可以幫助企業收集哪些資料?
- 利用Charles抓取資料詳細流程
- 利用Kettle進行資料同步(下)
- 利用PCA進行資料降維PCA
- 利用Kettle進行資料同步(上)
- 企業進行資料抓取時要注意什麼?
- 利用python指令碼(xpath)抓取資料Python指令碼
- 在SAP WebClient UI裡使用AJAX進行非同步資料讀取WebclientUI非同步
- 利用jmeter進行資料庫測試JMeter資料庫
- 網路爬蟲如何獲取IP進行資料抓取爬蟲
- 利用Tushare資料介面+pandas進行股票資料分析
- 薦書 | 《利用Python進行資料分析》Python
- 【譯文】利用dplyr包進行資料操作
- 模擬利用MV進行資料遷移
- 利用undo進行資料的恢復操作
- 利用Python Pandas進行資料預處理-資料清洗Python
- 利用binlog進行資料庫的還原資料庫
- 如何利用第三方資料進行大資料分析大資料
- 手機爬蟲用Appium詳細教程:利用Python控制移動App進行自動化抓取資料爬蟲APPPython
- 利用Data Vault對資料倉儲進行建模(二)
- 利用SSIS進行SharePoint 列表資料的ETL
- 《利用Python進行資料分析·第2版》 轉Python
- 如何利用Rman對Oracle資料庫進行備份Oracle資料庫
- Express 實戰(八):利用 MongoDB 進行資料持久化ExpressMongoDB持久化
- 利用可靠還原點進行資料庫閃回資料庫
- 使用python進行web抓取PythonWeb
- 用scrapy進行網頁抓取網頁
- 利用python進行資料分析之準備工作(1)Python
- 如何利用區塊鏈技術進行資料儲存?區塊鏈
- Vue 中利用 eventBus 進行資料通訊的問題Vue
- 利用資料庫trigger對安全進行監控資料庫
- ORACLE利用STANDBY端RMAN備份進行資料恢復Oracle資料恢復
- Android利用Fiddler進行網路資料抓包Android
- 利用rowid 進行大批量資料更新 -- 轉帖
- 利用d3.js對大資料資料進行視覺化分析JS大資料視覺化
- 如何利用散點圖矩陣進行資料視覺化矩陣視覺化