抓取網頁是指透過爬蟲程式從網際網路上獲取網頁的內容和資料。抓取網頁是爬蟲的核心功能之一，透過抓取網頁，可以獲取到網頁中的文字、圖片、連結等資訊，用於後續的資料分析、挖掘和應用。

URL（Uniform Resource Locator）是統一資源定位符的縮寫，是用來標識和定位網際網路上資源的地址。URL由多個部分組成，包括協議、域名、埠、路徑和查詢引數等。

URL的基本構成如下：

協議（Protocol）：指定了客戶端與伺服器之間通訊的協議，常見的協議有HTTP、HTTPS、FTP等。

域名（Domain Name）：表示伺服器的地址，用於標識一個網站。

埠（Port）：用於標識伺服器上的具體服務，通常省略時會使用預設的埠。

路徑（Path）：表示伺服器上資源的路徑，用於定位具體的網頁或檔案。

查詢引數（Query Parameters）：用於向伺服器傳遞額外的引數，以便獲取特定的資料或執行特定的操作。查詢引數通常以鍵值對的形式出現，多個引數之間使用&符號分隔。

透過解析URL，爬蟲可以確定要抓取的目標網頁的地址，併傳送HTTP請求獲取網頁的內容。爬蟲還可以根據URL的特定規則和模式，構造新的URL，用於抓取更多的相關網頁。

需要注意的是，URL中的域名部分需要進行域名解析，將域名轉換為對應的IP地址，以便進行網路通訊。域名解析是透過DNS（Domain Name System）服務來完成的，將域名對映為IP地址，以便進行網頁的訪問和抓取。

總結起來，抓取網頁是指透過爬蟲程式從網際網路上獲取網頁的內容和資料。URL是用來標識和定位網際網路上資源的地址，由協議、域名、埠、路徑和查詢引數等部分組成。透過解析URL，爬蟲可以確定要抓取的目標網頁的地址，併傳送HTTP請求獲取網頁的內容。瞭解URL的基本構成和使用方法，是進行網頁抓取和爬蟲開發的基礎。