透過Rule類決定爬取規則

　　當使用Scrapy框架中的CrawlSpider時，您可以透過Rule類來定義爬取規則。Rule類允許您指定哪些連結應該被跟蹤和爬取，以及如何提取資訊。以下是如何使用Rule類來定義爬取規則的基本步驟：

　　匯入Rule類：

　　在Python指令碼中匯入Rule類：

　　from scrapy.spiders import Rule

　　建立Rule物件：

　　使用Rule類建立規則物件，指定要跟蹤的連結和如何提取資訊：

　　rule=Rule(LinkExtractor(allow=r'/page/'),callback='parse_page',follow=True)

　　LinkExtractor(allow=r'/page/')：這裡使用LinkExtractor類來指定要提取的連結規則，這個例子中是提取所有URL中包含/page/的連結。

　　callback='parse_page'：指定處理提取的連結的回撥函式，這裡是parse_page函式。

　　follow=True：指定是否跟蹤提取的連結，設定為True表示跟蹤。

　　將規則新增到CrawlSpider中：

　　將建立的規則物件新增到CrawlSpider中：

　　class MyCrawlSpider(CrawlSpider):

　　name='my_crawl_spider'

　　allowed_domains=['example.com']

　　start_urls=[']

　　rules=(

　　rule,

　　)

　　def parse_page(self,response):

　　#處理提取的頁面資訊

　　pass

　　在CrawlSpider類中，使用rules屬性將建立的規則物件新增到爬蟲中。

　　在CrawlSpider類中定義了parse_page函式，用於處理提取的頁面資訊。

　　透過以上步驟，您可以使用Rule類來定義爬取規則，並將其新增到CrawlSpider中。這樣CrawlSpider就會根據規則自動跟蹤連結並提取資訊，大大簡化了爬蟲的開發過程。