Trị liệu - Thu thập thông tin

Sự miêu tả

Để thực thi trình thu thập thông tin của bạn, hãy chạy lệnh sau trong thư mục first_scrapy của bạn -

scrapy crawl first

Ở đâu, first là tên của con nhện được chỉ định trong khi tạo con nhện.

Khi con nhện thu thập thông tin, bạn có thể thấy kết quả sau:

2016-08-09 18:13:07-0400 [scrapy] INFO: Scrapy started (bot: tutorial)
2016-08-09 18:13:07-0400 [scrapy] INFO: Optional features available: ...
2016-08-09 18:13:07-0400 [scrapy] INFO: Overridden settings: {}
2016-08-09 18:13:07-0400 [scrapy] INFO: Enabled extensions: ...
2016-08-09 18:13:07-0400 [scrapy] INFO: Enabled downloader middlewares: ...
2016-08-09 18:13:07-0400 [scrapy] INFO: Enabled spider middlewares: ...
2016-08-09 18:13:07-0400 [scrapy] INFO: Enabled item pipelines: ...
2016-08-09 18:13:07-0400 [scrapy] INFO: Spider opened
2016-08-09 18:13:08-0400 [scrapy] DEBUG: Crawled (200) 
<GET http://www.dmoz.org/Computers/Programming/Languages/Python/Resources/> (referer: None)
2016-08-09 18:13:09-0400 [scrapy] DEBUG: Crawled (200) 
<GET http://www.dmoz.org/Computers/Programming/Languages/Python/Books/> (referer: None)
2016-08-09 18:13:09-0400 [scrapy] INFO: Closing spider (finished)

Như bạn có thể thấy trong đầu ra, đối với mỗi URL có một dòng nhật ký (tham chiếu: Không có) cho biết rằng các URL là URL bắt đầu và chúng không có liên kết giới thiệu. Tiếp theo, bạn sẽ thấy hai tệp mới có tên Books.html và Resources.html được tạo trong thư mục first_scrapy của bạn .