Scrapy - Веб-сервисы

Описание

Работающим поисковым роботом Scrapy можно управлять через JSON-RPC. Он включен настройкой JSONRPC_ENABLED. Эта служба обеспечивает доступ к основному объекту краулера по протоколу JSON-RPC 2.0 . Конечная точка для доступа к объекту поискового робота -

http://localhost:6080/crawler

В следующей таблице приведены некоторые настройки, которые показывают поведение веб-службы.

Старший Нет Настройка и описание Значение по умолчанию
1

JSONRPC_ENABLED

Это относится к логическому значению, которое определяет, будет ли веб-служба вместе с ее расширением включена или нет.

Правда
2

JSONRPC_LOGFILE

Это относится к файлу, который используется для регистрации HTTP-запросов к веб-службе. Если он не установлен, будет использоваться стандартный журнал Scrapy.

Никто
3

JSONRPC_PORT

Это относится к диапазону портов для веб-службы. Если установлено значение «Нет», порт будет назначаться динамически.

[6080, 7030]
4

JSONRPC_HOST

Это относится к интерфейсу, который веб-сервис должен прослушивать.

'127.0.0.1'