Scrapy - Serviços da Web

Descrição

Um rastreador da web Scrapy em execução pode ser controlado via JSON-RPC. Ele é ativado pela configuração JSONRPC_ENABLED. Este serviço fornece acesso ao objeto rastreador principal por meio do protocolo JSON-RPC 2.0 . O ponto de extremidade para acessar o objeto rastreador é -

http://localhost:6080/crawler

A tabela a seguir contém algumas das configurações que mostram o comportamento do serviço web -

Sr. Não Configuração e descrição Valor padrão
1

JSONRPC_ENABLED

Refere-se ao booleano, que decide se o serviço web junto com sua extensão será habilitado ou não.

Verdadeiro
2

JSONRPC_LOGFILE

Isso se refere ao arquivo usado para registrar solicitações HTTP feitas ao serviço da web. Se não for definido, o log Scrapy padrão será usado.

Nenhum
3

JSONRPC_PORT

Isso se refere ao intervalo de portas para o serviço da web. Se for definido como nenhum, a porta será atribuída dinamicamente.

[6080, 7030]
4

JSONRPC_HOST

Refere-se à interface em que o serviço da web deve escutar.

'127.0.0.1'