scrapy - Online na nuvem

PROGRAMA:

NOME

scrapy - a ferramenta de linha de comando Scrapy

SINOPSE

raspagem [comando] [OPÇÕES] ...

DESCRIÇÃO

Scrapy é controlado por meio do raspagem ferramenta de linha de comando. O script fornece vários
comandos, para finalidades diferentes. Cada comando suporta sua própria sintaxe particular. No
outras palavras, cada comando suporta um conjunto diferente de argumentos e opções.

OPÇÕES

buscar [OPÇÃO] URL
Busque um URL usando o downloader Scrapy

--cabeçalhos
Imprimir cabeçalhos HTTP de resposta em vez do corpo

aranha [OPÇÃO] arquivo de aranha
Executar uma aranha

--output = FILE
Armazene itens copiados em FILE no formato XML

Configurações [OPÇÃO]
Configurações de consulta de scrapy

--get = SETTING
Imprimir valor de configuração bruto

--getbool = CONFIGURAÇÃO
Valor de configuração de impressão, interpretado como um booleano

--getint = CONFIGURAÇÃO
Valor de configuração de impressão, interpretado como um inteiro

--getfloat = SETTING
Valor de configuração de impressão, interpretado como um flutuante

--getlist = CONFIGURAÇÃO
Valor de configuração de impressão, interpretado como um flutuante

--iniciar Imprimir o valor de configuração inicial (antes de carregar extensões e spiders)

concha URL | lima
Inicie o console interativo de raspagem

iniciar projeto Nome do Projeto
Crie um novo projeto com um modelo de projeto inicial

--ajuda, -h
Ajuda e opções do comando de impressão

--logfile = FILE
Arquivo de log. se omitido, o stderr será usado

--loglevel = LEVEL, -L NÍVEL
Nível de registro (padrão: Nenhum)

--nolog
Desative o registro completamente

--spider = SPIDER
Sempre use esta aranha quando os argumentos forem urls

--profile = FILE
Grave estatísticas python cProfile em FILE

--lsprof = FILE
Grave estatísticas de criação de perfil lsprof em FILE

--pidfile = FILE
Grave o ID do processo em FILE

--set = NOME = VALOR, -s NAME = VALUE
Definir / substituir configuração (pode ser repetido)

Use scrapy online usando serviços onworks.net