URLEXTRACTOR.BIGODES.CLUB

Domínio

Só o domínio, sem https:// nem barra.

Abrangência

Ordenação

Campos retornados

data (timestamp) iQuando a URL foi capturada, formato AAAAMMDDHHMMSS. Com collapse ligado, é a 1ª captura — sua aproximação da data de criação da página. url iO endereço completo capturado. É o campo principal: a lista de todos os caminhos do domínio. status iCódigo HTTP no momento da captura. 200 = página viva, 301/302 = redirect, 404 = morta. Separa oferta no ar de página derrubada. tipo iTipo do arquivo: text/html (página), pdf, javascript, imagem… Serve pra filtrar só páginas e ignorar script/css/imagem. tamanho iPeso da captura em bytes. Pouco usado na mineração; às vezes diferencia uma VSL pesada de uma página de redirect leve. digest iHash do conteúdo. Duas capturas com o mesmo digest = conteúdo idêntico. Detecta quando a página mudou de verdade vs. só foi recapturada igual.

Só 1ª captura de cada URL (collapse=urlkey)

Liga isso pra ter um inventário limpo: uma linha por URL única em vez de toda captura repetida.

Filtros avançados

De (data)

Até (data)

Filtrar statusiqualquer — não filtra.
só 200 — páginas que estavam no ar e ok.
excluir 200 — só o que deu redirect ou erro.
redirects (3xx) — páginas que mandavam pra outra (funil, cloaker).
erros (4xx) — páginas mortas ou removidas (404).

Filtrar tipo

Filtrar por trecho na URL (regex)

Limite de resultados

Útil contra erro 503 e buscas lentas: domínios grandes travam. Comece com 1000.

SE DER (ERRO 503) O SERVIDOR JÁ TENTA DE NOVO SOZINHO. SE A BUSCA ESTIVER LENTA, USE O LIMITE DE RESULTADOS OU UM FILTRO.