WebParser: visão geral
O que o WebParser monitora, os quatro modos de captura e como ele se encaixa no ciclo de IC.
O WebParser é o módulo de coleta contínua do Hub. Ele vigia fontes externas e avisa quando algo muda, para que o analista gaste tempo interpretando, não checando páginas.
Os quatro modos de captura
| Modo | O que faz | Exemplo |
|---|---|---|
Página monitorada (page_diff) |
Guarda um retrato do conteúdo da página e compara com o anterior, gerando snapshot quando há mudança | Página de preços de um concorrente |
Documento (document_extract) |
Extrai dados de um PDF/documento publicado periodicamente | Release de resultados trimestrais |
API externa (api_source) |
Consulta uma API e captura os campos escolhidos | Indicadores de um órgão público |
Planilha (sheet_extract) |
Lê uma planilha e mapeia colunas para métricas, sem IA | Base de tarifas em Excel |
Fonte, projeto e snapshot
- Uma fonte é o que se monitora (uma URL, um documento, um endpoint, uma planilha).
- Uma fonte pode servir a vários projetos ao mesmo tempo — o mesmo site de concorrente interessa a dois clientes diferentes sem ser cadastrado duas vezes.
- Cada captura gera um snapshot: o conteúdo daquele momento, legível em formato de texto, comparável com os anteriores.
- Quando a fonte é configurada para extrair campos, o snapshot também alimenta os dados estruturados da fonte (séries, rankings, valores por dimensão).
[CAPTURA DE TELA] Lista de fontes monitoradas com modo, frequência e data da última captura.
No ciclo de inteligência
O WebParser cobre a coleta secundária: ele responde aos KIQs do mapa de inteligência que dependem de fontes públicas que mudam. Mudanças relevantes viram sinais no WeakSignals, entram como evidência em análises (BrandIntel, ForceMatrix, PESTLEMapper) e alimentam variáveis de modelos quantitativos.
Perguntas frequentes
Com que frequência ele checa? Depende da configuração da fonte: diária, semanal, mensal ou captura única.
Ele burla login e paywall? Não. Fontes que exigem autenticação não são apropriadas para monitoramento.
O cliente visualizador vê o WebParser? Vê os dados consolidados, não a configuração das fontes.