Web Scraper

Questo Web Scraper raccoglie dati strutturati tramite URL e regole di estrazione. Fornire un URL di pagina obiettivo e un insieme di selettori (CSS o XPath) per definire i campi dati. Lo strumento recupera la pagina, applica i selettori e restituisce i record in JSON o CSV. Supporta la ripetizione su più pagine tramite una regola di paginazione e può fare una pausa tra le richieste per rispettare il carico del sito.
La logica di base valida gli input, applica i selettori alle pagine e normalizza i nomi dei campi per un output coerente. Supporta più selettori per campo e strutture annidate. L’output include un array di record e metadati opzionali come total_records e success_rate.
Il motore gestisce problemi comuni come campi mancanti restituendo null e rimuovendo spazi bianchi durante la normalizzazione. Per impostazione predefinita non esegue rendering di JavaScript, ma può essere esteso per rendering avanzato se configurato.
Casi d’uso includono monitoraggio prezzi di prodotto, raccolta metadati articoli, audit meta tag e enumerazione delle funzionalità dei concorrenti. Lo strumento è progettato per non sviluppatori offrendo configurazione basata su selettori per utenti avanzati.
Complessivamente offre estrazione dati affidabile e ripetibile con formati di esportazione standard per supportare decisioni data-driven.