Le dashboard

Il team dispone di due strumenti di gestione e monitoraggio.

Crawler Monitor

Apri Crawler Monitor

È la dashboard di panoramica in tempo reale.

Mostra lo stato dei crawl in corso. Indica quante pagine ha ogni sito per ogni tenant, quando è avvenuta l'ultima scansione e i metadati delle pagine.

Le pagine sono suddivise in tre categorie:

• Indicizzate — contribuiscono con contenuti propri all'archivio.
• Non indicizzate correttamente — sono escluse per una scelta valida. Comprendono pagine bloccate da robots.txt, pagine con istruzioni tecniche di non indicizzazione, copie di altre pagine, contenuti duplicati e file in formati non abilitati.
• In errore — non possono essere lette per un problema reale, come un sito irraggiungibile o un timeout del server.

Permette l'avvio rapido di crawl per tenant, per sito e per singola pagina, e anche di fermare crawl in corso.

Permette anche di configurare i tipi di file da scaricare per ogni sito.

Apri un tenant, poi un sito. In cima alla lista delle pagine trovi il pulsante con le estensioni disponibili per il crawling.

È il punto di partenza per avere una vista generale della situazione.

Crawler Control

Apri Crawler Control

È la dashboard operativa di gestione.

Da qui si configurano siti e tenant. Si avviano scansioni manuali. Si consulta il dettaglio completo di ogni sito, lo stato della fase di probe (adattamento personalizzato al ritardo del sito) e gli eventuali blocchi attivi.

Consente anche di verificare come il file robots.txt regola la scansione di un sito.

È lo strumento da usare per la configurazione e per gli interventi specifici.