# Indicizzazione dei contenuti

L’affidabilità delle risposte fornite da OpenCity AI Chatbot è strettamente legata all’accuratezza e al costante allineamento dei flussi informativi acquisiti dal portale istituzionale.

Il cuore di questo processo è il ***crawler***, un modulo specializzato nella scansione periodica del portale istituzionale, progettato per operare nel pieno rispetto della privacy e delle policy di pubblicazione dell’Ente.

Il sistema adotta gli standard e le regole di indicizzazione dei principali motori di ricerca mondiali (come Google e Bing):

* rispetto del protocollo `robots.txt`: il crawler segue rigorosamente le istruzioni di esclusione impostate sul sito web, garantendo che il chatbot non indicizzi mai aree riservate o protette.
* sincronizzazione semantica: a differenza dei motori di ricerca tradizionali, il chatbot trasforma i testi in un database semantico che permette di comprendere l'intento dell'utente e non solo le singole parole chiave.