De Website Crawler van AI Assistent scant uw volledige website en verwerkt de inhoud automatisch tot bruikbare kennis voor de AI. U hoeft geen content handmatig over te typen of te kopiëren: de crawler vindt alle pagina's zelf, leest de tekst, structureert de informatie en maakt die direct beschikbaar voor de chatbot. Binnen enkele minuten na het instellen kent de AI de inhoud van uw website.
De crawler werkt op basis van een door u opgegeven startadres en volgt automatisch alle interne links tot een maximale diepte die u zelf instelt. U kunt specifieke URL-patronen uitsluiten, bijvoorbeeld admin-omgevingen, winkelwagenspagina's of andere pagina's die u niet wilt indexeren. Zo bepaalt u precies welke content de AI kent en welke niet.
Nadat de eerste crawl is voltooid, controleert het systeem periodiek of er nieuwe of gewijzigde pagina's zijn. Voegt u een nieuw product toe aan uw website? De crawler detecteert de wijziging en werkt de kennisbasis van de AI bij zonder dat u iets hoeft te doen. De chatbot beschikt daardoor altijd over actuele informatie — ook als uw website regelmatig wordt bijgewerkt.
De crawler combineert naadloos met andere kennisbronnen. U kunt geïndexeerde websitecontent aanvullen met handmatig geschreven kennisbankartikelen, geüploade PDF's en productdocumentatie. De AI combineert al deze bronnen en kiest automatisch de meest relevante informatie om een klantvraag te beantwoorden. Het resultaat is een chatbot die uw bedrijf door en door kent.