Le Crawler de site web d'AI Assistent analyse l'intégralité de votre site et traite automatiquement son contenu en connaissances utilisables par l'IA. Pas besoin de retaper ou de copier manuellement du contenu : le crawler trouve toutes les pages lui-même, lit le texte, structure les informations et les met immédiatement à disposition du chatbot.
Le crawler fonctionne à partir d'une URL de départ que vous fournissez et suit automatiquement tous les liens internes jusqu'à une profondeur maximale que vous définissez. Vous pouvez exclure des patterns d'URL spécifiques — par exemple les zones d'administration ou les pages de panier.
Après le premier crawl, le système vérifie périodiquement les pages nouvelles ou modifiées. Ajoutez un nouveau produit à votre site ? Le crawler détecte le changement et met à jour la base de connaissances de l'IA sans intervention de votre part.
Le crawler se combine parfaitement avec d'autres sources de connaissances. Vous pouvez compléter le contenu du site indexé avec des articles rédigés manuellement, des PDFs téléchargés et de la documentation produit.