BackFetchDeep CrawlPartez d'une URL.Collectez le site.
Découvrez les pages liées à une URL de départ et récupérez leur contenu. BackFetch Deep Crawl prépare des sources pour votre moteur de recherche, votre base de connaissances ou votre agent IA.
Deep CrawlExemple de réponse
client.crawl("https://example.com/docs"){
"start_url": "https://example.com/docs",
"pages": [
{
"url": "https://example.com/docs",
"markdown": "# Documentation\nPremiers pas."
},
{
"url": "https://example.com/docs/setup",
"markdown": "# Installation\nConfigurer votre projet."
}
]
}Aperçu du SDK · Données illustratives
Découvrez les pages que vous ne connaissez pas encore.
Explorez le contenu lié
Partez d'une documentation ou d'une catégorie. Suivez ses liens pour trouver le contenu dont vous avez besoin.
Conservez la source du contenu
Associez chaque contenu extrait à son URL. Votre application peut ainsi remonter à la page d'origine.
Une collection lisible par votre application.
- Préparer une documentation pour une base de connaissances
- Collecter des pages pour un index de recherche
- Rassembler le contenu d'un catalogue produits