HelloPixDig

Annuaire › Données & analyse › Crawl4AI

Crawl4AI
Image : dépôt officiel du projet

> PÉPITE DONNÉES & ANALYSE · RECHERCHE & VEILLE · AGENTS & AUTOMATISATION · DÉVELOPPEMENT

Crawl4AI

par UncleCode

Transforme n'importe quel site web en Markdown propre, prêt à nourrir tes LLM et pipelines RAG.

85,3 k étoiles GitHub Apache-2.0 GratuitOpen sourceLocal
Voir sur GitHub →

Ce que ça fait

  • Crawler asynchrone basé sur un vrai navigateur (pages dynamiques comprises)
  • Sortie Markdown ou extraction structurée pour l'IA
  • Bibliothèque Python ou serveur Docker avec API REST

L'installer

Prérequis : Python 3

Installer
pip install -U crawl4ai
Installer le navigateur (une seule fois)
crawl4ai-setup
Vérifier l'installation
crawl4ai-doctor

Le prompt pour ton agent

Colle-le dans ton agent de code : il vérifie les prérequis et installe pour toi.

Claude CodeCodexCursorGemini CLIopencode
Prompt
Installe Crawl4AI (https://github.com/unclecode/crawl4ai) sur ma machine.
1. Vérifie les prérequis : Python 3. S'il manque quelque chose, dis-le-moi avant d'installer quoi que ce soit.
2. Suis la méthode officielle :
- Installer : pip install -U crawl4ai
- Installer le navigateur (une seule fois) : crawl4ai-setup
- Vérifier l'installation : crawl4ai-doctor
3. Vérifie que ça fonctionne, puis explique-moi comment le lancer et par quoi commencer.

Relis toujours ce que ton agent s'apprête à exécuter, surtout les commandes d'installation.