Camel AI | Firecrawl

Documentation officielle de CAMEL : docs.camel-ai.org/key_modules/loadersFirecrawl est disponible sous forme de chargeur CAMEL et transforme n’importe quel site en markdown prêt à être utilisé par les LLM pour vos agents

Installation

pip install camel-ai

Configurez votre clé Firecrawl pour que le chargeur la détecte automatiquement :

export FIRECRAWL_API_KEY="fc-your-api-key"

Utilisation

Avec Camel AI et Firecrawl, vous pouvez rapidement créer des systèmes multi-agents capables d’exploiter des données issues du web.

Utiliser Firecrawl pour collecter l’intégralité d’un site web

crawl renvoie le résultat une fois la tâche terminée. Vérifiez l’état, puis lisez le markdown dans data.

from camel.loaders import Firecrawl

firecrawl = Firecrawl()

response = firecrawl.crawl(url="https://www.camel-ai.org/about")
print(response["status"])  # "completed" une fois le crawl terminé

print(response["data"][0]["markdown"])

Utiliser Firecrawl pour récupérer une page unique

from camel.loaders import Firecrawl

firecrawl = Firecrawl()

response = firecrawl.scrape(url="https://www.camel-ai.org/about")
print(response["markdown"])

Firecrawl() lit FIRECRAWL_API_KEY depuis l’environnement. Passez api_key=... pour la remplacer ou api_url=... pour utiliser une instance auto-hébergée.

Ressources

Documentation des chargeurs CAMEL
Guide pratique sur CAMEL et Firecrawl
Documentation de scrape Firecrawl et de crawl