Pular para o conteúdo principal

Pré-requisitos

Instale o SDK

Adicione firecrawl ao seu mix.exs:
defp deps do
  [
    {:firecrawl, "~> 1.0"}
  ]
end
Configure sua chave de API em config/config.exs:
config :firecrawl, api_key: System.get_env("FIRECRAWL_API_KEY")

Fazer uma busca na web

{:ok, result} = Firecrawl.search_and_scrape(query: "firecrawl web scraping", limit: 5)

for entry <- result.body["data"]["web"] do
  IO.puts("#{entry["title"]} - #{entry["url"]}")
end

Fazer scraping de uma página

{:ok, result} = Firecrawl.scrape_and_extract_from_url(url: "https://example.com")
IO.puts(result.body["data"]["markdown"])
{
  "success": true,
  "data": {
    "markdown": "# Example Domain\n\nThis domain is for use in illustrative examples...",
    "metadata": {
      "title": "Example Domain",
      "sourceURL": "https://example.com"
    }
  }
}

Interaja com uma página

Faça o scraping de uma página e depois continue trabalhando nela usando a API de sessão do navegador.
{:ok, scrape} = Firecrawl.scrape_and_extract_from_url(
  url: "https://www.amazon.com",
  formats: ["markdown"]
)

scrape_id = get_in(scrape.body, ["data", "metadata", "scrapeId"])

# Use a REST API para interagir (baseado em prompt)
headers = [
  {"Authorization", "Bearer #{Application.get_env(:firecrawl, :api_key)}"},
  {"Content-Type", "application/json"}
]

{:ok, _} = Req.post(
  "https://api.firecrawl.dev/v2/scrape/#{scrape_id}/interact",
  json: %{prompt: "Search for iPhone 16 Pro Max"},
  headers: headers
)

{:ok, response} = Req.post(
  "https://api.firecrawl.dev/v2/scrape/#{scrape_id}/interact",
  json: %{prompt: "Click on the first result and tell me the price"},
  headers: headers
)

IO.inspect(response.body)

# Encerrar a sessão
Req.delete(
  "https://api.firecrawl.dev/v2/scrape/#{scrape_id}/interact",
  headers: headers
)

Variável de ambiente

Defina FIRECRAWL_API_KEY em vez de embuti-la no código:
export FIRECRAWL_API_KEY=fc-YOUR-API-KEY

Próximos passos

Documentação de scraping

Todas as opções de scraping, incluindo formatos, ações e proxies

Documentação de busca

Fazer uma busca na web e obter o conteúdo completo da página

Documentação de interação

Clique, preencha formulários e extraia conteúdo dinâmico

Referência do SDK de Elixir

Referência completa do SDK com rastreamento, map, extração em lote e muito mais