プロキシ

既定では、プロキシタイプやロケーションを指定しなくても、信頼性とアクセス性を確保するために、Firecrawl はすべてのリクエストをプロキシ経由でルーティングします。

from firecrawl import Firecrawl

firecrawl = Firecrawl(api_key="fc-YOUR-API-KEY")

doc = firecrawl.scrape('https://example.com',
    formats=['markdown'],
    location={
        'country': 'US',
        'languages': ['en']
    }
)

print(doc)

• basic: ボット対策がない、または基本的な対策のみのサイト向けのスクレイピング用プロキシ。高速で、多くの場合に機能します。
• stealth: 高度なボット対策があるサイトや、通常のプロキシをブロックするサイト向けのステルスプロキシ。速度は遅いものの、一部のサイトではより信頼性があります。ステルスモードの詳細 →
• auto: basic プロキシが失敗した場合、Firecrawl が自動的にステルスプロキシで再試行します。ステルスでの再試行が成功した場合、そのスクレイピングには 5 クレジットが請求されます。最初の試行で basic が成功した場合は、通常のコストのみが請求されます。

注: クレジットコストや再試行戦略を含むステルスプロキシの詳細は、ステルスモードのドキュメントを参照してください。