Indeed は求人データの山の上に座っています —— 6億4,500万件以上の求職者プロフィール、330万社以上の雇用主、そして常時2,400万件以上のアクティブな求人情報。
そのデータをスプレッドシートや CRM、分析ダッシュボードに取り込みたいなら、本当に動くスクレイパーが必要です。「本当に動く」というのが肝心なところで、というのも Indeed は公開ウェブ上でもっとも厳重に保護されている求人サイトのひとつだからです。
私は Thunderbit で、その前は Automation Anywhere で、何年も自動化ツールを作ってきました。だからこそ言えますが、2026 年に Indeed をスクレイピングするのは、単純な商品カタログをスクレイピングするのとはまったく別物です。Cloudflare のチャレンジ、CAPTCHA、IP フィンガープリンティング、ローリング式のレート制限のせいで、去年みんなが書いたスクリプトの半分はもう壊れています。どのフォーラムを見ても同じ話ばかり —— 何ヶ月も動いていたコードが、ある日突然 403 エラーしか返さなくなる、と。
そこで、ノーコード拡張機能から開発者向け API、オープンソースライブラリまで幅広くカバーした Indeed スクレイパー 10 選をまとめました。スキルレベルも予算も問いません。給与データを Google スプレッドシートに入れたいだけのリクルーターでも、求人アグリゲーションのパイプラインを構築するデータエンジニアでも、あなたに合うツールがここにあります。
Indeed のスクレイピングがもっとも難しい求人サイトのひとつである理由
ツールの話に入る前に、何を相手にしているのかを理解しておくと役立ちます。Indeed はスクレイパーにとって決してやさしい相手ではなく、しかも年々やさしくなくなっています。
4 層のアンチボット防御が、Indeed を際立たせています。
- Cloudflare WAF： Indeed 自身のサポートドキュメントでも、ユーザーが Cloudflare エラーや 403 Forbidden に遭遇しうることを認めています。ほとんどのスクレイパーが最初にぶつかる壁がこれです。
- CAPTCHA とチャレンジゲート： 「あなたが人間であることを確認します」のループが繰り返されるのはよくあることです。これは単に煩わしいだけではありません —— ツール側で解決や回避ができない限り、自動化ワークフローが完全に止まってしまいます。
- IP とリクエストのレート制限： Indeed の開発者向けドキュメントでは、60 秒のローリングウィンドウでトラフィックを制限し、超過すると HTTP 429 を返します。これがもっとも効いてくるのがページネーションです。
- JavaScript と Cookie への依存： Indeed はブロックされたユーザーに対して、JavaScript と Cookie を有効にするよう明示的に案内しています。純粋な HTTP リクエスト型のスクレイパー —— 実ブラウザをレンダリングしないタイプ —— は軒並み失敗します。
コミュニティの証言は身も蓋もありません。ある Reddit ユーザーはこう書いています。「いつも 403 forbidden エラーが出る」。別のユーザーは「何ヶ月も動かしてきたウェブスクレイピングのコードが動かなくなった」と報告しています。その後のスレッドでは、1 ページ目は問題なく読み込めるのに、2 ページ目以降が完全に失敗する、という状況が語られていました。
他の求人サイトと比べると、Indeed は「中〜難」の範囲に位置します。Scraperly のサイトガイドでは難易度をおおむね中程度、安全なスループットは 1 IP あたり 1 日 200〜500 件の求人と評価されています。一方で Glassdoor や LinkedIn は、ログインゲートがある分さらに難しくなりがちです。とはいえ「中程度の難易度」であっても、安価なリクエスト専用スクレイパーや趣味レベルのスクリプトは頻繁に壊れます。ここでは、多くのサイト以上に「どのツールを選ぶか」が効いてきます。
2026 年版・ベスト Indeed スクレイパーの選定方法
このリストのすべてのツールを、8 つの基準で評価しました。どの基準も、Reddit や GitHub の issue、開発者フォーラムで見つけた実際のユーザーの悩みに直結しています。
| 評価基準 | Indeed において重要な理由 |
|---|---|
| Cloudflare / アンチボット回避 | 最大の不満点 —— 403 ブロックでスクレイパーが壊れたという話が、5 本の別々のフォーラムスレッドで挙がっている |
| コーディングの要否 | 非エンジニア（リクルーター、人事、アナリスト）は巨大な層なのに、ほとんどのスクレイパー紹介記事では無視されている |
| 無料プラン / 無料の選択肢 | 無料または低コストの選択肢が欲しいという声がフォーラムで 4 件。有料ツールは「高すぎる」と言われている |
| エクスポート形式 | ユーザーが欲しいのは Sheets・Excel・Airtable に入ったデータであって、自分で変換しなければならない生の JSON ではない |
| プロキシ / IP ローテーション | 言及 3 件。あるユーザー曰く、プロキシなしで Indeed をスクレイピングするのは「悪手」 |
| セットアップのしやすさ | Python のスクレイパーは「頭がクラクラする」という報告がある |
| メンテナンス性 / 信頼性 | Indeed は、メンテされていないツールが淘汰される速さで変わり続けている |
| 求人 1,000 件あたりのコスト | 競合記事の価格説明は曖昧。同じ土俵で比較できるようにコストを正規化した |
このリストが他の多くと違う点がひとつあります。私はノーコード、ローコード、API、オープンソースのツールを意図的に全部入れました。私が見つけた他の「ベスト Indeed スクレイパー」記事は、どれも API ベースの選択肢しか扱っていません。
それだと、ターミナルに触らずにスプレッドシートへ求人データを入れたいだけ、という大勢の人が取り残されてしまいます。
あなたのスキルレベルに合う Indeed スクレイパーは？
10 個すべてを読み通す前に、自分がどのカテゴリーに当てはまるかを見極めておきましょう。時間の節約になります。
| あなたのスキルレベル | 相性のよいアプローチ | 検討すべきツール |
|---|---|---|
| コーディング経験なし | Chrome 拡張機能または設定 UI | Thunderbit、Apify（設定 UI） |
| 基本的な Python / スクリプト | ライブラリ + プロキシ、またはシンプルな API | JobSpy、ScraperAPI、Decodo |
| 開発者 / データエンジニア | フル API 連携 | Bright Data、Oxylabs、ZenRows、ScrapingBee、Scrapingdog |
50 件の求人の給与データが欲しいリクルーターに、月 500 ドルのエンタープライズ級プロキシネットワークは要りません。逆に、商用の求人アグリゲーターを作ろうとしている人が、無料の Chrome 拡張機能に頼るのは考えものです。自分のスキルレベルとユースケースにツールを合わせることが、戦いの半分を占めています。
1. Thunderbit — 非エンジニア向けベスト Indeed スクレイパー
Thunderbit は私のチームと私が作ったツールなので、その点は先に正直に言っておきます。ただ、このリストの 1 番目に置いているのはひいき目からではありません。アンチボット対策、サブページでの情報拡充、スプレッドシートへの直接エクスポートを、コードを 1 行も書かずに全部こなせる本物のノーコード Indeed スクレイパーは、私が知る限り Thunderbit だけだからです。
ワークフローはシンプルです。Chrome 拡張機能をインストールし、Indeed の検索結果ページを開いて、AI フィールド提案をクリック（AI がページを読み取り、職種名・企業名・給与・勤務地・URL といった列を提案します）、提案されたフィールドを確認して、スクレイピングをクリックし、エクスポートするだけ。インストールからスプレッドシートにデータが入るまで、全工程でおよそ 2 分です。
Indeed において Thunderbit がとくに役立つ点は次のとおりです。
- サブページスクレイピング： 検索結果ページから始めて、各求人の詳細ページを自動で訪問し、募集要項の全文、応募要件、福利厚生、掲載メタデータを追記します。競合の採用動向を分析するなら、これがいちばん効く機能です。一覧のスニペットだけでなく、全体像が手に入ります。
- ブラウザモードとクラウドモード： ブラウザモードは、ログイン済みの自分の Chrome セッションからスクレイピングします（地域限定の結果を取りたいときに便利）。クラウドモードは、IP ローテーションとブロック回避ロジックを備えた Thunderbit のホスティング基盤を使い、公開ページなら最大 50 ページを同時にスクレイピングできます。
- アンチボット対策を内蔵： クラウドモードは Cloudflare のチャレンジと CAPTCHA を自動で処理します。プロキシの設定も、CAPTCHA 解決サービスの設定も不要です。
- 無料のメール / 電話番号抽出： 企業ページから雇用主の連絡先データを直接取得できます —— リクルーターのリード獲得に便利です。
- 直接エクスポート： Google スプレッドシート、Excel / CSV、Airtable、Notion —— どれも無料。JSON を CSV に変換するスクリプトは要りません。
Indeed スクレイパーのテンプレートがあらかじめ用意されているので、望まないならフィールドを手動で設定する必要すらありません。
Thunderbit で Indeed をスクレイピングしてみる
料金： Thunderbit の無料プランには月 6 ページが含まれ、無料トライアルでは 10 ページ使えます。有料プランはクレジット制（1 クレジット = 出力 1 行）で、Starter 料金ならおおよそ 1,000 行あたり 30 ドル、上位プランではさらに単価が下がります。エクスポートはプランを問わず完全に無料です。料金の詳細はこちら。
メリット： コーディング不要、スプレッドシートへの直接エクスポート、サブページでの情報拡充、ブラウザ + クラウドの両モード、セットアップが非常に速い
デメリット： クレジット制の課金は、超大量のクロール（1 日 10,000 件以上）にはあまり向かない。Indeed 特化の第三者による成功率ベンチマークが少ない
こんな人に： Indeed のデータをスプレッドシートで欲しいリクルーター、人事チーム、ビジネスアナリスト —— コードは一切不要です。
2. Bright Data — エンタープライズ規模のプロジェクトに最適な Indeed スクレイパー
Bright Data は、このカテゴリーの重量級です。巨大なプロキシネットワーク（195 か国にまたがる月間 4 億以上の IP）、専用の CAPTCHA 解決、ブラウザフィンガープリンティング、JavaScript レンダリングに加え、目的特化の Indeed 求人データセットと Jobs Data API を組み合わせています。
- 主な機能： Cloudflare 回避のための Web Unlocker、地域ターゲティングつきスクレイピング、構造化データセットの配信（JSON、CSV、NDJSON）、クラウドストレージ連携、Indeed 専用データ製品
- アンチボット対策： 業界最高水準。Bright Data の ScrapingTest ベンチマークの結果では、全体の成功率が方向性として 95.99%、平均応答時間は 7.45 秒でした
- 料金： 従量課金はウェブスクレイピングで1,000 レコードあたり約 1.50 ドルから。Indeed データセットは1 レコードあたり 0.0025 ドルから（最低注文額 250 ドル）。無料枠は月 5,000 クレジット、クレジットカード登録不要。
こんな人に： 給与ベンチマーク、労働市場調査、商用の求人アグリゲーションのために毎日何千ページもの Indeed をスクレイピングするデータチーム —— とくに、コストよりも稼働率と地域カバレッジが重要な場合に。
3. Apify Indeed Scraper — ローコードユーザーに最適な Indeed スクレイパー
Apify は市場の中間に位置します。Thunderbit ほど初心者向けではありませんが、設定 UI から作成済みの「Actor」を実行できるので、生の API よりは簡単です。もっとも人気のある Indeed 用 Actor（misceres/indeed-scraper）は、54 件のレビューでおよそ 4.0/5、総ユーザー数 2 万人、料金は求人 1,000 件あたり約 3.00 ドルからとなっています。
- 主な機能： 設定ベースの UI（検索キーワード、勤務地、ページ数を指定）、スケジューリング、データセットストレージ、柔軟なエクスポート（JSON、CSV、Excel、XML、HTML、RSS、JSONL）を内蔵
- アンチボット対策： 使う Actor とプロキシ設定次第です。公開されている issue スレッドを見ると、Indeed の実行が今でもブロックされたり、不完全な結果を返したりすることがわかります。
- 料金： 無料枠にはプラットフォームクレジット 5 ドル分が含まれます。Indeed では Actor の利用でこれをすぐ使い切ることもあります。
こんな人に： ダッシュボード経由でスケジューリングと構造化エクスポートを使いたい、中程度の技術力を持つユーザー —— スクレイピングのコードをゼロから書く必要はありません。
4. ScraperAPI — 予算重視の開発者に最適な Indeed スクレイパー API
ScraperAPI は、もっとも分かりやすい開発者向け API のひとつです。URL を送れば、プロキシローテーション、CAPTCHA 解決、JS レンダリングをサービス側が処理し、HTML または構造化された出力を返してくれます。Indeed 専用ページでは 99.99% の成功率と 1〜3 秒の平均応答時間を謳っていますが、これはベンダー自身の申告値です。
- 主な機能： シンプルな REST API、プロキシローテーション内蔵、自動リトライ、複数の出力形式（HTML、JSON、テキスト、Markdown、CSV ワークフロー）
- 料金： Hobby プランは10 万クレジットで 49 ドルですが、保護されたリクエストは1 件あたり 10〜25 クレジットを消費します。Indeed のような保護されたトラフィックの実効コストは、エントリー料金でおおよそ保護リクエスト 1,000 件あたり 4.90 ドル。無料枠はトライアル 5,000 クレジット。
- 落とし穴： リクエストの半分が失敗すれば（Indeed では起こりえます）、実効コストは倍になります。
こんな人に： きれいな API ドキュメントと、エンタープライズ価格を払わずに済む予測可能な連携を重視する開発者。
5. Scrapingdog — Indeed スクレイピング向けベスト低コスト API
Scrapingdog は価格の分かりやすさで勝負しています。プランは 20 万クレジットで 40 ドル（1,000 クレジットあたり約 0.20 ドル）から始まり、まずは 200 クレジット分が無料で使えます。
- 主な機能： アンチボット対策のあるサイト向けのステルスモード、Indeed 向けのパース済み JSON 出力、リトライロジック（1 リクエストあたり最大 60 秒）、成功したリクエストのみ課金
- 料金の落とし穴： ステルスモードは1 リクエストあたり 10 クレジットかかるため、Lite 料金での保護サイトの実コストは保護リクエスト 1,000 件あたり 2.00 ドル前後になります。それでも多くの競合と比べれば安価です。
- パフォーマンスに関する注記： ScrapingTest のベンチマークでは、Bright Data や ScraperAPI よりムラのある結果が出ているので、スケールさせる前に十分に検証してください。
Python でのセットアップ手順は、Indeed 専用ガイドが丁寧に解説しています。
こんな人に： リクエスト単価の安さを最優先し、自分のクエリで信頼性を自ら検証する手間を厭わない、コスト意識の高い開発者。
6. ZenRows — アンチボット信頼性で選ぶベスト Indeed スクレイパー API
ZenRows は、スクレイピング市場でもっとも「アンチボット第一」を明確に打ち出しているサービスのひとつになりました。WAF 回避、CAPTCHA 回避、フィンガープリンティング回避、プレミアムなローテーションプロキシを明示的に売りにしています。Indeed スクレイパーのページでは、CSV、単一 JSON ファイル、URL ごとに 1 つの JSON ファイル、という形でのエクスポートを提供しており、多くの生 API 製品よりビジネス寄りです。
- 主な機能： JS レンダリング対応の保護サイトスクレイピング、すべてのリクエストに組み込まれたアンチボット回避、構造化出力のオプション
- 料金： Launch プランは基本結果 1,000 件あたり約 0.276 ドルですが、保護された結果になると1,000 件あたり約 6.90 ドルに跳ね上がります。無料プランは月 5,000 クレジット、クレジットカード不要、期限なし。
- ベンダーの主張： 保護サイトの平均成功率 99.93%。
このリクエスト単価は高く感じられますが、Cloudflare を手作業でデバッグする時間と比べれば話は変わってきます。
こんな人に： アンチボット耐性を最優先しつつ、Bright Data のフルエンタープライズ構成までは踏み込みたくない開発者。
7. ScrapingBee — ステルスプロキシモードを備えたベスト Indeed スクレイパー API
ScrapingBee は、アンブロッカー性能と同じくらい開発ワークフローが重要なときに真価を発揮します。ヘッドレスブラウザ、ローテーションプロキシ、専用の Cloudflare 対応ツール、抽出ルール（CSS / XPath セレクタと AI 支援の抽出）、そして JSON、HTML、Markdown、CSV、NDJSON という複数のレスポンス形式に対応しています。
- 主な機能： ステルスプロキシモード、JS レンダリング、構造化されたデータ抽出ルール、AI 支援のパース
- 料金： Freelance プランは25 万クレジットで 49 ドル（1,000 クレジットあたり 0.196 ドル）ですが、JS + プレミアムプロキシのリクエストは1 件 25 クレジットかかるため、エントリー料金では1,000 件あたりおよそ 4.90 ドルになります。無料枠は 1,000 コール。
- ベンチマークの示唆： ScrapingTest の方向性としての結果では、全体の成功率 77.98%、平均 10.32 秒でした。
こんな人に： 洗練された API 体験を重視し、後処理を減らすための抽出ルールを内蔵で使いたい開発者。
8. Oxylabs — 大規模プロキシ基盤に最適な Indeed スクレイパー
Oxylabs がこのリストに入るのは、本格的なプロキシとアンブロッカー基盤が必要だと自分でわかっているチームのためです。Web Scraper API と Web Unblocker は、CAPTCHA 回避、JS レンダリング、フィンガープリンティング対策、リトライ、そして 195 か国・1 億 7,700 万以上のプロキシプールにまたがる幅広いジオターゲティングに対応しています。
- 主な機能： AI によるデータパース、マルチフォーマット出力（JSON、HTML、PNG、Markdown）、クラウド配信オプション
- 料金： 一般的なターゲットは、Web Scraper API のエントリー料金で JS なしなら1,000 件あたり約 1.15 ドル、JS ありなら1,000 件あたり 1.35 ドルから。Web Unblocker はトラフィック課金です。無料枠は最大 2,000 件の結果。
- ニュアンス： Oxylabs は、一部の競合のように「Indeed スクレイパー」ときれいにブランド化した製品を用意していません。Web Scraper API（パース済みデータ）と Web Unblocker（生アクセス）の製品の切り分けを理解しておく必要があります。
- ベンチマークの示唆： ScrapingTest の方向性としての結果では、全体の成功率 83.89%、平均 12.75 秒でした。
こんな人に： すでにプロキシ基盤に投資しているエンタープライズチーム、あるいは本格的な規模で地域ターゲティングが必要な人。
9. JobSpy（python-jobspy）— ベスト無料オープンソース Indeed スクレイパー
JobSpy は、いまだに話題に上がり続けるだけの活発さがあるので、名前を挙げる価値のあるオープンソースの選択肢です。GitHub リポジトリはおよそ 4,020 スター、58 リリース、そして Indeed、LinkedIn、Glassdoor、ZipRecruiter、Google Jobs、Bayt、Bdjobs への対応を示しています。出力は pandas の DataFrame と CSV です。
- 主な機能： 1 つのスクリプトで複数の求人サイトをスクレイピング、DataFrame / CSV 出力、完全無料、活発なコミュニティ
- アンチボット対策： ほぼありません。プロキシローテーションも CAPTCHA 解決も内蔵していません。すべて自力です。公開されている issue には、Indeed でブロックされた、壊れた、という報告が頻繁に上がっています。
- 料金： 無料（オープンソース）。ただしプロキシ費用とデバッグの時間は無料ではありません。
「無料」に隠れたコスト
これは、はっきり言葉にしておく価値があります。「金銭的に無料」は「時間的に無料」ではありません。JobSpy を使うなら、Cloudflare のブロックのデバッグ、プロキシローテーションの設定、Indeed のレイアウト変更後の修正に何時間も費やす覚悟が必要です。そういう作業を楽しめる Python 開発者にとっては、妥当なトレードオフでしょう。でも、求人 200 件をスプレッドシートに入れたいだけのリクルーターにとっては、割に合わない取引です。
こんな人に： 複数の求人サイトを横断するスクレイピングが好きで、定期的なメンテナンス作業を苦にしない Python 開発者。
10. Decodo（旧 Smartproxy）— プロキシ重視のユーザーに最適な Indeed スクレイパー
Decodo（旧 Smartproxy）は今では、単なるプロキシ販売業者ではなく、より広いスクレイピングプラットフォームとして自らを位置づけています。公開ページでは 1 億 2,500 万以上の IP、99.99% の成功率、そして Web Scraping API で最大毎秒 200 リクエストのスループットを謳っています。
- 主な機能： ローテーション式の住宅用プロキシ、JS レンダリングと CAPTCHA 処理に対応したウェブスクレイピング API、複数の連携方法
- エクスポート形式： HTML、JSON、CSV、PNG、XHR、Markdown
- 料金： 無料のスタータープランには約 2,000 リクエストが含まれ、テスト用としては異例に太っ腹です。有料プランは、エントリーの API 料金でおおよそ1,000 件あたり 0.50 ドルから。
こんな人に： スループットとリクエストの種別で物事を考えるチーム。Thunderbit ほど初心者向けではなく、Indeed 用としては ZenRows ほど手軽ではありませんが、プロキシに慣れたユーザーにとっては手堅い中間解です。
ベスト Indeed スクレイパー：比較表（全体）
| ツール | タイプ | コーディングの要否 | アンチボット対策 | 無料枠 | エクスポート形式 | 求人 / リクエスト 1,000 件あたりのコスト | こんな人に |
|---|---|---|---|---|---|---|---|
| Thunderbit | Chrome 拡張機能 | 不要（2 クリック） | 内蔵（クラウド + ブラウザ） | 月 6 ページ無料 | CSV、Excel、Sheets、Airtable、Notion、JSON | 約 30 ドル / 1,000 行（Starter） | リクルーター、人事、非エンジニア |
| Bright Data | エンタープライズ API + データセット | 低〜高 | CAPTCHA 解決、4 億以上の IP | 月 5,000 クレジット | JSON、CSV、NDJSON、API、クラウド | 従量課金で約 1.50 ドル / 1,000 レコード | エンタープライズチーム |
| Apify | Actor マーケットプレイス | 低（設定 UI） | Actor 次第 | プラットフォームクレジット 5 ドル | JSON、CSV、Excel、XML、RSS、JSONL | 約 3 ドル / 1,000 件 | ローコードユーザー |
| ScraperAPI | API | 必要 | プロキシローテーション、JS レンダリング | トライアル 5,000 クレジット | HTML、JSON、テキスト、Markdown | 保護リクエスト 約 4.90 ドル / 1,000 件 | 予算重視の開発者 |
| Scrapingdog | API | 必要 | ステルスモード、CAPTCHA | 200 クレジット | JSON、HTML、Markdown、CSV | 保護リクエスト 約 2.00 ドル / 1,000 件 | 低コストで API を使いたい人 |
| ZenRows | API + ノーコードスクレイパー | 低〜高 | WAF 回避、CAPTCHA 回避 | 月 5,000 クレジット | CSV、JSON、HTML、Markdown | 保護リクエスト 約 6.90 ドル / 1,000 件 | アンチボットの信頼性 |
| ScrapingBee | API | 必要 | ステルスプロキシ、JS レンダリング | 1,000 コール | JSON、HTML、Markdown、CSV、NDJSON | 保護リクエスト 約 4.90 ドル / 1,000 件 | 開発者の使い勝手 |
| Oxylabs | エンタープライズ API + アンブロッカー | 必要 | CAPTCHA 回避、1 億 7,700 万以上の IP | 2,000 件の結果 | JSON、HTML、PNG、Markdown | 約 1.15〜1.35 ドル / 1,000 件 | 大規模プロキシ基盤 |
| JobSpy | Python ライブラリ | 必要（Python） | 自力対応（ほぼなし） | 完全無料 | DataFrame、CSV、Excel | 0 ドル（+ プロキシ費用） | Python 開発者 |
| Decodo | API + プロキシ | 低〜高 | JS レンダリング、CAPTCHA | 2,000 リクエスト | HTML、JSON、CSV、PNG、Markdown | エントリーで約 0.50 ドル / 1,000 件 | プロキシ重視のチーム |
アンチボット・スコアカード：実際に動く Indeed スクレイパーはどれ？
| ツール | Cloudflare 回避 | CAPTCHA 対応 | IP ローテーション | 信頼性評価 |
|---|---|---|---|---|
| Thunderbit（クラウドモード） | ✅ 内蔵 | ✅ 自動処理 | ✅ クラウド IP | ⭐⭐⭐⭐ |
| Bright Data | ✅ 高度 | ✅ CAPTCHA ソルバー | ✅ 4 億以上の IP | ⭐⭐⭐⭐⭐ |
| Apify | ⚠️ Actor 次第 | ⚠️ Actor 次第 | ⚠️ アドオン | ⭐⭐⭐ |
| ScraperAPI | ✅ プロキシローテーション | ✅ 自動リトライ | ✅ 内蔵 | ⭐⭐⭐⭐ |
| Scrapingdog | ✅ ステルスモード | ✅ CAPTCHA 解決 | ✅ 内蔵 | ⭐⭐⭐ |
| ZenRows | ✅ WAF 回避 | ✅ CAPTCHA 回避 | ✅ プレミアムプロキシ | ⭐⭐⭐⭐½ |
| ScrapingBee | ✅ ステルスプロキシ | ✅ Cloudflare 対応ツール | ✅ 内蔵 | ⭐⭐⭐⭐ |
| Oxylabs | ✅ 高度 | ✅ CAPTCHA 回避 | ✅ 1 億 7,700 万以上の IP | ⭐⭐⭐⭐½ |
| JobSpy | ⚠️ 頻繁に壊れる | ❌ 手動 | ❌ 自力 | ⭐⭐ |
| Decodo | ✅ JS レンダリング | ✅ CAPTCHA 対応 | ✅ 1 億 2,500 万以上の IP | ⭐⭐⭐⭐ |
これらの評価は、ベンダーのドキュメント、コミュニティの証言、方向性を示すベンチマークデータを組み合わせたものです。実務的な編集判断であって、ラボで認証された測定値ではありません。
無料 vs 有料の Indeed スクレイパー：実際に何が手に入るのか
フォーラムでいちばん混乱が起きているのがここです。「無料」の意味は、ツールによってまるで違います。
| ツール | 無料枠 | 無料で使える内容 | 落とし穴 / 制限 |
|---|---|---|---|
| Thunderbit | ✅ あり | 月 6 ページ、無料トライアル = 10 ページ、エクスポートはすべて無料 | 有料プランはクレジット制 |
| JobSpy | ✅ 完全無料 | 無制限（オープンソースの Python） | アンチボット対策なし。頻繁に壊れる。Python が必要 |
| ScraperAPI | ✅ 5,000 クレジット | API コール約 5,000 回 | 保護リクエストは 1 件 10〜25 クレジットを消費 |
| Scrapingdog | ✅ 200 クレジット | 約 200 リクエスト | ステルスモードは 1 リクエスト 10 クレジット |
| ZenRows | ✅ あり | 月 5,000 クレジット、クレジットカード不要 | 期限なし（時間制限なし） |
| ScrapingBee | ✅ 1,000 コール | API コール 1,000 回 | 本格的な保護サイトのスクレイピングはすぐ高額になる |
| Apify | ✅ 5 ドル分のクレジット | プラットフォームでの利用分 | Actor の利用ですぐ使い切ることがある |
| Decodo | ✅ 2,000 リクエスト | 約 2,000 リクエスト | それでも技術的なセットアップが必要 |
| Oxylabs | ✅ 2,000 件の結果 | 最大 2,000 件の結果 | 製品の切り分けが初心者には分かりにくい |
| Bright Data | あり | 月 5,000 クレジット、クレジットカード不要 | プロキシ製品と Browser API は対象外 |
重要なポイントはこうです。JobSpy のような Python ライブラリの「無料」は、金銭的には無料でも時間的には高くつきます —— Cloudflare のブロックとプロキシ設定のデバッグに何時間も費やすことになります。Thunderbit のようなツールの「無料枠」は、少量の用途なら時間もお金も無料という意味です。このトレードオフは本物で、非エンジニアの多くはオープンソースのスクレイパーの維持コストを過小評価していると思います。
転職活動を超えて：チームが Indeed スクレイパーを使う 5 つの方法
Indeed のスクレイピングは求職者だけのものだと思われがちですが、そうではありません。Indeed Hiring Lab のエコノミスト、Chris Glynn 氏はこう的確に表現しています。「Indeed の求人データは、事実上そのまま労働市場である」。そしてそのデータは、次の仕事を見つける以外にも大きなビジネス価値を持ちます。
NBER の論文によれば、給与透明化の規制によって求人票での給与開示が約 30 パーセントポイント増加しており、求人サイトからの給与情報の抽出は、ほんの数年前と比べても格段に価値が高まっています。一方で、労働市場データを人材戦略に活かしている採用チームはわずか 31%にとどまり、Payscale の報告では、平均的な組織は今や 3 つの給与データソースを使っています。
| ユースケース | スクレイピングすべき対象 | 最適なツール | 理由 |
|---|---|---|---|
| 💼 個人の転職活動 | 職種名、リンク、給与 | JobSpy（無料）、Thunderbit（ノーコード） | 少量、予算にやさしい |
| 📊 給与ベンチマーク / 労働市場調査 | 数千件の求人にまたがる給与、勤務地、職位レベル | Bright Data、Oxylabs、Apify | 大量、構造化された出力 |
| 🏢 競合の採用動向分析 | 雇用主の求人票、人員数の推移、募集要項の全文 | Thunderbit（サブページスクレイピング）、ZenRows | 一覧データを詳細ページで拡充できる |
| 📧 リクルーターのリード獲得 | 企業名、所在地、雇用主ページの連絡先情報 | Thunderbit（メール / 電話番号抽出）、Scrapingdog | 雇用主の連絡先データを抽出できる |
| 🌐 求人サイト / アグリゲーターの運営 | 求人データ全体、自動更新 | ScraperAPI + Decodo、Bright Data、Apify | スケジュール実行、大量処理、複数形式でのエクスポート |
Thunderbit のサブページスクレイピングは、競合の採用動向分析でとくに効いてきます。一覧ページをスクレイピングしたあと、各求人の詳細ページを自動で訪問し、募集要項の全文、応募要件、福利厚生でテーブルを拡充します。セットアップは不要で、フィールドのマッピングは AI が処理します。
スクレイピングからスプレッドシートへ：Indeed データのエクスポートと活用
私が読んだ競合記事はどれも「データの取り方はこうです」で止まっています。その次に何が起きるかを論じたものはありません。
でもユーザーは、CSV へのエクスポート、WordPress へのインポート、使える形式でのデータ取得について、はっきり質問しています。ここは実務上の大きな抜け穴です。
エクスポートのワークフローで各ツールを比べると、次のようになります。
- CSV / Excel エクスポート： Thunderbit は無料で直接ダウンロードできます。JobSpy は Python で DataFrame → CSV に出力します。API 系のツールは JSON を返すので、手作業かスクリプトで変換する必要があります。
- Google スプレッドシート連携： Thunderbit はワンクリックで Sheets に直接エクスポートできます。ほとんどの API ツールでは、データを Sheets に入れるのに Zapier や自作スクリプトが必要です。
- Airtable / Notion： Thunderbit は両方にネイティブでエクスポートできます。競合ではミドルウェアか手動インポートが必要です。
- CRM へのインポート： 雇用主のリードをパイプラインに流し込む営業・採用チームにとって、Thunderbit の構造化された出力（企業名、所在地、連絡先情報）はそのまま CRM にインポートできます。API 系のツールでは、まず変換が必要です。
非エンジニアにとって重要なのは、スクレイピングエンジンそのものではなく、エンドツーエンドのワークフロー —— スクレイピング → きれいな構造化テーブル → 好きなツールへのエクスポート —— です。生の JSON の壁を眺めて「で、どうすれば？」と思ったことがある人なら、私の言いたいことがよくわかるはずです。
Indeed をスクレイピングする際の法的・倫理的なヒント
軽く免責を。これは実務上のガイダンスであって、法的助言ではありません。個別の状況については弁護士に相談してください。
Indeed の利用規約では、書面による許可なくボット、スクレイパー、スパイダー、AI システム、エージェント型 AI を使うことを明確に禁止しています。robots ディレクティブでも、一般的なクローラーに対して価値の高いパスの多くを制限しています。とはいえ、Indeed 上のデータは公開されており、求人情報を閲覧するのにログインは不要です。
実務的な推奨事項は次のとおりです。
- レート制限を守り、バースト的な収集を避けましょう。Indeed の 60 秒ローリングウィンドウは実在します。
- ログインが必要なデータや非公開データはスクレイピングしないこと（明確な許可がある場合を除く）。
- 公開されている範囲を超え、用途に関係のない個人データの収集は避けること。
- サーバーに負荷をかけないこと。リクエストは絞りましょう。ウェブの良き市民でいてください。
ウェブスクレイピングをめぐる法的な状況は変わり続けています。迷ったときは、慎重な側に倒しておきましょう。
どの Indeed スクレイパーを選ぶべきか？
この 10 個のツールを掘り下げた結果、私の推奨は 4 つの変数に集約されます。スキルレベル、必要な処理量、予算、そしてデータを最終的にどこに置きたいか、です。
- 非エンジニア（リクルーター、人事、オペレーション）→ Thunderbit。Indeed のページから使えるスプレッドシートまで最短で到達できます。コード不要、エクスポート無料、サブページでの情報拡充つき。
- 予算重視の開発者 → Scrapingdog または ScraperAPI。まずまずのアンチボット対策を備えつつ、リクエスト単価がもっとも安いです。
- エンタープライズ / 大規模 → Bright Data または Oxylabs。最良のプロキシ基盤、最高の信頼性、地域ターゲティング。
- 無料でオープンソース → JobSpy。Python がわかり、定期的に壊れることを許容できるなら。
- ローコードの中間解 → Apify Indeed Scraper。スケジューリングとデータセットストレージを備えた設定 UI。
- アンチボット最優先 → ZenRows。エンタープライズ級ツールを除けば、保護サイトでの性能が最強です。
「最良の」Indeed スクレイパーは、結局のところあなたが誰で、何をしようとしているかで決まります。万人にとっての勝者はいませんが、あなたの状況に合った正解のツールは必ずあります。
本格導入する前に無料枠を試してみてください。ここで挙げたツールのほとんどは、あなた自身の Indeed のクエリで動くかどうかを検証できるだけの無料利用枠を用意しています。
そして、ノーコードの Indeed スクレイピングがどんなものか見てみたいなら、Thunderbit の無料トライアルを試してみてください。検索結果からきれいな構造化スプレッドシートまで、どれだけ速く行けるか驚くと思います。コード不要のウェブスクレイピングや、そもそもウェブスクレイピングとは何かについても、ブログでしっかり解説しています。目で見て学ぶタイプの方には、YouTube チャンネルにウォークスルー動画があります。
よいスクレイピングを —— そして、403 エラーができるだけ少なくありますように。
よくある質問
1. コードを書かずに Indeed をスクレイピングできますか？
はい。Thunderbit と Apify はどちらもノーコードまたはローコードの方法を提供しています。Thunderbit はもっとも手軽な本物のノーコードの選択肢で、Indeed のページ上で Chrome 拡張機能として直接動き、スクレイピングからエクスポートまでの全工程がコードなしで約 2 分で終わります。
2. Indeed のスクレイピングは合法ですか？
Indeed の求人情報は公開されていますが、利用規約では書面による許可のないスクレイピングを明確に禁止しています。ユーザーは robots.txt、レート制限、適用されるデータプライバシー法を尊重すべきです。これは法的助言ではありません —— 個別のユースケースについては専門家に相談してください。
3. 最良の無料 Indeed スクレイパーは何ですか？
オープンソースの Python ユーザーには JobSpy が完全無料ですが、Python のスキルと定期的なメンテナンスが必要です。ノーコードで使いたい人には、Thunderbit の無料枠（月 6 ページ、エクスポート無料）のほうが実用的です。スクリプトが不要で、スプレッドシートへの直接エクスポートも含まれているからです。
4. Indeed のスクレイピングで Cloudflare にどう対処すればいいですか？
アンチボット対策を内蔵したツールを使ってください。Thunderbit のクラウドモード、Bright Data の Web Unlocker、ZenRows のアンチボット API、ScraperAPI のプロキシローテーション、Scrapingdog のステルスモードは、いずれも Cloudflare のチャレンジを自動で処理します。Indeed 自身のサポートドキュメントでも、Cloudflare によるブロックが現在の仕様の一部であることが確認できます。
5. Indeed のスクレイピング結果を Google スプレッドシートや Excel にエクスポートできますか？
Thunderbit は Google スプレッドシート、Excel / CSV、Airtable、Notion への無料の直接エクスポートに対応しています。Apify はデータセットストレージ経由で CSV、Excel、JSON へのエクスポートに対応します。ほとんどの API ツール（ScraperAPI、ZenRows、ScrapingBee）は JSON か HTML を返すため、スプレッドシートで使うには変換のひと手間が必要です。
Thunderbit で Indeed をスクレイピングしてみる Get Started Free
もっと詳しく
