🚀 1,000 APIクレジットが無料無料で試す
80か国以上・100万以上のプレミアムIPが利用可能に

IPブロックとCAPTCHAを回避する 最高のWebスクレイピングAPI

IPブロックやCAPTCHAとの戦いはもう終わりです。1回のAPI呼び出しで必要なページの内容を取得でき、ブラウザの設定もプロキシプールの管理も不要。どの言語やHTTPクライアントでも使えます。

  • Cloudflare、CAPTCHA、ボット検知を回避
  • JSレンダリング、スクリーンショット、PDF、Markdown
  • 無料クレジット1,000、カード不要
Scraping API:ライブデモ
稼働中
HTML API
URLを入力…
API設定
SparkProxy
○Proxy
○Anti-bot
○JS Render
出力
HTMLMDMDXPDFPNG
200 OK · 342ms · 58 kbHTML
<!DOCTYPE html>
<title>TechCrunch AI</title>
<div class="article-card">OpenAI raises $40B at...</div>
<!-- 28 articles extracted -->
https://cdn.sparkproxy.io/r/a1b2c3d4.html
主な機能

安定したスクレイピングに必要な機能をすべて搭載

スクレイピングの失敗の大半は、JavaScriptを多用するページとIPブロックが原因です。このAPIは、お客様側のインフラなしで両方に対応します。

JavaScriptレンダリング

JavaScriptが必要なページも含め、あらゆるページをスクレイピング。

render_js=trueを付けるだけで、リクエストは本物のヘッドレスChromeで実行されます。特定の要素の表示を待つ、クリックやフォーム入力を行う、カスタムヘッダーを設定する、スクリーンショットを撮る。すべて同じAPI呼び出しで行えます。

  • 本物のヘッドレスChromeによるJSレンダリング
  • ページを返す前にCSSセレクターの表示を待機
  • 取得前に要素のクリック、スクロール、フォーム入力
  • ビューポートサイズやカスタムヘッダーの指定、スクリーンショットの撮影
import requests

resp = requests.get(
  "https://scrape.sparkproxy.io/api/v1",
  params={
    "url": "https://spa-site.com",
    "render_js": True,
    "wait_for": "#content"
  },
  headers={"Authorization": "Bearer KEY"}
)
html = resp.json()["html"]
プロキシの自動化

プロキシはリクエストごとに自動で処理。

各リクエストは、プールから選ばれた別々のIPから送信されます。対策の厳しいサイト向けには、通常のブラウザ通信に溶け込むステルスプロキシも利用できます。country_codeを指定すれば、お好きな国からのリクエストに見せられます。

  • 手強いサイト向けのステルスデータセンタープロキシ
  • 80か国以上を経由してリクエストを送信
  • リクエストごとに自動で新しいIP
  • 自前のプロキシリストなしでブロックを削減
成功率99% · 業界トップクラス
1M+
プレミアムIP
80+
対応国
99%
成功率
99.9%
稼働率
活用例

ほとんどのデータ活用に対応

価格の追跡、競合の監視、公開資料の収集。どれも同じAPIで対応できます。

ブロックされずに競合の価格を追跡

自前のプロキシ基盤を運用することなく、Amazon、eBay、Walmartをはじめ多くのECサイトから価格を取得できます。country_codeを指定すれば、その地域の購入者が実際に目にする現地価格を取得できます。

  • あらゆるECサイトやマーケットプレイスで価格を追跡
  • 複数のプラットフォームからレビューと評価を取得
  • 複数の商品ページで在庫状況を確認
  • どの国の現地価格も取得
batch_prices.py
import requests

urls = [
    "https://amazon.com/dp/B09X67",
    "https://walmart.com/ip/456",
    "https://bestbuy.com/p/789",
]

resp = requests.get(
    "https://scrape.sparkproxy.io/api/v1",
    params={
        "url": ",".join(urls),
        "country_code": "us"
    },
    headers={"Authorization": "Bearer YOUR_KEY"}
)

results = resp.json()["results"]
for r in results:
    if r["success"]:
        print(r["html"][:200])
Scraper API

ひとつのエンドポイントで、あらゆる出力形式

同じリクエストで、HTML、Markdown、JSON、スクリーンショット、PDFを取得できます。APIキーはひとつだけ。

コア

HTML API

メインのエンドポイントです。URLを渡して出力形式を選ぶだけで、必要なものがそのまま返ってきます。以下の機能はすべてこのリクエストを基盤にしています。

resp = requests.get(
  "https://scrape.sparkproxy.io/api/v1",
  params={
    "url": "https://example.com",
    "render_js": True
  },
  headers={"Authorization": "Bearer KEY"}
)
html = resp.json()["html"]
Markdown Scraper

あらゆるページをきれいなMarkdownに変換します。LLMやドキュメントのパイプラインなど、プレーンテキストが必要な場面に便利です。

スクリーンショット

任意のURLのページ全体または表示領域を撮影します。撮影前にJavaScriptが実行されるため、ユーザーが実際に見るとおりのページを取得できます。

PDF

ヘッドレスChromeでページをPDFに変換します。レポートのアーカイブや領収書の作成、ブラウザでの見た目どおりのページ保存に最適です。

JSシナリオ

ページを取得する前に、クリック、スクロール、フォーム入力を順に実行します。操作しないと内容が表示されないページに便利です。

CSS抽出

extract_rulesでCSSセレクターを渡すと、該当する内容がJSONで返ります。お客様側でHTMLパーサーは不要です。

非同期 / Webhook

callback_urlを付けると、接続を開いたままにせずスクレイピングのジョブを実行できます。すぐにjob_idが返り、完了すると結果がお客様のエンドポイントに送られます。

一括スクレイピング

複数のURLをカンマ区切りで渡すと、URLごとの結果が配列で返ります。自前でループを書かずにHTMLを一括取得するのに最適です。

専用Scraping API

近日公開
Google Search API
Google Search API

あらゆる地域・デバイス種別のSERPをリアルタイムで取得。レート制限もCAPTCHAもありません。

YouTube API
YouTube API

動画のメタデータ、再生回数、コメント、チャンネル全体のデータを大規模に抽出。

Amazon API
Amazon API

商品リスト、価格、評価、レビューを構造化された形ですぐに利用可能。

Walmart API
Walmart API

Walmartの価格、在庫、商品カタログのデータを、IPブロックなしで取得。

Flipkart API
Flipkart API

Flipkartの巨大なECカタログから、商品リスト、価格、出品者データを取得。

Bing API
Bing API

Bingのインデックスから、地域や言語をまたいで検索結果、ニュース、SERPデータを取得。

Google Search API
Google Search API

あらゆる地域・デバイス種別のSERPをリアルタイムで取得。レート制限もCAPTCHAもありません。

YouTube API
YouTube API

動画のメタデータ、再生回数、コメント、チャンネル全体のデータを大規模に抽出。

Amazon API
Amazon API

商品リスト、価格、評価、レビューを構造化された形ですぐに利用可能。

Walmart API
Walmart API

Walmartの価格、在庫、商品カタログのデータを、IPブロックなしで取得。

Flipkart API
Flipkart API

Flipkartの巨大なECカタログから、商品リスト、価格、出品者データを取得。

Bing API
Bing API

Bingのインデックスから、地域や言語をまたいで検索結果、ニュース、SERPデータを取得。

料金

スクレイピングした分だけのお支払い

月額$49から

ボット対策の回避 非同期 / Webhookモード 一括スクレイピング 成功率99% 無料クレジット1,000 クレジットカード不要
Starter
個人プロジェクトに
$49/月
APIクレジット250K / 月
同時リクエスト数50 件
JSレンダリング対応
ローテーティング・プレミアムプロキシ対応
地域指定80か国以上
スクリーンショットと抽出ルール対応
専用API近日公開
Growth
成長中のチームに
$99/月
APIクレジット1M / 月
同時リクエスト数100 件
JSレンダリング対応
ローテーティング・プレミアムプロキシ対応
地域指定80か国以上
スクリーンショットと抽出ルール対応
専用API近日公開
一番人気
Pro
安心してスケール
$249/月
APIクレジット3M / 月
同時リクエスト数200 件
JSレンダリング対応
ローテーティング・プレミアムプロキシ対応
地域指定80か国以上
スクリーンショットと抽出ルール対応
専用API近日公開
Scale
最大のスループット
$599/月
APIクレジット8M / 月
同時リクエスト数400 件
JSレンダリング対応
ローテーティング・プレミアムプロキシ対応
地域指定80か国以上
スクリーンショットと抽出ルール対応
専用API近日公開

表示価格はすべて税(VAT/GST)抜きです。

いつでも解約可能。理由は問いません。

より大規模なご利用をご検討の場合は、当社チームにお問い合わせください。カスタムプランや大口料金をご案内します。

FAQ

よくある質問

WebスクレイピングAPIとは何ですか?
Webページの取得を代行し、IPのローテーション、ブロックの回避、JavaScriptの処理といった難しい部分を引き受けるサービスです。URLを送るとページの内容が返ってきます。ブラウザ自動化の設定も、プロキシリストの管理も必要ありません。
どのようなデータを抽出できますか?
ブラウザで公開されているものなら、ほぼ何でも取得できます。商品価格、レビュー、ニュース記事、求人情報、ディレクトリの掲載情報、金融データ、不動産情報などです。ログインせずに人が見られる情報なら、通常はAPIでも取得できます。
SparkProxyはJavaScriptを多用するページに対応していますか?
はい。render_js=trueを付けると、リクエストは本物のヘッドレスChromeで実行されます。特定のCSSセレクターの表示を待ってから返す、スクリーンショットを撮る、ページをスクロールする、クリックを順に実行するといった指定も、同じAPI呼び出しで行えます。
自動プロキシローテーションの仕組みは?
各リクエストは、100万以上のデータセンターIPからなるプールの別々のIPから送信されます。複数のリクエストで同じIPを使い続けたい場合は、スティッキーセッションで最大5分間IPを維持してからローテーションします。
成功率はどのくらいですか?
大手ECサイト、ニュースサイト、公開データベースを含むほとんどのサイトで、成功率は99%以上です。保護の厳しい一部のサイトでは工夫が必要ですが、大半のスクレイピング作業では非常に高い成功率を実現しています。
対応しているプログラミング言語は?
HTTP GETリクエストを送れる言語ならどれでも使えます。Python、Node.js、PHP、Go、Ruby、Java、C#、そしてcurlでも動作します。インストールが必要なSDKはなく、AuthorizationヘッダーにAPIキーを入れた通常のHTTPリクエストだけです。
無料トライアルはありますか?
はい。登録するとクレジットカードなしで1,000クレジットを受け取れます。通常のHTML取得なら1,000回以上、ヘッドレスレンダリングでもかなりの回数を試せるので、お支払い前に用途に合うかを確認できます。
リクエストが失敗した場合はどうなりますか?
失敗したリクエストは新しいIPで自動的に再試行されます。それでも成功しない場合、料金は発生しません。クレジットが消費されるのは、APIがコンテンツを正常に返したときだけです。
プランはいつでも解約できますか?
はい、いつでも解約できます。すべてのプランは月単位です。ダッシュボードから解約しても、支払い済みの請求期間の終わりまでご利用いただけます。
APIは非同期 / Webhookモードに対応していますか?
はい。リクエストにcallback_urlを付けると非同期モードに切り替わります。すぐにjob_id付きのHTTP 202が返り、スクレイピングが完了すると結果がcallback URLにPOSTされます。接続を開いたまま待ちたくないバックグラウンド処理に最適です。
1回のAPI呼び出しで複数のURLをスクレイピングできますか?
はい、通常のHTTPであれば可能です。urlパラメーターに複数のURLをカンマ区切りで指定すると、URLごとの結果が配列で返ります。一括処理はrender_jsなしの場合のみ使えます。複数のURLでヘッドレスレンダリングが必要な場合は、callback_urlを付けて1件ずつ送信してください。
APIクレジットとは何ですか?
クレジットは成功したリクエストごとに消費されます。通常のHTTPは1クレジット、ヘッドレスJSレンダリングは5、スクリーンショットとPDFはそれぞれ10、Markdown変換は5です。一部の機能では基本クレジットに追加で消費されます:ステルスモード+5、country_codeによる地域指定+5、カスタムJSシナリオはリクエストごとに+5です。