🚀 무료 API 크레딧 1,000개무료로 사용해 보기
이제 80개국 이상, 100만 개 이상의 프리미엄 IP 제공

IP 차단과 CAPTCHA를 피하는 최고의 웹 스크래핑 API

IP 차단, CAPTCHA와의 싸움은 이제 그만. API 호출 한 번으로 필요한 페이지 콘텐츠를 받을 수 있으며, 브라우저 설정도 프록시 풀 관리도 필요 없습니다. 어떤 언어나 HTTP 클라이언트에서도 사용할 수 있습니다.

  • Cloudflare, CAPTCHA, 봇 탐지 우회
  • JS 렌더링, 스크린샷, PDF, Markdown
  • 무료 크레딧 1,000개, 카드 불필요
Scraping API: 라이브 데모
실행 중
HTML API
URL 입력…
API 설정
SparkProxy
○Proxy
○Anti-bot
○JS Render
출력
HTMLMDMDXPDFPNG
200 OK · 342ms · 58 kbHTML
<!DOCTYPE html>
<title>TechCrunch AI</title>
<div class="article-card">OpenAI raises $40B at...</div>
<!-- 28 articles extracted -->
https://cdn.sparkproxy.io/r/a1b2c3d4.html
핵심 기능

안정적인 스크래핑에 필요한 모든 기능

스크래핑 실패의 대부분은 JavaScript가 많은 페이지와 IP 차단 때문입니다. 이 API는 고객 측 인프라 없이 두 가지 모두를 해결합니다.

JavaScript 렌더링

JavaScript가 필요한 페이지까지, 어떤 페이지든 스크래핑하세요.

render_js=true를 추가하면 요청이 실제 헤드리스 Chrome 인스턴스에서 실행됩니다. 특정 요소가 나타날 때까지 기다리거나, 클릭과 양식 입력을 실행하거나, 사용자 지정 헤더를 설정하거나, 스크린샷을 찍을 수 있습니다. 모두 같은 API 호출 하나로 가능합니다.

  • 실제 헤드리스 Chrome으로 JS 렌더링
  • 페이지를 반환하기 전에 CSS 선택자 대기
  • 캡처 전 요소 클릭, 스크롤, 양식 입력
  • 뷰포트 크기, 사용자 지정 헤더 설정 및 스크린샷 촬영
import requests

resp = requests.get(
  "https://scrape.sparkproxy.io/api/v1",
  params={
    "url": "https://spa-site.com",
    "render_js": True,
    "wait_for": "#content"
  },
  headers={"Authorization": "Bearer KEY"}
)
html = resp.json()["html"]
프록시 자동화

모든 요청에서 프록시를 대신 처리합니다.

각 요청은 풀에 있는 서로 다른 IP를 통해 나갑니다. 방어가 강한 사이트를 위해 일반 브라우저 트래픽과 구별하기 어려운 스텔스 프록시도 제공됩니다. country_code를 추가하면 원하는 국가에서 보낸 요청처럼 보이게 할 수 있습니다.

  • 까다로운 대상을 위한 스텔스 데이터센터 프록시
  • 80개국 이상을 경유해 요청 전송
  • 요청마다 자동으로 새 IP
  • 자체 프록시 목록 관리 없이 차단 감소
성공률 99% · 업계 최고 수준
1M+
프리미엄 IP
80+
지원 국가
99%
성공률
99.9%
업타임
활용 사례

대부분의 데이터 활용 사례에 적합

가격 추적, 경쟁사 모니터링, 공개 자료 수집 모두 같은 API로 처리할 수 있습니다.

차단 없이 경쟁사 가격 추적

자체 프록시 인프라를 운영하지 않고도 Amazon, eBay, Walmart를 비롯한 대부분의 쇼핑몰에서 가격을 수집할 수 있습니다. country_code를 추가하면 해당 지역 구매자가 실제로 보는 현지 가격을 확인할 수 있습니다.

  • 모든 쇼핑몰과 마켓플레이스의 가격 추적
  • 여러 플랫폼의 리뷰와 평점 수집
  • 여러 상품 페이지의 재고 현황 확인
  • 모든 국가의 현지 가격 확인
batch_prices.py
import requests

urls = [
    "https://amazon.com/dp/B09X67",
    "https://walmart.com/ip/456",
    "https://bestbuy.com/p/789",
]

resp = requests.get(
    "https://scrape.sparkproxy.io/api/v1",
    params={
        "url": ",".join(urls),
        "country_code": "us"
    },
    headers={"Authorization": "Bearer YOUR_KEY"}
)

results = resp.json()["results"]
for r in results:
    if r["success"]:
        print(r["html"][:200])
Scraper API

하나의 엔드포인트, 모든 출력 형식

같은 요청으로 HTML, Markdown, JSON, 스크린샷, PDF를 받을 수 있습니다. API 키 하나면 충분합니다.

핵심

HTML API

기본 엔드포인트입니다. URL을 전달하고 출력 형식을 고르면 필요한 결과를 그대로 받을 수 있습니다. 아래 기능은 모두 이 요청을 기반으로 합니다.

resp = requests.get(
  "https://scrape.sparkproxy.io/api/v1",
  params={
    "url": "https://example.com",
    "render_js": True
  },
  headers={"Authorization": "Bearer KEY"}
)
html = resp.json()["html"]
Markdown Scraper

모든 페이지를 깔끔한 Markdown으로 변환합니다. 웹 콘텐츠를 LLM, 문서 파이프라인 등 일반 텍스트가 필요한 곳에 넣을 때 유용합니다.

스크린샷

모든 URL의 전체 페이지 또는 보이는 영역을 캡처합니다. 캡처 전에 JavaScript가 실행되므로 사용자가 실제로 보는 페이지 그대로를 얻을 수 있습니다.

PDF

헤드리스 Chrome으로 페이지를 PDF로 렌더링합니다. 보고서 보관, 영수증 생성, 브라우저에서 보이는 그대로의 페이지 저장에 적합합니다.

JS 시나리오

페이지를 캡처하기 전에 클릭, 스크롤, 양식 입력을 순서대로 실행합니다. 상호작용 후에야 콘텐츠가 나타나는 페이지에 유용합니다.

CSS 추출

extract_rules로 CSS 선택자를 전달하면 일치하는 콘텐츠를 JSON으로 돌려받습니다. 고객 측에 HTML 파서가 필요 없습니다.

비동기 / 웹훅

callback_url을 추가하면 연결을 열어 두지 않고 스크래핑 작업을 실행할 수 있습니다. job_id를 바로 받고, 작업이 끝나면 결과가 고객의 엔드포인트로 전송됩니다.

일괄 스크래핑

여러 URL을 쉼표로 구분해 전달하면 URL별 결과가 배열로 반환됩니다. 직접 반복문을 작성하지 않고 HTML을 대량으로 가져올 때 적합합니다.

전용 Scraping API

출시 예정
Google Search API
Google Search API

모든 지역과 기기 유형의 SERP 결과를 실시간으로, 요청 수 제한이나 CAPTCHA 없이 제공합니다.

YouTube API
YouTube API

동영상 메타데이터, 조회수, 댓글, 채널 전체 데이터를 대규모로 추출합니다.

Amazon API
Amazon API

상품 목록, 가격, 평점, 리뷰를 구조화된 형태로 바로 사용할 수 있습니다.

Walmart API
Walmart API

Walmart의 가격, 재고, 상품 카탈로그 데이터를 IP 차단 없이 제공합니다.

Flipkart API
Flipkart API

Flipkart의 방대한 이커머스 카탈로그에서 상품 목록, 가격, 판매자 데이터를 가져옵니다.

Bing API
Bing API

Bing 색인에서 지역과 언어별로 검색 결과, 뉴스, SERP 데이터를 가져옵니다.

Google Search API
Google Search API

모든 지역과 기기 유형의 SERP 결과를 실시간으로, 요청 수 제한이나 CAPTCHA 없이 제공합니다.

YouTube API
YouTube API

동영상 메타데이터, 조회수, 댓글, 채널 전체 데이터를 대규모로 추출합니다.

Amazon API
Amazon API

상품 목록, 가격, 평점, 리뷰를 구조화된 형태로 바로 사용할 수 있습니다.

Walmart API
Walmart API

Walmart의 가격, 재고, 상품 카탈로그 데이터를 IP 차단 없이 제공합니다.

Flipkart API
Flipkart API

Flipkart의 방대한 이커머스 카탈로그에서 상품 목록, 가격, 판매자 데이터를 가져옵니다.

Bing API
Bing API

Bing 색인에서 지역과 언어별로 검색 결과, 뉴스, SERP 데이터를 가져옵니다.

요금

스크래핑한 만큼만 결제하세요

월 $49부터

봇 차단 우회 비동기 / 웹훅 모드 일괄 스크래핑 성공률 99% 무료 크레딧 1,000개 신용카드 불필요
Starter
개인 프로젝트에 적합
$49/월
API 크레딧250K / 월
동시 요청 수50건
JS 렌더링포함
로테이팅 및 프리미엄 프록시포함
지역 지정80개국 이상
스크린샷 및 추출 규칙포함
전용 API출시 예정
Growth
성장하는 팀을 위해
$99/월
API 크레딧1M / 월
동시 요청 수100건
JS 렌더링포함
로테이팅 및 프리미엄 프록시포함
지역 지정80개국 이상
스크린샷 및 추출 규칙포함
전용 API출시 예정
인기 요금제
Pro
자신 있게 확장
$249/월
API 크레딧3M / 월
동시 요청 수200건
JS 렌더링포함
로테이팅 및 프리미엄 프록시포함
지역 지정80개국 이상
스크린샷 및 추출 규칙포함
전용 API출시 예정
Scale
최대 처리량
$599/월
API 크레딧8M / 월
동시 요청 수400건
JS 렌더링포함
로테이팅 및 프리미엄 프록시포함
지역 지정80개국 이상
스크린샷 및 추출 규칙포함
전용 API출시 예정

모든 가격은 부가세(VAT/GST) 별도입니다.

언제든 해지할 수 있습니다. 이유는 묻지 않습니다.

더 많은 용량이 필요하신가요? 영업팀에 문의하시면 맞춤 요금제와 대량 이용 할인을 안내해 드립니다.

FAQ

자주 묻는 질문

웹 스크래핑 API란 무엇인가요?
웹 페이지를 대신 가져오면서 IP 로테이션, 차단 우회, JavaScript 처리 같은 어려운 부분을 맡아 주는 서비스입니다. URL을 보내면 페이지 콘텐츠를 돌려받습니다. 브라우저 자동화를 설정하거나 프록시 목록을 관리할 필요가 없습니다.
어떤 데이터를 추출할 수 있나요?
브라우저에서 공개적으로 볼 수 있는 것이라면 거의 모두 가능합니다. 상품 가격, 리뷰, 뉴스 기사, 채용 공고, 디렉터리 항목, 금융 데이터, 부동산 매물 등이 있습니다. 로그인 없이 사람이 볼 수 있는 정보라면 대개 API로도 가져올 수 있습니다.
SparkProxy는 JavaScript가 많은 페이지도 처리하나요?
네. render_js=true를 추가하면 요청이 실제 헤드리스 Chrome 인스턴스에서 실행됩니다. 특정 CSS 선택자를 기다린 뒤 반환하거나, 스크린샷을 찍거나, 페이지를 스크롤하거나, 클릭을 순서대로 실행하도록 지정할 수도 있습니다. 모두 같은 API 호출 하나로 가능합니다.
자동 프록시 로테이션은 어떻게 작동하나요?
각 요청은 100만 개가 넘는 데이터센터 IP 풀에서 서로 다른 IP를 통해 나갑니다. 여러 요청에서 같은 IP를 유지해야 한다면 스티키 세션이 최대 5분 동안 IP를 유지한 뒤 로테이션합니다.
성공률은 어느 정도인가요?
대형 이커머스 사이트, 뉴스 사이트, 공개 데이터베이스를 포함한 대부분의 대상에서 성공률은 99% 이상입니다. 보호가 강한 일부 사이트는 더 많은 노력이 필요하지만, 대다수의 스크래핑 작업에서는 매우 높은 성공률을 보입니다.
어떤 프로그래밍 언어를 지원하나요?
HTTP GET 요청을 보낼 수 있는 언어라면 모두 사용할 수 있습니다. Python, Node.js, PHP, Go, Ruby, Java, C#은 물론 curl도 됩니다. 설치할 SDK가 없으며, Authorization 헤더에 API 키를 넣은 일반 HTTP 요청이면 됩니다.
무료 체험이 있나요?
네. 가입하면 신용카드 없이 1,000 크레딧을 받을 수 있습니다. 일반 HTML 요청 1,000회 이상 또는 상당한 횟수의 헤드리스 렌더링을 해 볼 수 있어, 결제 전에 용도에 맞는지 충분히 확인할 수 있습니다.
요청이 실패하면 어떻게 되나요?
실패한 요청은 새 IP로 자동 재시도됩니다. 그래도 실패하면 요금이 부과되지 않습니다. 크레딧은 API가 콘텐츠를 정상적으로 반환했을 때만 차감됩니다.
요금제를 언제든 해지할 수 있나요?
네, 언제든 해지할 수 있습니다. 모든 요금제는 월 단위입니다. 대시보드에서 해지해도 이미 결제한 기간이 끝날 때까지 계속 이용할 수 있습니다.
API가 비동기 / 웹훅 모드를 지원하나요?
네. 요청에 callback_url을 추가하면 비동기 모드로 전환됩니다. job_id와 함께 HTTP 202를 바로 받고, 스크래핑이 끝나면 결과가 callback URL로 POST됩니다. 연결을 열어 둔 채 기다리고 싶지 않은 백그라운드 작업에 적합합니다.
API 호출 한 번으로 여러 URL을 스크래핑할 수 있나요?
네, 일반 HTTP라면 가능합니다. url 파라미터에 여러 URL을 쉼표로 구분해 넣으면 URL별 결과가 담긴 배열을 받습니다. 일괄 처리는 render_js 없이만 동작합니다. 여러 URL에 헤드리스 렌더링이 필요하다면 callback_url과 함께 하나씩 보내세요.
API 크레딧이란 무엇인가요?
크레딧은 성공한 요청마다 차감됩니다. 일반 HTTP 요청은 1크레딧, 헤드리스 JS 렌더링은 5, 스크린샷과 PDF는 각각 10, Markdown 변환은 5입니다. 일부 기능은 기본 크레딧에 추가로 차감됩니다: 스텔스 모드 +5, country_code를 통한 지역 지정 +5, 사용자 지정 JS 시나리오는 요청당 +5입니다.