프록시 서비스를 위해 Decodo(이전의 Smartproxy)를 사용해 왔다면, 이것에 주의를 기울여야 합니다. 이 회사는 스크래핑 비용을 지불하는 방식을 근본적으로 변경하는 완전히 재설계된 웹 스크래핑 API를 출시했습니다. 고정 계층 플랜에서 빠져나가는 대신, 모든 요청이 필요한 것에 관계없이 동일한 수준의 리소스를 받는 경우, 새로운 API를 사용하면 요청별 기준으로 스크래핑 복잡도를 제어할 수 있습니다.
이것은 현재 시장에서 대부분의 스크래핑 API가 어떻게 가격이 책정되는지와 상당히 다르며, 무엇이 변경되었는지, 그리고 왜 그것이 스크래핑 워크플로우에 중요한지 이해할 가치가 있습니다.
변경된 내용: 고정 플랜에서 모듈식 요청당 가격 책정으로
이전 모델에서는 Decodo의 스크래핑 플랜이 대부분의 경쟁사처럼 작동했습니다: 고정된 기능 세트와 함께 번들로 제공되는 고정된 요청 수를 지정하는 구독 계층을 선택합니다. 까다로운 하나의 대상을 위해 JavaScript 렌더링이 필요합니까? 전체 플랜을 업그레이드해야 했습니다. 단일의 매우 보호된 사이트를 위해 프리미엄 프록시가 필요합니까? 같은 이야기입니다. 전체적인 강제 업그레이드입니다.
새로운 모델은 이를 뒤집어 놓습니다. 이제 만드는 모든 API 요청은 필요한 정확한 전력 수준으로 개별적으로 구성할 수 있습니다. 요청별로 제어하는 2가지 주요 토글이 있습니다:
프록시 풀 선택 — 표준 프록시(낮은 범위의 보안을 가진 단순하고 정적인 페이지용으로 최적화됨) 또는 프리미엄 프록시(고급 anti-bot 보호, CAPTCHA 및 매우 보호된 사이트를 처리하도록 구축됨) 중에서 선택합니다.
JavaScript 렌더링 — 요청별로 JS 렌더링을 활성화하거나 비활성화합니다. 클라이언트 측 렌더링에 의존하지 않는 정적 HTML 페이지는 렌더링 없이 스크래핑할 수 있으며, 비용을 낮게 유지합니다. JavaScript를 통해 콘텐츠를 로드하는 동적 사이트는 필요한 경우에만 렌더링을 활성화할 수 있습니다.
결과는 4가지 가능한 요청 유형이며, 각각은 1,000개의 성공한 요청당 자체 비용을 가집니다: 표준 프록시만(가장 저렴), 표준 + JS 렌더링, 프리미엄 프록시만, 그리고 프리미엄 + JS 렌더링(가장 비쌈). 월간 청구서는 각 요청이 실제로 소비한 리소스를 정확히 반영합니다.
가격 책정 분석: 실제 비용은 얼마입니까?
Decodo는 점진적으로 더 나은 요청당 요금을 제공하는 여러 계층을 제공합니다. 네 가지 요청 유형 모두에 걸쳐 가격 책정이 어떻게 분석되는지는 다음과 같습니다:
| 플랜 | 월간 가격 | 표준(1000개당) | 표준 + JS(1000개당) | 프리미엄(1000개당) | 프리미엄 + JS(1000개당) | 속도 제한 |
|---|---|---|---|---|---|---|
| 무료 | $0 | $0.50 | $0.75 | $1.00 | $1.50 | 10 req/s |
| 스타터 | $19/월 | $0.50 | $0.75 | $1.00 | $1.50 | 10 req/s |
| 프로페셔널 | $49/월 | $0.30 | $0.65 | $0.90 | $1.25 | 25 req/s |
| 비즈니스 | $99/월 | $0.14 | $0.60 | $0.85 | $1.20 | 50 req/s |
| 엔터프라이즈 | 맞춤형 | 맞춤형 | 맞춤형 | 맞춤형 | 맞춤형 | 200 req/s까지 |
숫자는 흥미로운 이야기를 말해줍니다. 스크래핑 대상의 대부분이 단순한 정적 페이지인 경우, 비즈니스 플랜에서 1,000개 요청당 $0.14만큼 낮은 가격을 지불할 수 있습니다. 이것은 매우 경쟁력 있습니다. 비용은 실제로 무거운 작업이 필요한 경우에만 확대됩니다. JS 렌더링이나 anti-bot 보호된 대상을 위한 프리미엄 프록시 풀입니다.
이를 전통적인 고정 플랜 모델과 비교하면, 대상 복잡도에 관계없이 1,000개 요청당 $1.00 이상의 고정 가격을 지불할 수 있습니다. 혼합 워크로드(대부분의 실제 스크래핑 파이프라인이 그런 것)의 경우, 절약액은 상당할 수 있습니다.
웹 스크래퍼에게 중요한 이유
대부분의 스크래핑 작업은 동일한 유형의 대상을 반복해서 목표로 하지 않습니다. 일반적인 파이프라인은 다음과 같은 모습일 수 있습니다: 단순한 정적 HTML 페이지의 60%(제품 목록, 공개 디렉토리, 뉴스 기사), JavaScript 렌더링이 필요한 페이지의 25%(SPA, 지연로드 콘텐츠, 동적으로 렌더링된 가격), 프리미엄 프록시와 전체 브라우저 에뮬레이션이 필요한 매우 보호된 사이트의 15%(주요 전자상거래 플랫폼, 소셜 미디어, 여행 예약 사이트).
전통적인 고정 플랜 모델에서는 플랜이 가장 어려운 대상을 수용해야 하기 때문에 이 모든 요청에 대해 최고 계층 가격을 지불하게 됩니다. Decodo의 새로운 모델에서는 60%의 요청이 가장 저렴한 가격으로 실행되고, 25%는 중간 계층 가격으로, 15%만 최고 가격에 도달합니다. 혼합 워크로드의 전체 비용 차이는 획기적일 수 있습니다.
가격 책정을 넘어선 주요 기능
모듈식 가격 책정 모델은 헤드라인이지만, 기초 API는 본 스크래핑을 위해 진정으로 유용하게 하는 기능으로 가득 차 있습니다:
100개 이상의 사전 제작된 템플릿 — Decodo는 Google Search, Amazon, YouTube, Walmart, Bing 및 기타 많은 인기 있는 대상을 위한 사전 구축되고 사용자 정의 가능한 스크래퍼 템플릿을 제공합니다. 이러한 템플릿은 대상별 anti-bot 조치 및 구문 분석 로직을 즉시 처리하므로, 각 사이트를 직접 역설계할 필요가 없습니다.
여러 출력 형식 — 스크래핑된 데이터를 원본 HTML, 구조화된 JSON, CSV 또는 PNG 스크린샷으로 다시 받습니다. LLM 준비 마크다운 출력 형식도 있으며, 스크래핑된 데이터를 AI 파이프라인에 공급하는 경우 점점 더 유용합니다.
대규모 프록시 인프라 — API 뒤에는 1억 2500만 개 이상의 IP를 포함하는 Decodo의 프록시 네트워크가 있으며, 윤리적으로 소싱된 1억 1500만 개 이상의 주거 IP, 700개 이상의 ASN 캐리어를 통한 1000만 개 이상의 모바일 IP, 그리고 50만 개 이상의 데이터 센터 IP를 포함합니다. 지리적 타겟팅은 195개 이상의 위치에서 도시 및 우편번호 수준까지 세분화됩니다.
초당 200개 요청 처리량 — 엔터프라이즈 플랜에서 API는 초당 최대 200개의 동시 요청을 처리할 수 있습니다. 무료 계층도 10 req/s를 허용하며, 이는 테스트 및 소규모 프로젝트에 충분합니다.
99.99% 성공률 — Decodo는 자동 재시도 로직과 지능형 프록시 로테이션으로 지원되는 스크래핑 작업 전반에 걸쳐 거의 완벽한 성공률을 주장합니다.
동기 및 비동기 모드 — 즉각적인 결과를 위해 실시간으로 요청을 실행하거나, 대규모 배치 작업의 경우 콜백 통합과 함께 비동기 모드를 사용합니다. 반복 스크래핑 작업에 대한 이메일 알림을 사용한 작업 스케줄링도 사용할 수 있습니다.
가장 적합한 대상은 누구입니까?
새로운 모듈식 가격 책정 모델은 몇 가지 특정 시나리오에서 가장 빛납니다:
가격 모니터링 및 전자상거래 추적 — 수십 개의 소매점을 통해 제품 페이지를 스크래핑하는 경우, 일부는 단순한 HTML이고 다른 것들(예: Amazon 또는 Walmart)은 JS 렌더링과 프리미엄 프록시가 필요합니다. 플랜당 가격이 아닌 복잡도당 가격으로 지불하는 것은 간단한 대상이 어려운 대상에 보조금을 주지 않음을 의미합니다.
시장 지능 및 연구 — 다양한 소스(뉴스, 정부 데이터, 회사 웹사이트, 소셜 미디어)를 스크래핑하는 것은 대상 난이도가 끊임없이 변한다는 것을 의미합니다. 모듈식 모델은 자연스럽게 적응합니다.
에이전시 및 다중 클라이언트 파이프라인 — 다양한 대상 프로필을 가진 여러 클라이언트를 위한 스크래핑 인프라를 실행하는 경우, 더 이상 별도의 플랜을 유지하거나 최악의 시나리오에 대해 과도하게 프로비지닝할 필요가 없습니다.
SEO 및 SERP 모니터링 — Google 및 Bing 스크래핑은 Decodo의 템플릿에 잘 다루어지며, 검색 결과 페이지는 일반적으로 프리미엄 프록시 없이 스크래핑하기에 충분히 간단하며, 비용을 낮게 유지합니다.
시작하기: 무료 계층 사용 가능
좋은 점 중 하나는 Decodo가 진정한 사용 가능한 무료 계층을 제공한다는 것입니다: $0/월에 약 2,000개의 표준 요청 또는 667개의 프리미엄 + JS 요청에 충분한 크레딧이 있습니다. 또한 API 플레이그라운드가 있으며, 하루에 10개의 테스트 요청이 있으므로 금액을 약정하기 전에 서비스를 평가할 수 있습니다. 모든 유료 플랜에는 14일 환불 보증이 포함됩니다.
API는 Python, PHP 및 Node.js를 지원하며, 문서에서 코드 예제 및 Postman 컬렉션을 사용할 수 있습니다. 설정은 간단합니다. API 키를 받고, 요청 매개변수(대상 URL, 프록시 유형, JS 렌더링 토글, 출력 형식)를 구성하고, 단일 엔드포인트를 통해 요청을 보냅니다.
우리의 의견
프록시 및 스크래핑 API 시장은 한동안 더 유연한 가격 책정으로 이동해왔지만, Decodo의 구현은 우리가 본 것 중 가장 세분화된 것 중 하나입니다. 요청당 복잡도 토글은 단순한 마케팅 각도가 아닙니다. 혼합 스크래핑 워크로드 운영 경제를 진정으로 변경합니다.
현재 고정 플랜 스크래핑 서비스를 사용 중이고 대상의 난이도가 다양한 경우(솔직히 거의 확실히 그럴 것입니다), Decodo의 모델에 따라 실제 비용이 무엇인지를 계산할 가치가 있습니다. 단순한 HTML 스크래핑이 많고 JS 렌더링이나 프리미엄 프록시가 필요한 경우, 절약액이 상당할 수 있습니다.
1억 2500만 개 이상의 IP 풀, 99.99% 성공률 및 100개 이상의 사전 제작된 템플릿은 강력한 기초입니다. 새로운 가격 책정 모델과 결합하면, Decodo의 스크래핑 API는 2026년에 규모를 생각하고 스크래핑을 실행하는 누구에게나 진정한 경쟁자로 자리잡고 있습니다.
decodo.com에서 새로운 API를 무료로 시도할 수 있습니다. 무료 계층은 신용 카드가 필요하지 않습니다.