যদি আপনি প্রক্সি সেবার জন্য Decodo (পূর্বে Smartproxy নামে পরিচিত) ব্যবহার করে থাকেন, তাহলে আপনি এটিতে মনোযোগ দিতে চাইবেন। কোম্পানি সবেমাত্র একটি সম্পূর্ণরূপে পুনর্নির্মিত ওয়েব স্ক্র্যাপিং API চালু করেছে যা স্ক্র্যাপিংয়ের জন্য আপনি কীভাবে অর্থ প্রদান করেন তা মৌলিকভাবে পরিবর্তন করে। পরিবর্তে স্থির-স্তরের পরিকল্পনায় আপনাকে লক করে দিন যেখানে প্রতিটি অনুরোধ একই স্তরের সংস্থান পায় তা প্রয়োজন কিনা, নতুন API আপনাকে স্ক্র্যাপিং জটিলতা প্রতি-অনুরোধ ভিত্তিতে নিয়ন্ত্রণ করতে দেয়।
এটি আজকের বাজারে কীভাবে বেশিরভাগ স্ক্র্যাপিং API মূল্য নির্ধারণ করা হয় তার থেকে একটি উল্লেখযোগ্য প্রস্থান, এবং কী পরিবর্তিত হয়েছে এবং কেন এটি আপনার স্ক্র্যাপিং ওয়ার্কফ্লোর জন্য গুরুত্বপূর্ণ তা বোঝার যোগ্য।
কী পরিবর্তিত হয়েছে: স্থির পরিকল্পনা থেকে মডুলার, প্রতি-অনুরোধ মূল্য নির্ধারণে
পুরানো মডেলের অধীনে, Decodo-এর স্ক্র্যাপিং পরিকল্পনা বেশিরভাগ প্রতিযোগীদের মতো কাজ করে: আপনি একটি সাবস্ক্রিপশন স্তর বেছে নিয়েছিলেন যা একটি স্থির বৈশিষ্ট্য সেট সহ অনুরোধের একটি নির্ধারিত পরিমাণ একত্রিত করেছিল। একটি কঠিন লক্ষ্যের জন্য JavaScript রেন্ডারিং প্রয়োজন? আপনার সমগ্র পরিকল্পনা আপগ্রেড করতে হয়েছিল। একটি একক ভারী-সুরক্ষিত সাইটের জন্য প্রিমিয়াম প্রক্সি চাই? একই গল্প - সমস্ত জুড়ে বাধ্যতামূলক আপগ্রেড।
নতুন মডেল এটি উল্টে দেয়। এখন, আপনি তৈরি করা প্রতিটি একক API অনুরোধ ঠিক এটি প্রয়োজনের শক্তির সাথে স্বতন্ত্রভাবে কনফিগার করা যেতে পারে। প্রতিটি অনুরোধে আপনি নিয়ন্ত্রণ করেন দুটি প্রধান টগেল রয়েছে:
প্রক্সি পুল নির্বাচন — স্ট্যান্ডার্ড প্রক্সির মধ্যে চয়ন করুন (সরল, স্ট্যাটিক পৃষ্ঠাগুলির জন্য অপ্টিমাইজ করা হয়েছে কম-থেকে-মাঝারি নিরাপত্তা সহ) বা প্রিমিয়াম প্রক্সি (উন্নত অ্যান্টি-বট সুরক্ষা, CAPTCHA এবং ভারী-সুরক্ষিত সাইটগুলি পরিচালনা করার জন্য নির্মিত)।
JavaScript রেন্ডারিং — প্রতিটি অনুরোধের জন্য JS রেন্ডারিং সক্ষম বা অক্ষম করুন। স্ট্যাটিক HTML পৃষ্ঠাগুলি যা ক্লায়েন্ট-সাইড রেন্ডারিংয়ের উপর নির্ভর করে না তা এটি ছাড়াই স্ক্র্যাপ করা যায়, খরচ কম রেখে। গতিশীল সাইটগুলি যা JavaScript এর মাধ্যমে সামগ্রী লোড করে শুধুমাত্র প্রয়োজনে রেন্ডারিং চালু করা যায়।
ফলাফল হল চারটি সম্ভাব্য অনুরোধের ধরন, প্রতিটির নিজস্ব খরচ 1,000 সফল অনুরোধ প্রতি: শুধুমাত্র স্ট্যান্ডার্ড প্রক্সি (সবচেয়ে সস্তা), স্ট্যান্ডার্ড + JS রেন্ডারিং, শুধুমাত্র প্রিমিয়াম প্রক্সি, এবং প্রিমিয়াম + JS রেন্ডারিং (সবচেয়ে ব্যয়বহুল)। আপনার মাসিক বিল প্রতিটি অনুরোধ প্রকৃত ব্যবহার করা সংস্থানগুলি প্রতিফলিত করে - আর কিছু নয়।
মূল্য নির্ধারণ বিচ্ছেদ: এটি আসলে খরচ করে কত?
Decodo বিভিন্ন স্তর অফার করে, প্রতিটি ক্রমাগত ভাল প্রতি-অনুরোধ হার সহ। সমস্ত চারটি অনুরোধ ধরনের জুড়ে মূল্য নির্ধারণ কীভাবে বিচ্ছেদ হয় তা এখানে:
| পরিকল্পনা | মাসিক মূল্য | স্ট্যান্ডার্ড (প্রতি 1K) | স্ট্যান্ডার্ড + JS (প্রতি 1K) | প্রিমিয়াম (প্রতি 1K) | প্রিমিয়াম + JS (প্রতি 1K) | হার সীমা |
|---|---|---|---|---|---|---|
| বিনামূল্যে | $0 | $0.50 | $0.75 | $1.00 | $1.50 | 10 req/s |
| স্টার্টার | $19/mo | $0.50 | $0.75 | $1.00 | $1.50 | 10 req/s |
| পেশাদার | $49/mo | $0.30 | $0.65 | $0.90 | $1.25 | 25 req/s |
| ব্যবসা | $99/mo | $0.14 | $0.60 | $0.85 | $1.20 | 50 req/s |
| এন্টারপ্রাইজ | কাস্টম | কাস্টম | কাস্টম | কাস্টম | কাস্টম | 200 req/s পর্যন্ত |
সংখ্যাগুলি একটি আকর্ষণীয় গল্প বলে। আপনার বেশিরভাগ স্ক্র্যাপিং লক্ষ্য সরল স্ট্যাটিক পৃষ্ঠা হয়, আপনি ব্যবসায়িক পরিকল্পনায় প্রতি 1,000 অনুরোধে $0.14 হিসাবে কম অর্থ প্রদান করতে পারেন। এটি অত্যন্ত প্রতিযোগিতামূলক। খরচ শুধুমাত্র বৃদ্ধি পায় যখন আপনি প্রকৃতপক্ষে ভারী উত্তোলন প্রয়োজন - JS রেন্ডারিং বা অ্যান্টি-বট-সুরক্ষিত লক্ষ্যগুলির জন্য প্রিমিয়াম প্রক্সি পুল।
এটিকে একটি ঐতিহ্যবাহী স্থির-পরিকল্পনা মডেলের সাথে তুলনা করুন যেখানে আপনি লক্ষ্যের জটিলতা নির্বিশেষে প্রতি 1,000 অনুরোধে একটি সমতল $1.00+ অর্থ প্রদান করতে পারেন। মিশ্র ওয়ার্কলোডের জন্য (যা বেশিরভাগ বাস্তব-বিশ্বের স্ক্র্যাপিং পাইপলাইন), সঞ্চয় যথেষ্ট হতে পারে।
ওয়েব স্ক্র্যাপারদের জন্য এটি কেন গুরুত্বপূর্ণ
বেশিরভাগ স্ক্র্যাপিং অপারেশন বারবার একই ধরনের লক্ষ্য আঘাত করে না। একটি বিশিষ্ট পাইপলাইন এই মত দেখতে পারে: 60% সহজ স্ট্যাটিক HTML পৃষ্ঠা (পণ্য তালিকা, জনসাধারণ ডিরেক্টরি, সংবাদ নিবন্ধ), 25% পৃষ্ঠাগুলি যেগুলি JavaScript রেন্ডারিং প্রয়োজন (SPA, আলসে-লোড করা সামগ্রী, গতিশীলভাবে-প্রদত্ত মূল্য নির্ধারণ), এবং 15% ভারী-সুরক্ষিত সাইটগুলি যা প্রিমিয়াম প্রক্সি এবং সম্পূর্ণ ব্রাউজার এমুলেশন প্রয়োজন (প্রধান ই-বাণিজ্য প্ল্যাটফর্ম, সোশ্যাল মিডিয়া, ভ্রমণ বুকিং সাইট)।
একটি ঐতিহ্যবাহী স্থির-পরিকল্পনা মডেলের অধীনে, আপনি সমস্ত সেই অনুরোধের জন্য সর্বোচ্চ-স্তরের মূল্য প্রদান করতে শেষ করেন কারণ পরিকল্পনাটি আপনার সবচেয়ে কঠিন লক্ষ্যগুলি সামঞ্জস্য করার জন্য উপস্থিত থাকতে হবে। Decodo-এর নতুন মডেলের অধীনে, আপনার 60% অনুরোধ সবচেয়ে সস্তা হারে চলে, 25% মধ্য-স্তরের হারে, এবং শুধুমাত্র 15% শীর্ষ মূল্য নির্ধারণে আঘাত করে। মিশ্র ওয়ার্কলোডের জন্য সামগ্রিক খরচ পার্থক্য নাটকীয় হতে পারে।
মূল্য নির্ধারণের বাইরে মূল বৈশিষ্ট্য
মডুলার মূল্য নির্ধারণ মডেল শিরোনাম, কিন্তু অন্তর্নিহিত API প্রযোজনীয় স্ক্র্যাপিংয়ের জন্য প্রকৃতপক্ষে দরকারী বৈশিষ্ট্য দিয়ে পূর্ণ:
100+ প্রস্তুত-নির্মিত টেমপ্লেট — Decodo প্রি-বিল্ট, কাস্টমাইজযোগ্য স্ক্র্যাপার টেমপ্লেট প্রদান করে Google Search, Amazon, YouTube, Walmart, Bing এবং আরও অনেক কিছুর মতো জনপ্রিয় লক্ষ্যগুলির জন্য। এই টেমপ্লেটগুলি লক্ষ্য-নির্দিষ্ট অ্যান্টি-বট ব্যবস্থা এবং পার্সিং লজিক বাক্সের বাইরে পরিচালনা করে, তাই আপনাকে নিজে প্রতিটি সাইট বিপরীত-ইঞ্জিনিয়ার করতে হবে না।
একাধিক আউটপুট ফর্ম্যাট — আপনার স্ক্র্যাপ করা ডেটা কাঁচা HTML, কাঠামোগত JSON, CSV বা এমনকি PNG স্ক্রিনশট হিসাবে ফিরে পান। এলএলএম-প্রস্তুত মার্কডাউন আউটপুট ফর্ম্যাটও রয়েছে, যা ক্রমবর্ধমানভাবে দরকারী যদি আপনি AI পাইপলাইনে স্ক্র্যাপ করা ডেটা খাওয়াচ্ছেন।
বিশাল প্রক্সি অবকাঠামো — API এর পিছনে Decodo-এর প্রক্সি নেটওয়ার্ক রয়েছে যাতে 125 মিলিয়ন+ IP রয়েছে, যার মধ্যে 115M+ নৈতিকভাবে-উৎসিত আবাসিক IP, 700+ ASN ক্যারিয়ার জুড়ে 10M+ মোবাইল IP এবং 500K+ ডেটা সেন্টার IP রয়েছে। ভৌগোলিক লক্ষ্য নির্ধারণ 195+ অবস্থান জুড়ে শহর এবং ZIP কোড স্তরে নেমে আসে।
200 অনুরোধ প্রতি সেকেন্ড থ্রুপুট — এন্টারপ্রাইজ পরিকল্পনাগুলিতে, API প্রতি সেকেন্ডে 200 টি সমসাময়িক অনুরোধ পরিচালনা করতে পারে। এমনকি বিনামূল্যের স্তর 10 req/s অনুমতি দেয়, যা পরীক্ষা এবং ছোট-স্কেল প্রকল্পের জন্য যথেষ্ট।
99.99% সাফল্যের হার — Decodo তাদের স্ক্র্যাপিং অপারেশন জুড়ে একটি প্রায়-নিখুঁত সাফল্যের হার দাবি করে, স্বয়ংক্রিয় পুনরায় চেষ্টার যুক্তি এবং বুদ্ধিমান প্রক্সি ঘূর্ণন দ্বারা সমর্থিত।
সিঙ্ক এবং অ্যাসিঙ্ক মোড — তাত্ক্ষণিক ফলাফলের জন্য রিয়েল-টাইমে অনুরোধ চালান, বা বড় ব্যাচ কাজগুলির জন্য কলব্যাক ইন্টিগ্রেশন সহ অ্যাসিঙ্ক্রোনাস মোড ব্যবহার করুন। পুনরাবৃত্ত স্ক্র্যাপিং কাজগুলির জন্য ইমেল বিজ্ঞপ্তি সহ কাজ শিডিউলিংও উপলব্ধ।
এটি সেরা কার জন্য?
নতুন মডুলার মূল্য নির্ধারণ মডেল কয়েকটি নির্দিষ্ট পরিস্থিতিতে উজ্জ্বল হয়:
মূল্য পর্যবেক্ষণ এবং ই-কমার্স ট্র্যাকিং — যদি আপনি ডজন খুচরা বিক্রেতার জুড়ে পণ্য পৃষ্ঠাগুলি স্ক্র্যাপ করেন, তবে কিছু সহজ HTML হবে অন্যরা (Amazon বা Walmart এর মতো) JS রেন্ডারিং এবং প্রিমিয়াম প্রক্সি প্রয়োজন। প্রতি-পরিকল্পনার পরিবর্তে প্রতি-জটিলতার জন্য অর্থ প্রদান করা মানে আপনার সহজ লক্ষ্যগুলি কঠিন লক্ষ্যগুলিকে ভর্তুকি দেয় না।
বাজার বুদ্ধিমত্তা এবং গবেষণা — বিস্তৃত উত্সগুলি স্ক্র্যাপ করা (সংবাদ, সরকারী ডেটা, কোম্পানি ওয়েবসাইট, সোশ্যাল মিডিয়া) লক্ষ্যের অসুবিধায় ক্রমাগত ভিন্নতা মানে। মডুলার মডেল স্বাভাবিকভাবে খাপ খায়।
এজেন্সি এবং মাল্টি-ক্লায়েন্ট পাইপলাইন — যদি আপনি একাধিক ক্লায়েন্টের জন্য বিভিন্ন লক্ষ্য প্রোফাইল সহ অবকাঠামো স্ক্র্যাপ করে চালান, আপনাকে আর আলাদা পরিকল্পনা বজায় রাখতে বা সবচেয়ে খারাপ-কেস দৃশ্যকল্পের জন্য অতিরিক্ত-বিধান করতে হবে না।
SEO এবং SERP পর্যবেক্ষণ — Google এবং Bing স্ক্র্যাপিং Decodo-এর টেমপ্লেটগুলি দ্বারা ভালভাবে কভার করা হয়েছে এবং অনুসন্ধান ফলাফল পৃষ্ঠাগুলি সাধারণত প্রিমিয়াম প্রক্সি ছাড়াই স্ক্র্যাপ করার জন্য সোজা, খরচ কম রাখা।
শুরু করা: বিনামূল্যে স্তর উপলব্ধ
একটি চমৎকার জিনিস হল Decodo একটি প্রকৃতপক্ষে ব্যবহারযোগ্য বিনামূল্যে স্তর অফার করে: $0/মাস প্রায় 2,000 মানক অনুরোধ বা 667 প্রিমিয়াম + JS অনুরোধের জন্য যথেষ্ট ক্রেডিট সহ। কোন অর্থ প্রতিশ্রুতি করার আগে সেবা মূল্যায়ন করতে পারেন তাই 10 পরীক্ষা অনুরোধ প্রতিদিন সহ একটি API প্লেগ্রাউন্ড আছে। সমস্ত পেইড পরিকল্পনা একটি 14-দিনের অর্থ-ব্যাক গ্যারান্টি অন্তর্ভুক্ত করে।
API Python, PHP এবং Node.js সমর্থন করে তাদের ডকুমেন্টেশনে উপলব্ধ কোড উদাহরণ এবং Postman সংগ্রহ সহ। সেটআপ সহজ - আপনি একটি API কী পান, আপনার অনুরোধ পরামিতি কনফিগার করেন (লক্ষ্য URL, প্রক্সি টাইপ, JS রেন্ডারিং টগল, আউটপুট ফর্ম্যাট), এবং একটি একক এন্ডপয়েন্টের মাধ্যমে অনুরোধ পাঠান।
আমাদের মতামত
প্রক্সি এবং স্ক্র্যাপিং API বাজার একটি সময়ের জন্য আরও নমনীয় মূল্য নির্ধারণের দিকে এগিয়ে যাচ্ছে, কিন্তু Decodo-এর বাস্তবায়ন আমরা যা দেখেছি তার মধ্যে সবচেয়ে দানাদার। প্রতি-অনুরোধ জটিলতা টগেল শুধুমাত্র একটি বিপণন কোণ নয় - এটি প্রকৃতপক্ষে মিশ্র স্ক্র্যাপিং ওয়ার্কলোড চালানোর অর্থনীতি পরিবর্তন করে।
আপনি বর্তমানে একটি স্থির-পরিকল্পনা স্ক্র্যাপিং সেবায় রয়েছেন এবং আপনার লক্ষ্যগুলি অসুবিধায় পরিবর্তিত হয় (যা, সৎভাবে বলতে গেলে, তারা নিশ্চিতভাবে করে), Decodo-এর মডেলের অধীনে আপনার প্রকৃত খরচ কী হবে তা নিয়ে সংখ্যাগুলি চালানোর যোগ্য।
125M+ IP পুল, 99.99% সাফল্যের হার এবং 100+ প্রস্তুত-নির্মিত টেমপ্লেটগুলি শক্তিশালী মৌলিক বিষয়। নতুন মূল্য নির্ধারণ মডেলের সাথে মিলিত, Decodo-এর স্ক্র্যাপিং API নিজেকে 2026 সালে বৃহৎ পরিমাণে উৎপাদন স্ক্র্যাপিং চালাচ্ছে এমন যে কেউর জন্য একটি গুরুতর প্রতিযোগী হিসাবে অবস্থান করছে।
আপনি decodo.com-এ নতুন API বিনামূল্যে চেষ্টা করতে পারেন — বিনামূল্যে স্তরের জন্য কোন ক্রেডিট কার্ড প্রয়োজন নেই।