ওয়েব স্ক্র্যাপিংয়ের প্রক্সি
একটি স্ক্র্যাপার অল্প সময়ে একটি সাইটে অনেক রিকোয়েস্ট পাঠায়। StarProxy আনলিমিটেড প্ল্যান সেগুলো বাসাবাড়ির সংযোগের অনেক IP-তে ছড়িয়ে দেয় এবং যত ডেটাই ফেরত আসুক, দৈনিক রেট নেয়।
স্ক্র্যাপার কেন ব্লক হয়?
সাইটগুলো দেখে প্রতিটি IP থেকে কতগুলো রিকোয়েস্ট আসছে। একটি নির্দিষ্ট সীমা পেরোলে তারা সাড়া ধীর করে দেয় বা যাচাইয়ের পেজ দেখায়। একটি সার্ভার থেকে কয়েক হাজার রিকোয়েস্ট কয়েক মিনিটেই সেই সীমায় পৌঁছায়।
গেটওয়ের (প্রক্সির প্রবেশপথ) মাধ্যমে রিকোয়েস্টগুলো হাজার হাজার রেসিডেনশিয়াল IP-তে ভাগ হয়ে যায়, অর্থাৎ বাসার ইন্টারনেট লাইনের ঠিকানায়। মোট পরিমাণ একই থাকে, কিন্তু প্রতিটি IP মোটামুটি একজন সাধারণ ভিজিটরের মতো রিকোয়েস্ট পাঠায়।
দাম কীসে ঠিক হয়?
মেয়াদ আর সংযোগের স্তরে। 200 সংযোগ ও 100 Mbps-এ Day $4.55, Week দিনে $4.28 (মোট $29.96), Month দিনে $3.87 (মোট $116.10) এবং Season দিনে $3.46 (মোট $311.40)।
ডেটা গোনা হয় না। কোনো কাজ দিনে মোটামুটি 11~14 GB-এর বেশি টানলে GB হিসেবে রেসিডেনশিয়াল কেনার চেয়ে আনলিমিটেডে খরচ কম। ছবিতে ভরা পেজ দ্রুত সেই সীমা পেরিয়ে যায়।
কোন সংযোগ স্তর দরকার?
একই মুহূর্তে কতগুলো রিকোয়েস্ট খোলা থাকে সেটা দেখে ঠিক করুন। 120টি ওয়ার্কার থাকলে 200 সংযোগের স্তরই যথেষ্ট, আবার চেষ্টার জন্যও জায়গা থাকে।
কয়েকটি স্ক্র্যাপার একসাথে চললে তাদের ওয়ার্কার যোগ করুন। 300 হলে 500 সংযোগের স্তর (200 Mbps) মানানসই। এটি Day-তে $7.44, অথবা Month-এ দিনে $6.32। পরের কেনার সময় স্তর বদলাতে পারেন।
কী সংগ্রহ করা যায়?
লগইন ছাড়া খোলে এমন পাবলিক পেজ: প্রোডাক্টের তালিকা, লেখা, প্রকাশিত ব্যবসার তথ্য। শুরু করার আগে সাইটের শর্ত এবং আপনি যেখানে কাজ করেন সেখানকার আইন দেখে নিন।
ফাঁস হওয়া লগইন তথ্য দিয়ে লগ ইন, স্প্যাম, DDoS বা সরকারি সাইটে ঢোকার জন্য ব্যবহৃত অ্যাকাউন্ট স্থগিত করা হয়। প্রতিটি ডোমেইনে রিকোয়েস্টের গতি নিয়ন্ত্রণ করলে টার্গেট সার্ভার চালু থাকে এবং আপনি সেখান থেকে সংগ্রহ চালিয়ে যেতে পারেন।
ওয়েব স্ক্র্যাপিং-এর জন্য StarProxy সেটআপ
1
ইউজারনেম ও পাসওয়ার্ড দিয়ে সাইন আপ করুন, তারপর পেমেন্ট উইন্ডোতে ক্রিপ্টো দিয়ে ব্যালান্স যোগ করুন। সর্বনিম্ন টপ-আপ $25।
2
আনলিমিটেড রেসিডেনশিয়াল অংশে একটি মেয়াদ (Day, Week, Month বা Season) আর একটি সংযোগ স্তর বেছে নিন, তারপর পেমেন্ট করুন।
3
আপনার প্রক্সি ইউজারনেমে -zone-unl যোগ করুন। দেশভেদে ডেটা আলাদা হলে -cc-de-এর মতো দেশের কোডও যোগ করুন।
4
স্ক্র্যাপারের প্রক্সি সেটিং gate.starproxy.shop-এ দিন। HTTP পোর্ট 6100 আর SOCKS5 পোর্ট 6200 ব্যবহার করে।
সাধারণ প্রশ্ন
IP কত ঘন ঘন বদলায়?
ইউজারনেমে -sid অপশন না থাকলে প্রতিটি রিকোয়েস্ট নতুন রেসিডেনশিয়াল IP থেকে বের হয়।
লগ ইন করার পর কয়েকটি পেজের জন্য একই IP দরকার।
ইউজারনেমে -sid- এবং আপনার পছন্দের একটি সেশনের নাম যোগ করুন। একই নামের রিকোয়েস্টগুলো একটি IP ভাগ করে নেয়। কত সময় থাকবে তা -ttl- দিয়ে ঠিক করুন, সর্বোচ্চ 60 মিনিট।
ডেটা ছাড়া আর কিছুর কি সীমা আছে?
একসাথে সংযোগ ও গতি আপনার বেছে নেওয়া স্তর পর্যন্ত। ডেটা মাপা হয় না।
আমার অর্ডারে "চালু হচ্ছে" দেখাচ্ছে।
পেমেন্ট হয়ে গেছে এবং প্ল্যানটি চালু করা হচ্ছে। কোনো অর্ডার চালু করা না গেলে তা বাতিল হয় এবং পুরো টাকা আপনার ব্যালান্সে ফেরত আসে।
$25 টপ আপ করুন, 69 GB রেসিডেনশিয়াল ট্রাফিক পান
একটি ইউজারনেম আর পাসওয়ার্ড বেছে নিলেই আপনি ভেতরে। আপনার ব্যালান্সের মেয়াদ শেষ হয় না।