Proxy untuk web scraping
Scraper menghantar banyak permintaan ke satu laman dalam masa singkat. Pakej tanpa had StarProxy menyebarkannya ke banyak IP sambungan rumah dan mengenakan kadar harian, walau berapa banyak data yang diterima.
Mengapa scraper disekat?
Laman web memerhati bilangan permintaan dari setiap IP. Melebihi had tertentu, laman melambatkan respons atau memaparkan halaman cabaran. Beberapa ribu permintaan dari satu pelayan mencapai had itu dalam beberapa minit.
Melalui gateway (titik masuk proxy), permintaan dibahagikan ke beribu-ribu IP kediaman, iaitu alamat talian internet rumah. Jumlah keseluruhan tidak berubah, tetapi setiap IP menghantar lebih kurang sebanyak pelawat biasa.
Apa yang menentukan harga?
Tempoh dan peringkat sambungan. Pada 200 sambungan dan 100 Mbps, Day ialah $4.55, Week $4.28 sehari (jumlah $29.96), Month $3.87 sehari (jumlah $116.10) dan Season $3.46 sehari (jumlah $311.40).
Data tidak dikira. Apabila satu kerja menarik lebih daripada kira-kira 11~14 GB sehari, pakej tanpa had lebih murah daripada membeli proxy kediaman mengikut GB. Halaman yang banyak imej cepat melepasi had itu.
Peringkat sambungan mana yang saya perlukan?
Kira berdasarkan bilangan permintaan yang terbuka pada masa yang sama. Dengan 120 worker, peringkat 200 sambungan sudah cukup dan masih ada ruang untuk cubaan semula.
Jika beberapa scraper berjalan serentak, campurkan bilangan worker mereka. Pada 300, peringkat 500 sambungan (200 Mbps) sesuai. Harganya $7.44 untuk Day, atau $6.32 sehari untuk Month. Anda boleh menukar peringkat pada pembelian seterusnya.
Apa yang boleh saya kumpul?
Halaman awam yang boleh dibuka tanpa log masuk: senarai produk, artikel, butiran perniagaan yang diterbitkan. Semak terma laman dan undang-undang di tempat anda beroperasi sebelum bermula.
Akaun yang digunakan untuk log masuk dengan kelayakan yang bocor, spam, DDoS atau akses ke laman kerajaan akan digantung. Mengawal kadar permintaan bagi setiap domain memastikan pelayan sasaran kekal berjalan dan anda boleh terus mengumpul data darinya.
Menyediakan StarProxy untuk Web scraping
1
Daftar dengan nama pengguna dan kata laluan, kemudian tambah baki dengan kripto dalam tetingkap pembayaran. Tambah nilai minimum ialah $25.
2
Di bawah proxy kediaman tanpa had, pilih tempoh (Day, Week, Month atau Season) dan peringkat sambungan, kemudian bayar.
3
Tambah -zone-unl pada nama pengguna proxy anda. Jika data berbeza mengikut negara, tambah juga kod negara, seperti -cc-de.
4
Tetapkan proxy pada scraper ke gate.starproxy.shop. HTTP menggunakan port 6100 dan SOCKS5 menggunakan port 6200.
Soalan biasa
Berapa kerap IP bertukar?
Tanpa pilihan -sid dalam nama pengguna, setiap permintaan keluar dari IP kediaman yang baharu.
Saya perlukan IP yang sama untuk beberapa halaman selepas log masuk.
Tambah -sid- dan nama sesi pilihan anda pada nama pengguna. Permintaan dengan nama yang sama berkongsi satu IP. Tetapkan tempohnya dengan -ttl-, sehingga 60 minit.
Adakah apa-apa yang dihadkan selain data?
Sambungan serentak dan kelajuan adalah mengikut peringkat yang anda pilih. Data tidak diukur.
Pesanan saya menunjukkan Mengaktifkan.
Pembayaran telah berjaya dan pakej sedang dihidupkan. Jika pesanan tidak dapat diaktifkan, ia dibatalkan dan jumlah penuh dikembalikan ke baki anda.
Tambah nilai $25, dapat 69 GB trafik kediaman
Pilih nama pengguna dan kata laluan, dan anda boleh terus mula. Baki anda tidak pernah luput.