استضافة تجريف الويب
الإجابة
بنية التجريف التحتية تحتاج عناوين غير محظورة بالفعل وسعة لتشغيل متصفحات بدون واجهة. Incognito VPS تخصص من مجموعات IPv4 نظيفة مفحوصة ضد أكثر من 60 قائمة سوداء، وتبيع عناوين إضافية بـ 2.50 دولار شهريًا من /24 منفصلة، ولا تتطلب تحققًا من الهوية.
| السيناريو | الحد الأدنى |
|---|---|
| تجريف HTTP | 2 vCPU، 4 جيجابايت RAM |
| متصفحات بدون واجهة (5–10) | 6 vCPU، 16 جيجابايت RAM |
| زحف كبير + تحليل | 16 vCPU، 64 جيجابايت RAM |
| تنوع العناوين | 2.50 دولار شهريًا لكل IPv4 إضافي |
سمعة العنوان تحدد ما إذا كان هذا يعمل
معظم أنظمة مكافحة الروبوتات تفحص العنوان قبل أي شيء آخر. النطاقات التابعة للسحابات المعروفة مصنفة مسبقًا كحركة مرور من مراكز بيانات وتُعامل بريبة افتراضيًا؛ النطاقات ذات التاريخ السيئ محظورة ببساطة.
مجمع IPv4 لدينا مفحوص ضد أكثر من ستين قائمة سوداء عند التخصيص وكل ست ساعات بعد ذلك، وسياسة الاستخدام المقبول التي تزيل العملاء المسيئين هي ما يبقيه على هذا الحال. العناوين الإضافية تأتي من /24 منفصلة بحيث لا يؤدي كتلة واحدة إلى إسقاط مجمعك بالكامل.
تحديد الحجم للمتصفحات بدون واجهة
تجريف HTTP العادي رخيص — VPS صغير سيشبع شبكته قبل معالجه بوقت طويل. Chrome بدون واجهة هو العكس: كل حالة تريد حوالي 300 إلى 500 ميجابايت من RAM وحصة كبيرة من نواة، لذا فإن التزامن محدود بالذاكرة.
عشر حالات Chrome متزامنة مريحة على 16 جيجابايت. إذا كنت تشغل Playwright أو Puppeteer على نطاق واسع، خصص الذاكرة أولاً والأنوية ثانيًا.
افعلها بشكل صحيح
احترم robots.txt، وحدد معدل طلباتك، وعرّف الزاحف في وكيل المستخدم مع عنوان اتصال، وخزّن مؤقتًا بقوة حتى لا تعيد جلب ما لديك بالفعل. هذا ليس وعظًا أخلاقيًا — إنها الطريقة التي تتجنب بها الحظر، والمشغلون الذين يُحظرون هم الذين يضغطون بشدة.
سياسة الاستخدام المقبول لدينا تحظر حشو بيانات الاعتماد، والتجريف خلف مصادقة غير مصرح لك بحيازتها، وجمع البيانات الشخصية بما ينتهك القانون المعمول به. جمع البيانات العادي من الويب العام مسموح وكان دائمًا كذلك.
الأسئلة الشائعة
01 هل عناوين IP الخاصة بكم محظورة من خدمات مكافحة الروبوتات؟
نطاقاتنا ليست في قوائم حظر الإساءة، وهذا هو الشيء الرئيسي الذي تتحكم فيه. أي نطاق مركز بيانات لا يزال قد يُصنف كحركة مرور من مركز بيانات بواسطة نظام متطور لمكافحة الروبوتات — هذا متأصل في الاستضافة، وليس خاصًا بنا.
02 هل يمكنني الحصول على عناوين IP متعددة؟
نعم، 2.50 دولار شهريًا لكل عنوان، حتى ستة عشر لكل خادم، مخصصة من /24 منفصلة بحيث لا تؤدي كتلة واحدة إلى إسقاط مجمعك بالكامل. لا نموذج تبرير.
03 أي خطة للمتصفحات بدون واجهة؟
BASTION (6 vCPU، 16 جيجابايت) يشغل حوالي عشر حالات Chrome متزامنة. كل حالة تريد 300–500 ميجابايت، لذا الذاكرة هي القيد الملزم، وليس الأنوية.
04 هل التجريف مسموح به بموجب AUP الخاص بكم؟
جمع البيانات من الويب العام مسموح. حشو بيانات الاعتماد، والوصول إلى بيانات خلف مصادقة غير مصرح لك بها، وجمع البيانات الشخصية بما ينتهك القانون المعمول به، كلها غير مسموحة.
ذات صلة