كيفية منع سبايدر سوجو من فهرسة محتوى موقعك بشكل فعال؟

الطريقة الأولى: استخدام ملف robots.txt

لمنع زاحف سوجو من فهرسة محتوى موقعك ، يمكنك تحقيق ذلك من خلال إنشاء ملف robots.txt. قم بإضافة المحتوى التالي إلى الملف:

User-agent: Sogou web spider

Disallow: /

User-agent: sogou spider

Disallow: /

User-agent: *

Disallow:

بما أنه غير مؤكد ما إذا كان سوجو سبايدر أو سوجو ويب سبايدر ، لذلك تمت كتابة سطرين. في العادة، توضح محركات البحث الأخرى أسماء الزواحف الخاصة بها في المقالات ذات الصلة، ولكن سوجو لا يفعل ذلك، مما يظهر أحدها. بمجرد تحميل الملف إلى الدليل الرئيسي لموقع الويب، سيصبح ساري المفعول. ومع ذلك، ينبغي ملاحظة أنه في بعض الأحيان، قد لا تلتزم زاحف سوجو ببروتوكول ملف robots.txt ، لذا لا يزال من الممكن أن يقوم بفهرسة المحتوى.

الطريقة الثانية: استخدام ملف .htaccess

بجانب ملف robots.txt، يمكنك إنشاء ملف .htaccess آخر. اسم الملف هو .htaccess ، وأضف المحتوى التالي إلى الملف:

#block spider

order allow,deny

#Sogou block

deny from 220.181.125.71

deny from 220.181.125.68

deny from 220.181.125.69

deny from 220.181.94.235

deny from 220.181.94.233

deny from 220.181.94.236

رفض من 220.181.19.84

السماح من الجميع

\\u0026lt;/LIMIT\\u0026gt;

سيتم تحميل هذا الملف إلى دليل الموقع الجذري. العناوين IP المدرجة هنا جميعها لعناكب سوجو، ونظرًا لتغييرها المتكرر، يمكن إضافة عناوين IP جديدة في أي وقت.