
بروزرسانی: 18 تیر 1404
نحوه مسدود کردن AhrefsBot (قوانین robots.txt و htaccess.)
اگر می خواهید در مورد اینکه ربات Ahrefs چیست و چگونه کار می کند بیشتر بدانید، این صفحه مرتبط را در AhrefsBot ببینید.
اگر می خواهید در مورد اینکه ربات Ahrefs چیست و چگونه کار می کند بیشتر بدانید، این صفحه مرتبط را در AhrefsBot ببینید.
همانطور که متوجه شدید، سه راه برای جلوگیری از خزیدن AhrefsBot در یک وب سایت وجود دارد: استفاده از فایل .robots.txt، قوانین htaccess. و فایروال Cloudflare. هر یک از این گزینه ها از دسترسی AhrefsBot به یک وب سایت برای خزیدن داده های پیوند آن جلوگیری می کند و آن را برای کاربران Ahrefs که در تلاش برای تجزیه و تحلیل دامنه برای کمپین های بازاریابی دیجیتال و SEO هستند، غیر قابل دسترس می کند.
Order Allow,DenyDeny from 54.36.148.0/24Deny from 54.36.149.0/24Deny from 195.154.122.0/24Deny from 195.154.123.0/24Deny from 195.154.126.0/24Deny from 195.154.127.0/24Deny from 51.222.253.0/26Deny from 168.119.64.245Deny from 168.119.64.246Deny from 168.119.64.247Deny from 168.119.64.248Deny from 168.119.64.249Deny from 168.119.64.250Deny from 168.119.64.251Deny from 168.119.64.252Deny from 168.119.64.253Deny from 168.119.64.254Deny from 168.119.65.107Deny from 168.119.65.108Deny from 168.119.65.109Deny from 168.119.65.110Deny from 168.119.65.111Deny from 168.119.65.112Deny from 168.119.65.113Deny from 168.119.65.114Deny from 168.119.65.115Deny from 168.119.65.116Deny from 168.119.65.117Deny from 168.119.65.118Deny from 168.119.65.119Deny from 168.119.65.120Deny from 168.119.65.121Deny from 168.119.65.122Deny from 168.119.65.123Deny from 168.119.65.124Deny from 168.119.65.125Deny from 168.119.65.126Deny from 168.119.65.43Deny from 168.119.65.44Deny from 168.119.65.45Deny from 168.119.65.46Deny from 168.119.65.47Deny from 168.119.65.48Deny from 168.119.65.49Deny from 168.119.65.50Deny from 168.119.65.51Deny from 168.119.65.52Deny from 168.119.65.53Deny from 168.119.65.54Deny from 168.119.65.55Deny from 168.119.65.56Deny from 168.119.65.57Deny from 168.119.65.58Deny from 168.119.65.59Deny from 168.119.65.60Deny from 168.119.65.61Deny from 168.119.65.62Deny from 168.119.68.117Deny from 168.119.68.118Deny from 168.119.68.119Deny from 168.119.68.120Deny from 168.119.68.121Deny from 168.119.68.122Deny from 168.119.68.123Deny from 168.119.68.124Deny from 168.119.68.125Deny from 168.119.68.126Deny from 168.119.68.171Deny from 168.119.68.172Deny from 168.119.68.173Deny from 168.119.68.174Deny from 168.119.68.175Deny from 168.119.68.176Deny from 168.119.68.177Deny from 168.119.68.178Deny from 168.119.68.179Deny from 168.119.68.180Deny from 168.119.68.181Deny from 168.119.68.182Deny from 168.119.68.183Deny from 168.119.68.184Deny from 168.119.68.185Deny from 168.119.68.186Deny from 168.119.68.187Deny from 168.119.68.188Deny from 168.119.68.189Deny from 168.119.68.190Deny from 168.119.68.235Deny from 168.119.68.236Deny from 168.119.68.237Deny from 168.119.68.238Deny from 168.119.68.239Deny from 168.119.68.240Deny from 168.119.68.241Deny from 168.119.68.242Deny from 168.119.68.243Deny from 168.119.68.244Deny from 168.119.68.245Deny from 168.119.68.246Deny from 168.119.68.247Deny from 168.119.68.248Deny from 168.119.68.249Deny from 168.119.68.250Deny from 168.119.68.251Deny from 168.119.68.252Deny from 168.119.68.253Deny from Deny from 168.119.68.254Allow from all
اگر از Cloudflare استفاده می کنید، می توانید آدرس های IP جداگانه زیر را به لیست بلوک فایروال اضافه کنید تا از خزیدن AhrefsBot در وب سایت جلوگیری کنید.
لطفا جاوا اسکریپت را فعال کنید
توجه: AhrefsBot همیشه به دستورالعمل Disallow احترام می گذارد که به عنکبوت دستور می دهد تا وب سایت را نخزد و AhrefsBot را از ذخیره داده های پیوند مربوط به سایت در پایگاه داده خود مسدود می کند. با این حال، اگر این یک تغییر جدید در فایل robots.txt شما باشد، AhrefsBot برای دریافت دستورالعمل Disallow به زمان نیاز دارد. پس از کشف، AhfefsBot دستورالعمل Disallow را در طول خزیدن برنامه ریزی شده بعدی رعایت می کند.
ارائه بهترین نکات سئو ...