بروزرسانی: 24 خرداد 1404
نحوه مسدود کردن SemrushBot (قوانین robots.txt)
این راهنما نحوه جلوگیری از خزیدن SemrushBot در یک وب سایت را توضیح می دهد.
این دستورالعمل مانع از دسترسی SemrushBot به وب سایت شما با ابزار On Page SEO Checker می شود:
User-agent: SemrushBot-SWADisallow: /6. SemrushBot-CT را مسدود کنید
User-agent: SemrushBot-BADisallow: /4. SemrushBot-SI را مسدود کنید
همانطور که متوجه شدید، SemrushBot را می توان با به روز رسانی فایل robots.txt برای غیر مجاز کردن User-Agent مسدود کرد. پس از مسدود کردن عامل اصلی SemrushBot کاربر، عنکبوت نمی تواند وب سایت را برای ثبت داده ها برای نمودار وب پیوندها بخزد. با این حال، Semrush چندین User-Agent برای هر ربات دارد که داده های وب سایت را برای مجموعه ابزار خود جمع آوری می کند.
User-agent: SplitSignalBotDisallow: /8. SemrushBot-COUB را مسدود کنید
امیدوارم از این راهنمای نحوه مسدود کردن SemrushBot لذت برده باشید.
این قانون مانع از خزیدن SemrushBot به وب سایت شما برای ممیزی SEO و مسائل فنی می شود:
User-agent: SemrushBot-SIDisallow: /5. SemrushBot-SWA را مسدود کنید
User-agent: SiteAuditBotDisallow: /3. SemrushBot-BA را مسدود کنید
این قانون robots.txt مانع از بررسی SemrushBot می شود که صفحات وب را برای تجزیه و تحلیل با ابزار SEO Writing Assistant بررسی کند:
جزئیات درباره مسدود کردن تاخیرها
در پایان این صفحه، می دانید که چگونه داده های وب سایت خود را برای کاربران Semrush که سعی در تجزیه و تحلیل دامنه برای بهینه سازی موتورهای جستجو (SEO) و کمپین های بازاریابی دیجیتال دارند، غیرقابل دسترس کنید.
نحوه بلاک کردن SemrushBot
این قانون مانع از خزیدن Semrush SplitSignalBot در وب سایت شما برای ابزار SplitSignal می شود که برای انجام تست های A/B برای بازاریابی دیجیتال استفاده می شود:
User-agent: SemrushBot-COUBDisallow: /مسدود کردن همه عوامل کاربر SemrushBot
استفان هاکمن یک کارآفرین و بنیانگذار SEO Chatter است. او در بهینه سازی موتورهای جستجو و بازاریابی دیجیتال تخصص دارد و از سال 2005 شیفته سئو شده است. هدف استفان این است که بهترین نکات و اخبار در مورد بازاریابی موتورهای جستجو را به اشتراک بگذارد تا بتوانید ترافیک بیشتری را برای وب سایت خود به دست آورید.
منبع: https://seochatter.com/how-to-block-semrushbot/
مسدود کردن خلاصه SemrushBot
SemrushBot را می توان با به روز رسانی فایل robots.txt به غیر مجاز کردن User-Agent مسدود کرد. پس از مسدود کردن SemrushBot User-Agent، عنکبوت نمی تواند وب سایت را بخزد.
1. Main SemrushBot را مسدود کنید
این دستورالعمل robots.txt می تواند برای مسدود کردن SemrushBot از دسترسی به وب سایت شما برای ابزار Content Outline Builder استفاده شود:
User-agent: SemrushBotDisallow: /User-agent: SiteAuditBotDisallow: /User-agent: SemrushBot-BADisallow: /User-agent: SemrushBot-SIDisallow: /User-agent: SemrushBot-SWADisallow: /User-agent: SemrushBot-CTDisallow: /User-agent: SplitSignalBotDisallow: /User-agent: SemrushBot-COUBDisallow: /User-agent: SemrushBot-CTDisallow: /7. SplitSignalBot را مسدود کنید
User-agent: SemrushBotDisallow: /