User-agent: * Disallow: /index.php Disallow: /admin Disallow: /system Disallow: /search Disallow: /compare Disallow: /wishlist Disallow: /cart Disallow: /login Disallow: /register Disallow: /forgotten Disallow: /checkout Disallow: /*?sort= Disallow: /*&sort= Disallow: /*?order= Disallow: /*&order= Disallow: /*?limit= Disallow: /*&limit= Disallow: /*?filter= Disallow: /*&filter= Disallow: /*?filter_name= Disallow: /*&filter_name= Disallow: /*?filter_sub_category= Disallow: /*&filter_sub_category= Disallow: /*?filter_description= Disallow: /*&filter_description= Disallow: /*?tracking= Disallow: /*&tracking= Disallow: /*?tpclid= Disallow: /*search= Disallow: /*?utm Disallow: /*&utm Disallow: /*?instock= Disallow: /*?remove= Disallow: /*?erid= Disallow: /*?news_id= Disallow: /*?series_id= Disallow: /*?price_type= Allow: /*.js Allow: /*.css Allow: /*.svg Allow: /*.png Allow: /*.jpg Allow: /*.jpeg Allow: /*.gif # 17.08.2026: сканеры конкурентной SEO-аналитики и сборщики датасетов. Клиентов не # приносят, а вместе давали 17,8% всех запросов к сайту (136 610 из 767 700 в логах). # Поисковики и ИИ-краулеры сознательно НЕ трогаем: Googlebot, YandexBot, bingbot, # ClaudeBot, GPTBot, OAI-SearchBot, PerplexityBot, Applebot, Amazonbot работают как раньше. User-agent: SemrushBot Disallow: / User-agent: AhrefsBot Disallow: / User-agent: DotBot Disallow: / User-agent: MJ12bot Disallow: / User-agent: BLEXBot Disallow: / User-agent: DataForSeoBot Disallow: / User-agent: SeekportBot Disallow: / # Baiduspider — поисковик, но покупателей из Китая у нас нет User-agent: Baiduspider Disallow: / # товарный агрегатор, для Беларуси бесполезен User-agent: GeedoShopProductFinder Disallow: / # сборщик картинок для обучающих датасетов (img2dataset) User-agent: ImageBot Disallow: / # 25.08.2026: ИИ-краулеры названы явной группой. Раньше они работали через общее # правило User-agent: *; именованная группа надёжнее — часть краулеров читает только # самую точную группу. Список запретов ПОВТОРЁН из общего правила специально: без # него бот ушёл бы в корзину, поиск и фильтры и жёг бюджет обхода. # OAI-SearchBot кормит ChatGPT Search, PerplexityBot — свой индекс Perplexity, # YandexAdditionalBot — быстрые ответы Алисы. User-agent: OAI-SearchBot User-agent: ChatGPT-User User-agent: GPTBot User-agent: PerplexityBot User-agent: Perplexity-User User-agent: ClaudeBot User-agent: Claude-SearchBot User-agent: Claude-User User-agent: YandexAdditionalBot User-agent: YandexAdditionalBotFast User-agent: Google-Extended Disallow: /index.php Disallow: /admin Disallow: /system Disallow: /search Disallow: /compare Disallow: /wishlist Disallow: /cart Disallow: /login Disallow: /register Disallow: /forgotten Disallow: /checkout Disallow: /*?sort= Disallow: /*&sort= Disallow: /*?order= Disallow: /*&order= Disallow: /*?limit= Disallow: /*&limit= Disallow: /*?filter= Disallow: /*&filter= Disallow: /*?filter_name= Disallow: /*&filter_name= Disallow: /*?filter_sub_category= Disallow: /*&filter_sub_category= Disallow: /*?filter_description= Disallow: /*&filter_description= Disallow: /*?tracking= Disallow: /*&tracking= Disallow: /*?tpclid= Disallow: /*search= Disallow: /*?utm Disallow: /*&utm Disallow: /*?instock= Disallow: /*?remove= Disallow: /*?erid= Disallow: /*?news_id= Disallow: /*?series_id= Disallow: /*?price_type= Sitemap: https://bplelektro.by/sitemap.xml Sitemap: https://bplelektro.by/sitemap-news.xml