SachinoBot
Бот PromART, который проверяет сайты. Он читает сайт компании так же, как ИИ‑краулеры, чтобы компания видела, что мешает ИИ‑системам её называть.
SachinoBot/0.1 (+https://sachino.ge/bot) Этот заголовок User-Agent есть в каждом запросе. Адрес в нём ведёт на эту страницу.
Какие сайты он посещает
Только адреса, которые добавил клиент PromART: сайт компании, которую он измеряет, и страницы, указанные в его вопросах. Он не переходит по ссылкам и не обходит интернет.
Что он запрашивает
-
/robots.txtЧтобы узнать, каких ИИ‑краулеров пускает ваш сайт и где карта сайта.
-
/sitemap.xmlТолько если в robots.txt не указана карта сайта: чтобы проверить, что она есть.
-
/<ключ>.txtФайл ключа IndexNow клиента: чтобы убедиться, что он на месте.
- Страницы
Главная, страницы, на которые указывают вопросы клиента, и страницы, опубликованные через PromART: до 20 за проверку, по одной.
- Одна страница
Когда клиент извлекает факты со страницы своего сайта или готовит для неё правку.
Когда он приходит
-
После планового замера, на тарифах с диагностикой.
-
Когда клиент открывает проверки сайта, а с последней проверки прошло больше часа.
-
Каждый раз, когда клиент запрашивает новую проверку, диагностику или факты со страницы.
Как его заблокировать
Отклоняйте на сервере или в CDN запросы, в User-Agent которых есть «SachinoBot». Тогда PromART покажет клиенту, добавившему ваш сайт, что сайт недоступен.
if ($http_user_agent ~* "SachinoBot") {
return 403;
}RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} SachinoBot [NC]
RewriteRule ^ - [F](http.user_agent contains "SachinoBot")robots.txt его не останавливает