GaluroBot, наш робот

GaluroBot читает сайты для сервиса Galuro. В запросах он называет себя так:

Mozilla/5.0 (compatible; GaluroBot/0.1; +https://galuro.com/bot)

Он читает открытые страницы — главную, страницы услуг и товаров и несколько страниц, на которые ссылается главная, — а ещё robots.txt, sitemap.xml, llms.txt и, у магазинов на WooCommerce, открытый каталог товаров. В формы ничего не отправляет и туда, где нужен пароль, не заходит.

Он приходит, когда кто-то проверяет сайт в Galuro — на нашей главной, в кабинете или в разборе. Такую проверку он читает так же, как браузер посетителя: открытые страницы, один раз на проверку, не заглядывая в robots.txt.

Сайты, о которых нас не просили, — конкурентов, за которыми следят наши клиенты, компании из наших списков и обзоров ниш — он читает только там, куда robots.txt пускает GaluroBot или всех роботов: закрытую для него страницу он не запрашивает.

Вопросы о GaluroBot — пишите на hello@galuro.com.