LIA-User
LIA-User — агент, с помощью которого LIA читает веб-страницу по просьбе человека: когда кто-то делится с LIA ссылкой или задаёт вопрос, ответ на который нужно найти на странице. Он читает страницу в этот момент, чтобы ответить этому человеку.
Не сканирует и не обучает
LIA-User не сканирует и не индексирует сайты: он сам не переходит по ссылкам и не создаёт поисковый индекс. LIA не использует прочитанное для обучения моделей.
Соблюдает robots.txt
LIA-User соблюдает robots.txt вашего сайта: правила группы LIA-User или, если её нет, группы *. Чтобы заблокировать его на всём сайте, добавьте это в robots.txt:
User-agent: LIA-User
Disallow: /
Изменения в robots.txt вступают в силу максимум в течение 24 часов.
Как он себя обозначает
В его запросах указан этот User-Agent. То, что идёт после axios/, — версия библиотеки, которая отправляет запросы, поэтому оно меняется при обновлении библиотеки:
LIA-User/1.0 (+https://www.neuralialabs.com/lia-user; contact@neuralialabs.com) axios/<версия>
Контакты
Если у вас есть вопрос о LIA-User или вы считаете, что он не соблюдает ваш robots.txt, напишите на contact@neuralialabs.com.