LIA-User
LIA-User is de agent die LIA gebruikt om een webpagina te lezen wanneer iemand erom vraagt: als iemand een link met LIA deelt, of LIA iets vraagt dat op een pagina moet worden opgezocht. LIA-User leest de pagina op dat moment om die persoon antwoord te geven.
Geen crawling, geen training
LIA-User crawlt of indexeert websites niet: hij volgt geen links uit zichzelf en bouwt geen zoekindex op. LIA gebruikt wat LIA-User leest niet om modellen te trainen.
LIA-User volgt robots.txt
LIA-User volgt de robots.txt van je site: de regels van de groep LIA-User of, als die er niet is, die van de groep *. Voeg dit toe aan je robots.txt om LIA-User op je hele site te blokkeren:
User-agent: LIA-User
Disallow: /
Een wijziging in je robots.txt wordt uiterlijk binnen 24 uur van kracht.
Hoe LIA-User zich identificeert
De verzoeken bevatten deze User-Agent. Wat na axios/ komt, is de versie van de bibliotheek die ze verstuurt, en verandert dus wanneer die bibliotheek wordt bijgewerkt:
LIA-User/1.0 (+https://www.neuralialabs.com/lia-user; contact@neuralialabs.com) axios/<versie>
Contact
Heb je een vraag over LIA-User of denk je dat LIA-User je robots.txt niet volgt? Mail naar contact@neuralialabs.com.