Есть такие владельцы сайтов, которым не хочется, чтобы нейросеть использовала контент с их сайтов для обучения. Для этого можно закрыть нейросети доступ к сайту.
А смысл закрывать если он использует кеши поисковика?