Я вижу это[как заблокировать curl или file_get_contents страница этого сайта. Код для .htaccess для блокировки file_get_contents в php.
RewriteEngine On
RewriteCond% {HTTP_USER_AGENT} ^ $ [OR]
RewriteCond% {HTTP_ACCEPT} ^ $
RewriteRule ^ - [L, F]
Мой вопрос: какова возможность блокировки бота Google тоже?
Вы можете проверить это, зайдя в свой Инструменты Google для веб-мастеров счет и получение страницы на вашем сайте как Googlebot. Это было бы окончательным тестом.
Но похоже, что этот код блокирует пользовательские агенты, которые не имеют значения. Google всегда идентифицирует себя как Googlebot. Это также обеспечивает ценность для v
HTTP заголовок. Так что я думаю, что ты будешь в порядке.
Других решений пока нет …