google-crawlers
Являются ли секретные строки запроса разумным способом ограничить доступ и скрыть содержимое на небезопасном сайте?
Поэтому я скажу прямо, очевидно, я знаю, что на самом деле это не безопасно, не бейте меня за это. Меня просто интересу ... ответ будет касаться, есть ли другие основные способы для человека попасть на страницу, которая использует эту технику.
Являются Robots.txt и тегов метаданных достаточно, чтобы остановить поисковые системы для индексирования динамических страниц, зависящих от переменных $GET?
Я создал php-страницу, доступную только с помощью токена/пропуска, полученного через $_GET
Поэтому, если вы перейдете ... : <META NAME="ROBOTS" CONTENT="NOINDEX">
Даже если я наберу в Google:
Site:fakepage11.com /
Спасибо вам!
Может ли опубликованный лист Google, на который ссылаются только с помощью PHP, быть обнаружен или проиндексирован Google?
Я читал об этом, но вижу противоречивые мнения, поэтому обратитесь за помощью сюда.
У меня есть опубликованный лист ... с помощью заголовков или с помощью других средств измерения трафика, каков полный URL-адрес опубликованного листа Google?