Как разрешить Googlebot сканировать содержимое платной стены?
На моем веб-сайте есть страницы примерно для 1000 компаний. Без учетной записи я разрешаю пользователям просматривать только 5 страниц компании в месяц (я отслеживаю их по файлам cookie). И Googlebot может свободно сканировать мой сайт, так как он не использует файлы cookie.
Чтобы робот Googlebot не подумал, что я маскируюсь, я указываю содержимое страниц моей компании в качестве содержимого платного доступа (следуя этому руководству ). Проблема в том, что теперь, когда я ищу страницы компании на своем веб-сайте в Google, результат поиска показывает только заголовок страницы и описание моего сайта по умолчанию. Он не отображает содержимое каждой страницы компании.
Я думаю, что проблема в том, что я перечисляю содержимое страниц своей компании в качестве платного доступа. Мой вопрос таков: каков наилучший способ позволить Googlebot сканировать и отображать содержимое моего веб-сайта в результатах поиска, не заставляя Googlebot думать, что я маскируюсь? (когда пользователи нажимают на ссылку с результатами поиска и посещают мой веб-сайт, на них по-прежнему распространяется ежемесячная квота, если у них нет учетная запись).
1 answers
Google говорит в своей гибкой документации по выборке:
Заключите контент с платным доступом в структурированные данные, чтобы помочь Google отличить контент с платным доступом от практики маскировки, когда контент, предоставляемый Googlebot, отличается от контента, предоставляемого пользователям.
Если вы используете структурированные данные, чтобы указать, как контент ограничен для пользователей, вы можете предоставить Googlebot полный доступ на основе заголовка User-Agent или его IP-адреса адреса. Вы не будете наказаны за маскировку при внедрении гибкой выборки, несмотря на то, что решения о доступе частично основываются на том, является ли это Googlebot или нет.