googlebot

Может ли Google сканировать 301 страницу?

Возможно ли, чтобы Google или любой другой искатель сканировал и индексировал страницу, которая возвращает код состояни ... ицы в индексе указана несколько дней назад. Может ли Google просто игнорировать 301 и сканировать содержимое страницы?

Как я могу узнать время последнего доступа бота Google к странице?

У меня есть следующая функция для получения даты последнего доступа к googlebot: //get googlebot last access function ... ь только дату и время после слов as it appeared on и распечатать ее, т. е..: 8 Oct 2011 14:03:12 GMT. Как это сделать?

Можно ли узнать, когда бот Google просматривает какие-либо URL-адреса на моем сайте, и записать время последнего доступа к текстовому файлу на сервере

Ниже приведен код, который отправляет электронное письмо, когда Google просматривает любую страницу, и это приводит к р ... елать это, проверив, попадает ли бот Google на сервер и в какое время он запрашивал какую-либо страницу сайта с сервера?

Ошибка сканирования Google с использованием языка HTTP ACCEPT

В моем приложении Codeigniter я использую $_SERVER['HTTP_ACCEPT_LANGUAGE'] для определения языка браузера пользователей ... а Google. Есть ли способ просто позволить боту Google игнорировать HTTP_ACCEPT_LANGUAGE действие? Заранее спасибо!

index.php в качестве параметра в URL-адресе веб-сайта laravel

Я обнаружил, что любой веб-сайт laravel доступен с index.php в качестве параметра. Это большая проблема, index.php в ... .php . Кроме того, это плохая практика seo, потому что создает дублированный контент. Как лучше всего это исправить?

PHP-скрипт для определения языка браузера, как насчет бота Google?

Я работаю над веб-сайтом, который будет доступен на двух языках (английском и французском). Я создал скрипт для определ ... ся ли это проблемой для SEO, так как я предполагаю, что бот Google получит английскую версию, но не французскую? Спасибо

Как создать robot.txt в godaddy общий сервер с несколькими доменами

Добрый день, надеюсь, вы сможете мне помочь, у меня есть вопрос: У меня есть сервер с godaddy (делюкс-обмен), на это ... быть удален? в /, /public_html, /web2? Я мог бы помочь с содержимым файла: robot.txt? Заранее большое вам спасибо.

php-код для исключения Google

У меня есть сайт объявлений. На этом веб-сайте я храню в бд каждую страницу продукта, которую пользователь посещает в ц ... знаю их в своей бд. Кто-нибудь из вас знает хороший способ в php, чтобы гарантировать, что Google останется в стороне?

Лучший способ идентифицировать googlebot

Какой самый надежный и быстрый способ идентифицировать гусеничный робот Googlebot? RDN могут быть подделаны, поэтому сп ... твуют ли какие-либо сайты/ресурсы, где можно получить фактические IP-адреса googlebot? Любые другие идеи приветствуются.

как Google сканирует динамические страницы? [закрыто]

Я собираюсь создать сайт онлайн-покупок для одного из моих клиентов. Я должен сделать этот сайт удобным для SEO, и поэт ... tp://www.def.com/shoes.php?type=Men-Shoes Так правильно ли это и Google будет ли он сканироваться для индексирования?

Как "Noindex:" в robots.txt работать?

Я наткнулся на эту статью в моих сегодняшних новостях SEO. Похоже, это подразумевает, что вы можете ... robots.txt директива, поддерживаемая Google и другими поисковыми системами? Работает ли это? Это задокументировано?

Когда я перенаправляю страницу с 301, должен ли я немедленно обновить карту сайта с новым URL-адресом?

Все эти страницы проиндексированы и имеют хороший рейтинг, поэтому я хочу быть особенно осторожным. Эт ... ход к этому вопросу? Должен ли я установить перенаправления и подождать пару месяцев, прежде чем обновлять карту сайта?

Google периодически не удается загрузить CSS и JS с CDN CloudFront

Мы заметили много ошибок "Удобства использования мобильных устройств" в консоли поиска. Когда я нажимал ... rk.com/ Есть ли у вас какие-либо идеи, что можно изменить, чтобы бот Google всегда мог загружать CSS с CDN CloudFront?

Googlebot наводняет сервер запросами на нежелательные URL-адреса со случайными данными

У меня возникли некоторые проблемы с GoogleBot. Он продолжает запрашивать случайный URL-адрес, которог ... 1f4690bjij1wbgziq- HTTP/1.1" 301 178 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)" "-"

Когда Google откажется от повторного поиска 301, который привел к 404?

Я перенес домен и допустил ошибку в перенаправлениях (структура URL идентична). Несмотря на то, что они ... условием, чтобы исправить ошибку? Вопрос 2: Пытается ли бот Google переписать 301 страницу, которая указывала на 404?

Определяет ли Googlebot ценность ссылки по ее положению на странице?

Хорошо известно, что SEO-ценность веб-сайта в основном зависит от того, сколько на него ссылались, ссылались и делились. С точки зрения Googlebot, является ли ссылка вверху страницы более ценной , чем ссылка внизу?

Боты Google и iframe

Вот в чем проблема: Допустим, у меня есть mydomain.com. В externaldomain.com/article/mydomain есть i ... e/mydomain или он заблокирует mydomain.com, потому что externaldomain.com robots.txt запретить доступ к папке /article?

Как обновить дату в результатах поиска Google?

Для записи в блоге у меня есть следующие мета-теги: <meta property="article:published_time" content ... ета-тег в мой сайт тоже, но ничего не произошло. Кроме того, моя карта сайта XML содержит информацию <lastmod>.

Идентификатор сеанса, Создающий 404 Ошибки

Проблема: Веб-сайт содержит URL-адреса с параметрами Идентификатор сеанса вставляется в URL-адреса, ... но с тем, что параметр p переопределяет? Должен ли я установить параметр jsessionid как ";jsessionid" вместо "jsessionid"?

ссылка rel="альтернативный", несколько языков и канонические URL-адреса

Контекст: У нас есть веб-сайт, который доступен в нескольких языковых версиях. Однако содержание одно и ... Мы много искали и не смогли найти ничего, что касалось бы нашего дела, а некоторые ресурсы сбивали с толку в этой теме.