Может ли Google сканировать страницы Facebook?
Мне показалось, я слышал некоторое время назад, что Google не может сканировать страницы Facebook. Я предполагаю, что на это влияют настройки конфиденциальности, которые у кого-то есть, но если у меня есть страница, позволяющая анонимным пользователям видеть мою стену, сможет ли Google сканировать эту страницу и возвращать соответствующие результаты?
4 answers
Google может видеть только то, что видят пользователи, не вошедшие в систему. Facebook не разрешает Google доступ к личным профилям. Вы можете проверить это, настроив своего агента пользователя в качестве Googlebot, а затем попытавшись выполнить обход Facebook (убедитесь, что вы тоже вышли из системы).
Следует отметить, что Google, по-видимому, может сканировать комментарии Facebook.
Я только что искал в Google facebook obama, нажал >> на первый результат и получил предварительный просмотр страницы Obamas. Так что да, Google может, но, как указано, настройки конфиденциальности могут (и должны) предотвратить это.
- Вот этот предварительный просмотр, обратите внимание на
sign inlog inпуговицы. Итак, как указано - все выглядит так, как это выглядело бы для не вошедшего в систему пользователя, и индексируется именно так.
Robots.txt файл Facebook.com также имеет значение, в котором есть следующая запись для Google:
User-agent: Googlebot
Disallow: /ac.php
Disallow: /ae.php
Disallow: /album.php
Disallow: /ap.php
Disallow: /autologin.php
Disallow: /checkpoint/
Disallow: /feeds/
Disallow: /l.php
Disallow: /o.php
Disallow: /p.php
Disallow: /photo.php
Disallow: /photo_comments.php
Disallow: /photo_search.php
Disallow: /photos.php
Так что, по крайней мере, Google не может получить доступ к этим файлам и сканировать их.
Кроме того, Facebook также сообщает:
Электронная почта [email protected] если вы авторизованы для доступа к ним и вам отказывают.
Google может сканировать страницы профиля facebook, если в настройках пользователя разрешен публичный поиск. Фан-страницы автоматически доступны для обхода.