Эта статья имеет рейтинг Start-class по шкале оценки контента Википедии . Она представляет интерес для следующих WikiProjects : | |||||||||||||||||||||||||||||||
|
The contents of the Mediabot page were merged into Googlebot on 18 October 2019. For the contribution history and old versions of the redirected page, please see its history. |
«Он посещает веб-сайты, которые часто меняются, в зависимости от того, как часто они меняются».
Для меня это предложение очень запутанное. Как насчет чего-то вроде:
«Он посещает веб-сайты, которые часто меняются, начиная с наиболее часто изменяемых страниц».
Таладон 18:33, 19 сентября 2006 г. (UTC)
почему не добавить диапазон IP google-bot? — Предыдущий неподписанный комментарий добавлен 19:51, 4 мая 2006 (обсуждение) 87.1.53.187
Возможно, потому, что это слишком сильно варьируется от места к месту? — Предыдущий неподписанный комментарий добавлен 70.135.120.225 (обсуждение) 09:37, 17 июня 2006 г.
немецкая внешняя ссылка сломана
Предупреждение : GoogleBot также попытается индексировать FTP-сайты, особенно если есть HTML-ссылка на FTP-ресурс. Говорят, что в режиме FTP он будет учитывать файл "/robots.txt", но такой ресурс определен только для веб-серверов. Администраторы серверов, будьте предупреждены... 71.105.105.145 ( обсуждение ) 00:43, 28 ноября 2013 (UTC)
http://diorz.tuxfamily.org/index.php?id=ByPass%20Forum%20Signup — Предыдущий неподписанный комментарий был добавлен 217.154.102.195 ( обсуждение ) 12:39, 30 апреля 2007 (UTC).
Ведутся обсуждения на тему того, как GoogleBots обрабатывают IFrames.
Мне сказали, что IFrames вызывают ошибки в 'чтениях' Ботов, но я читал (из неопределенных источников), что Боты в порядке с IFrames. Есть ли у кого-нибудь убедительные доказательства того или иного?
CertGuard 05:27, 21 июля 2007 (UTC)
Я думаю добавить подтему Indexing Limits, в googlebot есть ли какие-либо ссылки или исследования, проведенные хорошими вебмастерами, и также я полагаю, что должна быть связь между индексацией и Google Pagerank. Если таковые имеются, пожалуйста, укажите их. Ganesh J. Acharya 06:06, 1 августа 2007 (UTC)
Мне было интересно узнать, как часто Googlebot кэширует веб-сайт и как часто он кэширует предыдущие версии. Я спрашиваю об этом, потому что нашел несколько веб-сайтов с личной информацией, кэшированной на старых версиях страницы, но самая последняя не содержит этой информации. Некоторые люди беспокоятся, что их информация будет опубликована, и любопытство заставляет меня задуматься, как часто Googlebot обновляет кэшированную страницу. Спасибо 74.195.2.98 17:41, 10 сентября 2007 (UTC)
Я просматривал сеть на старом поисковике Google.com, когда нашел странное сообщение: "Ваш IP: 66.249.73.186". Очевидно, это был не мой IP. Конечно, мне пришлось искать владельца этого IP; поэтому я использовал Network-tools.com. Отсюда я просто скопировал и вставил IP и вуаля! Я нашел IP для GoogleBot.
Следующее сообщение было представлено как весь веб-домен и поддомен (имя хоста):
IP-адрес: 66.249.73.186 Имя хоста: crawl-66-249-73-186.googlebot.com 66.249.73.186 из Соединенных Штатов (США) в регионе Северная Америка
Я выполнил трассировку WHOIS для дальнейшего расследования:
Доменное имя: GOOGLEBOT.COM Регистратор: MARKMONITOR INC. Whois-сервер: whois.markmonitor.com URL-адрес реферала: http://www.markmonitor.com Имя сервера: NS1.GOOGLE.COM Имя сервера: NS2.GOOGLE.COM Имя сервера: NS3.GOOGLE.COM Имя сервера: NS4.GOOGLE.COM Статус: клиентУдалитьЗапрещено Статус: clientTransferProhibited Статус: clientUpdateProhibited Дата обновления: 06-ноя-2006 Дата создания: 21-окт-1998 Дата истечения срока: 20-окт-2011
--Довольно странно было обнаружить на странице MarkMonitor.com «Стратегические альянсы», что там не указана компания Google.
В любом случае, я открыл этот раздел только для того, чтобы показать настоящего GoogleBot — может быть, вы найдете больше? — Предыдущий неподписанный комментарий, добавленный 68.114.11.211 ( обсуждение ) 16:07, 30 мая 2008 (UTC)
У меня уже есть современный браузер (ItaliC, а не финикийский или слоговой), он называется NoScript, на мой взгляд, это может быть Данте, Кафка или Джойс (GuimarÃEs Rosa In P:-ortuguese-br).