Сотрудник Google Гэри Илш пояснил, что новый сканер использует ту же инфраструктуру, что и Googlebot, и поэтому имеет те же ограничения и функции, что и Googlebot: ограничения загрузки хоста, robots.txt, версия протокола http, размер выборки. Googlebot используется для построения индекса, а GoogleOther — для других задач, ранее принадлежавших Googlebot.
Как всегда четко, спасибо