Google представил новый инструмент в сервисе Google Webmaster Tools, он будет располагаться в разделе «Просмотреть как Googlebot». Благодаря этой опции веб-мастера смогут узнать, как Googlebot видит страницы сайтов, содержащие изображения, CSS- и JavaScript-файлы.

Чтобы увидеть страницу с CSS или JavaScript «глазами» Googlebot, нужно ввести ее URL в соответствующее поле инструмента в разделе «Сканирование» в Google Webmaster Tools, а затем кликнуть по ссылке «Fetch» или «Fetch and render».

Через некоторое время веб-мастер сможет увидеть страницу.

Googlebot следует директивам robots.txt для всех файлов. Если вы закрываете эти файлы от индексирования (или на вашей странице находятся данные со сторонних ресурсов, закрытые от индексации), Google не сможет показать вам, как страница будет показана в выдаче. Аналогичная ситуация произойдет, если сервер не отвечает или отдает ошибки. В подобных случаях стоит проверить страницу на наличие ошибок сканирования.