Рано или поздно каждому веб-мастеру или seo-специалисту при создании, поддержке или проведении аудита сайта приходится следить за тем, что бы не было ошибок при его сканировании. А если они и возникают, то необходимо знать причину их появления и, соответственно методы борьбы с ними.
Именно поэтому Google предоставляет услугу «Ошибки сканирования». Данная услуга в инструментах для веб-мастеров показывает смог ли Googlebot получить доступ к контенту сайта.
Тут есть много разных видов ошибок, но все их можно отнести к двум большим категориям: ошибки сайта и ошибки url адресов.
Ошибки сайта в «Инструментах для веб-мастеров»
Здесь отображаются данные за последние 90 дней. «Site errors» означает, что Google не смог получить доступ вообще ко всему сайту. И часто это происходит из-за файла robots.txt.
Когда Google не может «достучатся» до сервера сайта чтобы просканировать его содержимое, то в инструментах для веб-мастеров в «ошибках сканирования» делается соответствующая запись.
В общем, здесь отображаются самые критические ошибки, которые нужно решить настолько быстро, насколько это возможно.
Ошибки URL адресов
В данном пункте показываются проблемы со сканированием каких-то конкретных страниц сайта.
В то время как некоторые url ошибки могут быть вызваны запретами в robots.txt или ошибками сервера, все же наиболее распространенными считаются not-founderrors. Т.е. если кто-то пытается получить доступ к странице сайта, которой не существует.
При этом сайт должен отдавать код ошибки – 404 – страница не существует. Чаще всего эта проблема вызвана «сломанными» url’ами.
Иметь на своем сайте несколько таких ошибок это естественно и не нужно об этом сильно беспокоиться. (Об этом говорят сами сотрудники Гугл).
Для исправления каждой из этих ошибок нужно проделать конкретные действия. Например, для решения ошибок сервера часто приходится работать с хостинг провайдером.
Лучше всего начинать поиск неисправностей в отчете об ошибках в инструментах для веб-мастеров.
