О чем эта статья? Преимущества Screaming Frog SEO Spider Недостатки парсера Screaming Frog Принципы работы Screaming Frog SEO Spider Время чтения: 9 минут. Многие SEO-оптимизаторы знакомы с небезызвестной программой XENU, предоставляющая ёмкий и удобный функционал для анализа внутренней оптимизации сайта, без ограничений на количество анализируемых страниц. Однако, существует аналог: «Screaming Frog SEO Spider», функционал которого предоставляет большие возможности, что значительно упрощает и без того трудоемкое выполнение задачи аудита сайта. В отличие от XENU, Screaming Frog SEO Spider доступен для следующих операционных систем: Windows. OS X 10.7.3 & Later. OS X 10.7.2 & earlier. Ubuntu. Скачать парсер вы можете на официальном сайте ScreamingFrog Преимущества Screaming Frog SEO Spider 1 Поиск битых ссылок. 2 Анализ заголовков страниц и мета-данных. 3 Извлечение данных с помощью Path (регулярные выражения). 4 Генерация XML-файлов Sitemap. 5 Поиск временных и постоянных редиректов. 6 Поиск дублированного контента. 7 Обзор robots.txt и его директив. 8 Интеграция с Google Analytics. Недостатки Screaming Frog Программа является условно-бесплатной и позволяет производить анализ только 500 страниц при использовании бесплатной версии. При покупке платной версии дополнительно вы получаете: 1 Неограниченный лимит на количество страниц. 2 Конфигурация Crawl. 3 Поиск и сохранение проанализированных данных. 4 Поиск пользовательского исходного кода. 5 Интеграция с Google Analytics. 6 Поиск интеграции с консолью. 7 Rendering (JavaScript). 8 Бесплатная техническая поддержка. Принципы работы Screaming Frog SEO Spider При первом запуске программы Вы можете ввести адрес сайта, подлежащий анализу, в строку Enterurltospider, и дождаться окончания анализа. После окончания анализа будут представлены все данные по сайту во вкладках. 1. Internal – Анализ внутренних ссылок сайта Вкладка Internal позволяет определить: 1 тип контента; 2 кодировку; 3 код ответа и статус веб-сервера; 4 описания мета-тегов, заголовков и их длины; 5 предпочитаемые URL (каноничные); 6 размер страницы; 7 уровни вложенности; 8 количество внутренних входящих ссылок; 9 количество исходящих внешних ссылок. 2. External – Анализ внешних ссылок сайта Вкладка External позволяет определить: 1 все доступные URL; 2 тип содержимого URL; 3 код ответа и статус сервера; 4 уровни вложенности; 5 количество внешних ссылок. 3. Protocol – Анализ протоколов страниц сайта Вкладка Protocol позволяет определить: 1 тип страницы; 2 кодировку; 3 код ответа и статус сервера; 4 длину адреса; 5 каноничные адреса; 6 мета-данные robots. 4. Response Codes - Анализ данных о редиректах Вкладка Response Codes позволяет определить: 1 тип страницы; 2 кодировку; 3 код ответа и статус сервера; 4 количество внутренних ссылок; 5 время, затраченное на перенаправление; 5. URL – Анализ данных по URL Вкладка URL позволяет определить: 1 тип страницы; 2 кодировку; 3 код ответа и статус сервера; 4 HASH-значение страницы. Дубликат проверки содержимого; 5 длину адреса; 6 каноничные адреса. 6. PageTitles – Анализ Title-заголовков страниц Вкладка PageTitle позволяет определить: 1 вхождения – кол-во заголовков, найденных на странице; 2 содержимое мета-тега title; 3 длину мета-тега title. 7. Meta Description – Анализ Description-описаний страниц Вкладка Meta Description, по аналогии с вкладкой PageTitle, позволяет определить: 1 вхождения – кол-во Description, найденных на странице; 2 содержимое мета-тега Description; 3 длину мета-тега Description 8. Meta Keywords – Анализ Keywords-ключевых слов страниц Вкладка Meta Keywords, по аналогии с вкладками PageTitle и Meta Description, позволяет определить: 1 вхождения – кол-во Keywords, найденных на странице; 2 содержимое мета-тега Keywords; 3 длину мета-тега Keywords. 9. H1 – Анализ заголовков первого уровня H1 Вкладка H1 позволяет определить: 1 вхождения – кол-во h1, найденных на странице; 2 содержимое h1; 3 длину h1. 10. H2 – Анализ заголовков первого уровня H2 Вкладка H1, по аналогии с вкладкой H1, позволяет определить: 1 вхождения – кол-во h2, найденных на странице; 2 содержимое h2; 3 длину h2. 11. Images – Анализ изображений Вкладка Images позволяет определить: 1 расширение изображения; 2 размер изображения; 3 внутренние ссылки-изображения. 12. Directives – Анализ директив Вкладка Directives позволяет определить: 1 данные по мета-роботам (обход паука); 2 каноничные URL; 3 ссылки для указания связей между URL. 13. AJAX – Анализ наличия использования AJAX Вкладка AJAX позволяет определить: 1 адреса с реализацией через AJAX; 2 код состояния и статус HTTP. 14. Custom – Анализ по фильтрам Вкладка Custom позволяет определить: 1 тип содержимого URL; 2 код ответа и статус HTTP; 3 кол-во появлений в исходном коде URL. 15. Analytics – Сопряжение с Google Analytics Вкладка Analytics позволяет определить: 1 все доступные URL; 2 код статуса сервера; 3 содержимое тега Title. 16. Search Console–Интеграция с поисковой консолью Вкладка Search Console, по аналогии с вкладкой Analytics, позволяет определить: 1 все доступные URL; 2 код статуса сервера; 3 содержимое тега Title. 17. URL Info – Информация о адресах сайта Вкладка URL Info позволяет определить: 1 все доступные URL; 2 код статуса сервера; 3 содержимое тега Title. 18. Inlinks – Внутренние ссылки Вкладка Inlinks позволяет определить: 1 тип ссылки; 2 откуда и куда ведет ссылка; 3 анкор ссылки; 4 метаданные alt; 5 доступна ли ссылка для индексации. 19. Outlinks – Внешние ссылки Вкладка Outlinks, по аналогии с вкладкой Inlinks, позволяет определить: 1 тип ссылки; 2 откуда и куда ведет ссылка; 3 анкор ссылки, 4 мета-данные alt; 5 доступна ли ссылка для индексации. 20. Image Info – Информация о изображениях Вкладка Image Info позволяет определить: 1 все ссылки на изображения; 2 мета-данные alt у изображений; 3 местоположение изображения. 21. SERP Snippet – Информация о сниппете для выбранной страницы Вкладка SERP Snippet позволяет определить: 1 как выглядит сниппет в выдаче Google; 2 возможность сделать title и description под выдачу; 3 цифровая информация о количестве символах, длине и т.п. title, description. 22. Overview – Расширенные данные для вкладок первого уровня Вкладка Overview позволяет определить: 1 целочисленные и процентные значения углубленных параметров для вкладок 1-16; 2 дубли; 3 дополнительные характеристики для каждой вкладки. 23. Site Structure – Структура сайта Вкладка Site Structure позволяет определить: 1 структура сайта; 2 ТОП-20 URL сайта; 3 номера URL; 4 %, который составляет URL от всего сайта. 24. Response Times – Ответ сервера Вкладка Response Times позволяет определить: 1 Время ответа сервера для определенных (разделенных номером) URL в секундах; 2 %, который составляет URL от всего сайта. В сравнении с XENU, помимо общего сбора данных по каждой ссылке ресурса, Screaming Frog SEO Spider показывает пользователю расположение дублей, более детальную информацию по каждому аспекту анализа, графическую интерпретацию данных и удобную систему выгрузки сгенерированных данных.
