Обзор программы Screaming Frog SEO Spider

О чем эта статья?

Преимущества Screaming Frog SEO Spider
Недостатки парсера Screaming Frog
Принципы работы Screaming Frog SEO Spider 

Время чтения: 9 минут.

Многие SEO-оптимизаторы знакомы с небезызвестной программой XENU, предоставляющая ёмкий и удобный функционал для анализа внутренней оптимизации сайта, без ограничений на количество анализируемых страниц. Однако, существует аналог: «Screaming Frog SEO Spider», функционал которого предоставляет большие возможности, что значительно упрощает и без того трудоемкое выполнение задачи аудита сайта.

В отличие от XENU, Screaming Frog SEO Spider доступен для следующих операционных систем:

• Windows.
• OS X 10.7.3 & Later.
• OS X 10.7.2 & earlier.
• Ubuntu.

Скачать парсер вы можете на официальном сайте ScreamingFrog

Преимущества Screaming Frog SEO Spider

1. 1 Поиск битых ссылок.
2. 2 Анализ заголовков страниц и мета-данных.
3. 3 Извлечение данных с помощью Path (регулярные выражения).
4. 4 Генерация XML-файлов Sitemap.
5. 5 Поиск временных и постоянных редиректов.
6. 6 Поиск дублированного контента.
7. 7 Обзор robots.txt и его директив.
8. 8 Интеграция с Google Analytics.

Недостатки Screaming Frog

Программа является условно-бесплатной и позволяет производить анализ только 500 страниц при использовании бесплатной версии. При покупке платной версии дополнительно вы получаете:

1. 1 Неограниченный лимит на количество страниц.
2. 2 Конфигурация Crawl.
3. 3 Поиск и сохранение проанализированных данных.
4. 4 Поиск пользовательского исходного кода.
5. 5 Интеграция с Google Analytics.
6. 6 Поиск интеграции с консолью.
7. 7 Rendering (JavaScript).
8. 8 Бесплатная техническая поддержка.

Принципы работы Screaming Frog SEO Spider

При первом запуске программы Вы можете ввести адрес сайта, подлежащий анализу, в строку Enterurltospider, и дождаться окончания анализа. После окончания анализа будут представлены все данные по сайту во вкладках.

Вкладка Internal позволяет определить:

1. 1 тип контента;
2. 2 кодировку;
3. 3 код ответа и статус веб-сервера;
4. 4 описания мета-тегов, заголовков и их длины;
5. 5 предпочитаемые URL (каноничные);
6. 6 размер страницы;
7. 7 уровни вложенности;
8. 8 количество внутренних входящих ссылок;
9. 9 количество исходящих внешних ссылок.

Вкладка External позволяет определить:

1. 1 все доступные URL;
2. 2 тип содержимого URL;
3. 3 код ответа и статус сервера;
4. 4 уровни вложенности;
5. 5 количество внешних ссылок.

3. Protocol – Анализ протоколов страниц сайта

Вкладка Protocol позволяет определить: 

1. 1 тип страницы;
2. 2 кодировку;
3. 3 код ответа и статус сервера;
4. 4 длину адреса;
5. 5 каноничные адреса;
6. 6 мета-данные robots.

4. Response Codes - Анализ данных о редиректах

Вкладка Response Codes позволяет определить:

1. 1 тип страницы;
2. 2 кодировку;
3. 3 код ответа и статус сервера;
4. 4 количество внутренних ссылок;
5. 5 время, затраченное на перенаправление;

5. URL – Анализ данных по URL

Вкладка URL позволяет определить:

1. 1 тип страницы;
2. 2 кодировку;
3. 3 код ответа и статус сервера;
4. 4 HASH-значение страницы. Дубликат проверки содержимого;
5. 5 длину адреса;
6. 6 каноничные адреса.

6. PageTitles – Анализ Title-заголовков страниц

Вкладка PageTitle позволяет определить:

1. 1 вхождения – кол-во заголовков, найденных на странице;
2. 2 содержимое мета-тега title;
3. 3 длину мета-тега title.

7. Meta Description – Анализ Description-описаний страниц

Вкладка Meta Description, по аналогии с вкладкой PageTitle, позволяет определить:

1. 1 вхождения – кол-во Description, найденных на странице;
2. 2 содержимое мета-тега Description;
3. 3 длину мета-тега Description

8. Meta Keywords – Анализ Keywords-ключевых слов страниц

Вкладка Meta Keywords, по аналогии с вкладками PageTitle и Meta Description, позволяет определить:

1. 1 вхождения – кол-во Keywords, найденных на странице;
2. 2 содержимое мета-тега Keywords;
3. 3 длину мета-тега Keywords.

9. H1 – Анализ заголовков первого уровня H1

Вкладка H1 позволяет определить: 

1. 1 вхождения – кол-во h1, найденных на странице;
2. 2 содержимое h1;
3. 3 длину h1.

10. H2 – Анализ заголовков первого уровня H2

Вкладка H1, по аналогии с вкладкой H1, позволяет определить: 

1. 1 вхождения – кол-во h2, найденных на странице;
2. 2 содержимое h2;
3. 3 длину h2.

11. Images – Анализ изображений

Вкладка Images позволяет определить:

1. 1 расширение изображения;
2. 2 размер изображения;
3. 3 внутренние ссылки-изображения.

12. Directives – Анализ директив

Вкладка Directives позволяет определить:

1. 1 данные по мета-роботам (обход паука);
2. 2 каноничные URL;
3. 3 ссылки для указания связей между URL.

13. AJAX – Анализ наличия использования AJAX

Вкладка AJAX позволяет определить:

1. 1 адреса с реализацией через AJAX;
2. 2 код состояния и статус HTTP.

14. Custom – Анализ по фильтрам

Вкладка Custom позволяет определить:

1. 1 тип содержимого URL;
2. 2 код ответа и статус HTTP;
3. 3 кол-во появлений в исходном коде URL.

15. Analytics – Сопряжение с Google Analytics

Вкладка Analytics позволяет определить:

1. 1 все доступные URL;
2. 2 код статуса сервера;
3. 3 содержимое тега Title.

16. Search Console–Интеграция с поисковой консолью

Вкладка Search Console, по аналогии с вкладкой Analytics, позволяет определить:

1. 1 все доступные URL;
2. 2 код статуса сервера;
3. 3 содержимое тега Title.

17. URL Info – Информация о адресах сайта

Вкладка URL Info позволяет определить:

1. 1 все доступные URL;
2. 2 код статуса сервера;
3. 3 содержимое тега Title.

18. Inlinks – Внутренние ссылки

Вкладка Inlinks позволяет определить: 

1. 1 тип ссылки;
2. 2 откуда и куда ведет ссылка;
3. 3 анкор ссылки;
4. 4 метаданные alt;
5. 5 доступна ли ссылка для индексации.

19. Outlinks – Внешние ссылки

Вкладка Outlinks, по аналогии с вкладкой Inlinks, позволяет определить: 

1. 1 тип ссылки;
2. 2 откуда и куда ведет ссылка;
3. 3 анкор ссылки,
4. 4 мета-данные alt;
5. 5 доступна ли ссылка для индексации.

20. Image Info – Информация о изображениях

Вкладка Image Info позволяет определить: 

1. 1 все ссылки на изображения;
2. 2 мета-данные alt у изображений;
3. 3 местоположение изображения.

21. SERP Snippet – Информация о сниппете для выбранной страницы

Вкладка SERP Snippet позволяет определить: 

1. 1 как выглядит сниппет в выдаче Google;
2. 2 возможность сделать title и description под выдачу;
3. 3 цифровая информация о количестве символах, длине и т.п. title, description.

22. Overview – Расширенные данные для вкладок первого уровня

Вкладка Overview позволяет определить: 

1. 1 целочисленные и процентные значения углубленных параметров для вкладок 1-16;
2. 2 дубли;
3. 3 дополнительные характеристики для каждой вкладки.

23. Site Structure – Структура сайта

Вкладка Site Structure позволяет определить: 

1. 1 структура сайта;
2. 2 ТОП-20 URL сайта;
3. 3 номера URL;
4. 4 %, который составляет URL от всего сайта.

24. Response Times – Ответ сервера

Вкладка Response Times позволяет определить: 

1. 1 Время ответа сервера для определенных (разделенных номером) URL в секундах;
2. 2 %, который составляет URL от всего сайта.

В сравнении с XENU, помимо общего сбора данных по каждой ссылке ресурса, Screaming Frog SEO Spider показывает пользователю расположение дублей, более детальную информацию по каждому аспекту анализа, графическую интерпретацию данных и удобную систему выгрузки сгенерированных данных.