Screaming Frog SEO Spider
Screaming Frog SEO Spider — мощный инструмент для анализа сайтов, предоставляющий обширный функционал для SEO-оптимизаторов. Позволит подробно проанализировать и просканировать URL адрес, после чего отображает обилие полезной информации для технического аудита.
Возможности Screaming Frog SEO Spider
- Мощный сканер веб-сайтов, блогов и т.д;
- Отображение данных по мета тегам;
- Встроенный анализатор скриптов CSS;
- Расширяемость за счёт установки плагинов;
- Тонкая настройка парсинга для вебмастеров;
- Работа с библиотеками JavaScript Underscore;
- Удобная визуализация анализируемого контента;
- Поддерживает экспорт данных в форматы CSV, TXT, HTML, Word;
- Выгрузка содержимого нужных тегов по регулярному выражению;
- Интегрировано средство аудита входящего и исходящего трафика;
- Генерация отчётов о показателях ранжирования и индексации сайта;
- Позволяет учитывать cookies (аналогично поисковому роботу GoogleBot);
- Можно узнать тип, кодировку и уровень вложенности определённой веб-страницы;
- Помощь в выполнении перелинковки для увеличения позиций по продвигаемым запросам.
- Поддержка прокси;
- Поиск дублирующих тайтлов;
- Выставление лимита таймаутов;
- Невысокое потребление RAM и CPU;
- Защита аккаунта логином и паролем;
- Визуализация ссылочного текста;
- Полное соответствие стандартам языка разметки;
- Утилита более функциональна на фоне многих конкурентов;
- Выведение рекомендаций с директивами во всплывающем окне;
- Совместимость с операционными системами Виндовс, разрядностью x86, x64;
- Можно настроить столбцы с отображаемыми сведениями при помощи фильтров и опции сортировки;
- Дополнительные чекбоксы с типами валидации микроразметки (Schema.org, Google Validation, Case-Sensitive);
- Обнаруживает причину возникновения и помогает исключить критические ошибки (Error 404, «Нет ответа от сервера» и пр).
- Низкая скорость парсинга без покупки дополнительных прокси;
- Англоязычная локализация пользовательского интерфейса;
- Бесплатная версия может сканировать не более пяти сотен ссылок по умолчанию (дальше нужен кейген либо регистрация).
Полное описание
Скриминг Фрог работает по принципу так называемого «паука», выполняет проверку веб-ресурса и сбор информации о его содержимом. После этого, оптимизатор сможет анализировать полученные данные, проводить быстрый аудит сайта, проверять страницы на предмет критических ошибок и так далее.
Рассмотрим перечень основных опций, встроенных в софт.
- Ищет битые страницы и редиректы;
- Работает через командную строку;
- Возможность извлекать данные при помощи XPath;
- Поддерживает Proxy;
- Умеет парсить все поддомены и внутренние ссылки по расписанию;
- Выгрузка всех картинок, удаление ненужных папок;
- Можно отфильтровать каждый столбец и колонку в таблице;
- Показывает недостающие ключевые слова, необходимые для оптимизации;
- Отображение анкоров, а также документов, на которых присутствуют урлы к этим страницам;
- Позволяет найти конкретные странички с дублирующими заголовками и метатегами Description;
- Может находить изображения с отсутствующими и длинными атрибутами alt и title тега img;
- Выводит сведения по meta тэгам, которые управляют поисковыми ботами (краулерами);
- Возможность указывать размеры заголовков в символах и пикселях;
- Генерирует карту сайта в файл sitemap xml с множеством дополнительных настроек;
- Анализирует скорость и время загрузки web-страниц;
- Проверка массового перенаправления, сканер URL-адресов для переадресации;
- Настройка максимального размера страницы для обхода (в килобайтах);
- Наличие вкладки In Links, в ней можно посмотреть список страниц, которые ссылаются на указанный URL;
- Работа с конфигурациями Robots.txt (итоговый вариант будет считаться каноничным для парсера).
Представленные выше функции, являются лишь небольшой частью интегрированного инструментария. Примечательно, что программное обеспечение SF API Access поддерживает интеграцию с разными статистическими сервисами, включая Google Analytics или Majestic, благодаря чему вы сможете увидеть и просмотреть еще больше всевозможных данных и параметров.
