SiteAnalyzer - бесплатная программа для аудита и анализа сайта

Всем привет!

Представляю вашему вниманию программу SiteAnalyzer, предназначенную для технического аудита сайта (коды ответа сервера, наличие "битых" ссылок, ссылки на внешние ресурсы, проверка наличия title, мета-тегов, заголовков h1-h6, проверка наличия дублей страниц и т.п.). Это бесплатный аналог таких программ, как Screaming Frog SEO Spider и Netpeak Spider.

Анализ производится путем сканирования всех страниц сайта, после чего, на основе полученных данных, можно проводить аудит интересующих параметров.

https://site-analyzer.ru/images/scre...yzer-1-big.png

https://site-analyzer.ru/images/scre...yzer-9-big.png

https://site-analyzer.ru/images/scre...zer-91-big.png

Основные возможности

• Сканирование всех страниц сайта, а также изображений, скриптов и документов
• Получение кодов ответа сервера для каждой страницы сайта (200, 301, 302, 404, 500, 503 и т.д.)
• Определение наличия и содержимого Title, Keywords, Description, H1-H6
• Поиск и отображение "дубликатов" страниц, мета-тегов и заголовков
• Определение наличия атрибута rel="canonical" для каждой страницы сайта
• Следование директивам файла "robots.txt", мета-тега "robots", либо X-Robots-Tag
• Ссылочный анализ - определение внутренних и внешних ссылок для страницы (в пределах сайта)
• Расчет внутреннего показателя PageRank для каждой страницы сайта
• Визуализация структуры сайта на графе
• Определение количества редиректов
• Сканирование произвольных URL и внешних Sitemap.xml
• Генерация карты сайта "sitemap.xml" (с возможностью разбиения на несколько файлов)
• Фильтрация данных по любому параметру
• Экспорт отчетов в CSV, Excel и PDF-формат

Отличия от аналогов

• Низкие требования к ресурсам компьютера, малый расход оперативной памяти
• Портативный формат (работает без установки на ПК или прямо со сменного носителя)
• Бесплатное распространение
  

Сайт программы: https://site-analyzer.ru/

ПС. Буду рад услышать ваши замечания и предложения по развитию и работе программы.

Новая версия SiteAnalyzer 2.3

Выпустили новую версию SiteAnalyzer, в которой добавлен график отображения динамики загрузки страниц, на вкладке Custom Filters добавлен новый узел Ссылки, добавлена новая вкладка Контент, исправлено не всегда корректное отображение подзаголовков H1-H6 и многое другое.

https://site-analyzer.ru/pages/news/...page-speed.png

https://site-analyzer.ru/pages/news/...ontent-tab.png

https://site-analyzer.ru/pages/news/...links-node.png

Что нового:

• добавлен график, отображающий динамику загрузки страниц (для наглядности страницы распределены по группам и временным интервалам)
• добавлена вкладка "Контент", отображающая статистику распределения контента по числу знаков и слов на странице
• на вкладке Custom Filters добавлен новый узел "Ссылки", содержащий статистику по страницам с большим числом исходящих ссылок и малым числом входящих
• график распределения ссылок стал связан с отчетом "Мало входящих" раздела Custom Filters: теперь при клике на график можно перейти на страницы, содержащие малое число ссылок
• исправлено аварийное завершение программы при сканировании сайтов со "сложными" редиректами
• в пустой программе (без проектов) исправлена реакция кнопки Старт на изменения в поле URL
• исправлено не всегда корректное отображение подзаголовков H1-H6
• добавлена возможность генерации Sitemap для изображений

Подробное описание версии: SiteAnalyzer 2.3

Новая версия SiteAnalyzer 2.4

Выпущена новая версия SiteAnalyzer, в которой добавлен экспорт и фильтрация данных на вкладках Custom Search и Custom Filters, восстановлена возможность сканирования локальных сайтов (localhost), исправлено множество багов различной сложности.

https://site-analyzer.ru/pages/news/...ersion-2-4.png

Что нового:

• добавлен экспорт и фильтрация данных на вкладках Custom Search и Custom Filters
• в разделе Custom Filters (3xx редиректы) добавлена выгрузка конечных канонических страниц
• восстановлена возможность сканирования сайтов, размещенных на локальных серверах (localhost)
• исправлено некорректное отображение актуальной информации о дубликатах страниц сайта
• исправлено некорректное отображение alt и title для изображений
• исправлен некорректный учет внешних ссылок, когда URL исследуемого домена входит в URL внешней ссылки
• исправлен баг отображения некорректной информации при переключении между проектами
• исправлен баг избыточного отображения бесконечных редиректов
• исправлен баг зависания прогрессбара во время экспорта данных
• исправлен баг зависания процесса открытия проекта на 90% выполнения
• ускорена постановка на паузу процесса сканирования при импорте URL из файла
• исправлен не всегда корректный учет правил Robots.txt
• исправлен не всегда корректный учет данных в модуле "График распределения ссылок"
• исправлена опечатка "Content T1ype" в разделе "Статистика обхода сайта"
• на вкладке "Изображения" добавлено отображение ссылок на изображения с внешних доменов

Подробное описание версии: SiteAnalyzer 2.4

Новая версия SiteAnalyzer 2.5

Выпустили новую версию SiteAnalyzer, в которой добавлен скрейпинг данных, добавлены функции проверки уникальности контента и скорости загрузки страниц по Google PageSpeed, исправлено множество багов различной сложности.

https://site-analyzer.ru/pages/news/...ersion-2-5.png

https://site-analyzer.ru/pages/news/...g-settings.png

https://site-analyzer.ru/pages/news/...2-5/unique.png

https://site-analyzer.ru/pages/news/...on-2-5/gps.png

Что нового:

• добавлен скрейпинг данных с помощью XPath, CSS, XQuery, RegEx
• добавлена функция проверки уникальности контента внутри сайта
• добавлена проверка скорости загрузки страниц по Google PageSpeed
• добавлена возможность группировки проектов по папкам
• добавлена фильтрация списка проектов по названию
• исправлен некорректный учет исключений URL
• исправлен некорректный учет глубины сканирования сайта
• восстановлено отображение редиректов для URL, импортированных из файла
• восстановлена возможность перестановки и запоминания порядка столбцов на вкладках
• восстановлен учет неканонических страниц, решена проблема с пустыми мета-тегами
• восстановлено отображение анкоров ссылок на вкладке Инфо
• ускорен импорт большого количества URL из буфера обмена
• исправлен не всегда корректный парсинг title и description
• восстановлено отображение alt и title у изображений
• исправлено зависание при переходе на вкладку "Внешние ссылки" во время сканирования проекта
• исправлена ошибка, возникающая при переключении между проектами и обновлении узлов вкладки "Статистика обхода сайта"
• исправлено некорректное определение уровня вложенности для URL с параметрами
• исправлена сортировка данных по полю HTML-hash в главной таблице
• оптимизирована работа программы с кириллическими доменами
• обновлен интерфейс настроек программы
• обновлен дизайн логотипа

Подробное описание версии: SiteAnalyzer 2.5

Для тех, кто активно использует в работе смартфон, была создана небольшая коллекция бесплатных ботов Telegram, которая пригодится, как минимум, каждому SEOшнику в продвижении проектов, SEO-аналитике и маркетинге.

https://majento.ru/images/raznoe/telegram_bots_2.png

Список доступных инструментов:
- проверка возраста домена
- тренды в Google Trends
- статистика LiveInternet
- проверка ответа сервера
- проверка Яндекс ИКС
- проверка позиций в Яндексе и Google
- поиск поддоменов сайта и сайтов на одном IP
- проверка геозависимости и коммерческости запроса
- CMS-чекер
- семантический анализ текста

Ссылка на бота: @SEOTools_All_bot

Рассмотрим любые пожелания и идеи по расширению списка инструментов.

Новая версия SiteAnalyzer 2.6

Выпустили новую версию SiteAnalyzer, в которой добавлена возможность указания произвольных HTTP-заголовков, добавлена возможность использования виртуального robots.txt, исправлено множество багов различной сложности.

https://site-analyzer.ru/pages/news/...ersion-2-6.png

https://site-analyzer.ru/images/scre...tp-headers.png

https://site-analyzer.ru/images/scre...irt-robots.png

https://site-analyzer.ru/pages/news/...url-unique.png

Что нового:

• добавлена возможность указания произвольных HTTP-заголовков при обращении к серверу
• добавлена возможность использования виртуального robots.txt вместо реального (размещенного в корне сайта)
• на вкладке проверки уникальности контента добавлено окно отображения списка страниц, наиболее близких по уникальности к выбранному URL
• добавлена возможность отмены процедуры тестирования работоспособности списка прокси в любой момент во время теста
• пересканирование произвольных URL проекта теперь происходит в несколько потоков, исходя из настроек программы
• в раздел настроек Яндекс XML добавлен сервис SERPRiver для проверки индексации страниц в Яндексе
• восстановлена работа функции Custom Search, предназначенной для поиска контента на сайте
• в списке проектов добавлено отображение даты последнего сканирования проекта
• добавлена возможность перетаскивания по папкам нескольких проектов мышью, а также используя контекстное меню
• добавлены дополнительные кнопки для проверки Google PageSpeed и уникальности контента на соответствующих вкладках
• добавлена возможность открытия в браузере файла robots.txt для интересующего сайта
• добавлена возможность открытия выбранного URL на сайте Web.Archive.org
• добавлена колонка "Источник" на вкладке "Изображения"
• оптимизирован учет правил исключенных URL при сканировании сайтов, добавлено использование регулярных выражений RegEx
• оптимизирован и улучшен учет настроек правил robots.txt
• исправлена ошибка, возникающая при разборе некорректно заданных правил в robots.txt
• исправлен некорректный учет поддоменов при включенной галке "Учитывать поддомены"
• исправлена некорректная кодировка при загрузке HTML-кода страниц в форме тестирования извлечения данных
• исправлена некорректная сортировка вкладки "ТОП доменов", а также других фильтров панели "Custom Filters"
• исправлен баг, возникающий при вводе в фильтр проектов адресов сайтов, не присутствующих в списке
• исправлено отображение некорректной кодировки для сайтов, использующих кодировку Windows-1251
• исправлена некорректная фильтрация данных при переключении обычных вкладок и Custom-фильтров
• исправлена ошибка, возникающая при сканировании большого числа сайтов в списке проектов
• восстановлено отображение подробной расшифровки данных, полученных от Google PageSpeed
• восстановлено отображение статистики ошибок для заголовков Title, Description и H1
• в разделе Custom-фильтров скрыто отображение избыточного контекстного меню
• оптимизировано добавление большого числа URL в список проектов
• исправлено некорректное определение уровня вложенности URL
• ускорено удаление URL в проектах

Подробное описание версии: https://site-analyzer.ru/news/version-2-6/

Новая версия SiteAnalyzer 2.7

Выпустили новую версию SiteAnalyzer, в которой добавлен личный кабинет, добавлена возможность создания брендированных отчетов, добавлен поиск узлов на графе, отчет о дублях H1-H6 заменен на H1, исправлен некорректный учет тегов Canonical.

https://site-analyzer.ru/pages/news/...bel-header.png

https://site-analyzer.ru/pages/news/...l-settings.png

https://site-analyzer.ru/pages/news/...h-on-graph.png

https://site-analyzer.ru/pages/news/...-2-7/h1-h6.png

Что нового:

• добавлен личный кабинет на сайте, а также возможность использования ключа авторизации для снятия ограничений Демо-версии
• в настройках программы добавлен раздел White Label - возможность создания брендированных отчетов
• исправлена ошибка, возникающая при сканировании сайтов, содержащих не латинские символы
• исправлено некорректное определение протокола HTTP / HTTPS на панели "Статистика SEO"
• добавлена возможность поиска узлов на графе визуализации по URL или заголовку Title
• исправлен избыточный учет яваскриптов в коде сайта при определении 301 редиректов
• фильтрация дубликатов заголовков H1-H6 панели "Статистика SEO" заменена на H1
• пункт экспорта данных в Excel добавлен в главное меню программы и меню списка проектов
• исправлено отображение некорректной кодировки сайтов при скрейпинге данных
• исправлен некорректный учет тегов Canonical

Подробное описание версии: https://site-analyzer.ru/news/version-2-7-white-label/

Новая версия SiteAnalyzer 2.8

Выпустили новую версию SiteAnalyzer, в которой добавлены 6 модулей анализа доменов, добавлено управление файлами cookie, появилась возможность экспорта выбранных проектов в Excel, исправлена не всегда удачная регистрация программы.

https://site-analyzer.ru/pages/news/...ersion-2-8.png

https://site-analyzer.ru/pages/news/...ools-whois.png

https://site-analyzer.ru/pages/news/...subdomains.png

https://site-analyzer.ru/pages/news/...s-keywords.png

Что нового:

• добавлены модули анализа доменов - набор из 6 модулей для анализа WHOIS, CMS-чекер, поиск поддоменов, анализ плотности ключей и т.п.
• добавлена возможность использования файлов cookie, а также экспорт всех сведений о файлах cookie в текстовый файл
• учет правил «Следовать URL» и «Исключить URL» основных настроек программы стал общим для всех проектов
• в списке проектов добавлена возможность экспорта выбранных проектов в Excel
• добавлена кнопка, вызывающая меню экспорта данных на панели Инфо
• добавлена возможность пересканирования 3xx редиректов
• исправлен баг в дашборде, возникавший при переключении между проектами, когда основные показатели качества сайта суммировались
• исправлен баг при экспорте проекта, когда в проекте открыта вкладка с отсутствующими данными, в этом случае экспорт был недоступен
• оптимизирован алгоритм генерации Sitemap для изображений (теперь изображения генерируются относительно рекомендаций Google)
• исправлен избыточный учет содержимого тегов ALT для файлов типа favicon (игнорирование ALT для файлов в блоке HEAD)
• исправлена проблема не всегда корректной передачи заголовков к серверу при сканировании сайта
• оптимизирован экспорт в Excel полей, которые видны у пользователя, а не всех имеющихся
• исправлено некорректное определение внешних редиректов (определялись как внутренние)
• исправлена ошибка соединения с сервером, возникающая при проверке обновлений версии
• исправлена некорректная работа с доменами, содержащими в названии WWW
• исправлен не всегда корректный парсинг тегов ALT и TILE для изображений
• исправлен не всегда корректный учет дубликатов тегов H1 и Description
• исправлена не всегда удачная регистрация программы

Подробное описание версии: https://site-analyzer.ru/news/versio...omain-analyze/

Новая версия SiteAnalyzer 2.8.1

Выпустили новую версию SiteAnalyzer, в которой добавлена прокрутка при выделении ячеек мышью, исправлены баги вкладки Дашборд, подключенные прокси теперь работают глобально во всей программе.

https://site-analyzer.ru/pages/news/...sion-2-8-1.png

Что нового:

• теперь подключенные прокси работают при проверке обновлений, регистрации программы и на форме тестирования правил извлечения данных
• добавлена возможность открытия выбранного URL на сайте Web.Archive.org во входящих и исходящих ссылках панели «Инфо», а также на вкладке «Custom filters»
• добавлена прокрутка при выделении ячеек мышью, а также исправлено копирование данных из ячеек через выделение Shift плюс PgUP/PgDown
• исправлен баг, возникающий при экспорте данных вкладки Дашборд в *.PDF, когда оценка оптимизации сайта бралась из другого проекта
• исправлен баг, при котором в форме тестирования правил извлечения данных не всегда загружался исходный код страницы по URL
• исправлен баг, возникающий на вкладке Дашборд, когда не обновлялись данные после пересканировании страниц проекта
• исправлен баг, при котором содержимое выделенных ячеек всего в одной строке не копировалось в буфер обмена
• исправлен баг, при котором не всегда корректно определялось содержимое тега H2
• при генерации Sitemap для изображений добавлен корректный XML-заголовок

Подробное описание версии: https://site-analyzer.ru/version-history/

P.S. Для работы в полнофункциональной версии необходимо будет заново ввести регистрационный ключ.

Новая версия SiteAnalyzer 2.9

Выпустили новую версию SiteAnalyzer, в которой добавлена возможность импорта списка URL в проект, появилась возможность создания дубликатов проектов, добавлен экспорт структуры сайта в MindMap.

https://site-analyzer.ru/pages/news/...ersion-2-9.png

https://site-analyzer.ru/pages/news/...import-url.png

https://site-analyzer.ru/pages/news/...op-anchors.png

https://site-analyzer.ru/pages/news/...-anchors-2.png

Что нового:

• добавлена возможность импорта URL в активный проект через буфер обмена, текстовый файл или Sitemap.xml
• добавлен фильтр по ТОПу анкоров на панели «Custom Filters», а также график плотности ключевых слов
• добавлена возможность экспорта структуры сайта в формат ментальных карт MindMap
• добавлена возможность добавления дублей проектов (дубликаты сайтов по разным URL)
• добавлена новый фильтр, содержащий «циклические» ссылки (ссылки со страницы на саму себя)
• в разделе настроек «Прокси» добавлено указание времени ответа для каждого прокси
• добавлена возможность проверки индексации страниц для произвольно импортированного списка URL
• добавлена возможность указания произвольных названий к HTTP заголовкам
• исправлен баг с пустыми анкорами ссылок и текстами ALT изображений на панели «Инфо»
• исправлено некорректное извлечение данных для произвольно импортированного списка URL
• добавлен экспорт произвольно импортированного списка URL в режиме «проекта», а также парсинг вкладки H1-H6
• теперь настройки разделов «Юзер-агент», «Исключения URL» и «Следование URL» сохраняются отдельно для каждого проекта
• в лог программы добавлено информирование, если сайт запрещен к индексации через мета-тег «Robots» или через HTTP-заголовок «X-Robots-Tag»
• исправлен баг с редиректами, когда при сканировании страниц, отвечающих кодом 3xx, в столбце «Адрес перенаправления» было пусто
• модуль обновления программы теперь встроен в саму программу, за счет чего размер дистрибутива уменьшился на 2 Мб
• теперь при возобновлении проекта из паузы % прогресса считается со значения на момент паузы, а не с 0%
• восстановлена работа фильтра по страницам-сиротам (Orphan Pages, страницы без внешних ссылок)
• исправлен баг «Access Violation», возникающий после удаления только что созданного проекта
• исправлен баг, когда при экспорте кастом отчета в Excel дублировалась последняя строка
• исправлено множество незначительных ошибок

Подробное описание версии: https://site-analyzer.ru/news/version-2-9/