Скрипты и программы SiteAnalyzer - бесплатная программа для аудита и анализа сайта

[site_analyzer]

Программа SiteAnalyzer предназначена для анализа и аудита сайта (коды ответа сервера, наличие "битых" ссылок, ссылки на внешние ресурсы, проверка наличия title, мета-тегов, заголовков h1-h6, проверка наличия дублей страниц и т.п.). Это бесплатный аналог таких программ, как Screaming Frog SEO Spider и Netpeak Spider.

Анализ производится путем сканирования всех страниц сайта, после чего, на основе полученных данных, можно проводить аудит интересующих параметров.

Основные возможности

• Сканирование всех страниц сайта, а также изображений, скриптов и документов
• Получение кодов ответа сервера для каждой страницы сайта (200, 301, 302, 404, 500, 503 и т.д.)
• Определение наличия и содержимого Title, Keywords, Description, H1-H6
• Поиск и отображение "дубликатов" страниц, мета-тегов и заголовков
• Определение наличия атрибута rel="canonical" для каждой страницы сайта
• Следование директивам файла "robots.txt", мета-тега "robots", либо X-Robots-Tag
• Ссылочный анализ - определение внутренних и внешних ссылок для страницы (в пределах сайта)
• Расчет внутреннего показателя PageRank для каждой страницы сайта
• Визуализация структуры сайта на графе
• Определение количества редиректов со страницы
• Сканирование произвольных URL и внешних Sitemap.xml
• Генерация карты сайта "sitemap.xml" (с возможностью разбиения на несколько файлов)
• Фильтрация данных по любому параметру
• Экспорт отчетов в CSV, Excel и PDF-формат

Отличия от аналогов

• Низкие требования к ресурсам компьютера, малый расход оперативной памяти
• Сканирование сайтов практически любых объемов за счет низких требований к ресурсам компьютера
• Портативный формат (работает без установки на ПК или прямо со сменного носителя)
• Бесплатное распространение

Страница программы: SiteAnalyzer - программа для аудита и SEO-анализа сайтов
Страница скачивания: Скачать программу SiteAnalyzer (10 Мб)

 

[site_analyzer]

Буду рад услышать ваши замечания и предложения по развитию и работе программы.

 

[site_analyzer]

Новая версия SiteAnalyzer 2.0.2

Что нового:

• увеличена скорость парсинга (прирост порядка 10%), повышена стабильность работы сканера
• скорость рисования узлов графа увеличена на порядок 10 раз (теперь граф с легкостью может отображать до 100 000 узлов)
• оптимизировано время финального сохранения проекта в базу (актуально для сайтов больших размеров)
• оптимизировано отображение дубликатов заголовков H1-H6 (убраны дублирующие друг друга страницы)
• добавлена возможность отключения оповещения о выходе новой версии при старте программы
• добавлена колонка с указанием числа входящих ссылок на страницу на вкладке PageRank
• добавлена возможность поворота графа и изменения масштаба на произвольную величину
• исправлено не всегда корректное определение неканонических страниц (Wrong Canonical)
• исправлена ошибка «Access violation», возникающая при удалении большого количества URL
• исправлен баг исчезновения URL, возникающий при постановке на паузу процесса сканирования проекта / списка URL
• исправлен баг, при котором в поле Быстрой фильтрации не работала кнопка Delete
• устранены незначительные ошибки в юзабилити, исправлены мелкие баги

Подробное описание версии: SiteAnalyzer 2.0.2

 

[LTEBOOST]

Надежные мобильные и резидентные прокси для вашего бизнеса!
Используй купон BOOST для получения скидки!

В наличии приватные мобильные прокси из:

США, Франции, Ирландии, Молдовы, Испании, Англии, Польши, Болгарии, Литвы, Индонезии, Индии, Украины, Казахстана, Кыргызстана, Таиланда, Турции, России и тд.

А также:

⏺ Большое количество мобильных шаред прокси с разных стран
⏺ Безлимитные Резидентные прокси с ротацией по всему миру
⏺ Серверные прокси с ротацией USA, Germany и России
⏺ Мы на связи ежедневно с 11 утра до 2 ночи по Москве
⏺ У нас есть компенсация времени за простой
⏺ Более 7 лет на рынке Мобильных 4G прокси

Наш сайт: https://lteboost.com/
Телеграм канал: Lteboost.com - Мобильные и резидентные прокси

 

[site_analyzer]

Новая версия SiteAnalyzer 2.1

Что нового:

• добавлена возможность экспорта всех внешних ссылок, ошибок 404 и изображений со всеми страницами, на которых они присутствуют, в одном отчете
• добавлена возможность ручной перепроверки URL, отдающих ошибку 0 (Read Timeout), в один клик через контекстное меню
• добавлена возможность скрытия и отображения определенных столбцов и табов в блоке основных данных
• для страниц с кодом ответа 0 добавлено отображения статуса "Read Timeout" либо "Blocked by Robots.txt"
• на графе визуализации добавлен режим отображения размера узлов относительно их PageRank
• добавлена дополнительная кнопка для расчета PageRank на соответствующей вкладке
• добавлена возможность перестановки и запоминания порядка столбцов на вкладках
• добавлено сохранение активной вкладки при переключении между проектами
• добавлена возможность парсинга страниц, закрытых через .htpasswd
• добавлена возможность экспорта данных вкладки Дашборд в Excel
• исправлена ошибка AV, возникающая при переходе на вкладку "SERP Snippet", если не выбран активный проект
• исправлен некорректный учет входящих и исходящих ссылок и их отображение в различных блоках программы
• исправлено некорректное отображение процентных показателей содержимого узла "Уровень вложенности"
• исправлено некорректное отображение данных узла "Content-Type" в статистике сканирования проекта
• исправлена не всегда корректная работа фильтрации данных по точному соответствию
• исправлена проблема восстановления сканирования сайтов, поставленных на паузу
• исправлено некорректное указание признака HTTP/S при экспорте отчетов в Excel
• исправлен некорректный учет канонических страниц при сканировании сайта
• исправлен некорректный учет статистики Allow и Disallow для robots.txt
• исправлен некорректный учет ALT и TITLE для изображений
• исправлен не всегда корректный расчет PageRank
• исправлено Alernate на Alternate на панели Инфо

Подробное описание версии: SiteAnalyzer 2.1

 

[site_analyzer]

Новая версия SiteAnalyzer 2.2

Что нового:

• добавлен модуль настраиваемых фильтров для поиска контента на страницах сайта во время сканирования
• добавлен график распределения внутренних ссылок на страницах сайта
• при перетаскивании узлов графа визуализации добавлен пропорциональный перенос дочерних элементов
• при выборе узла на графе, входящие и исходящие ссылки стали окрашиваться разными цветами
• добавлена интерактивность в блок легенды графа визуализации (при клике на элементы легенды, на графе выделяются соответствующие узлы)
• добавлен учет заголовка "X-Robots Tag" при сканировании сайтов
• оптимизирован парсинг заголовков H1-H6, использующих классы
• устранено зависание программы в конце сканирования на больших проектах
• в разделе дубликатов Description исправлено некорректное отображение статистики
• исправлено некорректное отображение статистики страниц с кодом ответа 404
• для страниц, заблокированных в Robots.txt, теперь отдается код ответа 600
• параметр "Время отклика" стал рассчитываться более корректно
• исправлена не всегда корректная верстка карты сайта Sitemap.xml
• редиректы стали отображаться более корректно
• сортировка по URL стала более логичной

Подробное описание версии: SiteAnalyzer 2.2

 

[site_analyzer]

Новая версия SiteAnalyzer 2.3

Выпустили новую версию SiteAnalyzer, в которой добавлен график отображения динамики загрузки страниц, на вкладке Custom Filters добавлен новый узел Ссылки, добавлена новая вкладка Контент, исправлено не всегда корректное отображение подзаголовков H1-H6 и многое другое.

Что нового:

• добавлен график, отображающий динамику загрузки страниц (для наглядности страницы распределены по группам и временным интервалам)
• добавлена вкладка "Контент", отображающая статистику распределения контента по числу знаков и слов на странице
• на вкладке Custom Filters добавлен новый узел "Ссылки", содержащий статистику по страницам с большим числом исходящих ссылок и малым числом входящих
• график распределения ссылок стал связан с отчетом "Мало входящих" раздела Custom Filters: теперь при клике на график можно перейти на страницы, содержащие малое число ссылок
• исправлено аварийное завершение программы при сканировании сайтов со "сложными" редиректами
• в пустой программе (без проектов) исправлена реакция кнопки Старт на изменения в поле URL
• исправлено не всегда корректное отображение подзаголовков H1-H6
• добавлена возможность генерации Sitemap для изображений

Подробное описание версии: SiteAnalyzer 2.3

 

[site_analyzer]

Новая версия SiteAnalyzer 2.4

Выпущена новая версия SiteAnalyzer, в которой добавлен экспорт и фильтрация данных на вкладках Custom Search и Custom Filters, восстановлена возможность сканирования локальных сайтов (localhost), исправлено множество багов различной сложности.

Что нового:

• добавлен экспорт и фильтрация данных на вкладках Custom Search и Custom Filters
• в разделе Custom Filters (3xx редиректы) добавлена выгрузка конечных канонических страниц
• восстановлена возможность сканирования сайтов, размещенных на локальных серверах (localhost)
• исправлено некорректное отображение актуальной информации о дубликатах страниц сайта
• исправлено некорректное отображение alt и title для изображений
• исправлен некорректный учет внешних ссылок, когда URL исследуемого домена входит в URL внешней ссылки
• исправлен баг отображения некорректной информации при переключении между проектами
• исправлен баг избыточного отображения бесконечных редиректов
• исправлен баг зависания прогрессбара во время экспорта данных
• исправлен баг зависания процесса открытия проекта на 90% выполнения
• ускорена постановка на паузу процесса сканирования при импорте URL из файла
• исправлен не всегда корректный учет правил Robots.txt
• исправлен не всегда корректный учет данных в модуле "График распределения ссылок"
• исправлена опечатка "Content T1ype" в разделе "Статистика обхода сайта"
• на вкладке "Изображения" добавлено отображение ссылок на изображения с внешних доменов

Подробное описание версии: SiteAnalyzer 2.4

 

[Padre]

Добрый вечер!
Имеется ли в вашей программе возможность парсинга статей (например от 1500-2000 знаков) по ключевым запросам с определённого списка сайтов?
Чтобы введя домашнюю страницу, - ваш сервис просканировал все страницы этого сайта и выдал в результате все статьи по ключевым словам...

 

[site_analyzer]

Добрый вечер!
Имеется ли в вашей программе возможность парсинга статей (например от 1500-2000 знаков) по ключевым запросам с определённого списка сайтов?
Чтобы введя домашнюю страницу, - ваш сервис просканировал все страницы этого сайта и выдал в результате все статьи по ключевым словам...

Здравствуйте.

На данный момент подобной функции нет, но добавление ф-ии извлечения данных с сайтов (цены, отзывы, лайки и тп.) планируется в ближайших версиях.

 

[Padre]

Добрый день!
Большое количество сервисов предлагает извлечение релевантных текстов (по ключевым запросам) за деньги...
Если вы в своей программе добавите эту функцию, я первый готов буду сделать видеообзор на эту функцию, потому что понимаю, что будет спрос...!

 

[site_analyzer]

Добрый день!
Большое количество сервисов предлагает извлечение релевантных текстов (по ключевым запросам) за деньги...
Если вы в своей программе добавите эту функцию, я первый готов буду сделать видеообзор на эту функцию, потому что понимаю, что будет спрос...!

Я вас понял, как только реализуем скрейпинг в СайтАналазйере, напишите мне еще раз, рассмотрим вопрос подробнее

 

[site_analyzer]

Новая версия SiteAnalyzer 2.5

Выпустили новую версию SiteAnalyzer, в которой добавлен скрейпинг данных, добавлены функции проверки уникальности контента и скорости загрузки страниц по Google PageSpeed, исправлено множество багов различной сложности.

Что нового:

• добавлен скрейпинг данных с помощью XPath, CSS, XQuery, RegEx
• добавлена функция проверки уникальности контента внутри сайта
• добавлена проверка скорости загрузки страниц по Google PageSpeed
• добавлена возможность группировки проектов по папкам
• добавлена фильтрация списка проектов по названию
• исправлен некорректный учет исключений URL
• исправлен некорректный учет глубины сканирования сайта
• восстановлено отображение редиректов для URL, импортированных из файла
• восстановлена возможность перестановки и запоминания порядка столбцов на вкладках
• восстановлен учет неканонических страниц, решена проблема с пустыми мета-тегами
• восстановлено отображение анкоров ссылок на вкладке Инфо
• ускорен импорт большого количества URL из буфера обмена
• исправлен не всегда корректный парсинг title и description
• восстановлено отображение alt и title у изображений
• исправлено зависание при переходе на вкладку "Внешние ссылки" во время сканирования проекта
• исправлена ошибка, возникающая при переключении между проектами и обновлении узлов вкладки "Статистика обхода сайта"
• исправлено некорректное определение уровня вложенности для URL с параметрами
• исправлена сортировка данных по полю HTML-hash в главной таблице
• оптимизирована работа программы с кириллическими доменами
• обновлен интерфейс настроек программы
• обновлен дизайн логотипа

Подробное описание версии: SiteAnalyzer 2.5

 

[site_analyzer]

Новая версия SiteAnalyzer 2.7

Выпустили новую версию SiteAnalyzer, в которой добавлен личный кабинет, добавлена возможность создания брендированных отчетов, добавлен поиск узлов на графе, отчет о дублях H1-H6 заменен на H1, исправлен некорректный учет тегов Canonical.

Что нового:

• добавлен личный кабинет на сайте, а также возможность использования ключа авторизации для снятия ограничений Демо-версии
• в настройках программы добавлен раздел White Label - возможность создания брендированных отчетов
• исправлена ошибка, возникающая при сканировании сайтов, содержащих не латинские символы
• исправлено некорректное определение протокола HTTP / HTTPS на панели "Статистика SEO"
• добавлена возможность поиска узлов на графе визуализации по URL или заголовку Title
• исправлен избыточный учет яваскриптов в коде сайта при определении 301 редиректов
• фильтрация дубликатов заголовков H1-H6 панели "Статистика SEO" заменена на H1
• пункт экспорта данных в Excel добавлен в главное меню программы и меню списка проектов
• исправлено отображение некорректной кодировки сайтов при скрейпинге данных
• исправлен некорректный учет тегов Canonical

Подробное описание версии: https://site-analyzer.ru/news/version-2-7-white-label/