|
На страницу Пред. 1, 2 |
|
|
| Вс Сен 24, 2017 10:26 pm |
Start Post: SiteAnalyzer - бесплатная программа для аудита сайта  |
![]()
chaser
Свой |
Зарегистрирован: 08.02.2017
Сообщений: 92
|
Обратиться по нику
|
| chaser |
Ответить с цитатой | | |
|
Уважаемые коллеги!
После долгого затишья хочу сообщить о возобновлении разработки программы Majento SiteAnalyzer, которая предназначена для анализа и аудита сайта (коды ответа сервера, наличие "битых" ссылок, ссылки на внешние ресурсы, проверка наличия title, keywords, description, заголовков h1-h6, проверка наличия дублей страниц и т.п.). Это бесплатный аналог таких программ, как Screaming Frog SEO Spider и Netpeak Spider.
Анализ производится путем сканирования всех страниц сайта (переобход сайта по ссылкам), после чего, на основе спарсенных данных, можно проводить аудит интересующих параметров.
Основные возможности
- Сканирование всех страниц сайта, а также изображений, скриптов и документов
- Получение кодов ответа сервера для каждой страницы сайта (200, 301, 302, 404, 500, 503 и т.д.)
- Определение наличия и содержимого Title, Keywords, Description, H1-H2
- Поиск и отображение "дубликатов" страниц, мета-тегов и заголовков
- Определение наличия атрибута rel="canonical" для каждой страницы сайта
- Следование директивам файла "robots.txt" либо мета-тега "robots", учет "noindex" и "nofollow" при обходе страниц сайта
- Ссылочный анализ - определение внутренних и внешних ссылок для страницы (в пределах сайта)
- Определение количества перенаправлений со страницы (редиректов)
- Определение уровня вложенности страниц относительно главной
- Генерация карты сайта "sitemap.xml" (с возможностью разбиения на несколько файлов)
- Фильтрация (выборка) данных по любому параметру
- Экспорт отчетов в CSV и Excel (полноценный отчет в Excel-формате)
Отличия от аналогов
- Низкие требования к ресурсам компьютера, малый расход оперативной памяти
- Для хранения данных используется локальная база данных, отличающаяся производительностью и надежностью
- Сканирование сайтов практически любых объемов за счет низких требований к ресурсам компьютера
- Портативный формат (работает без установки на ПК или прямо со сменного носителя)
- Бесплатное распространение
Буду рад любым замечаниям и пожеланиям по работе и развитию программы.
Страница программы: http://www.majento.ru/index.php?page=majento-site-analyzer
Скачать: majento-siteanalyzer.zip (2,5 Мб) |
|
|
|
|
|
https://site-analyzer.ru/ |
![]()
chaser
Свой |
Зарегистрирован: 08.02.2017
Сообщений: 92
|
Обратиться по нику
|
| chaser |
Ответить с цитатой | | |
|
Новая версия SiteAnalyzer 1.9
Что нового:
- добавлена возможность сканирования списка произвольных URL (используя буфер обмена или загрузку URL из файла на диске)
- добавлена возможность сканирования файлов Sitemap.xml (классический Sitemap либо индексный со списком XML-файлов)
- добавлена возможность выделения и копирования в буфер обмена значений ячеек по Ctrl+A
- ускорена операция удаления проектов (для полного удаления проектов необходимо делать сжатие базы через меню программы)
- исправлена проблема с не всегда корректным подсчетом пустых тегов H1
- исправлена проблема с не всегда корректным парсингом атрибута <title> у изображений
- исправлено зависание программы при перемещении по записям во время сканирования
Подробное описание версии: SiteAnalyzer 1.9 |
|
|
|
|
|
https://site-analyzer.ru/ |
![]()
Urtica
Свой |
Зарегистрирован: 29.12.2018
Сообщений: 5
|
Обратиться по нику
|
| Urtica |
Ответить с цитатой | | |
|
Уже есть версия SiteAnalyzer 1.9.1. Пользуюсь. Нравится.
Есть вопрос: sitemap формируется без lastmode. Может быть есть возможность изменить это в настройках? |
|
|
|
|
|
|
![]()
chaser
Свой |
Зарегистрирован: 08.02.2017
Сообщений: 92
|
Обратиться по нику
|
| chaser |
Ответить с цитатой | | |
|
| Urtica писал(а): |
Уже есть версия SiteAnalyzer 1.9.1. Пользуюсь. Нравится.
Есть вопрос: sitemap формируется без lastmode. Может быть есть возможность изменить это в настройках?
|
Спасибо, стараемся.
На данный момент такой возможности нет, однако я записал пожелание в TODO лист.
Позже реализуем. |
|
|
|
|
|
https://site-analyzer.ru/ |
![]()
Urtica
Свой |
Зарегистрирован: 29.12.2018
Сообщений: 5
|
Обратиться по нику
|
|
|
|
![]()
chaser
Свой |
Зарегистрирован: 08.02.2017
Сообщений: 92
|
Обратиться по нику
|
| chaser |
Ответить с цитатой | | |
|
| Urtica писал(а): |
Спасибо, что реагируете  Тогда ждем!
|
Ждать осталось не так долго |
|
|
|
|
|
https://site-analyzer.ru/ |
![]()
chaser
Свой |
Зарегистрирован: 08.02.2017
Сообщений: 92
|
Обратиться по нику
|
| chaser |
Ответить с цитатой | | |
|
Новая версия SiteAnalyzer 1.9.2
Что нового:
- увеличена скорость сканирования сайтов, уменьшен расход оперативной памяти
- осуществлен переход на 64-битную версию (стало доступно сканирование сайтов до 10 млн страниц)
- добавлена возможность запуска нескольких копий программы одновременно
- добавлено сохранение параметров расширенной фильтрации при переключении между табами активного проекта
- добавлено запоминание ширины колонок на вкладках
- добавлена возможность постановки на паузу сканирования списка URL, загруженных при помощи импорта
- добавлен учет параметра lastmode при формировании Sitemap
- добавлена колонка "Сервер", указывающая тип сервера, на котором размещен сайт (пример: nginx/1.16.0)
- добавлено отображение состояний <пусто> и <отсутствует> для заголовков H1-H6
- добавлена возможность сканирования определенных групп URL, без необходимости сканирования сайта целиком (вкладка "Следовать URL" в общих настройках программы)
- добавлена возможность сканирования страниц, не отдающих значение заголовка Content-type
- оптимизирован подсчет дублей H1-H6 (отменен учет пустых либо отсутствующих H1-H6)
- содержимое вкладки "Исключить URL" общих настроек программы стало общим для всех проектов
- улучшено определение кодировок страниц
- исправлено некорректное отображение страниц с редиректами 3xx
- исправлен баг, связанный с некорректным учетом правил "robots.txt"
- исправлен некорректный парсинг страниц, содержащих в URL знак плюс (+)
- исправлен учет изображений при сканировании сайта, когда в настройках разрешен парсинг только HTML (если, например, отключенные объекты отдают код ответа 404)
- исправлено подвисание, возникавшее при загрузке больших проектов
- исправлен баг, возникающий при загрузке больших проектов, когда прогресс в нижнем прогресс-баре становился больше 100%
- при расчете SEO-статистики редиректам 301 и 302 присвоен синий значок вместо оранжевого и установлен 1 балл веса вместо 3-х
Примечание: в связи с обновлением структуры базы данных необходимо заново просканировать все проекты. Как добавить проекты из старой версии в новую описано в разделе FAQ.
Подробное описание версии: SiteAnalyzer 1.9.2 |
|
|
|
|
|
https://site-analyzer.ru/ |
![]()
chaser
Свой |
Зарегистрирован: 08.02.2017
Сообщений: 92
|
Обратиться по нику
|
| chaser |
Ответить с цитатой | | |
|
Новая версия SiteAnalyzer 2.0
Что нового:
- добавлена визуализация структуры сайта на графе (аналогично Screaming Frog)
- добавлена возможность сканирования сайтов по внутренним URL, а не только по главной странице, как было ранее
- добавлена возможность сканирования локальных сайтов на Denwer или Live Server по локальным адресам
- добавлено автоматическое пересканирование страниц, если их скачивание завершается таймаутом (например, когда сайт блокирует большое количество одновременных запросов и возвращает неопределенные коды ответа)
- добавлена возможность автоматического обновления версий программы (при старте программы или через главное меню)
- добавлен счетчик оставшегося времени сканирования текущего проекта
- множество других изменений...
Подробное описание версии: SiteAnalyzer 2.0 |
|
|
|
|
|
https://site-analyzer.ru/ |
![]()
chaser
Свой |
Зарегистрирован: 08.02.2017
Сообщений: 92
|
Обратиться по нику
|
| chaser |
Ответить с цитатой | | |
|
Новая версия SiteAnalyzer 2.0.2
Что нового:
- увеличена скорость парсинга (прирост порядка 10%), повышена стабильность работы сканера
- скорость рисования узлов графа увеличена на порядок 10 раз (теперь граф с легкостью может отображать до 100 000 узлов)
- оптимизировано время финального сохранения проекта в базу (актуально для сайтов больших размеров)
- оптимизировано отображение дубликатов заголовков H1-H6 (убраны дублирующие друг друга страницы)
- добавлена возможность отключения оповещения о выходе новой версии при старте программы
- добавлена колонка с указанием числа входящих ссылок на страницу на вкладке PageRank
- добавлена возможность поворота графа и изменения масштаба на произвольную величину
- исправлено не всегда корректное определение неканонических страниц (Wrong Canonical)
- исправлена ошибка «Access violation», возникающая при удалении большого количества URL
- исправлен баг исчезновения URL, возникающий при постановке на паузу процесса сканирования проекта / списка URL
- исправлен баг, при котором в поле Быстрой фильтрации не работала кнопка Delete
- устранены незначительные ошибки в юзабилити, исправлены мелкие баги
Подробное описание версии: SiteAnalyzer 2.0.2 |
|
|
|
|
|
https://site-analyzer.ru/ |
![]()
chaser
Свой |
Зарегистрирован: 08.02.2017
Сообщений: 92
|
Обратиться по нику
|
| chaser |
Ответить с цитатой | | |
|
Новая версия SiteAnalyzer 2.1
Что нового:
- добавлена возможность экспорта всех внешних ссылок, ошибок 404 и изображений со всеми страницами, на которых они присутствуют, в одном отчете
- добавлена возможность ручной перепроверки URL, отдающих ошибку 0 (Read Timeout), в один клик через контекстное меню
- добавлена возможность скрытия и отображения определенных столбцов и табов в блоке основных данных
- для страниц с кодом ответа 0 добавлено отображения статуса "Read Timeout" либо "Blocked by Robots.txt"
- на графе визуализации добавлен режим отображения размера узлов относительно их PageRank
- добавлена дополнительная кнопка для расчета PageRank на соответствующей вкладке
- добавлена возможность перестановки и запоминания порядка столбцов на вкладках
- добавлено сохранение активной вкладки при переключении между проектами
- добавлена возможность парсинга страниц, закрытых через .htpasswd
- добавлена возможность экспорта данных вкладки Дашборд в Excel
- исправлена ошибка AV, возникающая при переходе на вкладку "SERP Snippet", если не выбран активный проект
- исправлен некорректный учет входящих и исходящих ссылок и их отображение в различных блоках программы
- исправлено некорректное отображение процентных показателей содержимого узла "Уровень вложенности"
- исправлено некорректное отображение данных узла "Content-Type" в статистике сканирования проекта
- исправлена не всегда корректная работа фильтрации данных по точному соответствию
- исправлена проблема восстановления сканирования сайтов, поставленных на паузу
- исправлено некорректное указание признака HTTP/S при экспорте отчетов в Excel
- исправлен некорректный учет канонических страниц при сканировании сайта
- исправлен некорректный учет статистики Allow и Disallow для robots.txt
- исправлен некорректный учет ALT и TITLE для изображений
- исправлен не всегда корректный расчет PageRank
- исправлено Alernate на Alternate на панели Инфо
Подробное описание версии: SiteAnalyzer 2.1 |
|
|
|
|
|
https://site-analyzer.ru/ |
![]()
chaser
Свой |
Зарегистрирован: 08.02.2017
Сообщений: 92
|
Обратиться по нику
|
| chaser |
Ответить с цитатой | | |
|
Новая версия SiteAnalyzer 2.2
Что нового:
- добавлен модуль настраиваемых фильтров для поиска контента на страницах сайта во время сканирования
- добавлен график распределения внутренних ссылок на страницах сайта
- при перетаскивании узлов графа визуализации добавлен пропорциональный перенос дочерних элементов
- при выборе узла на графе, входящие и исходящие ссылки стали окрашиваться разными цветами
- добавлена интерактивность в блок легенды графа визуализации (при клике на элементы легенды, на графе выделяются соответствующие узлы)
- добавлен учет заголовка "X-Robots Tag" при сканировании сайтов
- оптимизирован парсинг заголовков H1-H6, использующих классы
- устранено зависание программы в конце сканирования на больших проектах
- в разделе дубликатов Description исправлено некорректное отображение статистики
- исправлено некорректное отображение статистики страниц с кодом ответа 404
- для страниц, заблокированных в Robots.txt, теперь отдается код ответа 600
- параметр "Время отклика" стал рассчитываться более корректно
- исправлена не всегда корректная верстка карты сайта Sitemap.xml
- редиректы стали отображаться более корректно
- сортировка по URL стала более логичной
Подробное описание версии: SiteAnalyzer 2.2 |
|
|
|
|
|
https://site-analyzer.ru/ |
![]()
chaser
Свой |
Зарегистрирован: 08.02.2017
Сообщений: 92
|
Обратиться по нику
|
| chaser |
Ответить с цитатой | | |
|
Новая версия SiteAnalyzer 2.3
Выпустили новую версию SiteAnalyzer, в которой добавлен график отображения динамики загрузки страниц, на вкладке Custom Filters добавлен новый узел Ссылки, добавлена новая вкладка Контент, исправлено не всегда корректное отображение подзаголовков H1-H6 и многое другое.
Что нового:
- добавлен график, отображающий динамику загрузки страниц (для наглядности страницы распределены по группам и временным интервалам)
- добавлена вкладка "Контент", отображающая статистику распределения контента по числу знаков и слов на странице
- на вкладке Custom Filters добавлен новый узел "Ссылки", содержащий статистику по страницам с большим числом исходящих ссылок и малым числом входящих
- график распределения ссылок стал связан с отчетом "Мало входящих" раздела Custom Filters: теперь при клике на график можно перейти на страницы, содержащие малое число ссылок
- исправлено аварийное завершение программы при сканировании сайтов со "сложными" редиректами
- в пустой программе (без проектов) исправлена реакция кнопки Старт на изменения в поле URL
- исправлено не всегда корректное отображение подзаголовков H1-H6
- добавлена возможность генерации Sitemap для изображений
Подробное описание версии: SiteAnalyzer 2.3 |
|
|
|
|
|
https://site-analyzer.ru/ |
![]()
chaser
Свой |
Зарегистрирован: 08.02.2017
Сообщений: 92
|
Обратиться по нику
|
| chaser |
Ответить с цитатой | | |
|
Новая версия SiteAnalyzer 2.4
Выпущена новая версия SiteAnalyzer, в которой добавлен экспорт и фильтрация данных на вкладках Custom Search и Custom Filters, восстановлена возможность сканирования локальных сайтов (localhost), исправлено множество багов различной сложности.
Что нового:
- добавлен экспорт и фильтрация данных на вкладках Custom Search и Custom Filters
- в разделе Custom Filters (3xx редиректы) добавлена выгрузка конечных канонических страниц
- восстановлена возможность сканирования сайтов, размещенных на локальных серверах (localhost)
- исправлено некорректное отображение актуальной информации о дубликатах страниц сайта
- исправлено некорректное отображение alt и title для изображений
- исправлен некорректный учет внешних ссылок, когда URL исследуемого домена входит в URL внешней ссылки
- исправлен баг отображения некорректной информации при переключении между проектами
- исправлен баг избыточного отображения бесконечных редиректов
- исправлен баг зависания прогрессбара во время экспорта данных
- исправлен баг зависания процесса открытия проекта на 90% выполнения
- ускорена постановка на паузу процесса сканирования при импорте URL из файла
- исправлен не всегда корректный учет правил Robots.txt
- исправлен не всегда корректный учет данных в модуле "График распределения ссылок"
- исправлена опечатка "Content T1ype" в разделе "Статистика обхода сайта"
- на вкладке "Изображения" добавлено отображение ссылок на изображения с внешних доменов
Подробное описание версии: SiteAnalyzer 2.4 |
|
|
|
|
|
https://site-analyzer.ru/ |
|
|
