Составление хорошего SEO аудита сейчас сложно представить без использования автоматических инструментов. В этом вопросе у каждого специалиста свои предпочтения. Я решил взять 3 наиболее известных инструмента и провести серию мини-тестов для того, чтобы определить лучшую программу для автоматического анализа SEO оптимизации сайта.
Выбирать будем из:
Netpeak Spider — полностью бесплатный софт от компании Netpeak.
Screaming Frog SEO Spider Tool — бесплатная версия с ограничением до 500 страниц при сканировании. Стоимость полной лицензии 99 фунтов.
Comparser — бесплатная демо-версия с ограничением при сканировании 150 страниц. Стоимость полной лицензии 2000 рублей.
Ссылки на скачивание внизу страницы.
ТЕСТ №1
Сканирование сайта услугCMS — Joomla
Контент — коммерческие посадочные страницы и статьи.
В программе Netpeak Spider нет автоматического подсчета количества дубликатов, поэтому количество дубликатов пришлось считать вручную.
В программе Netpeak Spider отсутствует отчет об исходящих ссылках.
Промежуточный итог
Лучшей скоростью сканирования отличился Screaming Frog Spider, при этом показав худшие результаты по полноте сканирования и поиску дубликатов.
Comparser — показал отличную точность, но по скорости сканирования заметно уступает аналогичным программам.
Netpeak Spider — хорошая скорость и полнота сканирования, приличная точность при поиске дубликатов. Но расстраивает нехватка функционала, к примеру, отсутствует поиск исходящих ссылок.
ТЕСТ №2
Сканирование интернет магазинаCMS — Magenta
Контент — Каталог с большим количество фильтров, две языковые версии.
Обе программы сканировали сайт более 4 часов и так и не смогли полностью просканировать все страницы сайта. Comparser дошел до третьего уровня вложенности и я решил остановить сканирование, так как на 4 уровне находилось в 20 раз больше страниц. С аналогичной проблемой столкнулся и Netpeak Spider.
При работе с большими сайтами учтите, что сканирование может занять очень много времени.
Как я написал ранее, в Netpeak Spider не предусмотрен автоматический подсчет дублей, поэтому сравнить количество найденных дублей не удалось.
Анализ функционала
Особые возможности
Стоит отметить некоторые уникальные возможности программ:
Netpeak Spider — после окончания сканирования позволяет рассчитывать веса страниц на основе внутренних ссылок. Таким образом Netpeak Spider очень полезен для анализа внутренних ссылочных связей "перелинковки".
Comparser — позволяет в автоматическом режиме проверять индексацию страниц сайта в Google и Yandex. Сравнивать страницы из индекса поисковых систем со страницами сайта. Находить неиндексируемый контент, а также страницы случайно попавшие в базы поисковых систем.
Итоги
Я уже несколько лет использовал Netpeak Spider и Screaming Frog для автоматического анализа сайта при составлении аудитов и написания рекомендаций по оптимизации сайтов. Но, к сожалению, Netpeak Spider не достает функционала. А Screaming Frog пропускает слишком много дублей. Comaparser стал моим основным инструментом для автоматического аудита и анализа индексации сайта, после ознакомления с ним и проведения тестов.
Жаль только, что в Comaparser нет функции расчета веса страниц и очень не высокая скорость сканирования.
Жаль только, что в Comaparser нет функции расчета веса страниц и очень не высокая скорость сканирования.
А какими софтом пользуетесь вы?
На счет скорости сканирования сайта, тут все зависит больше от настроек. Если брать значения по умолчанию, то они стоят не агрессивные, чтобы щадяще относиться с сканируемуму сайту. Ради теста скорости можно начать сканировать vk.com в 50 потоков без задержек. У меня получилось ComparseR'ом сосканировать 100к страниц на пару минут. И тут все упирается в мощность компа и качество интернет канала.
ОтветитьУдалитьВ общем, тут надо поиграть с настройками. Думаю, это относится к любой из этих программ, если там есть соответствующие настройки.
Ради чистоты эксперимента тестировал на стандартных настройках все программы. Уже после написания статьи подумал о смене настроек для тестирования.
УдалитьНе знаю как у Вас, но у меня Spider не может сформировать отчет, если сайт больше чем +-10 000 страниц.
ОтветитьУдалитьВы имеете ввиду XLS файл? У меня обычные отчеты в рамках программы формирует, а вот XLS файл не пробовал.
Удалитьименно XLS. до 10 000 страниц все нормально, потом выскакивает ошибка. Наблюдал во всех версиях за последний год.
УдалитьСкрытая реклама компарсера, отличное сравнение! Все программы хороши, использую в работе в основном Screming Frog и Netpeak. Плюс компарсеру, как было написано в статьей - возможность проверки проиндексированности страницы. Тоже самое может делать Netpeak Cheker, но достаточно долго.
ОтветитьУдалитьРоман, статья почти полностью состоит из результатов тестирования. Если бы Netpeak Spider показал лучшие результаты, вы бы сказали, что это скрытая реклама Netpeak Spider?
УдалитьЗнаю Артема и знаю, как человека добросовестного и толкового. И говорить о скрытой какой-то там рекламе... Мне просто смешно, Думаю у него голова соображает намного больше, чем банальная реклама в своем блоге.
УдалитьАртем, коротко, ясно и по сути, это видимо твой девиз )) Спасибо.
Артем, не задумывался ли ты публиковать разные исследования и наблюдения, которые я уверен у вас в сео 7 присутствуют, или я посягаю на святое )))))
ОтветитьУдалитьНет никаких секретов. Просто не хватает времени обо всем писать.
УдалитьИспользую все три программы и во всех очень плохо сделан функционал выгрузки битых ссылок, по одной нужно смотреть ИСТОЧНИК, если большое количество, то утомляет)) В остальном согласен Comparser + Web Site Auditor и можно увидеть сайт "насквозь")))
ОтветитьУдалитьДрузья, меня зовут Alex Wise и я являюсь руководителем компании Netpeak Software, одной из разработок которой является Netpeak Spider. Хочу выразить благодарность за сравнение функционала и тестирование всех программ: это даже нам было полезно :)
ОтветитьУдалитьХочу сказать всем пользователям Netpeak Spider, что текущая версия программы → это версия, которую мы не поддерживали с конца прошлого года и поддерживать больше не будем. Но не стоит расстраиваться, потому что для всех любителей SEO-кроулеров очень скоро в свет выйдет Netpeak Spider 2.0, который является абсолютно новой версией нашей старой программы: новый интерфейс, новая система работы и новые возможности.
После официального релиза, о котором вы, разумеется, узнаете, я обязательно попрошу автора провести своё тестирование ещё раз → Артём, будем рады получить фидбек.
До скорого!
Рад, что статья стала вам полезна. Netpeak Spider 2.0 — это отличная новость. Буду ждать релиза, и конечно готов сделать новую статью-сравнение.
УдалитьАртём, я обещал вам отдельно сказать, когда мы запустимся. Наконец, это случилось: читайте наш пресс-релиз → http://blog.netpeak.ua/netpeak-spider-i-netpeak-checker-novoe-pokolenie-lyubimyh-seo-instrumentov/
УдалитьСразу скажу, что теперь не будет распространяться на бесплатной основе, но зато она наконец обрела свою отдельную команду разработки, тестирования и поддержки и готова к новым свершениям: смотрите сравнительную характеристику старой и новой версии программы → http://blog.netpeak.ua/netpeak-spider-i-netpeak-checker-novoe-pokolenie-lyubimyh-seo-instrumentov/#netpeak_spider_1_x_vs_2_0
Спасибо за напоминание, пресс релиз уже прочитал думаю на праздниках сделать обзор.
УдалитьXenu забыли. Единственная программа, которая показывает страницы с битыми ссылками.
ОтветитьУдалитьИ есть еще бесплатная версия Page Weight.
Xenu конечно да. Но похожий функционал есть во всех этих трех программах. Да и кроме битых ссылок функционал у нее не большой.
УдалитьКак это Xenu - единственные, кто показывают битые ссылки? Вы в каком измерении живёте? Netpeak Spider уже кучу лет показывает битые ссылки.
УдалитьОчень дельные рекомендации. Перепробовала кучу сайтов, причем искала их методом тыка: через поисковик. У большинства недостатки перевешивали достоинства. Пока остановлюсь на Netpeak Spider, так как в бюджете полная дыра.
ОтветитьУдалитьСпасибо за статью! очень полезная инфа, я бы хотела узнать будет ли сравнительная х-ка с Netpeak Spider 2.0?
ОтветитьУдалитьДумаю да, когда он станет доступен.
УдалитьУже доступен не только Netpeak Spider 2.0, а даже Netpeak Spider 2.1 → видели уже обзор на Блоге Netpeak http://blog.netpeak.ru/obzor-netpeak-spider-2-1-klassifikatsiya-oshibok-vybor-parametrov-novaya-logika-raboty-s-rezultatami/
УдалитьА скидку 50% нашли? :)
А в последней версии Netpeak Spider уже доработан функционал? По тесту видно, что он сканирует быстрее других. Хотелось бы использовать его для анализа внутренних ссылочных связей.
ОтветитьУдалитьНе проводил еще сравнительно анализа с новой версией. Думаю сделать в ближайшие месяцы.
УдалитьКоллеги, в последних версиях функционал намного серьёзней, чем описывается в этой статье – мы уже с Артёмом по этому поводу говорили.)
УдалитьА недавно мы вообще выкатили расчёт внутреннего PageRank – это уникальная по своей реализации фича, которая поможет решить ряд очень важных вопросов:
1. Понимать, как именно распределяется ссылочный вес по сайту и где он концентрируется.
2. Определять, какие неважные для поискового продвижения страницы получают избыточный вес.
3. Знать, какие страницы являются «висячими узлами» и просто-напросто «сжигают» входящий ссылочный вес.
Читайте подробнее здесь → https://netpeaksoftware.com/community/announcement/netpeak-spider-2-1-1-2-%D1%80%D0%B0%D1%81%D1%87%D1%91%D1%82-%D0%B2%D0%BD%D1%83%D1%82%D1%80%D0%B5%D0%BD%D0%BD%D0%B5%D0%B3%D0%BE-pagerank
Артём, с вас обзор :)
Да похоже не отвертеться)
УдалитьКогда будет версия на Mac os?
ОтветитьУдалитьЕсли вы о Netpeak Spider спрашиваете, то её запуск планируется на начало 2017 года: январь-февраль.
УдалитьNetpeak Checker будет немного позже.
Хорошая статья, спасибо, хотя и не совсем актуальная. Возможности Netpeak Spider за это время заметно расширились. Было бы интересно прочесть новый обзор)
ОтветитьУдалитьЯ бы даже сказал, что с сентября 2015 года возможности программы не просто "расширились", а глобальное изменились :) Из старой версии (1.xx) остались лишь 2 вещи:
Удалить1. Название программы.
2. Основная функция – сканирование страниц.
Артём обещал новый обзор, я тоже жду :)
Было бы интересно почитать новый обзор, учитывая что Spider стал платным, и где программы сравнивались бы по показателям цены/качества.
ОтветитьУдалитьДа, полезный обзор был бы! Скорее всего, мы его сами будем инициировать после выхода Netpeak Spider 3.0, который планируется на начало 2018 года. Буду очень рад, если Артём согласится его оформить ;)
Удалить>>Netpeak Spider — полностью бесплатный софт от компании Netpeak.
ОтветитьУдалитьГде бесплатный? платный и цена очень завышена
1. Статья писалась ещё в 2015 году, когда продукт действительно был бесплатным — теперь же программа очень изменилась и перешла на формат подписки.
ОтветитьУдалить2. Насчёт завышенности цены — если уметь использовать продукт в работе (а именно для работы он создан, а не для развлечений), то окупить $15-20 в месяц, полагаю, можно.
https://seoappseo.000webhostapp.com
ОтветитьУдалитьSEO + основная аналитика
Hello, this is a nicely explained article. Your piece was very informative. I had never heard the issue presented in that light. Thanks for your hard work.
ОтветитьУдалитьcreative agency in selangor
website design company selangor
graphic design company
That's interesting, you have done a great job. Thanks for sharing.
ОтветитьУдалитьmalaysia ndt
hardness testing malaysia
eddy current testing malaysia
Appreciating the persistence you put into your blog and the detailed information you provide. Keep up the good work.
ОтветитьУдалитьplastic packaging malaysia
cookies packaging malaysia
chocolate packaging malaysia
Thanks for this post. I really enjoy your point of view on this topic. Hope you are doing well.
ОтветитьУдалитьenergy efficiency malaysia
large scale solar malaysia
building management malaysia
Great post. Looking forward to reading more. Thanks for taking the time to write this.
ОтветитьУдалитьdisaster recovery services
managed cloud disaster recovery service malaysia
enterprise data recovery service
Good content, hope you well and keep it up.
ОтветитьУдалитьwater treatment company malaysia
water pollution malaysia
water treatment malaysia
There is so many nice article to read
ОтветитьУдалить1.jollibee
2. kfc menu ,
3.branding agency kl
Nice article you shared. Thanks for sharing.
ОтветитьУдалитьhttps://www.prestarstoragesystem.com/racking-solutions/" rel="nofollow"> racking system manufacturer malaysia
https://www.prestarstoragesystem.com/industrial-racking-101/
industrial racking
https://www.primus.com.my/trademark-registration-malaysia/
trademark registration malaysia
Good articles should be shared more often.
ОтветитьУдалитьfire extinguisher supplier malaysia, fire alarm system malaysia, and fire fighting system malaysia
Thanks for sharing the info. Didn’t know about it until I read your article
ОтветитьУдалитьoffshore platform installation, offshore transportation, subsea pipeline inspection, and hook up and commissioning,