Огляд програми Screaming Frog SEO Spider - інструкція по роботі

У статті мова піде про вже не нової і непогано зарекомендувала себе програмі, Що дозволяє проводити якісний багатосторонній аудит сайту. Незважаючи на популярність на заході, далеко не всі seo-фахівці і тим більше власники сайтів знають, як користуватися Screaming Frog SEO Spider і на які питання вона дає відповіді. Ми вирішили заповнити цю прогалину і опублікувати невелику інструкцію до SEO Frog Screaming і розповісти, як з нею працювати.

зміст:

Отримати безкоштовну консультацію від фахівця з вашого проекту

Загальна інформація про програму Screaming Frog

Сервіс для аудиту сайту Скримінг Фрог розповість практично все про ресурс, Плюс до цього, допомагає в роботі, наприклад, може згенерувати файл Sitemap. Програма була створена британським програмістом, протягом декількох років займався SEO-оптимізацією сайтів. Можливо, саме завдяки великому досвіду SEO-фахівця, вдалося створити такий цілісний і корисний продукт.

Screaming Frog встановлюється на комп'ютер і аналізує ресурси, використовуючи власний сервер користувача. Залежно від ваших уподобань можна вибрати обмежену безкоштовну версію, Яка дозволяє проаналізувати до 500 сторінок сайту, або повноцінну платну версію.

Крім обмеження кількості сканованих сторінок сайту, безкоштовна версія Скримінг Фрог відрізняється набором доступних функцій. Її можна використовувати в якості тесту програми, але для повноцінного аудиту сайту краще все ж придбати річну ліцензію. З огляду на, що від більшості сервісів для аналізу, якими доводилося користуватися раніше і які не володіють таким широким функціоналом, можна відмовитися, в результаті ви ще заощадите.

Програма має тільки англомовну версію, але тут все дуже просто і зрозуміло, тому розібратися з інструментами сервісу буде нескладно.

Початок роботи в Screaming Frog SEO Spider: інструкція щодо заповнення даних

Власне, тут все просто. Щоб додати сайт для запуску збору даних, необхідно ввести адресу сайту в спеціально відведене для цього поле і натиснути на кнопку Start. Програма автоматично довантажить всю інформацію і розкласти її по поличках, тобто по вкладках, для зручного вивчення.

Якщо потрібно просканувати окремі папки / сторінки сайту, то в меню програми Screaming Frog необхідно перейти на вкладку Configurations > Include і перерахувати їх.

І навпаки, якщо потрібно виключити певні розділи при формуванні даних для аналізу ресурсу, переходимо в розділ Configurations > Exclude. Тут Ви можете вказати конкретні URL, виключити папки, сторінки і файли, які містять певні слова або символи.

розглянемо ще кілька базових налаштувань парсингу в програмі Screaming Frog SEO Spider:

Якщо ви хочете прискорити процес парсинга сайту або просто немає необхідності аналізувати певні типи файлів, в розділі Configurations > Spider > Crawl можете виключити їх.
Аналогічно, якщо потрібно проаналізувати тільки певні параметри сторінок, наприклад, Title, Description і H1, то у вкладці Extraction можна включити їх, а непотрібне - виключити.
У вкладці Limit в налаштуванні Limit Crawl Depth можна вказати обмеження по глибині парсинга в залежності від рівня вкладеності сторінок.
Щоб парсер програми Screaming Frog аналізував інформацію також, як і роботи пошукових систем, у вкладці Advanced встановіть галочки навпроти полів Respect Noindex і Respect NoFollow. До того ж це скоротить час аналізу ресурсу.
У вкладці Preferences ви можете вказати бажані параметри для Title, Description і інших сканованих елементів.
Якщо сайт поки закритий від індексації, щоб краулер програми Скрімінг Фрог міг провести аналіз, необхідно у вкладці Configurations > Robots.txt > Settings вибрати опцію « Ignore robots.txt ».

Тепер давайте познайомимося з основним функціоналом Screaming Frog і дізнаємося, як можна користуватися представленою сервісом інформацією.

Базові функції Screaming Frog SEO Spider

Головні інструменти аналізу сайту розкладені по розділах сервісу, представленими окремими вкладками. За ним і пройдемося.

вкладка Internal

тут представлена інформація про внутрішні посилання ресурсу. Залежно від налаштувань дані по сторінках можна впорядкувати за алфавітом або в порядку черговості відповідно до вкладеністю сторінок, починаючи від головної сторінки сайту.

Щоб вивчити детальну інформацію про кожній сторінці, необхідно клікнути по її адресою в результатах аналізу. Тут будуть представлені дані про вагу сторінки, коді відповіді сервера, кількості слів, графічних об'єктах, заголовках, мета-тегах, сніппете, Посиланнях – внутрішніх і зовнішніх, а також інша інформація, яка допоможе оцінити, чи всі дані на місці і чи не потрібно їх скорегувати.

вкладка External

Знайомить з інформацією про зовнішні посиланнях. Дані цієї вкладки дозволяють проаналізувати посилання, які направляють з власного ресурсу на сторонній сайт. Тут же є інформація про кодування, типах посилань, місці розташування сторінки, що містять зовнішні посилання і інші дані.

Якщо у основного домену є піддомени і вони не враховані в настройках, то посилання на них Screaming Frog буде сприймати як зовнішні. Щоб такого не сталося, рекомендуємо в меню Configuration заздалегідь відзначити пункт Crawl All Subdomains. В цьому випадку система буде враховувати піддоменти як частина основного ресурсу.

вкладка Protocol

Тут ви зможете побачити окремо сторінки з протоколом http і https. якщо сайт знаходиться на https, А аналіз програми Screaming Frog показав сторінки з http, перевірте їх код відповіді сервера ( Status Code повинен бути 301 ) і відсутність посилань на них у вкладці Inlinks.

Отримати безкоштовну консультацію від фахівця з вашого проекту

Вкладка Response Codes

Вкладка, присвячена кодами відповіді сервера. Вгорі сторінки можна встановити фільтр, в залежності від класу стану відповіді сервера та інших параметрів. Наприклад, можна перевірити:

які сторінки заблоковані у файлі robots.txt - Blocked by robots.txt;
по яким немає ніякої відповіді - No response;
які автоматично перенаправляють на інші сторінки - Redirection ( 3xx );
які віддають помилки на стороні клієнта - Client Error ( 4XX );
і на стороні сервера - Server Error ( 5XX ).

Провівши аналіз наданої інформації, можна знайти помилки в кодах і виправити їх або видалити ті посилання, які призводять на неіснуючі сторінки.

вкладка URL

Якщо необхідно дізнатися про сторінки, з якими щось не так, йдемо в цю вкладку і дивимося, які сторінки Screaming Frog підозрює в наявності помилок. Перевірка зазначених сторінок може здорово спростити життя оптимізатора. Список проблемних сторінок можуть поповнити ті, у яких:

некоректний URL;
динамічна адреса;
є дублікат і т. д.

Вкладки Page Titles, Meta Description

Присвячені мета-тегам сайту, тут зібрана інформація про Title і Description сторінок, в написанні яких допущені помилки. Найбільш важливою є інформація про мета-тегах:

співпадаючих з заголовками H1;
неунікальних ( дублюються на різних сторінках );
занадто коротких або надмірно довгих;
їх відсутності і т. д.

Все це помилки, які вимагають коректування.

Вкладки H1 і H2

демонструють всі дані, пов'язані з заголовками на кожній сторінці сайту. Як і у випадку з мета-тегами, тут можна побачити допущені порушення в написанні цих елементів сайту і своєчасно внести необхідні зміни.

вкладка Images

У цьому розділі аналізу програми Screaming Frog SEO Spider представлені дані про всі використовуваних на ресурсі зображеннях. Дуже корисна інформація для оптимізації сайту, завдяки якій можна виявити невиправдано « важкі » об'єкти, знизити « вага » ресурсу і прискорити його завантаження.

вкладка Canonical

тут прописані канонічні посилання ( тег rel = "canonical" ), Які усувають проблеми при розміщенні одного і того ж контенту на різних сторінках. Їх аналіз дозволить знайти помилки, такі як: кілька атрибутів rel = canonical на одній сторінці, канонічної вказана закрита від індексації сторінка і т.д.

Додаткові популярні можливості Screaming Frog

Найбільш часто використовувана функція Screaming Frog, яка дозволяє отримати дані, надані сервісом, в зручній і звичній формі — вивантаження в окремий Excel-файл. Для цього необхідно натиснути на кнопку Export, яка є на кожному екрані сервісу.

Дуже зручно і просто створювати файл Sitemap.xml, Необхідний для підвищення ефективності процесу сканування сайту ботами пошукових систем. У Screaming Frog існує розділ Sitemap, в якому можна створити даний файл.

висновки

Тестуючи Screaming Frog SEO Spider, наші фахівці відзначили, що це дуже зручний, зрозумілий і корисний інструмент для аудиту та оптимізації сайту, який точно варто уваги SEO-фахівців і власників будь-яких сайтів. Велика кількість важливої інформації, представленої в зручному для сприйняття форматі, і простий інтерфейс роблять програму відмінним рішенням для оптимізаторів, як досвідчених, так і початківців. Рекомендуємо спробувати завантажити тестову версію на пробу і протестувати основні можливості сервісу.

А які інструменти ви використовуєте для аудиту сайту?