🐸 Как использовать Screaming Frog SEO Spider для сбора данных
Сразу скажу, что есть более умелые и правильные инструменты и сервисы, но вот если пришла нужда, а ничего кроме Лягушки нет под рукой.
Допустим, нам нужно собрать все цены на товары из определенного блока сайта. Нет, лучше возьмем чуть более простой пример - проверка наличия обратных ссылок на страницах доноров.
Используем так:
1. Переводим лягушку в List Mode
2. Идем в настройки конфигурации парсинга и снимаем крыжики с парсинга всего, кроме HTML страниц
3. Далее идем Configuration -> Custom -> Extraction и заводим новый экстрактор
4. Выбираем поле XPath и вводим XPath-запрос ( для извлечении ссылки на любую страницу вашего сайта):
//a[contains(@href, 'site.com')]
правее в экстракторе выбираем "Extract HTML Element", чтобы увидеть всю ссылку, или "Inner HTML" для извлечения только анкора
5. Подсовываем список страниц для обработки (или через ручную вставку или через импорт)
6. Пожужжав, идем на вкладку Настраиваемых экстракторов и смотрим, есть ссылки или нет. Но лучше выгрузить все в Excel для анализа.
Аналогично, можно собирать абсолютно любую инфу как со статичных страниц, так и с JS страниц отдельного сайта. Желательно чтобы они (страницы)имели одинаковый шаблон Для этого
1. заведите новый экстрактор
2. тыкните справа в нем иконку "Глобус"
3. загрузится страничка (кою вы укажите для настройки извлечения)
4. тыкайте слева в окошке встроенного браузера элементы, которые надо извлечь, а справа поднастройте извлечение, выбрав один из вариантов из предложенного списка. Так вы создадите свой настраиваемй экстрактор.
Ну, в целом, как быстрая замена для проф инструментов, Лягушка отлично подойдет.
#DrMax #ScreamingFrog #SEO
Сразу скажу, что есть более умелые и правильные инструменты и сервисы, но вот если пришла нужда, а ничего кроме Лягушки нет под рукой.
Допустим, нам нужно собрать все цены на товары из определенного блока сайта. Нет, лучше возьмем чуть более простой пример - проверка наличия обратных ссылок на страницах доноров.
Используем так:
1. Переводим лягушку в List Mode
2. Идем в настройки конфигурации парсинга и снимаем крыжики с парсинга всего, кроме HTML страниц
3. Далее идем Configuration -> Custom -> Extraction и заводим новый экстрактор
4. Выбираем поле XPath и вводим XPath-запрос ( для извлечении ссылки на любую страницу вашего сайта):
//a[contains(@href, 'site.com')]
правее в экстракторе выбираем "Extract HTML Element", чтобы увидеть всю ссылку, или "Inner HTML" для извлечения только анкора
5. Подсовываем список страниц для обработки (или через ручную вставку или через импорт)
6. Пожужжав, идем на вкладку Настраиваемых экстракторов и смотрим, есть ссылки или нет. Но лучше выгрузить все в Excel для анализа.
Аналогично, можно собирать абсолютно любую инфу как со статичных страниц, так и с JS страниц отдельного сайта. Желательно чтобы они (страницы)имели одинаковый шаблон Для этого
1. заведите новый экстрактор
2. тыкните справа в нем иконку "Глобус"
3. загрузится страничка (кою вы укажите для настройки извлечения)
4. тыкайте слева в окошке встроенного браузера элементы, которые надо извлечь, а справа поднастройте извлечение, выбрав один из вариантов из предложенного списка. Так вы создадите свой настраиваемй экстрактор.
Ну, в целом, как быстрая замена для проф инструментов, Лягушка отлично подойдет.
#DrMax #ScreamingFrog #SEO