Парсер выдачи Яндекс поиска

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Благодарностей
347
Баллы
63
Описание

Парсер выдачи Яндекс поиска - это дополнительный инструмент для эффективной работы SEO-специалиста и таргетолога. Бот собирает детальную информацию о конкурентах: используемые ключи, тексты объявлений, регионы размещения и т.д. Это позволяет оценить рекламу и качество оптимизации в Яндексе.

Вручную собирать данные по сотням позиций долго и утомительно. Шаблон сильно упрощает работу за счет автоматизации процессов, которые отнимают значительную часть времени. Вам нужно лишь указать настройки, а парсер соберет необходимую информацию и сохранит результаты в таблицу.

Делегируйте рутинные задачи боту и успевайте гораздо больше!

Функционал

Шаблон переходит на сайт Яндекса, открывает страницу выбора региона, вводит значение из входных настроек.
Возвращается на главную страницу, вводит поисковой запрос в строку поиска, парсит с первой страницы все результаты, переходит на следующую страницу. Парсит данные с заданного во входных настройках числа страниц.
После этого из спаршенных результатов, по одному, парсит URL, заголовок, домен из URL и рекламную метку, если есть.
Результаты сохраняются в таблицу с уникальным именем "запрос_дата_время".
Далее шаблон переходит к следующему запросу, если их введено несколько.

Как пользоваться?

Во входных настройках:
  • указать количество страниц поиска для парсинга;
  • ввести регион поиска;
  • выбрать капча-модуль;
  • указать количество попыток решить капчу.
Добавить поисковые запросы в файл Запросы.txt.

Если необходимо использовать прокси, добавить их в файл Proxy.txt

Результаты будут сохранены в папку Results в формате "URL;Заголовок;Домен;Реклама"
В четвёртом столбце ставится отметка, если ссылка является рекламной. Иначе ячейка остаётся пустой
 
Категория
Парсинг, SEO
Тип шаблона
Открытый
Многопоточность
Нет
Дата обновления
07.12.2020
Описание обновления
Запросы теперь берутся из файла.
Обновлены оповещения.
Изменены проверки загрузки.
Обновлено решение капчи

Вложения

Для запуска проектов требуется программа ZennoPoster.
Это основное приложение, предназначенное для выполнения автоматизированных шаблонов действий (ботов).
Подробнее...

Для того чтобы запустить шаблон, откройте программу ZennoPoster. Нажмите кнопку «Добавить», и выберите файл проекта, который хотите запустить.
Подробнее о том, где и как выполняется проект.

Последнее редактирование модератором:

specialist

Client
Регистрация
28.12.2018
Сообщения
732
Благодарностей
343
Баллы
63
несколько поисковых запросов (каждый с новой строки), указать количество страниц поиска для парсинга
Где выбор региона?
В зависимости от прокси результаты будут отличаться даже для одного запроса
 

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Благодарностей
347
Баллы
63

kveldulv

Client
Регистрация
08.05.2011
Сообщения
45
Благодарностей
16
Баллы
8
Is it possible to make it work ion 5.14 of zenno?

Thanks.
 

ibred

Client
Регистрация
04.04.2015
Сообщения
3 835
Благодарностей
3 538
Баллы
113
  • Спасибо
Реакции: kveldulv

serg2020

Client
Регистрация
30.09.2019
Сообщения
6
Благодарностей
1
Баллы
3
Было бы неплохо, если бы еще позиции собирались, включая директ, и отдельно название домена.
 

dzedun007

Новичок
Регистрация
01.05.2018
Сообщения
1
Благодарностей
1
Баллы
3
Сhrome блокирует загрузку... Скачал Оперой. А где настройки вводить? Настроек нет никаких- ни региона, ни ключевых слов ничего! только файл приложен Proxy.txt...
 
Последнее редактирование:
  • Спасибо
Реакции: Phoenix78

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Благодарностей
347
Баллы
63
Сhrome блокирует загрузку... Скачал Оперой. А где настройки вводить? Настроек нет никаких- ни региона, ни ключевых слов ничего! только файл приложен Proxy.txt...
Входные настройки открываются двойным кликом по проекту, после того, как его добавили в ZennoPoster

49619
 

She

Client
Регистрация
11.01.2017
Сообщения
122
Благодарностей
23
Баллы
18
Доброго дня @Hitachi спасибо за шаблон.
Часто вылетает вот такая ошибка
c81bbbdc-0cc1-4570-acfd-2bddb8bdd26e
Выполнение действия HtmlElement Не найден HTML элемент, по условиям поиска
 

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Благодарностей
347
Баллы
63
Доброго дня @Hitachi спасибо за шаблон.
Часто вылетает вот такая ошибка
c81bbbdc-0cc1-4570-acfd-2bddb8bdd26e
Выполнение действия HtmlElement Не найден HTML элемент, по условиям поиска
Скорее всего дело в прокси, страницы долго грузятся. Можно увеличить паузу перед эти действием
50788
 

des05

Client
Регистрация
18.12.2019
Сообщения
75
Благодарностей
18
Баллы
8
Добрый день @Hitachi
Спасибо за шаблон.
Есть ли возможность почистить выводимые урлы до вида domen.ru? Возможно, уже есть такая модификация?

upd
Нашел в гугле
 

Harvad

Client
Регистрация
28.10.2014
Сообщения
3
Благодарностей
2
Баллы
3
Добрый день @Hitachi
Спасибо за шаблон.
Есть ли возможность почистить выводимые урлы до вида domen.ru? Возможно, уже есть такая модификация?

upd
Нашел в гугле
Не поделитесь результатом?) Нужен такой же функционал)
 

des05

Client
Регистрация
18.12.2019
Сообщения
75
Благодарностей
18
Баллы
8
Не поделитесь результатом?) Нужен такой же функционал)
Пожалуйста
 
  • Спасибо
Реакции: Harvad

b1zar

Client
Регистрация
29.06.2019
Сообщения
107
Благодарностей
65
Баллы
28
Не поделитесь результатом?) Нужен такой же функционал)
Да это все можно сделать в зенке через regex.

Сначала проходишь этой регуляркой
[\w-]+.[\w-]+\.\w+(?=/|\n|$)\/+[a-zA-Zа-яА-ЯёЁ0-9_-]*|[\w-]+\.\w+(?=/|\n|$)\/+[a-zA-Zа-яА-ЯёЁ0-9_-]*

потом проходишь второй
[\w-]+.[\w-]+\.\w+(?=/|\n|$)

Можешь сразу второй, но ссылки на подобие этой "https://zennolab.com/discussion/threads/parser-vydachi-jandeks-poiska.66413/" будут выдавать мусор
 
  • Спасибо
Реакции: Harvad и todayer

des05

Client
Регистрация
18.12.2019
Сообщения
75
Благодарностей
18
Баллы
8
@Hitachi, введите пожалуйста указанный функционал в шаблон. Можно оформить еще один столбец рядом с ссылками с выдачи в ПС и ЯД
Ну и аналог в остальных репликах для Гугла и Майла
 

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Благодарностей
347
Баллы
63
@Hitachi, введите пожалуйста указанный функционал в шаблон. Можно оформить еще один столбец рядом с ссылками с выдачи в ПС и ЯД
Ну и аналог в остальных репликах для Гугла и Майла
Шаблон обновлён, добавлен столбец с доменами
 
  • Спасибо
Реакции: des05

des05

Client
Регистрация
18.12.2019
Сообщения
75
Благодарностей
18
Баллы
8

profi88

Client
Регистрация
10.09.2018
Сообщения
193
Благодарностей
32
Баллы
28

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Благодарностей
347
Баллы
63

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Благодарностей
347
Баллы
63

profi88

Client
Регистрация
10.09.2018
Сообщения
193
Благодарностей
32
Баллы
28

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Благодарностей
347
Баллы
63
Добрый день.
Она создается автоматом программой или руками нужно ее создать?
Создаётся автоматически после успешного выполнения.
Далее все результаты в неё сохраняются
 

profi88

Client
Регистрация
10.09.2018
Сообщения
193
Благодарностей
32
Баллы
28

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Благодарностей
347
Баллы
63

profi88

Client
Регистрация
10.09.2018
Сообщения
193
Благодарностей
32
Баллы
28
да, прокси нормальные, может формат прокси не поддерживает?

{ip}:{port}:{login}:{password}
 

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Благодарностей
347
Баллы
63
  • Спасибо
Реакции: profi88

profi88

Client
Регистрация
10.09.2018
Сообщения
193
Благодарностей
32
Баллы
28

cafen

Client
Регистрация
23.02.2016
Сообщения
27
Благодарностей
10
Баллы
3
Архив битый, не открывается
 

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Благодарностей
347
Баллы
63

Вложения

surf

Client
Регистрация
08.04.2015
Сообщения
6
Благодарностей
2
Баллы
3

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)