Автоматический сбор Яндекс Wordstat. Программа для подбора ключевых слов онлайн

Функциональность данного парсера позволяет собрать кллючевые слова из сервиса wordstat.yandex.ru , статистику запрашиваемости собранных ключей, точную частоту ключей, а так же разгруппировать на кластеры собранные ключи.

Настройки парсера:

1. Логин от yandex.ru - в данное поле необходимо ввести адрес Вашего почтового ящика от яндекс почты

2. Пароль от yandex.ru - в данное поле необходимо ввести пароль от Вашей почты на яндексе

3. Файл с ключевыми словами - в данное поле указывается файл со списком ключевых слов (файл должен быть сохранён в формате utf-8, каждый ключ с новой строки), если Вы планируете активировать кластеризацию запросов после сбора, то в данном файле должна находится только 1 базовая ключевая фраза (все слова только в нижнем регистре (маленькими буквами))

4. Файл с минус-словами - в данное поле указывается файл со списком минус-слов (файл должен быть сохранён в формате utf-8, каждое минус-слово с новой строки)

5. Глубина взятия - до какой глубины парсить

6. Исследовать результаты - данная опция активирует этап кластеризации запросов, после того, как будут собраны ключи по базовой фразе (активируя данную опцию Вы обязательно должны указать файл для сохранения исследования)

7. Проверять на точную частоту - данная опция активрует сбор точной частотки по собранным ключам

8. Глубокое сканирование - данная опция активирует глубокое сканирование

9. Ключ для капч - указывать необязательно

10. Файл для сохранения ключей - эксель файл, в который будут сохраняться ключевые слова из сервиса wordstat.yandex.ru

11. Файл для сохранения исследования - эксель файл, в который будут сохраненны сгруппированые кластеры после кластеризации

Если есть вопросы или пожелания - пишите на почту [email protected]
skype - vipvodu
Скачать архив с парсером

Пример файла с кластерами по ключу - база клиентов.

Советы:
1. Тщательно проверяйте настройки перед запуском.
2. Если программа, после нажатия на кнопку - запустить - выключается - то скорее всего, что-то не так с настройками, либо есть повисшие процессы после предыдущего прерванного парсинга, повисшие процессы надо либо убить в диспетчере задач, либо перезагрузить компьютер.
3. Не прерывайте парсинг, дожидайтесь надписи - Все данные сохранены

всего

Вступление

Составление правильного семантического ядра, одна из основных задач SEO оптимизации. Самостоятельный подбор ключевых слов семантического ядра трудноосуществим, без аналитических и статистических сервисов, собирающих информацию по поисковым запросам Интернет пользователей.

17 сервисов подбора ключевых слов для русскоязычных сайтов

И делается для оптимизации сайта для определенных поисковых систем. Для этого используется статистика запросов хранящаяся в базе данных поисковиков и сервисов.

Яндекс подбор ключевых слов

(wordstat.yandex.ru)

Бесплатный сервис подбора и анализа поисковых запросов сделанных в Яндекс.

Яндекс расширенный поиск

yandex.ru/search/advanced

Расширенный поиск позволяет проанализировать выдачу по низкочастотным запросам в Яндекс. Составление расширенного семантического ядра из поисковых фраз из 3-4 слов.

Яндекс Директ

https://direct.yandex.ru

Уточнение конкуренции поисковых запросов по рекламным фразам используемым в рекламе на Яндекс.

Яндекс Вебмастер

https://webmaster.yandex.ru

Коррекция семантического ядра: , выявление популярных запросов опубликованного сайта.

Google AdWords

(//adwords.google.com )

Подбор ключевых слов и анализ поискового трафика в поисковике Google. Анализ только для зарегистрированных пользователей. Выборочный анализ запросов по странам.

Google расширенный поиск

https://www.google.ru/advanced_search

Уточнение выдачи по поисковым запросам в расширенном поиске.

Рамблер статистика по поисковым запросам

wordstat.rambler.ru/wrds/

Статистика поисковых запросов сделанных в поисковике Рамблер. Недостаток: статистика запросов редко обновляется.

http://seobudget.ru/tools/keywords/

Многофункциональный сервис для оптимизации сайта и анализа поисковой выдачи. Один из инструментов: Подбор фраз семантического ядра. Стоимость подбора 3 рубля за один запрос. Количеств подобранных фраз неограниченно.

Online.seranking.com

Еще один многофункциональный сервис для веб-мастеров. Для работы требуется регистрация. Инструменты анализа и подбора слов доступны 14 free дней. Далее, за подбор ключевых слов, оплата 50 копеек за один запрос из базы данных сервиса (20000 результатов) и 1 рубль из базы данных Яндекс.

Megaindex подбор ключевых слов

keywords.megaindex.ru

Сервис Megaindex многопрофильный сервис для анализа и продвижения сайта. Один из лучших сервисов подбора ключевых слов.

Делается подбор ключевых слов после регистрации и добавлении проекта (сайта). Инструмент бесплатный. Кроме подбора фраз семантического ядра анализ видимости сайта в поисковой выдаче по запросам (2) и анализ тематических запросов (3).

Provigator, анализ конкуренции поисковой фразы

prodvigator.ua

Анализ конкурентов по поисковой фразе. Можно использовать для косвенного анализа конкурентности поисковых запросов.

Сервис Keywordtool

http://keywordtool.io/ru

Показывает анализ по поисковому запросу и ключевой фразе к этому запросу в поисковиках Google, в том числе отдельно в Google.ru, Bing, YouTube. Подбор фраз и ключей бесплатный, однако, статистика запросов, CPC (стоимость за клик в рекламе) и уровень конкуренции фразы в Google, только в платном варианте.

Сервис Advodka.com

https://advodka.com/wordlist/

Бесплатный сервис, имеющий инструмент подбора фраз и слов семантического ядра для поисковиков Яндекс и Google. Есть анализ географии запросов.

Поисковые тренды в Google (Google Trends)

https://www.google.ru/trends/

Сервис популярности поисковых запросов за месяц, год по разделам и странам. Показывает только запросы, сделанные в Google.

Сервис Мутаген

mutagen.ru

Сервис подбора ключевых слов для сайтов Рунет. Кроме подбора ключевых фраз выдает степень конкуренции фраз. Есть массовая проверка ключей.

Для проверки требуется регистрация и пополнение баланса на 1 рубль.

Сервис Rush Analitics

Хороший сервис анализа сайта, подбора ключевых слов, кластеризации запросов.

Группировка запросов

coolakov.ru/tools/razbivka

Бесплатный сервис кластеризации (группировки) поисковых запросов.

Сервис seolib.ru

17 сервисов подбора ключевых слов: seolib

Многопрофильный сервис для оптимизации и анализа сайта. Одна из услуг: бесплатный подбор 25 ключевых слов в сутки с одного IP адреса.

Один из наиболее популярных модулей в Rush Analytics – парсер Яндекс Вордстат, и это не случайно. При сборе семантического ядра необходимо точно знать частотность собранных запросов, чтобы правильно расставить приоритеты по продвижению и избавится от «мусорных» и нулевых запросов. Часто стоит задача пробить несколько десятков тысяч запросов на частотность в Яндексе, но это не совсем простая задача для самописных парсеров Вордстата и десктопных программ, и вот почему:

1. Yandex Wordstat имеет хорошую защиту от парсинга, например бан IP-адресов с которых осуществляется парсинг и выбрасывание капчи в ответ на запросы от ботов. Чтобы эффективно собирать данные с Wordstat, нужен эффективный алгоритм подключения IP-адресов и другие хитрости
2. Для парсинга большого количества данных с помощью десктопных программ понадобится много IP-адресов (прокси), которые Яндекс с легкостью банит при неоптимальном алгоритме подключения, а прокси – удовольствие недешевое
3. Так же для парсинга понадобится автоматическое введение большого количества капчи (например подключение Antigate для этой задачи). Данный фактор, при неоптимальном алгоритме парсинга, может сделать сам парсинг нерентабельным, так как стоимость капчи будет чрезмерно высока
4. Большинство десктопных программ не имеют защиты от потери данных при сборе. Так, например, собрав половину данных и потратив на это деньги, при сбое в парсере, вы рискуете не только не получить оставшиеся данные, но и потерять уже собранные

Парсинг Яндекс Вордстат в Rush Analytics

Учитывая все трудности которые могут возникнуть при парсинге Вордстата, мы сделали свой парсер Wordstat максимально быстрым, удобным и устойчивым к максимальному количеству проблем, связанных с парсингом:

• Никаких прокси и капчи! Вам больше не нужно думать о бане ваших прокси или огромном количестве капчи, которую выдает Яндекс. Просто создайте проект, загрузите ключевые слова и ждите готовый файл с результатом
• Высокая скорость парсинга. Наши алгоритмы используют оптимальную схему подключения IP-адресов и другие хитрости, чтобы сделать скорость парсинга феноменально высокой – вы и не заметите, как ваш проект будет выполнен!
• Сохранность данных. Создавая проект в нашем парсере, вы можете быть уверены, что он будет успешно завершен и доступен для скачивания в любое время и из любой точки мира – все данные хранятся в облаке!
• Поддержка всех регионов Яндекса. У многих пользователей есть потребность определять частотность запросов в Яндексе не только по региону «Москва» или «Россия», но и по другим, включая «Украину» и «Беларусь». В Rush Analytics вы сможете определить частотность запросов по любому региону, который поддерживает Яндекс на данный момент.

• Сбор всех частотностей. С помощью нашего парсера вы сможете собрать все частотности: поисковый запрос, «поисковый запрос», «!поисковый!запрос».

• Сбор левой колонки Wordstat. Помимо проверки частотности запросов, доступен сбор ключевых слов из левой колонки Wordstat с настройкой глубины парсинга от одной страницы до сбора всех имеющих в левой колонке страниц.

• Сбор правой колонки Wordstat. Доступен сбор ключевых слов из правой колонки Wordstat.

Если вам нужен скоростной сбор частотностей Яндекс Wordstat – Rush Analytics лучшее решение, особенно если вам нужно собирать большие объемы данных. Для пользователей с потребностью сбора боле 100 000 запросов в месяц предусмотрены индивидуальные условия, просто напишите в нашу поддержку на

Как вы поняли, для работы с этим сер­ви­сом нужно много вре­мени, зато совсем не нужно денег. 🙂

Если вы начи­на­ете зани­маться про­дви­же­нием не одного, а несколь­ких сай­тов или хотите SEO-опти­ми­зи­ро­вать кон­тент мно­го­стра­нич­ного пор­тала, лучше потра­тить 1500 руб­лей и купить про­грамму Key Collector.

Когда раз­бе­ре­тесь с её интер­фей­сом (в этом я помогу вам прямо сей­час), вы смо­жете быстро соби­рать тысячи запро­сов, без труда отсе­и­вать ненуж­ные клю­че­вики и состав­лять эффек­тив­ное семан­ти­че­ское ядро для сайта.

Настройки Кей Коллектора

Как рабо­тать в Key Collector? Вот так выгля­дит интер­фейс про­граммы. Кнопка «Настройки» выде­лена крас­ным пря­мо­уголь­ни­ком.

Откры­ваем окно настроек. Слева – меню, по умол­ча­нию в нем откро­ется пер­вый пункт «Пар­синг». Начи­наем с вкладки «Общие». Здесь лучше оста­вить дефолт­ные настройки. Можно лишь умень­шить длину клю­че­вых фраз, если вы счи­та­ете, что низ­ко­ча­стот­ники из 10 слов вам не нужны.

Сле­ду­ю­щая вкладка – Yandex.Wordstat. Здесь жела­тельно уве­ли­чить задержку между запро­сами, чтобы сни­зить веро­ят­ность частого появ­ле­ния каптчи и не полу­чить бло­ки­ровку от Яндекса. Если все будет в порядке, вы можете посте­пенно умень­шать эти пара­метры.

Затем прой­ди­тесь по вклад­кам Google.Adwords, Rambler.Adstat, Соци­аль­ные сети, Solomono и осталь­ным, в кото­рых нужно будет доба­вить доступы к вашим акка­ун­там в этих сер­ви­сах. В каж­дой из этих вкла­док вы уви­дите угро­жа­юще крас­ные 🙂 пре­ду­пре­жде­ния о том, что акка­унты должны быть спе­ци­ально созданы для пар­синга. Это важно, не про­игно­ри­руйте сие тре­бо­ва­ние.

Во всех осталь­ных вклад­ках, кроме «Поис­ко­вая выдача», остав­ляем все как есть. Если вы поль­зу­е­тесь сер­ви­сом «Yandex.XML », вве­дите в «Поис­ко­вой выдаче» свой адрес для совер­ше­ния запроса.

Если же у вас есть акка­унт в каком-либо сер­висе авто­ма­ти­че­ского рас­по­зна­ва­ния каптчи, перей­дите в меню «Анти­каптча», отметьте нуж­ный чек­бокс и вве­дите ключ.

Для началь­ного осво­е­ния Кей Кол­лек­тора этих настроек доста­точно. Не забудьте нажать кнопку «Сохра­нить изме­не­ния». Пере­хо­дим к созда­нию про­екта.

Создание проекта

Нажи­маем «Создать новый про­ект» и сохра­няем файл.kcdb на свой ком­пью­тер. Уста­нав­ли­ваем регион (на скрин­шоте пока­зано, где нужно клик­нуть).

Кли­каем пра­вой кноп­кой мыши, уста­но­вив кур­сор на «Вкладке по умол­ча­нию» и нажи­маем «Пере­име­но­вать вкладку». Можно добав­лять еще вкладки, нажи­мая «+ ».

Подбор ключевых слов

1. Левая колонка таблицы Вордстат

Пере­хо­дим к под­бору клю­че­вых слов. Сна­чала соби­раем запросы из левой колонки таб­лицы запро­сов Ворд­стата:

Вво­дим сло­во­со­че­та­ния, кото­рые соот­вет­ствуют тема­тике сайта. Обра­тите вни­ма­ние: я исполь­зую в каж­дой фразе аббре­ви­а­туру «ГАЗ», потому что, если про­сто вве­сти слово «зап­ча­сти», про­грамма нам собе­рет десятки тысяч клю­чей по всем мар­кам авто­мо­би­лей, сти­раль­ных и швей­ных машин и т. д. То есть нужно, с одной сто­роны, исполь­зо­вать мини­мум слов в каче­стве масок для пар­синга, а с дру­гой – всё-таки кон­кре­ти­зи­ро­вать запросы.

Нажи­маем «Начать сбор»…

…и через корот­кое время полу­чаем боль­шой спи­сок запро­сов (в моем слу­чае – 427 фраз) с ука­за­нием базо­вой частот­но­сти. Базо­вая частот­ность – это частот­ность по запросу, кото­рый вво­дится в строку Яндекс.Вордстата без опе­ра­то­ров «кавычки» и «вос­кли­ца­тель­ный знак» (об этом можно почи­тать ).

2. Правая колонка Вордстат

Чистка списка запросов

1. Стоп-слова

Избав­ля­емся от ненуж­ных клю­че­вых слов. Для этого исполь­зуем функ­цию «Стоп-слова».

Вво­дим слова, фразы с кото­рыми должны быть уда­лены из списка, и нажи­маем кнопку «Отме­тить в таб­лице».

Про­грамма отме­чает строки, в кото­рых содер­жатся ука­зан­ные стоп-слова. Кли­каем пра­вой кноп­кой мыши по любому запросу в таб­лице и из выпа­да­ю­щего меню выби­раем «Уда­лить отме­чен­ные строки».

2. Фильтрация базовой частотности

Прежде чем дать команду про­грамме опре­де­лить «чистую» частот­ность (частот­ность вида «!»), облег­чим ей задачу и сэко­но­мим нам время – убе­рем фразы, у кото­рых базо­вая частот­ность меньше 5 (если базо­вая – 5, то точ­ная почти навер­няка будет ещё меньше).

Для этого исполь­зуем фильтр столбца «Базо­вая частот­ность».

Ука­зы­ваем усло­вия филь­тра­ции и при­ме­няем их к фра­зам в таб­лице.

Фильтр убе­рет все запросы с частот­но­стью больше 5, нам оста­нется только выде­лить фразы, отве­ча­ю­щие задан­ным усло­виям, и уда­лить их. Затем, нажав кнопку с изоб­ра­же­нием зачерк­ну­того филь­тра, воз­вра­ща­емся к обнов­лен­ному списку запро­сов.

3. Фильтрация точной частотности

Опре­де­ляем частот­ность «!», после чего снова исполь­зуем фильтр, только уже в столбце «чистой» частот­но­сти. Уда­ляем фразы с частот­но­стью от 0 до 5 (или до опре­де­лен­ного пока­за­теля, кото­рый для тема­тики вашего сайта явля­ется слиш­ком низ­ким).

Поисковые подсказки

После того как будет выпол­нена чистка списка запро­сов, вос­поль­зу­емся функ­цией «Пакет­ный сбор поис­ко­вых под­ска­зок». Отме­чаем поис­ко­вые системы, из кото­рых хотим пар­сить клю­че­вики.

В окно сбора под­ска­зок вво­дим все собран­ные запросы. Чтобы их ско­пи­ро­вать, клик­ните пра­вой кноп­кой мыши по заглав­ной строке столбца «Фраза» и выбе­рите команду «Ско­пи­ро­вать колонку в буфер обмена».

Встав­ляем спи­сок в окно сбора под­ска­зок и нажи­маем «Начать сбор».

Сбор данных сезонности запросов

Эта опция помо­жет вам опре­де­лить, какие запросы явля­ются сезон­ными (дан­ные пар­сятся из Яндекс.Вордстат). Если вы вклю­чите их в семан­ти­че­ское ядро, вы будете пони­мать, в какие пери­оды сле­дует уде­лить больше вни­ма­ния про­дви­же­нию стра­ниц сайта по этим клю­че­ви­кам. А ещё не ста­нете пере­жи­вать по поводу сни­же­ния тра­фика в опре­де­лен­ные месяцы.

Определение конкурентности запросов

Нажи­маем кнопку «KEI » и выби­раем пункт выпа­да­ю­щего меню «Полу­чить дан­ные для ПС Яндекс».

Полу­чаем вот такие дан­ные:

• Кон­ку­рен­ция в ПС Яндекс: 6 млн – столько стра­ниц по этому запросу най­дено Яндек­сом.
• Коли­че­ство глав­ных стра­ниц в ТОП10 ПС Яндекс: 2 – всего 2 «морды» опти­ми­зи­ро­вано под этот запрос.
• Коли­че­ство вхож­де­ний в заго­ло­вок: 3 – то есть 3 тайтла в ТОП10 содер­жат этот запрос.

Вывод: у нас много шан­сов при мини­маль­ных затра­тах выйти в ТОП3 – нужно всего лишь опти­ми­зи­ро­вать глав­ную стра­ницу и её title.

Это основ­ные этапы под­бора клю­че­вых слов с помо­щью про­граммы «Кей Кол­лек­тор». В про­цессе работы с этим соф­том вы осво­ите и осталь­ные функ­ции – их очень много и все они пред­став­ляют цен­ность для опти­ми­за­тора.

Парсер ключевых слов — это настройка Datacol, которая автоматически собирает запросы из статистики сервиса Wordstat по заданным пользователем ключевым словам. Таким образом, вам необходимо всего лишь задать базовые ключевые слова, после чего Datacol самостоятельно соберет информацию по производным запросам. Наряду с запросами сохраняется частота показов каждого запроса в месяц. При парсинге Datacol проходит по всем страницам выдачи Wordstat.

• С помощью парсера Wordstat Вы сможете собрать запросы и частоту показа из статистики;
• Вам нужно указать только список ключевых слов, данные по которым Вам необходимо собрать;
• Сохраняйте собранную информацию в любом удобном формате (Excel, TXT, WordPress, MySQL и т. д.).

Парсинг Wordstat подразумевает обработку Javascript, а также необходимость авторизации для сбора данных. Такую возможность мы получаем благодаря плагину . При запуске кампании Datacol откроет один или более экземпляров браузера Chrome для загрузки через них вебстраниц. Количество работающих экземпляров Chrome равно количеству потоков кампании. Обратите внимание, что инициализация экземпляров браузеров может занять некоторое время.

Кем и для чего используется парсер ключевых слов яндекса

Парсер ключевых слов чаще всего используется специалистами по поисковому продвижению сайтов. В частности, это касается реализации задачи составления семантического ядра сайта. Оговоримся, что ниже речь пойдет о продвижении сайтов в рунете. В данном контексте более актуален парсер ключевых слов яндекс директа.

Парсер поисковых запросов директа

Для начала опишем стандартную схему работы парсера директа.

1. Пользователь задает поисковые запросы, производные которых необходимо собрать.
2. Парсер авторизуется на яндексе и начинает парсить яндекс вордстат поочередно для каждого запроса.
3. Для каждого запроса получаются производные ключевые слова не только с первой страницы выдачи директа, но и со всех последующих.

В результате на выходе мы имеем достаточно большое количество вариантов ключевых слов, которые в дальнейшем используются для формирования семантического ядра сайта.

Парсер ключевиков и количества показов — “скользкий момент”

Отметим, что помимо ключевых слов мы получаем так называемое “прогнозируемое количество показов” — показатель к которому стоит относиться очень осторожно. Для начала разберемся, что об этом значении пишет сам Яндекс:

В результатах выводится статистика запросов поисковой системы Яндекс, содержащих заданное слово или словосочетание, и других запросов, которые осуществляли искавшие его люди (справа).
Цифры рядом с каждым запросом в результатах выдачи вордстат дают предварительный прогноз числа показов в месяц, которое вы будете иметь, выбрав данный запрос в качестве ключевого слова.

Ошибкой многих оптимизаторов является то, что они читают только первую часть описания, и при этом — читают не совсем внимательно. Идем дальше:

Цифра рядом со словом «телевизор» обозначает число показов по абсолютно всем запросам, включающим слово «телевизор»: «купить телевизор» , «плазменный телевизор», «купить плазменный телевизор», «купить новый плазменный телевизор» и т.п.

Вы уже наверное догадались, на что мы намекаем? Итак, вы должны понять главное — при парсинге производных запросов по Wordstat не стоит обращать внимание на показатель их частотности, поскольку данное значение суммируется из частотностей всех производных запросов.

Но как в таком случае определить какие ключевики более “жирные” а какие менее? Сразу развенчаем ошибочное мнение, что производные ключевики всегда имеют меньше реальных показов, что основные. Это откровенная чушь! Найти реальные количества показов ключевиков (с вычетом количества показов производных) нам позволит операторы кавычки. Таким образом, для поиска запросов и определения самых “жирных” необходимо применять следующую схему:

1. Запустить парсер ключей для поиска производных.
2. Взять все производные запросы и отпарсить количество показов каждого, задавая запрос в кавычках.

Мы согласны, что это несколько более длинный и сложный путь. Однако представьте ситуацию. У вас есть около 500 запросов, по которым вы хотите продвинуть основной сайт. 30 из них являются (по вашему первоначальному мнению, то есть по изначально спарсенной статистике Wordstat) наиболее высокочастотными. Далее вы тратите 3 месяца времени и несколько тысяч убитых енотов (да ребята — качественное продвижение это дорогостоящее и длительное мероприятие) и в итоге оказывается, что поискового трафика в несколько раз меньше чем ожидалось. Вы сильно расстраиваетесь, ищите профессионального специалиста по продвижению и он вам открывает глаза на то, что вы продвигали совсем не те запросы, которые приводят трафик (в частности, он показывает вам реальную статистику по запросам в кавычках).

Тестирование парсера запросов

На нашем сайте вы можете бесплатно скачать парсер ключевых слов яндекса и протестировать его. Мы также можем обсудить настройку парсера кеев, которая будет проверять значения собранных запросов в кавычках.

Тестирование парсера Wordstat

Чтобы протестировать работу парсера Wordstat :

Шаг 1. Установите . Демо-версия программы имеет все возможности платной, но сохраняет только первые 25 результатов парсинга.

Шаг 2. В дереве кампаний присутствует кампания seo-parsers/wordstat-keywords-parser.par . Выберите ее и нажмите кнопку Запуск (Play) . Перед запуском можно отредактировать Входные данные , чтобы изменить набор базовых запросов , по которым будет собираться статистика.

кликните на изображении для увеличения

После запуска кампании открывается окно браузера, в которое необходимо ввести авторизационные данные для доступа к статистике Wordstat.