Key collector ошибка networkmethods loadpage

MIND

На сайте с 08.03.2007

Offline

238

29 января 2012, 15:17

#21

Версия 2.5.7 (от 29.01.2012):

— исправлена работа с Yandex.XML;

— исправлен импорт из CSV;

— мелкие фиксы.

Стоимость лицензии составляет 1500 руб. на один компьютер.

Подробней о покупке программы вы можете узнать по ссылке: http://seom.info/buy-key-collector/

Key Collector — автоматизированная система анализа семантического ядра (/ru/forum/863504)

n1xen

На сайте с 15.12.2010

Offline

10

30 января 2012, 06:57

#22

Сегодня какие то проблемы с Яндекс Вордстатом? Или это только у меня.

Как всегда работаю в 3 окна кейколлектора, у каждого окна своё прокси.

И при сборе статистики вордстат ошибки:

— страница Yandex.Wordstat содержит ошибки (возможно, в данный момент сервис недоступен или перегружен)

— при загрузке страницы уточняющих частотностей возникла ошибка. Выполняем повторную (2) попытку загрузить информацию

— ошибка NetworkMethods.LoadPage: Невозможно соединиться с удаленным сервером

они бывали и раньше но не так часто и обычно днём, никак не с утра, а сейчас полнейший вынос мозга, приходится постоянно тыкать повторно на лупу сбор частотностей..

3 потока, таймауты 1600 — 3000 мс. Всё как и раньше.

А если захожу руками в вордстат и начинаю быстро вводить в строку что попало то работает быстро :)

golf4man

На сайте с 16.08.2010

Offline

119

30 января 2012, 07:05

#23

Да у меня и вчера и сегодня проблемы.

Запускаю парсинг Wordstat (в настройках парсинга 10 страниц), находит только 50 запросов (ручками проверял, по этому запросу поболее одной страницы). Запускаю несколько раз, совершенно другая картина.

Причина ведь в сервисе Яндекса?

MIND

На сайте с 08.03.2007

Offline

238

30 января 2012, 08:14

#24

у каждого окна своё прокси
ошибка NetworkMethods.LoadPage: Невозможно соединиться с удаленным сервером

Тут дело еще в прокси может быть.

———- Добавлено 30.01.2012 в 12:14 ———-

golf4man, смотря что в логе написано. Так же программа может останавливать сбор если в настройках заданы границы частотностей.

kolbas

На сайте с 04.09.2008

Offline

118

30 января 2012, 12:04

#25

MyOST:
в саппорт, выдадим ссылку на ручное обновление

myonlinestudio@ya.ru

Написал на это мыло рано утром по поводу смены HID, пока нету ответа…

Отличный хостинг с вкусной ценой, безотказным саппортом, бесплатным автоматическим подключением и продлением SSL сертификата, HTTP/2 и PHP 7.3. (https://goo.gl/hLeI54)

MyOST

На сайте с 22.01.2006

Offline

559

30 января 2012, 12:50

#26

kolbas:
Написал на это мыло рано утром по поводу смены HID, пока нету ответа…

работаем, в порядке очереди среди остальных сообщений и до Вашего дойдем

CB9TOIIIA

На сайте с 22.06.2010

Offline

76

30 января 2012, 13:16

#27

MyOST:
работаем, в порядке очереди среди остальных сообщений и до Вашего дойдем

Что по поводу VK?


30.01.2012 17:16:01: процесс сбора статистики (люди) В Контакте начат
30.01.2012 17:16:01: ошибка NetworkMethods.LoadPage: Длина блока не соответствует дополнению.
30.01.2012 17:16:02: процесс сбора статистики (люди) В Контакте завершен
30.01.2012 17:16:02: процесс сбора статистики (группы) В Контакте начат
30.01.2012 17:16:02: ошибка NetworkMethods.LoadPage: Длина блока не соответствует дополнению.
30.01.2012 17:16:02: процесс сбора статистики (группы) В Контакте завершен

MyOST

На сайте с 22.01.2006

Offline

559

30 января 2012, 13:20

#28

CB9TOIIIA, до апдейта программы ждать. Месседж получен.

1




[Удален]

31 января 2012, 05:31

#29

31.01.2012 11:29:26: возникла ошибка в методе потока Yandex.Metrika

n1xen

На сайте с 15.12.2010

Offline

10

31 января 2012, 06:52

#30

При сборе ключевиков с Яндекс Вордстата бывает глюк яндекса или незнаю чего, и некоторые ключевики собираются не до конца.

Например по словам

привет

привет как дела

Собирает 100 ключевиков

Запускаю ещё раз по этим же ключевикам, собирает 120.

В журнале событий это ошибка где то пишется, но когда парсит не с двух ключей а с 20, то можно незаметить, сделайте пожалуйста, чтобы там где ошибка — было несколько попыток. А то так можно легко пропустить кучу нужных ключевиков.

При сборе подсказок дела наверное обстоят также?

———- Добавлено 31.01.2012 в 10:05 ———-

то есть несколько ПОПЫТОК при ошибке » страница Yandex.Wordstat содержит ошибки (возможно, в данный момент сервис недоступен или перегружен)»

вроде понятно объяснил))

  1. 29.07.2012 13:42

    Valenok вне форума

    Banned

    • Репутация: 12
    • Webmoney BL: ?

    Ребят, прошу помощи.
    Значит, нужно было отпарсить 28к. ключевых слов через Key Collector. Понял, что нереально с одного IP. Купил 5 SEO-прокси у ГлобалТел.
    Говорят, мол скорее всего в Вордстате сразу забанят, ну думаю ладно как нить справлюсь основным, а вот KEI и тому подобное буду проксями.
    Ага, размечтался…

    При парсинге KEI вылетает: ошибка NetworkMethods.LoadPage: The operation has timed out
    И всё отключается…
    Проверяю, вроде не в бане, пробую снова… та же тема!

    Если кто-нибудь из вас использует прокси, то объясните мне Валенку (какой ник то подходящий), чего делать то?
    Заранее спасибо.

    • 0
  2. 29.07.2012 14:34

    SVET.A вне форума

    Дипломник Аватар для SVET.A

    • Репутация: 22

    Valenok, а вы в техподдержку Кея напишите. Она, техподдержка, очень отзывчивая. Мне, еще тому валенку (тефельке, чтобы не красть ваш ник :)), всегда помогают по самым простейшим вопросам. И всегда вежливо, быстро и понятно объясняют.

    • 0
  3. 29.07.2012 15:38

    Valenok вне форума

    Banned

    • Репутация: 12
    • Webmoney BL: ?

    SVET.A, уже написал и уже общаемся, спасибо.

    • 0
  4. 30.07.2012 21:16

    ProninZet вне форума

    Студент

    • Репутация: 9

    Коль тему завели, то напишите, пж, как решили вопрос. Мне очень скоро предстоят подобные трудности, к чему готовиться?

    • 0
  • Печать

Страниц: [1] 2   Вниз

Тема: Проблема с Key Collector и Словоеб  (Прочитано 12872 раз)

Проблема в том что последние два дня когда вбиваю какой-то запрос для последующего анализа — мне выдает не совсем понятные вещи и не совсем понятные цифры.


На скрине все видно.
Кто знает почему?


Записан



В самом кей-коллеторе писали, что яша сменил кодировку, исправят…, т.е. уже исправили в кей-коллекторе…

« Последнее редактирование: 10-07-2012, 11:42:15 от Владимир75 »


Записан

Мобильный, WatsApp., Viber +79964788889, telegram @xiceer.



В самом кей-коллеторе писали, что яша сменил кодировку, исправят…, т.е. уже исправили в кей-коллекторе…

А касательно Словоеба ничего не говорили? Если яша сменил кодировку, то почему одни ключи отображаются нормально, а другие вот такими же не совсем понятными вещами и не совсем понятными цифрами.


Записан


EntuziAst, увы, пока никаких данных нет.


Записан


EntuziAst, увы, пока никаких данных нет.

Очень и очень жаль. Решил взять Key Collector, если там исправили эту ошибку. Я так понимаю, что у Вас уже есть Key Collector. Ошибку там исправили?)


Записан



Очень и очень жаль. Решил взять Key Collector, если там исправили эту ошибку. Я так понимаю, что у Вас уже есть Key Collector. Ошибку там исправили?)

Проблему с кодировкой уже исправили


Записан


Проблему с кодировкой уже исправили

Спасибо! Будем брать!)


Записан


Я использую программу Словоеб 2.0.5. Но очень медленно собирает данные. Например сейчас идет сбор «!» яндекс вордстат, идет уже целый день. В журнале событий постоянно сообщения:
02.08.2013 9:53:36: ошибка NetworkMethods.LoadPage: Запрос был прерван: Время ожидания операции истекло.
02.08.2013 9:53:36: при загрузке страницы уточняющих частотностей возникла ошибка. Выполняем повторную (2) попытку загрузить информацию
по времени в статистике насчитал, что осталось еще 28 с лишним дней! (всего 1% завершен за прошедший день)
всего поисковых фраз более 300 000
нельзя ли как-то ускорить процесс? Если можно, подскажите в чем причина?
Спасибо


Записан



Я использую программу Словоеб 2.0.5. Но очень медленно собирает данные. Например сейчас идет сбор «!» яндекс вордстат, идет уже целый день. В журнале событий постоянно сообщения:
02.08.2013 9:53:36: ошибка NetworkMethods.LoadPage: Запрос был прерван: Время ожидания операции истекло.
02.08.2013 9:53:36: при загрузке страницы уточняющих частотностей возникла ошибка. Выполняем повторную (2) попытку загрузить информацию
по времени в статистике насчитал, что осталось еще 28 с лишним дней! (всего 1% завершен за прошедший день)
всего поисковых фраз более 300 000
нельзя ли как-то ускорить процесс? Если можно, подскажите в чем причина?
Спасибо

В кейколлекторе процесс ускорить можно. На счет словоёба необходимо упрашивать у разработчика. Возможно эту опцию они из него исключили.


Записан



Да, разработчики написали, что для словоёба только если увеличить таймауты — одно решение.
Неужели действительно нет другого выхода? Что тогда все нахваливают эту прогу?


Записан



  • Печать

Страниц: [1] 2   Вверх

Страница 7 из 7

  1. А чего сами не сделаете несколько «левых» почт?

  2. Потому что нужно несколько сотен, зареганых на российские номера.

  3. А ни у кого нет видео с марафона пузата по СЯ? Когда-то на марафоне местном давали ссылку, но она сейчас не работает… А у меня по тому видео с КК все замечательно получалось. А сейчас что-то не идет совсем. Не собирает, и все:(

  4. Девочки, была с сайтом на длительном перерыве, сейчас на карантине появилось свободное время ним заняться. начала искать ключи в кк, все хорошо, собрало. Но когда нажимаю найти частоту к ним, не ищет и пишет:
    25.03.2020 15:13:24 ошибка NetworkMethods.LoadPage: Невозможно соединиться с удаленным сервером (no proxy)

    в чем может быть проблема?

    просто странно, что ключи нашло, а частоту нет.@

    Последнее редактирование модератором: 25 мар 2020

  5. У меня нормально работает. Если проблема осталась, то стоит сообщить разработчикам. Уверена, что ребята подскажут, что сделать.

  6. сообщила. сказали обновить, а я его итак обновила….

  7. Всё оказалось так просто и всё

Страница 7 из 7

Как правильно настроить словоёб, для работы с прокси?
Сбор ключей в один поток, без прокси работает отлично, но хотелось бы настроить сбор в три потока, но к сожалению возникает ошибка при добавлении прокси.

Мои настройки — первый вариант:

  1. Настройки/Парсер/Yandex.Direct — тут прописал список аккаунов яндекса в формате ЛогинЯндекса:ПарольЯндекса (также есть формат: прокси:порт:#ЛогинПрокси:ПарольПрокси:ЛогинЯндекса:ПарольЯндекса)
  2. Настройки/Сеть — Загрузил из файла прокси, которые взяты по ссылке hidemy.name/ru/proxy-list/?country=RU&maxtime=400#list

Код:

19.09.2020 18:22:14: ошибка NetworkMethods.LoadPage: Базовое соединение закрыто: Соединение было неожиданно закрыто. (http://188.247.39.14:43032/)
19.09.2020 18:22:14: an error occured while determining the domain name (proxy: 188.247.39.14:43032)
19.09.2020 18:22:30: ошибка NetworkMethods.LoadPage: Невозможно соединиться с удаленным сервером (http://95.84.141.162:3629/)
19.09.2020 18:22:30: an error occured while determining the domain name (proxy: 95.84.141.162:3629)
19.09.2020 18:23:06: ошибка NetworkMethods.LoadPage: Невозможно соединиться с удаленным сервером (http://109.167.226.107:53930/)
19.09.2020 18:23:06: an error occured while determining the domain name (proxy: 109.167.226.107:53930)
19.09.2020 18:23:27: ошибка NetworkMethods.LoadPage: Базовое соединение закрыто: Непредвиденная ошибка при приеме. (http://188.235.133.102:1080/)
19.09.2020 18:23:27: an error occured while determining the domain name (proxy: 188.235.133.102:1080)
19.09.2020 18:23:43: ошибка NetworkMethods.LoadPage: Невозможно соединиться с удаленным сервером (http://158.58.131.27:53058/)
19.09.2020 18:23:43: an error occured while determining the domain name (proxy: 158.58.131.27:53058)
19.09.2020 18:24:19: ошибка NetworkMethods.LoadPage: Невозможно соединиться с удаленным сервером (http://212.67.0.150:50090/)
19.09.2020 18:24:19: an error occured while determining the domain name (proxy: 212.67.0.150:50090)
19.09.2020 18:24:38: ошибка NetworkMethods.LoadPage: Базовое соединение закрыто: Соединение было неожиданно закрыто. (http://195.239.7.18:35746/)
19.09.2020 18:24:38: an error occured while determining the domain name (proxy: 195.239.7.18:35746)
19.09.2020 18:24:49: ошибка NetworkMethods.LoadPage: Базовое соединение закрыто: Соединение было неожиданно закрыто. (http://83.219.158.123:4145/)
19.09.2020 18:24:49: an error occured while determining the domain name (proxy: 83.219.158.123:4145)
19.09.2020 18:24:54: ошибка NetworkMethods.LoadPage: Базовое соединение закрыто: Соединение было неожиданно закрыто. (http://77.233.10.37:33683/)
19.09.2020 18:24:54: an error occured while determining the domain name (proxy: 77.233.10.37:33683)
19.09.2020 18:25:30: ошибка NetworkMethods.LoadPage: Невозможно соединиться с удаленным сервером (http://109.252.255.162:38500/)
19.09.2020 18:25:30: an error occured while determining the domain name (proxy: 109.252.255.162:38500)
19.09.2020 18:25:34: ошибка NetworkMethods.LoadPage: Базовое соединение закрыто: Непредвиденная ошибка при приеме. (http://109.201.96.222:4145/)
19.09.2020 18:25:34: an error occured while determining the domain name (proxy: 109.201.96.222:4145)
19.09.2020 18:25:50: ошибка NetworkMethods.LoadPage: Невозможно соединиться с удаленным сервером (http://178.47.141.196:4145/)
19.09.2020 18:25:50: an error occured while determining the domain name (proxy: 178.47.141.196:4145)
19.09.2020 18:25:54: ошибка NetworkMethods.LoadPage: Базовое соединение закрыто: Соединение было неожиданно закрыто. (http://37.235.203.91:4145/)
19.09.2020 18:25:54: an error occured while determining the domain name (proxy: 37.235.203.91:4145)
19.09.2020 18:26:42: ошибка NetworkMethods.LoadPage: Время ожидания операции истекло (http://185.123.194.28:3629/)
19.09.2020 18:26:42: an error occured while determining the domain name (proxy: 185.123.194.28:3629)
19.09.2020 18:26:58: ошибка NetworkMethods.LoadPage: Невозможно соединиться с удаленным сервером (http://194.226.109.76:4153/)
19.09.2020 18:26:59: an error occured while determining the domain name (proxy: 194.226.109.76:4153)
19.09.2020 18:27:03: ошибка NetworkMethods.LoadPage: Базовое соединение закрыто: Непредвиденная ошибка при приеме. (http://176.114.228.40:44604/)
19.09.2020 18:27:03: an error occured while determining the domain name (proxy: 176.114.228.40:44604)
19.09.2020 18:27:07: ошибка NetworkMethods.LoadPage: Базовое соединение закрыто: Непредвиденная ошибка при приеме. (http://88.84.212.14:4145/)
19.09.2020 18:27:07: an error occured while determining the domain name (proxy: 88.84.212.14:4145)
19.09.2020 18:27:23: ошибка NetworkMethods.LoadPage: Невозможно соединиться с удаленным сервером (http://46.254.240.106:43310/)
19.09.2020 18:27:23: an error occured while determining the domain name (proxy: 46.254.240.106:43310)
19.09.2020 18:27:39: ошибка NetworkMethods.LoadPage: Невозможно соединиться с удаленным сервером (http://109.197.93.133:43797/)
19.09.2020 18:27:39: an error occured while determining the domain name (proxy: 109.197.93.133:43797)
19.09.2020 18:27:55: ошибка NetworkMethods.LoadPage: Невозможно соединиться с удаленным сервером (http://92.255.185.6:4145/)
19.09.2020 18:27:55: an error occured while determining the domain name (proxy: 92.255.185.6:4145)
19.09.2020 18:28:18: ошибка NetworkMethods.LoadPage: Базовое соединение закрыто: Соединение было неожиданно закрыто. (http://178.57.89.142:32916/)
19.09.2020 18:28:18: an error occured while determining the domain name (proxy: 178.57.89.142:32916)
19.09.2020 18:28:36: ошибка NetworkMethods.LoadPage: Базовое соединение закрыто: Соединение было неожиданно закрыто. (http://78.110.154.177:51676/)
19.09.2020 18:28:36: an error occured while determining the domain name (proxy: 78.110.154.177:51676)
19.09.2020 18:28:52: ошибка NetworkMethods.LoadPage: Невозможно соединиться с удаленным сервером (http://89.185.93.190:4145/)
19.09.2020 18:28:52: an error occured while determining the domain name (proxy: 89.185.93.190:4145)
19.09.2020 18:29:09: ошибка NetworkMethods.LoadPage: Невозможно соединиться с удаленным сервером (http://78.139.91.76:4145/)
19.09.2020 18:29:09: an error occured while determining the domain name (proxy: 78.139.91.76:4145)
19.09.2020 18:29:25: ошибка NetworkMethods.LoadPage: Базовое соединение закрыто: Непредвиденная ошибка при приеме. (http://94.180.253.213:1080/)
19.09.2020 18:29:25: an error occured while determining the domain name (proxy: 94.180.253.213:1080)
19.09.2020 18:29:59: ошибка NetworkMethods.LoadPage: Базовое соединение закрыто: Соединение было неожиданно закрыто. (http://95.181.214.105:3629/)
19.09.2020 18:29:59: an error occured while determining the domain name (proxy: 95.181.214.105:3629)
19.09.2020 18:30:17: принят запрос на остановку сбора
19.09.2020 18:30:29: ошибка NetworkMethods.LoadPage: Невозможно соединиться с удаленным сервером (http://31.41.225.205:45067/)
19.09.2020 18:30:29: an error occured while determining the domain name (proxy: 31.41.225.205:45067)
19.09.2020 18:30:31: процесс сбора левой колонки Yandex.Wordstat для фразы "Ключ Фраза" был завершен не полностью

Мои настройки — второй вариант:

  1. Настройки/Парсер/Yandex.Direct — тут прописал список аккаунов яндекса в формате #ЛогинПрокси:ПарольПрокси:ЛогинЯндекса:ПарольЯндекса

Код:

19.09.2020 19:03:09: кол-во потоков Yandex.Wordstat ограничено числом аккаунтов Yandex.Direct: 1
19.09.2020 19:03:09: процесс сбора левой колонки Yandex.Wordstat для фразы "Ключ Фраза" начат
19.09.2020 19:03:23: ошибка NetworkMethods.LoadPage: Невозможно соединиться с удаленным сервером (http://192.162.193.243:54313/)

P.S
Ещё подскажите, где взять бесплатные прокси-листы. Не помню уже как называется, но раньше был сайт (такой досовский синий), я там брал, щас не могу его найти.

Key Collector — незаменимый инструмент при сборе семантического ядра для сайта или контекстной рекламы. Но прежде чем запускать парсинг, программу необходимо грамотно настроить. Это позволит провести сбор фраз максимально быстро и с наименьшими затратами на антикапчу.

В этой статье мы пройдемся по основным настройкам программы, подготовим инструмент, а уже саму методику сбора, чистки и расширения семантики будем рассматривать в других статьях. Эта статья открывает цикл материалов, посвященных работе с Key Collector.

Весь цикл статей:

  1. Настройка Key Collector для сбора (эта статья)
  2. Методика сбора (парсинга) фраз в Key Collector.
  3. Эффективная чистка в Key Collector.
  4. Принципы группировки (кластеризации) фраз в Key Collector (в работе, ссылка появится позже)
  5. Учет, фильтры и лайфхаки при работе в Key Collector (в работе, ссылка появится позже)

Установка программы

Если вы еще не знакомы с программой Key Collector, то ее необходимо скачать здесь. Там даны указания по тому, каким образом осуществляется покупка и установка программы. После того, как программа установлена и активирована можно переходить к следующему шагу.

Важно! Key Collector — программа, которая работает под Windows и на компьютеры Mac (Macbook, Macbook Air) с OSx не установится. Обойти это ограничение можно установкой виртуальной машины Windows, к примеру посредством утилиты Parallels Desktop.

Прокси и аккаунты Яндекс.Директ

Для работы с Key Collector мы настоятельно рекомендуем приобрести (взять в аренду на неделю или на месяц) как минимум 1 прокси-сервер. Это необходимо для того, чтобы обезопасить свой основной IP адрес от возможных блокировок, которые могут возникнуть в ходе работы Key Collector со статистическими источниками типа Яндекс.Вордстат и Яндекс.Директ.

Одного прокси будет вполне достаточно, чтобы потренироваться и понять принцип работы программы. Хорошие, индивидуальные прокси предоставляет сайт proxy-sale.com. Берем те, что для работы в Key Collector.

После покупки сервис высылает вам на почту учетные данные прокси и свежий аккаунт Яндекс.Директа, который также нам потребуется. В дальнейшем, при необходимости количество прокси можно будет увеличить, просто докупив (арендовав) столько сколько нужно. 

Сейчас нам нужно просто понять принцип настройки Key Collector, а дальнейшую докрутку можно будет сделать потом.

Переходим в настройки программы — нажимаем на иконку «шестеренки» в панели управления.

Фото 1: Меню настроек Key Collector.

Учетки для Yandex.Direct

Переходим в раздел настроек “Yandex.Direct” (Парсинг -> Yandex.Direct).

Вводим необходимые данные: логин и пароль от аккаунта Яндекс.Директ, IP прокси, порт, логин и пароль. Эти данные должны быть в письме, которое вы получили от proxy-sale. Вы можете добавить прокси вручную построчно или добавить из буфера обмена списком. Обратите внимание на формат, который требует Key Collector при вводе данных списком. Будьте внимательны и не перепутайте логин и пароль от учетки Яндекс.Директ с логином и паролем прокси сервера.

Фото 2: На первом шаге мы только вносим данные учетки и прокси, настройки будем делать потом. Это уменьшит количество ошибок и возможных проблем.

Сейчас, мы внесли данные и, тем самым, привязали учетку Яндекс.Директ к прокси серверу. Теперь все запросы в Yandex.Wordstat, Yandex.Direct или поисковую выдачу будут идти с одного и того же IP адреса (IP адрес прокси сервера) и с одной и той же учетки.

Такая привязка значительно повышает стабильность парсинга, уменьшает количество показов капчи (проверки на робота), что в итоге приводит к более быстрому сбору данных и уменьшению общего времени, затрачиваемого на сбор.

После того, как данные внесены, нам необходимо установить количество потоков в блоке 2 равным количеству прокси, которые мы приобрели. В нашем случае устанавливаем это значение равным 1 и переходим к следующему этапу.

Вкладка «Сеть»

Сюда мы должны добавить наш(и) прокси и установить ряд дополнительных настроек.

Фото 3: Основные зоны интереса во вкладке «Сеть».

Первым делом добавляем прокси в таблицу №1, отмеченную на скриншоте . Можно внести построчно, вручную или нажать кнопку «Добавить из буфера» и внести списком. Указываем IP сервера, порт, логин и пароль прокси сервера (не учетки Яндекс.Директа!). Берем эти данные из письма, которое прислал нам сервис, в котором мы приобрели прокси.

Обратите внимание на формат, который требует Key Collector, при внесении прокси списком! Если вы часто меняете прокси и работаете с большим объемом данных, то мы рекомендуем сделать формулу в Google Spreadsheets, которая бы приводила данные в нужный для Key Collector формат.

Основные настройки (2)
  1. Использовать прокси серверы. Включаем данную опцию поставив галочку, HTTP остается без изменений. Для простоты, мы будем использовать HTTP прокси. SOCKS протокол требует большей сноровки и опыта и в некоторых случаях работает с ошибками, что может привести к невозможности продолжения работы.
  2. Деактивация прокси, не прошедших проверку. Включаем, это мера предосторожности в случае, если возникли какие-то проблемы с прокси. После 360 секунд системой будет проведена повторная попытка подключения.
Проверка прокси (3)

Выставляем количество количество потоков равным количеству прокси. Т.е. если у нас 1 прокси, то ставим 1.

После этого мы отмечаем наши прокси галочкой (активируем их), чтобы каждая строка в блоке 1 была выделена зеленым цветом и запускаем проверки (одну за другой, по очереди):

  1. Проверить в ПС Yandex
  2. Проверить в Yandex.Wordstat

Проверки нужны для того, чтобы понять все ли в порядке с настройками, учеткой Яндекс.Директ и прокси сервером(ами). Если Key Collector заблокировал прокси (пометил строку красным цветом) в блоке 1 после проверки через ПС Яндекс, то проблема в настройке самого прокси сервера. Возможно, неверно введен логин, пароль или порт прокси сервера. Если же прокси не прошел проверку через Yandex.Wordstat, то проблема уже в настройках учетки Яндекс.Директ.

Последовательная проверка позволяет быстро локализовать ошибку и оперативно исправить причину.

Антикапча

Для автономной работы программы нам необходимо будет зарегистрироваться в сервисах, которые предоставляют услуги “Антикапчи”. Бюджет на данные сервисы нужен небольшой, однако это позволит использовать КК в автономной режиме. Ниже представлен перечень поддерживаемых Кей Коллектором сервисов:

Фото 4: Перечень сервисов, которые поддерживаются программой и предоставляют услуги по разгадыванию капчи.

Выбираем понравившийся сервис и регистрируемся в нем. Вносим 100-500р на баланс, получаем API ключ, который нужно будет внести в настройки ниже.

Фото 5: Настройки антикапчи (автоматическое распознавание captcha).

В ходе парсинга, статистические источники показывают пользователю капчу (проверка на робота), чтобы убедиться, что их использует человек и чтобы ограничить автоматический парсинг.

Во вкладке Настройки -> Антикапча -> Автораспознавание необходимо выбрать сервис, который вы решили использовать и ввести предоставленный вам ключ. После ввода ключа следует перезагрузить программу, чтобы Key Collector активировал ключ.

Также, вы можете ввести ограничение капч на один сеанс, то есть если в ходе сбора данных количество капч будет превышать указанный параметр — антикапча перестает работать. После перезапуска Кей Коллектора счетчик сбрасывается. Мы рекомендуем указать значение параметра равным 5000.

Настройки парсинга

Первым в списке настроек программы находится большой раздел «Парсинг», который отвечает за настройку сбора данных из разных источников.

Общие настройки

Настраиваем раздел “Общие” следующим образом:

Фото 6: Основные настройки парсинга.

Основные комментарии к настройке:

  1. Добавлять в таблицу фразы, содержащие не более N слов. Как показывает практика, оптимальным количеством слов является 10. Именно с этим числом мы можем получить как высокочастотные, так и среднечастотные и низкочастотные запросы. Хвост запроса мы терять не хотим, однако и сбор пустых по частотности запросов нас тоже не интересует. 10 слов в запросе вполне отвечает данным требованиям.
  2. Количество повторных попыток загрузки страниц. В случае сбоя именно это количество повторных попыток сделает программа. Стандартное значение 30. Не меняем его, т.к. этого вполне достаточно для корректной работы программы.
  3. Таймаут ожидания ответа от сервиса. Время ожидания загрузки страниц из сервисов. Стандартная настройка в 30000 мс подойдет для проектов любого размера.
  4. Режим сбора. В данном пункте должно быть отмечено “Строки с неполученными данными” — для строк с отсутствующей информацией будут собираться данные в программе, это сократит время сбора, так как не будет повторных проверок уже заполненных данных.
  5. Фильтрация символов. В примере указан довольно большой перечень символов, который будет удаляться при парсинге. Нас не интересует экспрессивность выражения потребностей пользователя в поиске, а интересует сам смысл его запроса. В то же время, такие символы как “-” и “.” могут употребляться разными пользователями по-разному, например со знанием правил написания того или иного запроса и без. Чтобы привести все к единому виду, заменяем данные символы на пробел. Замена буквы ё на е так же является корректировкой различия между запросами пользователя. Нет разницы, поступил запрос в формате ёжик или ежик, так как они несут один семантический смысл. Поэтому для удобства приводим все фразы к единому виду по данному параметру.
  6. Приводить слова в нижний регистр. Также является удобной настройкой для приведения всех фраз к единому формату.

Наша конечная цель — получить список ключевых фраз в едином, понятном формате. Это упростит дальнейшую работу и облегчит процесс чистки и поиска дублей.

Yandex.Wordstat

Для сбора с Вордстата программа использует аккаунты, прописанные в настройках Яндекс.Директа (Настройки -> Парсинг -> Yandex.Direct), которые мы заполнили ранее.

Фото 7: Настройки парсинга Yandex.Wordstat.

Комментарии к настройке:

  1. “Глубина парсинга” и “Парсить страниц”. Глубина парсинга работает только для сбора ключевых фраз. Для глубины парсинга рекомендуемое значение 0. Если мы ставим значение отличное от 0, то Key Collector будет делать парсинг вложенных фраз (фраз, которые «приехали» в результате прошлой попытки сбора). Потенциально, такой подход может вылиться в непредсказуемое время на парсинг ключей, т.к. мы никогда не знаем какое количество фраз мы получим при сборе той или иной фразы. Стратегию парсинга мы будем более подробно рассматривать в других статьях. Пока, для оптимального результата ставим 0 для глубины парсинга и 40 для количества страниц.
  2. Добавлять в таблицу фразы с частотами от X до Y. Мы можем задать минимальную частоту фразы для сбора сразу на этапе парсинга. Однако диапазон лучше оставить максимальным, чтобы не упустить интересные формулировки и запросы. В последующем мы сможем избавиться от низкочастотных запросов в пару кликов.
  3. Не снимать частоты для фраз с базовой частотой равной или ниже чем N. Данная настройка позволяет нам экономить время сбора данных при настройке на 0, так как базовая частота 0 нас в общем то не интересует, это пустые фразы, по которым нет спроса.
  4. Автоматически записывать 0 в колонки частот “ “ и “!”, если базовая частота 0. Опять же экономия времени на проверку частотности, так как данные автоматически будут заполнены, мы не будем собирать для них указанные частоты.
  5. Маска запросов пользовательского формата. Выставляем значение “[!QUERY]”, таким образом мы автоматически проставим нужные операторы для  запросов и получим максимально точные цифры.
  6. Задержки между запросами от X до Y. Как показывает практика, значение от 25000 до 30000 вполне уместно и является близким к естественному. При возникновении блокировок мы всегда сможем изменить данный параметр в большую сторону.
  7. Деактивация потоков. Количество потоков ставим равному количеству прокси серверов, которые мы настроили на прошлом этапе. Деактивацию потоков выставляем так, как указано на скриншоте. Система будет уменьшать кол-во потоков если по какой то причине прокси сервер выходит из строя, что нам и нужно.
  8. При использовании группировки по месяцам. В данном случае оптимально будет установить “последний год” для учета актуальных данных.
  9. Настройки режима “Собрать все виды частот”. Здесь вы можете настроить какие частоты надо собрать при использовании данного инструмента. Можно ничего не менять, т.к. в дальнейшем, при сборе мы всегда будем собирать частотности последовательно.

Фото 8: Можно задать какие именно частоты будут собираться при выборе опции «Собрать все виды частот».

Yandex.Direct

Фото 9: Настройки работы с сервисом Yandex.Direct.

  1. Задержки между запросами. Задержку между запросами лучше установить от 10000 до 15000 мс, чтобы не получить блокировку и не нагружать систему. Директ очень чувствителен к парсингу и выдает много капч при агрессивном сборе.
  2. Количество потоков. Ставим кол-во потоков равным количеству прокси. Настройки деактивации ставим как указано на скриншоте.

Google Adwords

Настройки источников Google Adwords как правило остаются стандартными, так как имеют ограничения, о которых нас предупреждает Кей Коллектор.

Фото 10: Настройки Google Adwords.

В целом, менять их нет необходимости. Использование точной частоты из Google Adwords когда-то использовалось для инструмента “Анализ неявных дублей”, так как точная частотность из Adwords учитывает порядок слов. На данный момент эту задачу решает сбор точной частотности по маске QUERY через Яндекс (так называемый оператор скобки [], учитывающий последовательность слов в фразе).

Rambler Adstat

Настройки для Rambler Adstat также оставить в стандартном режиме, так как данная система не используется в сборе данных. Подсказки из Rambler можно получить без регистрации и настройки аккаунтов. В целом, Rambler Adstat — устаревший инструмент и не содержит нужного объема семантики для того, чтобы было уместным тратить время на сбор данных из него. Об актуальных на сегодняшний день источниках можно прочитать в этой статье.

Фото 11: Настройки Rambler Adstat.

Поисковая выдача

Во вкладке “Поисковая выдача” меняем количество потоков в зависимости от количества прокси, отключаем использование основного IP адреса и переключаем режим деактивации потоков.

Блок настроек Yandex.XML игнорируем и не меняем там ничего. В нашей работе мы не будем пользоваться XML сервисом Яндекса, поэтому активировать его нет необходимости.

Фото 12: Настройки работы с поисковой выдачей Yandex.

Устанавливаем кол-во потоков и настройки деактивации одинаково для всех источников, с которыми мы собираемся работать: Yandex, Google, YouTube, Mail.ru.

Фото 13: Настройки работы с поисковой выдачей Google, YouTube, Mail.ru.

Подсказки

В разделе “Подсказки» проводим аналогичные настройки: выставляем количество потоков в зависимости от количества прокси, отключаем использование основного IP адреса и меняем режим деактивации потоков.

Фото 14: Настройки работы с поисковыми подсказками.

Mail.ru

Mail.ru не используется напрямую в ходе парсинга как источник, однако проводим настройку аналогичную подсказкам и выдаче: количество потоков, их деактивация и ограничение использования основного IP адреса.

Фото 15: Настройки работы со статистикой Mail.ru.

Прочее

Раздел “Прочее” включает в себя две настройки, которые можно оставить в стандартном положении. Мы будем использовать антикапчу, поэтому нам выгодно оставить все как есть и имитировать разгадывание капчи (разумеется через сервис антикапчи) с того же самого IP адреса, которому она была показана поисковой системой. Это благоприятно влияет на стабильность парсинга и уменьшает количество капч, которые показывают сервисы.

Фото 16: Прочие настройки Key Collector.

Итоги

Итак, мы прошлись по основным настройкам Key Collector, подготовили инструмент для парсинга в автономном режиме.


Первоначальная настройка инструмента действительно может занять немало времени, но сэкономит вам много времени в дальнейшем, т.к. настроенная подобным образом программа работает на автопилоте и не требует внимания и контроля. Ее можно установить на виртуальную машину и оставить на ночь, не переживая о том, что парсинг остановится по той или иной причине.

В следующих статьях мы рассмотрим стратегию парсинга ключей, которая дает полную семантику. Эта стратегия одинаково хорошо подходит как для сбора семантического ядра для сайта, так и для семантики под контекстную рекламу, например для Яндекс.Директ.

semyadro.pro

ускоряем парсинг ключевых слов без блокировки аккаунта

Приветствую всех пользователей программы Key Collector!

В сегодняшней статье я расскажу вам о способах ускорения такого процесса, как парсинг ключевых слов. Помимо этого, раскрою одну из самых частых проблем при работе с программой – блокировка аккаунтов и прокси серверов. Почему Key Collector их блокирует? Как избежать блокировки личного IP?

Все это вы узнаете из статьи.

Способы ускорения программы Key Collector

Лично я столкнулся с проблемой медленного парсинга слов, когда мне поступил срочный заказ. Необходимо было собрать семантику для информационного сайта. Заказчик не мог ждать – сроки были четко обозначены. Как известно, ключи собираются в течение суток. Я не располагал таким временем.

Тогда я решил действовать. Я уже несколько раз слышал об удобстве использования прокси серверов, но до того момента у меня не было нужды ими пользоваться. Я решил проверить, действительно ли прокси сервера ускоряют сбор ключевых слов в Key Collector. Все равно ведь попытка не пытка!

Я купил:

Поначалу у меня не получалось правильно настроить работу прокси и аккаунтов, поскольку я в этом деле новичок. Но благодаря службе поддержки, которая была отзывчивой и терпеливой, у меня все получилось! Прокси сервера действительно ускорили процесс сборки ключевых слов, и я смог сдать заказ вовремя.

Несколько советов по настройке прокси и аккаунтов

Чтобы вам не пришлось мучиться, как мне, набивая шишки при загрузке прокси и аккаунтов, ознакомьтесь с моими рекомендациями по работе.

Полезные советы:

  • Аккаунты загружайте вместе с прокси серверами.

  • Ставьте в два раза меньше потоков, чем аккаунтов и прокси. Так как у меня было 20 прокси и столько же аккаунтов, я выставил 10 потоков.

Совета всего два, но зато сколько пользы они принесут! Я убедился в этом на личном опыте. Мне не пришлось ждать сутки для сборки ключевых слов – я все сделал за пару часов.

Причины блокировки личного IP

Проблема, с которой часто сталкиваются пользователи программы Key Collector. Почему это происходит?

Дело в том, что ключевые слова в основном собираются через Яндекс Вордстат. И если вы часто будете парсить слова с одного аккаунта, Яндекс воспримет это как подозрительное действие. В результате ваш аккаунт улетит в бан. Конечно, потом IP разблокируют. Но согласитесь, неприятно попадать в бан и нарушать ритм работы. Ведь блокировка может длиться как пару часов, так и пару дней. Все зависит от объема вашей работы и частоты использования аккаунта. В общем, блокировка – это зло.

Как избежать блокировки IP в Key Collector

Чтобы избежать блокировки, нужно работать с нескольких аккаунтов и активно пользоваться прокси серверами. Вот и весь секрет! Когда поступают запросы с разных IP, Яндекс сортирует их между собой. Бот Яндекса не замечает подозрительной активности, следовательно, работать можно без волнений и переживаний по поводу блокировки. С прокси она вам не страшна!

Моя статья подходит к концу. Давайте подведем итоги:

  • Для ускорения парсинга ключевых слов необходимо использовать прокси.

  • При настройках прокси серверов загружать их нужно вместе с аккаунтами.

  • Потоков должно быть в два раза больше, чем прокси.

  • Использование нескольких аккаунтов и прокси для кей коллектора убережет ваш IP от блокировки.

Надеюсь, материал был вам полезен! Прощаюсь с вами и желаю удачной работы в Key Collector!

Статью прислал Александр Бойко (Клиент нашего сервиса).

proxys.io

SE::Yandex::Register — Позволяет регистрировать аккаунты в Yandex | A-Parser

  • Возможности(top)

    • Автоматически регистрирует аккаунты по количеству запросов используя AntiGate.

    *На скриншоте пример регистрации 1000 аккаунтов за 15 минут. Скорость ограничена возможностями антигейта.

    Варианты использования(top)

    • Создание аккаунтов для использования в парсерах SE::Yandex::WordStat и SE::Yandex::WordStat::ByDate

    Запросы(top)

    • Необходимо указать нужное количество запросов. Их можно задать макросом в поле «Enter queries»(«Введите запросы»), например:

    {num:1:20}

    Нажмите, чтобы раскрыть…

    * В данном примере парсер зарегистрирует 20 аккаунтов

    Результаты(top)

    • В результате сохраняет список аккаунтов логин;пароль:

    [email protected];xobgbygi
    [email protected];cropssyo
    [email protected];foqxvpjy
    [email protected];zsiofjew
    [email protected];adppfssz

    Нажмите, чтобы раскрыть…

    • Также можно выводить ответ на секретный вопрос (переменная $answer), кроме этого сам вопрос и ответ — одинаковы

    *Если у вас уже есть аккаунты, то можно просто добавить существующие аккаунты в файл files/SE-Yandex/accounts.txt в формате:

    [email protected];password
    [email protected];password2

    Нажмите, чтобы раскрыть…

    Возможные настройки(top)

    Общие настройки для всех парсеров

    Параметр Значение по умолчанию Описание
    AntiGate preset default Пресет парсера Util:AntiGate. Необходимо предварительно настроить парсер Util::AntiGate — указать свой ключ доступа и другие параметры, после чего выбрать созданный пресет здесь

    Полезные ссылки(top)

    Пример настройки Антигейта

a-parser.com

Парсер контактов из выдачи Яндекса

Скачай прямо сейчас!Скачай прямо сейчас!Покупаю прямо сейчас!Покупаю прямо сейчас!

Часто возникает необходимость собрать контакты по ключевым словам. Для этой цели сделан наш парсер выдачи Яндекса по ключевым словам. Он собирает контакты, которые выдает Яндекс прямо в сниппетах результатов поиска. Кроме того, парсер может заходить на сайты, и искать там электронную почту (email) и телефоны! Ключевые слова можно задавать списком, и парсер будет последовательно обходить все заданные ключевые слова по заданным регионам.

Результат работы программы: база email и телефонов, сегментированная по запросам и регионам.

Предлагаемая нами программа-парсер базы емейл и телефонов из Яндекса, позволяет собирать следующую информацию:

  • Запрос (ключевое слово)
  • Регион
  • Ссылка на сайт
  • Домен из ссылки
  • Телефоны с сайта
  • Адрес электронной почты (email) с сайта
  • Адрес компании
  • Код телефона
  • Номер телефона
  • Номер позиции
  • Номер страницы

Программа умеет работать с сервисом автоматического распознавания капчи для разгадки выдаваемых Яндексом картинок. Вам необходимо иметь аккаунт в этом сервисе для пользования парсером. Минимального баланса в 1$ обычно хватает на несколько месяцев использования антикапчи.
Программа позволяет задать интервал между запросами к сервису, для снижения интенсивности появления капчи. Кроме того, имеется возможность регулировать количество выгружаемых страниц выдачи для каждого ключевого слова.

Программа умеет заходить на сайты, и искать там адреса электронной почты. Вы можете задать лимит страниц, которые будут загружаться на каждом сайте (по умолчанию программа просмотрит 10 страниц). Для того, чтобы страницы контактов с большей вероятностью попали в заданный лимит, и были просканированы, сделан список приоритетных маркеров, которые программа ищет в ссылках. Например, если в ссылке программа найдет слово «контакты», она передвинет ссылку в начало списка найденных ссылок (без этого, ссылка может оказаться на 11м месте, и при лимите в 10 ссылок, она не будет просмотрена). Посмотреть и изменить список приоритетных маркеров можно в файле prioritymarkers в папке программы. Для того, чтобы сэкономить время на сканировании бесполезных с точки зрения поиска ящиков сайтов (например VK.com), есть список блокируемых доменов, на которых сканирование почты не производится. Посмотреть и изменить список таких доменов можно в файле stopdomains в папке программы.
Функция поиска электронной почты на сайтах является подключаемой — установите галочку сканирования, чтобы программа заходила на сайты.
В результате, при выгрузке данных в режиме сканирования почты на сайтах, Вы получаете список ящиков Email по нужным Вам запросам.

После завершения работы программы файл с результатами автоматически открывается в Excel (если установлен MS Office) или Calc (если установлен OpenOffice). Файл имеет имя вида results-***.csv. Результатом сбора являются такие файлы: пример файла с выгрузкой контактов из выдачи Яндекса.

Файл Excel с контактными данными из выдачи ЯндексаФайл Excel с контактными данными из выдачи Яндекса

Файл Excel с данными, собранными из выдачи Яндекса

Программа очень проста в использовании и имеет интуитивно понятный интерфейс.

Скриншот парсера поисковой выдачи ЯндексаСкриншот парсера поисковой выдачи Яндекса

Скачать демо-версию парсера выдачи Яндекса по запросам
 

Программа умеет приостанавливать свою работу, и продолжать её. Паузу можно включать вручную, а если отключится интернет — программа поставит себя на паузу автоматически. Если во время сбора на сайте возникнет ошибка, и программа не сможет получить данные — она поставит себя на паузу на некоторое время, затем автоматически проснется и сделает еще несколько попыток получить те же данные.

Два индикатора показывают ход выполнения работы. Синий показывает прогресс по списку заданных регионов, зеленый индикатор показывает прогресс по списку заданных ключевых слов.

Стоимость парсера сегодня: 5.000Р   3000р!

100% безопасности!100% безопасности!

Чтобы приобрести нашу программу для выгрузки контактов из поисковой выдачи Яндекса по заданному списку запросов и регионов, укажите в данной форме имя, email, и способ оплаты (Webmoney / ЯД / Paypal / Liqpay / Qiwi / Visa / Mastercard / наличные / другое). После нажатия кнопки «Заказать!» вы получите на указанный ящик ДЕМО-версию и все подробности об условиях приобретения программы, о процедуре оплаты, о техподдержке и обновлениях.

Хотите заказать подобную программу для других сайтов —  закажите у нас создание парсера.

Заказать разработку парсера!

soksaitov.ru

Справка по кодам ошибок Key Collector

не удалось авторизоваться в сервисе Yandex.Direct [для Yandex.Direct] (ошибка 3)
возникла ошибка при авторизации в Yandex.Direct для аккаунта

Возможно, что аккаунт не прошел до конца процедуру первичной регистрации. Пожалуйста, откройте окно браузера и в режиме «инкогнито» войдите в указанный аккаунт, а затем попробуйте вручную собрать тот же вид статистики. Если операция пройдет успешно, то повторите попытку сбора в программе.

Если ошибка продолжает возникать для того же самого аккаунта, пожалуйста, обратитесь в службу технической поддержки.

аккаунт Yandex.Direct [для Yandex.Direct] был отключен из списка активных по причине достижения лимита количества капчей

Ошибка означает, что в целях обеспечения безопасности для аккаунта он был автоматически исключен из очереди на использование из того, что на нем попалось слишком много капчи. Максимальный лимит капчи для каждого аккаунта вы можете задать в «Настройках — Парсинг — Yandex.Direct». При желании вы можете увеличить этот лимит, например, до значения 50 или 90. Также в случае работы через несколько аккаутов для того, чтобы процесс сбора не останавливался раньше времени, на этой же вкладке настроек выберите 2й из 3х доступных режимов деактивации потоков.

не удалось авторизоваться в сервисе Yandex.Direct [для Yandex.Direct] (ошибка 2.1: используемый прокси-сервер «XXX» вернул ошибку 407 (ошибка авторизации))

Используемый вами прокси-сервер вернул код ошибки 407, которая однозначно говорит о том, что при попытке обращения к нему были переданы неверная пара логин/пароль или же прокси-сервер имеет защиту доступа по IP-адресу, и ваш текущий IP-адрес не соответствует настроенному на стороне прокси-сервера.

Пожалуйста, проверьте логин и пароль для прокси-сервера в «Настройках — Сеть» и в «Настройках — Парсинг — Yandex.Direct» (в случае, если вы указывали прокси-сервер вместе с аккаунтом вручную). После этого в «Настройках — Парсинг — Yandex.Direct» нажмите кнопку «Принудительно очистить данные об авторизации» и не забудьте нажать кнопку «Сохранить изменения» в нижней части окна настроек.

фраза «XXX» не может быть отправлена на анализ в Yandex.Direct, т.к. она содержит запрещенные символы
фраза «XXX» не может быть отправлена на анализ в Yandex.Direct, т.к. в ней нарушен синтаксис минус-слов
фраза «XXX» не может быть отправлена на анализ в Yandex.Direct, т.к. она полностью состоит из стоп-слов

фраза «XXX» не может быть отправлена на анализ в Yandex.Direct, т.к. она содержит запрещенные или неправильно использованные символы
фраза «XXX» не может быть отправлена на анализ в Yandex.Direct, т.к. она содержит отдельные слова длиной больше 35 символов
фраза «XXX» не может быть отправлена на анализ в Yandex.Direct, т.к. она состоит более чем из 7 слов

Yandex.Direct может отвергать запрос, если в нем содержались недопустимые символы, если он был слишком длинным или в нем неверно были использованы операторы (!, «, +, -, []).

Пожалуйста, проверьте ваш запрос на валидность, если вы хотите получить по нему статистику. Чаще всего в запросах присутсвуют посторонние юникод-символы, лишь визуально похожие на настоящие буквы или пробелы. Также часто встречаются случаи, когда в запросе неправильно использованы операторы. Вы также можете проигнорировать это соощение об ошибке, если этот запрос не важен для вас.

В отличие от Yandex.Wordstat в Yandex.Direct действует дополнительное ограничение на длину проверяемых фраз (не более 7 слов). Если вам необходима статистика по частоте для таких фраз, вы можете собрать частоты через классический метод Yandex.Wordstat (кнопка с иконкой лупы на панели задач).

после удачной загрузки страницы Яндекс.Директ не были обнаружены признаки валидности страницы

Если этой ошибке предшествуют сетевые ошибки или ошибки прокси-серверов, то в первую очередь необходимо проверить их качество. Для этого нужно остановить сбор, выключить использование прокси-серверов, в «Настройках — Парсинг — Yandex.Direct» нажать кнопку «Принудительно очистить данные об авторизации» (если вы работали в многопоточном режиме, то уменьшите кол-во потоков до 1, т.к. прокси-серверы были только что отключены).

Если сетевых ошибок до этого не было, то попробуйте остановить сбор и в


«Настройках — Парсинг — Yandex.Direct»
нажать кнопку «Принудительно очистить данные об авторизации».

Также ошибка может возникать в случае изменения верстки на Yandex.Direct. В таких случаях вам нужно обновить программу до актуальной версии как только это будет возможно (обычно обновления против таких ошибок выходят в течение нескольких часов после обнаружения).

при сборе статистики Yandex.Direct ни для одной из фраз в отправленной на обработку пачке не была снята статистика

При работе с Yandex.Direct для достижения максимальной скорости сбора программа отправляет фразы на анализ пакетно (по несколько штук за раз).

Yandex.Direct может склеить похожие между собой фразы в отчете, что не даст программе возможности понять, какая статистика предназначалась для каждой из отправленных для анализа фраз.

Также ошибка встречается, когда одна или несколько фраз в пакете были недопустимыми для проверки. В этом случае Yandex.Direct не выдает результатов ни для одной из всех отправленных фраз.

В обоих случаях фразы попадают в конец очереди на анализ и будут проверены позже.

не удалось авторизоваться в сервисе Yandex.Direct [для Yandex.Wordstat] (ошибка 3)

Возможно, что аккаунт не прошел до конца процедуру первичной регистрации. Пожалуйста, откройте окно браузера и в режиме «инкогнито» войдите в указанный аккаунт, а затем попробуйте вручную собрать тот же вид статистики. Если операция пройдет успешно, то повторите попытку сбора в программе.

Если ошибка продолжает возникать для того же самого аккаунта, пожалуйста, обратитесь в службу технической поддержки.

при обработке запроса (XXX) Yandex.Wordstat вернул ошибку: «Неверно задан запрос»

Yandex.Wordstat может отвергать запрос, если в нем содержались недопустимые символы, если он был слишком длинным или в нем неверно были использованы операторы (!, «, +, -, []).

Пожалуйста, проверьте ваш запрос на валидность, если вы хотите получить по нему статистику. Чаще всего в запросах присутсвуют посторонние юникод-символы, лишь визуально похожие на настоящие буквы или пробелы. Также часто встречаются случаи, когда в запросе неправильно использованы операторы. Вы также можете проигнорировать это соощение об ошибке, если этот запрос не важен для вас.

поисковый запрос слишком длинный для Yandex.Wordstat и будет пропущен: «{0}»

Yandex.Wordstat может отвергать запрос, если он был слишком длинным.

Пожалуйста, проверьте ваш запрос на валидность, если вы хотите получить по нему статистику. Вы также можете проигнорировать это соощение об ошибке, если этот запрос не важен для вас.

ожидание ответа от Yandex.Wordstat при первичном обращении

Непосредственно после авторизации в аккаунте 1 раз за сеанс программа выполняет ожидание в соответствии с выставленными в «Настройках — Парсинг — Yandex.Wordstat»

задержками. Сообщение об окончании ожидания в журнале событий не предусмотрено: программа просто приступает к сбору статистики.

Обратите внимание, что результаты сбора в таблице могут появиться не сразу, т.к. по умолчанию в «Настройках — Интерфейс — Прочее» включена опция «Не обновлять таблицу при групповых операциях…» для оптимизации производительности.

невозможность установить подключение для помощника при работе с Google.Adwords

Ошибка может возникать при проблемах при запуске или подключении к вспомогательному процессу сбора статистики.

Для запуска процесса необходимо установить компонент Microsoft Visual C++ для Visual Studio 2015, 2017 и 2019. Скачать его можно по ссылке: vc_redist.x86.exe

Если установка компонента не помогла, попробуйте выполнить следующие инструкции:

  1. В компонентах Windows нужно отметить и установить все компоненты из раздела WCF-сервисы. Для этого нужно открыть Панель управления в Windows, ввести в поиск «Компоненты», выбрать инструмент включения/отключения компонентов, который там будет найден.

    Уже в окне открывшегося инструмента нужно найти раздел .NET Framework (4.7) -> «WCF-сервисы» и отметить (включить) все компоненты. То же самое нужно сделать для пунктов из раздела .NET Framework (3.5).

    Если ошибка сохранится, перейдите к шагу 2.

  2. Проверьте настройки безопасности антивируса и прочего защитного ПО. Также можно попробовать переименовать папку с программой (по умолчанию она устанавливалась в «Мои документы/Key Collector»). Если ошибка сохранится, перейдите к шагу 3.
  3. В «Настройках — Парсинг — Google.Adwords» в панели «Дополнительные системные настройки» включите опцию «Использовать режим отладки». Если ошибка сохранится, перейдите к шагу 4.
  4. В «Настройках — Парсинг — Google.Adwords» в панели «Дополнительные системные настройки» включите опцию «Использовать альтернативное подключение», не меняя настройки портов.
  5. Если ошибка сохранится, выключите опцию «Использовать альтернативное подключение» в «Настройках — Парсинг — Google.Adwords» в панели «Дополнительные системные настройки».
  6. Если ошибка сохранится, попробуйте запустить KeyCollectorWPF.exe от имени администратора (это можно сделать через контекстное меню).

Если ни один из предложенных методов не решил проблему, то свяжитесь со службой технической поддержки через тикеты.

фраза «XXX» была пропущена при сборе статистики Google.Adwords

Google.Adwords предъявляет свои требования к формату вхожных фраз для анализа. Так, например, невозможно получить статистику для слишком длинных фраз или фраз, содержащих посторонние спец. символы (любые символы кроме букв, цифр и пробелов). Программа автоматически пропускает такие фразы, чтобы не задержить процесс сбора для обработки заведомо недопустимых фраз.

Если вам мешает данное сообщение в журнале событий, то при желании вы можете вручную отфильтровать недопустимые фразы, однако это является совершенно необязательным.

при съеме слов с Google.Adwords для фразы «XXX» не было найдено ни одного результата

Как правило, данная ошибка встречается в двух случаях.

1. Результатов действительно нет. Например, фраза слишком узкого профиля и непопулярная (НЧ), или же вы выставили слишком много ограничивающих условий (добавили фильтры по частоте, включили опцию «Искать только тесно связанные варианты», установили слишком точный регион или язык запросов). Если вы уверены, что результаты есть (для этого необходимо вручную в браузере проверить любую подозрительную фразу), но сообщение продолжает появляться, то эта ситуация касается второго возможного случая.

2. Аккаунт Adwords не настроен или не готов к работе.

В этом случае сперва необходимо проверить, работает ли съем статистики через браузер? Для этого нужно запустить браузер, зайти на https://adwords.google.ru и попробовать снять статистику для любой фразы вручную. Затем нужно попробовать выгрузить результаты в CSV.

Также сразу заметим, что для корректной работы программы язык интерфейса в аккаунте должен быть строго русским (к региону сбора это отношения не имеет). Кроме того, аккаунт должен быть готов к работе. Это значит, что на нем должна быть хотя бы 1 активная или деактивированная кампания, иначе Adwords даже и не позволит вам попасть в раздел «Планировщика ключевых слов», которым вы хотите воспользоваться через интерфейс программы.

В случае, если CSV-файл с выгрузкой результатов скачивается через браузер без каких-либо проблем, необходимо попробовать выполнить следующие операции.

Попробуйте в «Настройках — Парсинг — Google.Adwords» в панели «Дополнительные настройки» нажать кнопку «Очистить кеш» и включить режим отладки.

Далее попробуйте повторить сбор в программе. Ничего трогать в этом окне нельзя. В нем будет видно, где у программы возникают трудности.

О результах диагностики необходимо сообщить в службу технической поддержки.

обнаружено подозрительно долгое бездействие в процессе сбора статистики Google.Adwords
обнаружено подозрительно долгое бездействие в процессе входа в аккаунт Google.Adwords

  1. Зайдите в Google.Adwords через браузер
  2. Авторизуйтесь под аккаунтом, который Вы используете при парсинге в программе

В случае, если данная ошибка продолжает появляться, необходимо выполнить проверку работы аккаунта. Работает ли съем статистики через браузер? Для этого нужно запустить браузер, зайти на https://adwords.google.com и попробовать снять статистику для любой фразы вручную. Затем нужно попробовать выгрузить результаты в CSV.

Также сразу заметим, что для корректной работы программы язык интерфейса в аккаунте должен быть строго русским (к региону сбора это отношения не имеет). Кроме того, аккаунт должен быть готов к работе. Это значит, что на нем должна быть хотя бы 1 активная или деактивированная кампания, иначе Adwords даже и не позволит вам попасть в раздел «Планировщика ключевых слов», которым вы хотите воспользоваться через интерфейс программы.

В случае, если CSV-файл с выгрузкой результатов скачивается без каких-либо проблем, необходимо попробовать выполнить следующие операции.

Попробуйте в «Настройках — Парсинг — Google.Adwords» в панели «Дополнительные настройки» нажать кнопку «Очистить кеш» и включить режим отладки.

Далее попробуйте повторить сбор в программе. Ничего трогать в этом окне нельзя. В нем будет видно, где у программы возникают трудности.

О результах диагностики необходимо сообщить в службу технической поддержки.

в результате диагностики было выяснено, что процесс сбора статистики Google.Adwords требует попытки переавторизации в аккаунте

Иногда случается, что в ходе длительной работы с Google.Adwords он перестает выдавать результаты. В качестве метода борьбы с этой проблемой программа выполняет повторный вход в аккаунт, чтобы сбросить возможные неполадки в кеше браузере.

Данное сообщение выводится в журнал событий в результате автоматической диагностики работы парсинга (см. код ошибки 3004).

аккаунт требует верификации

Ошибка возникает в случае, когда Google считает вход в аккаунт подозрительным. Часто это встречается при обращениях через другой IP-адрес или же просто в профилактических целях.

  1. Откройте любой браузер в режиме инкогнито (с чистым кэшем) и зайдите на Google.Adwords.
  2. Выполните вход в аккаунт, который прописан в «Настройках — Парсинг — Google.Adwords».
  3. При запросе подтверждения входа в аккаунт выберите удобный для Вас метод верификации и завершите предложенную процедуру.
  4. Запустите сбор статистики в программе

Если ни один из предложенных методов не решил проблему, то свяжитесь со службой технической поддержки через тикеты.

требуется уточнить ID подаккаунта

Ошибка возникает в случае, когда в используемом Вами для сбора статистике аккаунте Google.Adwords есть подключенные к нему подаккаунты.

Вы можете либо отключить от используемого аккаунта все связанные с ним подаккаунты, либо указать в «Настройках — Парсинг — Google.Adwords» цифровой идентификатор нужного Вам подаккаунта в формате: ЛогинАккаунта#XXX-XXX-XXXX:ПарольАккаунта, где XXX-XXX-XXXX — идентификатор нужного подаккаунта.

Если ни один из предложенных методов не решил проблему, то свяжитесь со службой технической поддержки через тикеты.

ошибка выбора подаккаунта

Ошибка возникает в случае, когда программе не удается выбрать указанный Вами в «Настройках — Парсинг — Google.Adwords» подаккаунт.

Проверьте корректность ввода логина и пароля основного аккаунта, а также цифровой идентификатор нужного Вам подаккаунта.

Если ни один из предложенных методов не решил проблему, то свяжитесь со службой технической поддержки через тикеты.

ошибка ввода аккаунта

Ошибка возникает в случае, когда Google.Adwords не принимает указанный Вами в «Настройках — Парсинг — Google.Adwords» аккаунт.

Подробное описание ошибки выводится в журнале событий. Пожалуйста, ознакомьтесь с ним и в случае наличия ошибок в аккаунте исправьте неточности и повторите сбор.

Если ни один из предложенных методов не решил проблему, то свяжитесь со службой технической поддержки через тикеты.

ошибка ввода пароля

Ошибка возникает в случае, когда Google.Adwords не принимает указанный Вами в «Настройках — Парсинг — Google.Adwords» пароль.

Подробное описание ошибки выводится в журнале событий. Пожалуйста, ознакомьтесь с ним и в случае наличия ошибок в пароле исправьте неточности и повторите сбор.

Если ни один из предложенных методов не решил проблему, то свяжитесь со службой технической поддержки через тикеты.

возникла ошибка в методе потока
что-то пошло не так. Ошибка в методе

Если вы храните файл проекта в облаке, на удаленном диске или в синхронизирующемся каталоге — это может быть причиной данной ошибки. Так или иначе, попробуйте сделать копию файла проекта и разместить ее на рабочем столе. Пропадет ли ошибка после открытия этой копии?

Если ошибка снова возникает, то причина может быть в том, что файл проекта поврежден. В этом случае вам нужно скачать утилиту для восстановления проектов и выполнить инструкции, содержащиеся в файле README внутри архива.

В случае, если ошибка не пропадет даже после восстановления проекта, пожалуйста, сообщите о ней в службу технической поддержки.

не удалось загрузить файл изображения капчи

Данная ошибка может возникать у некоторых пользователей устаревших версий ОС Windows XP и др. в момент загрузки изображения капчи.

При возникновении ошибки, пожалуйста, попробуйте включить опцию «Принудительно использовать SSL 3 при загрузке файлов» в «Настройках — Сеть».

Если ошибки не возникает, то опцию включать не следует.

ошибка NetworkMethods.LoadPage
ошибка NetworkMethods.PostDataAndLoadPage

В зависимости от второй части данного сообщения об ошибке могут быть разные причины данной ошибки. Наиболее часто встречаются ошибки вида «Время ожидания истекло», «Невозможно соедиться с прокси-серверов», «Соединение было принудительно сброшено» и «Невозможно разрешить удаленное имя».

При возникновении ошибки вида «Время ожидания истекло», пожалуйста, проверьте значение параметра «Таймаут ожидания ответа от сервера» в «Настройках — Парсинг — Общие» и в «Настройках — Парсинг — Yandex.Wordstat» (по умолчанию там стояли значения 30 000 мс). Если вы работаете через прокси-серверы, то дело может быть еще и в них. Также возможны ситуации, когда причиной является плохое качество связи или временные неполадки на стороне самого сервиса, с которого вы собираете статистику.

Причину остальных видов ошибок, прежде всего, следует искать либо в защитном ПО на ПК (фаеволы, антивирусы и пр.), либо в некачественных мертвых прокси-серверах (если вы их используете). Ошибки могут возникать также и при некачественном соединении с интернетом.

в данный момент все работники заняты. Переходим в режим ожидания

Данную ошибку возвращает используемый вами сервис автораспознавания капчи (который включается или отключается в «Настройках — Антикапча»).

Ошибка может выдаваться в случае, если в данный момент сервис перегружен (у него нет свободных ресурсов для обработки ваших запросов), или же если выставленная вами в настройках самого сервиса ставка распознавания слишком мала (т.е. нет свободных работников, которые хотели бы взяться за распознавание вашей капчи за такие деньги).

Если ошибка повторяется слишком часто, вы можете попробовать поднять ставку распознавания капчи в настройках самого сервиса или же сменить сервис автораспознавания.

неверный ключ доступа к сервису. Проверьте правильность настроек доступа к сервису

Ошибка возникает, если в «Настройках — Антикапча» вы включили обработку капчи через один из сервисов автораспознавания, но при этом прописали неправильных ключ доступа.

Ключом доступа, как правило, являются 32-символьные коды доступа. Проверьте, актуален ли код, который вы указали, а также убедитесь, что он прописался полностью (в начале или конце кода не было ли добавлено пробелов и т.п.).

капча еще не распознана. Выполняется повторный запрос результата

Данное сообщение носит исключительно информационный характер и не является ошибкой.

Дело в том, что сервисам автоматического распознавания капчи требуется определенное время на распознавание вашей капчи. Программа делает запрос на код капчи, и если она еще не распознана, то сервис возвращает ошибку «еще не распознана» с просьбой повторить попытку позже, что программа и делает.

на странице обнаружена капча вида ReCaptcha. Для обработки данного вида капчи Вам нужно подключить услуги сервиса Anti-Captcha.com/RuCaptcha.com

Данное сообщение можно встретить, если на странице ответа сервиса была обнаружена капча вида ReCaptcha.

Капча ReCaptcha отличается повышенной сложностью обхода, и поддерживается сервисами автоматического распознавания Anti-Captcha.com и RuCaptcha.com. Поэтому при получении такого вида капчи можно либо ее распознать через указанные сервисы, либо приостановить процесс сбора.

Вам необходимо зарегистрироваться в сервисе Anti-Captcha.com или RuCaptcha.com, получить свой 32-символьный токен доступа и прописать его в «Настройках — Антикапча» в поле Anti-Captcha или RuCaptcha соответственно.

страница с ReCaptcha была получена через прокси-сервер. Однако, в настройках активирован запрет передачи данных прокси-сервера в сервис автораспознавания

Данное сообщение можно встретить, если на странице ответа сервиса была обнаружена капча вида ReCaptcha, и если сама страница была загружена через один из прописанных в настройках программы прокси-сервер.

Капча ReCaptcha отличается повышенной сложностью обхода, и поддерживается сервисами автоматического распознавания Anti-Captcha.com и RuCaptcha.com.

Для более «естественного» распознавания желательно обеспечить данный сервис возможностью обработать Вашу капчу через тот же IP-адрес, через который работали Вы сами. Если этого не сделать, то возрастают риски блокировок и санкций (это лишь догадки, прямых достоверных сведений об алгоритмах наложения санкций ни у кого нет и никогда не будет).

Если Вы приняли решение обеспечить сервис автоматического распознавания доступом к Вашим прокси-серверам, то Вы можете включить соответствующую опцию «Разрешить передачу информации о прокси-серверах в сервисы автораспознавания» в «Настройках — Антикапча» (по умолчанию опция выключена).

Внимание: мы не несем ответственности за любой ущерб, перехват и неправомерное или любое несанкционированное использование ваших прокси-серверов третьими лицами в результате передачи их в сервисы автораспознавания. Ознакомиться с рисками и гарантиями вы можете непосредственно на сайтах и материалах самих сторонних сервисов. Мы к ним отношения не имеем, а лишь даем возможность пользоваться предлагаемой пользователям функциональностью данных сервисов.

www.key-collector.ru

Автоматизация регистрации аккаунтов Яндекса | A-Parser

Как известно, для парсинга WordStat нужны аккаунты Яндекса. А-Парсер умеет их регистрировать, но их срок жизни невелик, т.к. спустя 1-2 суток включается проверка номера телефона. Поэтому возникает необходимость периодической регистрации новых аккаунтов. И это можно легко автоматизировать. Ниже показано как это сделать.

Шаг 1
Создаем пресет для регистрации аккаунтов и сохраняем его под удобным именем. Обычно достаточно лишь выбрать пресет антигейта и указать в запросах кол-во аккаунтов, которое нам нужно получать.

Шаг 2
Настраиваем планировщик:

  • открываем пункт меню Планировщик и нажимаем Добавить задание
  • в появившемся окошке выбираем ранее сохраненный пресет
  • выбираем нужный конфиг потоков
  • задаем дату и время первого запуска (рекомендую выбрать такое время, когда парсер обычно простаивает или минимально загружен)
  • задаем периодичность (оптимально — Every day, т.е. каждые 24 часа)
  • кол-во повторов не ограничиваем и уникальность можно не включать

И на этом все. Теперь аккаунты будут периодически регистрироваться и добавляться. А благодаря опции Remove bad accounts в парсерах Яндекса (например в SE::Yandex::WordstatSE::Yandex::Wordstat плохие аккаунты будут автоматически удаляться.
Просмотреть лог работы Планировщика можно там же:

a-parser.com

Большой Яндекс проект 13 шаблонов (регер, парсеры, спамеры, постеры) + Отправка почт [Повтор] | Складчина

Всем привет представляю вашему вниманию большой проект по Яндексу из 12 шаблонов + неофициальный бонус.
Яндекс не только самый популярный поисковик В России но в нём есть куча сервисов которые постоянно развиваются. Также эти сервисы являются кладезем для получения трафика и заработка на них. ​

Отличная подборка шаблонов для самого популярного сайта в рунете.​

Яндекс районы

Яндекс районы — сервис Яндекса в котором люди делятся своими переживаниями, предложениями и также публикуют разного рода объявления.

Нововведения в Яндекс районах. Добавилось несколько новшеств одним из главных это публикация объявлений, по сути разработчики Яндекс районов интегрировали в данный сервис доску объявлений, где и мы сможем неплохо заработать, до этого предпочтением были услуги но сейчас возможности расширились и можно продавать товары, не нарушая правил Яндекс районов.
За последний год количество запросов по Яндекс району увеличилось в 5 раз. Но заходов намного больше так как Яндекс активно рекламирует данный сервис на своей главной странице.

Для чего Шаблон?
Шаблон представляет собой комбайн по работе с данной площадкой, с помощью которого можно рекламировать ваши товары или услуги, благодаря автоматизации можно охватить большую часть Яндекс районов, только в Москве около 1млн человек подписаны на данный сервис. В сервис постоянно добавляются новые города.

Спойлер: Возможности шаблона

  • Постинг в посты
  • Комментирование (шаблон оставляет комментарии к первому посту)
  • Комментирование своих записей (отличный способ привлечения внимания к вашему посту) можно комментировать 1 пост с разных аккаунтов.
  • Постинг Объявлений
  • Мультиаккаунт
  • Рандомизация заголовков и постов
  • Возможность указать цену объявления
  • Возможность поставить до 3 меток на объявления
  • Возможность указать город для постинга
  • Возможность указать сколько фотографий оставлять на пост
  • Возможность указать сколько комментариев оставлять с 1 аккаунта
  • Возможность указать сколько постов делать с одного аккаунта
  • Различные задержки по времени (рандом можно указать в шаблоне)
  • Задержки между постами
  • Добавление адреса
  • Сохранение профиля
  • Авто генерация юзер агентов

На данный момент Яндекс районы есть в 12 городах и их число продолжает расти.

  • Санкт Петербург
  • Нижний новгород
  • Ростов на Дону

Яндекс Знатоки

Яндекс знатоки аналог Вопросы Маил, но в нём более приятный дизайн и можно вставлять свои ссылки в подпись. Яндекс знатоки появился не давно буквально около 5 месяцев назад и только сейчас начинает набирать обороты. Сервис очень перспективен и в скором будущем обойдёт Вопросы маил. Так как Яндекс скорее всего будет повышать в ранжировании свой сервис чем mail.ru

Зачем нужен шаблон?
Вы сможете Задавать вопросы оставляя ссылку в подписи, получая трафик на свой сайт или социальные сети, спамить и конечно же получать клиентов. Чем больше ответов тем больше трафика.
По работе с Яндекс Знатоками получите обучающие видео, расскажу интересную схему по трафику.

Спойлер: Возможности шаблона
1. Мультиаккаунт
2. Прокси
3. Эмуляция различных параметров компьютера и браузера
4. Сохранение профиля (после залогиневания сохраняет все данные и не нужно снова залогиневтся)
5. Комментирование
6. Размещение своих вопросов
7. Комментирование своих записей
8. Лайкинг
9. Выбор категории
10. Выбор ключевых слов
11. Количество комментов на аккаунт
12. Количество ключей для вопросов
13. Сохранение ссылок на ваши вопросы
14. Авто заполнение аккаунта (прописываем ваши ссылки в подпись)
15. Рандомизация

Яндекс Услуги

Яндекс Услуги — это сервис, который связывает исполнителей с потенциальными заказчиками. По сути данный сервис это бесплатный трафик для компаний или частных лиц. Яндекс начинает активно развивать данный сервис и возможно что он станет в будущем так же популярен как Яндекс маркет, только вместо товаров будут услуги.

Для чего шаблон?
Шаблон может собрать для вас телефоны людей, которые возможно ищут работу, а возможно у них много работы и им нужны партнёры по бизнесу.
Мини кейс — вы занимаетесь вывозом мусора, с помощью шаблона вы можете собрать телефоны людей занимающимися ремонтом и договорится с ними о вывозе мусора из квартиры, оплачивает конечно же клиент.
Также шаблон может спамить в личные сообщения.

Спойлер: Возможности шаблона
1. Мультиакк
2. Прокси
3. Капча
4. Возможность указать категорию парсинга
5. Возможность указать сколько страниц парсить
6. Возможность указать сколько раз спамить в личку с одного аккаунта
7. Формат парсинга (Имя, телефон, ссылка на анкету) всё заносится в таблицу

Яндекс Дзен

Яндекс Дзен площадка где множество авторов публикуют уникальные контент, при этом не плохо зарабатывают.
Так как Яндекс внедряет множество фильтров для уникального контента, автопостинг на эту площадку не нужен, так как под каждую статью нужно грамотно составить разметку, поэтому я считаю если делать крутой контент то только руками. Данный шаблон понадобится для тех кто хочет привлекать подписчиков, активностью своего канала, накручивая комментарии просмотры и лайки

Для чего нужен шаблон?
Шаблон, раскручивает ваш канал с помощью лайков, комментариев, дочитываний и спамом в другие каналы, для продвижения вашего канала, а также для спама на популярных каналах с ссылками на пп. А также для парсинга каналов, для спама и для сбора своего каталога, с возможностью дальнейшей продажи или создания сайта с данными каналами.

Спойлер: Возможности шаблона
1. Прокси
2. Капча
3. Комменты в чужие статьи
4. Комменты в свои статьи
5. Рандомные лайки своих статей
6. Эмуляция просмотра статьи, эмуляция мыши.
7. Парсинг топ каналов по ключу
8. Парсинг статей для спама по ключу
9. Возможность указать сколько спамить на 1 аккаунт
10. Сохранения профиля аккаунта
11. Переход из рандомного сайта на канал

Постинг отзывов на Яндекс карты

Вы когда нибудь искали магазин или сервис через Яндекс карту скорее всего да!

Я как и многие тоже самое делаю и мне интересно читать отзывы о том сервисе где я хочу купить товар или услугу. Мой шаблон сможет накрутить любое количество отзывов на ваш магазин или магазин заказчика, не нужно платить фрилансерам за это, с этим справится шаблон.
Я когда выполнял большой проект по созданию интернет магазинов для продажи кроссовок около 50 магазинов. И для всех магазинов мы добавляли организации в Яндекс карты, когда мы смотрели статистику в личном кабинете Яндекс карт, то в день выходило около 50 просмотров данного магазина, иногда получалось так что на следующий день уже звонили клиенты, хотя сайт ещё даже не проиндексирован.
Улучшите авторитет вашего магазина в глазах покупателя или продавайте услуги по накрутке отзывов на Интернет магазины юридическим лицам.

Для чего шаблон?
С помощью данного шаблоны вы сможете улучшить авторитет вашего магазина в лице ваших клиентов. Продавать услугу по накрутке хороших или плохих отзывов в интернет магазины и сервисы.

Спойлер: Возможности шаблона
1. Прокси
2. Каптча
3. Возможность указать сколько делать отзывов с одного аккаунта
4. Рандомизация отзывов
5. Возможность оставить хороший или плохой отзыв.
6. Серфинг по сайтам перед публикацией
7. Заход на основной сайт и нахождение на нём, если есть кнопка tel он её нажимает (для пф)
8. Возможность указать сайт для отзывов
9. Возможность указать сколько сайтов посетить перед основным сайтом

Спамер в Яндекс коллекции

Яндекс коллекции — сервис картинок и их коллекций когда то сделанными пользователями. Яндекс отбирает в этот сервис только трастовые коллекции, которым более 2 лет. По ним мы и будем спамить, с помощью оставления комментариев.

Для чего шаблон?
Шаблон выбирает категорию и начинает спамить в описания фото, оставляя ссылки на партнёрки или другие источники заработка. То есть это спамер для данного сервиса.

Спойлер: Возможности шаблона
1. Мультиакаунт
2. Прокси
3. Выбор категории
4. Рандомизация текста
5. Возможность указать сколько комментариев оставлять

Сео Парсеры

При создании рекламной компаннии в Яндексе или Гугле, возникают трудности при придумывании заголовков, какими они должны быть, чтобы привлечь внимание покупателя. Тоже самое касается и обычных некомерческих сайтов.

Для чего шаблон?
Данные шаблоны помогут вам понять что ищут люди в поиске и какие сниппеты используют ваши конкуренты. Шаблоны парсят подсказки поисковой системы Яндекс, а также парсят сниппеты рекламных объявлений конкурентов.

Спойлер: Возможности шаблона
1. Парсинг подсказок
2. Парсинг сниппетов по рекламным объявлениям
3. Прокси
4. Возможность указать количество страниц для парсинга
5. Возможность указать указать язык при парсинге подскзок (английский, русский)
6. Чистка мусора из сниппетов

Парсер Яндекс Дзен

На данный момент в Яндекс Дзен существует уже более 1млн текстов, некоторые из них индексируются у старых каналов у новых ещё нет. К примеру когда я создавал свой канал то Некоторые страницы не индексировались более 5 месяцев.

Для чего шаблон?
Шаблон парсит текста с выбранного Яндекс канала и заносит их в папку с названием статьи.
Данные статьи вы можете использовать для Лонг ридов в контакте для написания постов в соц сетях, для создания дорвеев, для создания копипастников. Больше всего текста заходят для соц сетей, нужно лишь найти качественный канал.

Спойлер: Возможности шаблона
1. Прокси
2. Возможность указать несколько каналов
3.Парсеру не нужны аккаунты Яндекс

Парсер Яндекс маркет

Яндекс Маркет — сервис где множество магазинов продают свою продукцию и в нём легко найти самый дешёвый товар. К примеру когда я хочу, что то купить первым делом я иду именно туда, так как там можно найти действительно очень низкие цены.

Для чего нужен шаблон?
С помощью парсера вы сможете собрать актуальную информацию по тем или иным товарам. Это поможет вам найти поставщика товара по самым низким ценам, понять ценовую политику товара, понять кто ваши конкуренты, создавать сайты, дорвеи из данных, собранным шаблоном

Спойлер: Возможности шаблона
1. Прокси
2. Сбор данных а именно: Название, цена, количество отзывов, описание, ссылка на товар
3. Возможность указать несколько ссылок для парсинга товаров

Парсер почт Яндекс

Парсер собирает почты с сервиса Яндекс картинки​

Для чего шаблон?

С помощью данного шаблона вы сможете собрать базу email адресов для последующей рассылки по ним или же продать её где либо.​

Спойлер: Возможности шаблона

1. Прокси​

2. Возможность указать категорию парсинга​

3. Возможность указать количество пролистываний в категории​


Парсер вордстат

Яндекс вордстат — сервис которым пользуются множество людей для сбора целевых запросов поисковика Яндекс.​

Для чего шаблон?

Шаблон предназначен для сбора ключевых запросов. Шаблон всё записывает в таблицу в две колонки запрос и количество запросов в месяц. Он необходим для создания семантического ядра сайта, для анализа спроса на тот или иной товар и много другого.
Спойлер: Возможности шаблона
1. Прокси
2. Возможность указать несколько ключей
3. Возможность указать сколько страниц листать

Регер Яндекс аккаунтов

На самом деле это один из главных шаблонов данного пакета. Ведь без аккаунтов ни куда, за исключением некоторых шаблонов.

Для чего шаблон?
Шаблон нужен для регистрации аккаунтов в сервисе Яндекс

Спойлер: Возможности шаблона
1. Проски
2. Возможность указать задержки
3. Эмуляция различных параметров компьютера и браузера
4. Подключение смс сервисов
5. Подключение сервсиов антикапч
6. Загрузка аватарки в аккаунт
7. Возможность указать сколько аккаунтов регистрировать
8. Регистрация на свои симкарты
9. Возможность удалять аватарки после использования
10. Установка города
11. Заполнение даты рождения

Отправка почт + прогрев аккаунтов

Это модифицированный шаблон который выдавался в складчине по управлению репутацией. Решил создать полноценную отправку почт + сделать в этом же шаблоне инструмент по прогреву аккаунтов.

Для чего шаблон?
Шаблон служит для рассылки почт через Яндекс почту и прогрева аккаунтов, путём поиска в Яндексе по ключам и сбора истории браузера.

Спойлер: Возможности шаблона
1. Прокси
2. Рандомизация тем писем
3. Рандомизация самих писем
4. Рандомизация названий прикрепляемых файлов
5. Возможность указать количество писем на аккаунт
6. Возможность поставить в скрытую копию
7. Возможность указать сколько писем прикреплять
8. Возможность указать расширения прикрепляемых файлов
9. Количество отправок на 1 аккаунт
10. Количество поисковых запросов
11. Количество сайтов для посещения
12. Сохранение истории браузера, куков и тд.

Бонус

Данный бонус останется секретным, и только счастливчики которые проставят 3 ссылки на складчину получат его, для организаторов и ЧК поставить нужно в подпись. ​

Бонус получат те кто сделал вышеописанное не позднее чем за три дня до начала старта складчины.​

skladchik.com

  • Печать

Страниц: [1] 2   Вниз

Тема: Проблема с Key Collector и Словоеб  (Прочитано 12914 раз)

Проблема в том что последние два дня когда вбиваю какой-то запрос для последующего анализа — мне выдает не совсем понятные вещи и не совсем понятные цифры.


На скрине все видно.
Кто знает почему?


Записан



В самом кей-коллеторе писали, что яша сменил кодировку, исправят…, т.е. уже исправили в кей-коллекторе…

« Последнее редактирование: 10-07-2012, 11:42:15 от Владимир75 »


Записан



В самом кей-коллеторе писали, что яша сменил кодировку, исправят…, т.е. уже исправили в кей-коллекторе…

А касательно Словоеба ничего не говорили? Если яша сменил кодировку, то почему одни ключи отображаются нормально, а другие вот такими же не совсем понятными вещами и не совсем понятными цифрами.


Записан


EntuziAst, увы, пока никаких данных нет.


Записан


EntuziAst, увы, пока никаких данных нет.

Очень и очень жаль. Решил взять Key Collector, если там исправили эту ошибку. Я так понимаю, что у Вас уже есть Key Collector. Ошибку там исправили?)


Записан



Очень и очень жаль. Решил взять Key Collector, если там исправили эту ошибку. Я так понимаю, что у Вас уже есть Key Collector. Ошибку там исправили?)

Проблему с кодировкой уже исправили


Записан


Проблему с кодировкой уже исправили

Спасибо! Будем брать!)


Записан


Я использую программу Словоеб 2.0.5. Но очень медленно собирает данные. Например сейчас идет сбор «!» яндекс вордстат, идет уже целый день. В журнале событий постоянно сообщения:
02.08.2013 9:53:36: ошибка NetworkMethods.LoadPage: Запрос был прерван: Время ожидания операции истекло.
02.08.2013 9:53:36: при загрузке страницы уточняющих частотностей возникла ошибка. Выполняем повторную (2) попытку загрузить информацию
по времени в статистике насчитал, что осталось еще 28 с лишним дней! (всего 1% завершен за прошедший день)
всего поисковых фраз более 300 000
нельзя ли как-то ускорить процесс? Если можно, подскажите в чем причина?
Спасибо


Записан



Я использую программу Словоеб 2.0.5. Но очень медленно собирает данные. Например сейчас идет сбор «!» яндекс вордстат, идет уже целый день. В журнале событий постоянно сообщения:
02.08.2013 9:53:36: ошибка NetworkMethods.LoadPage: Запрос был прерван: Время ожидания операции истекло.
02.08.2013 9:53:36: при загрузке страницы уточняющих частотностей возникла ошибка. Выполняем повторную (2) попытку загрузить информацию
по времени в статистике насчитал, что осталось еще 28 с лишним дней! (всего 1% завершен за прошедший день)
всего поисковых фраз более 300 000
нельзя ли как-то ускорить процесс? Если можно, подскажите в чем причина?
Спасибо

В кейколлекторе процесс ускорить можно. На счет словоёба необходимо упрашивать у разработчика. Возможно эту опцию они из него исключили.


Записан



Да, разработчики написали, что для словоёба только если увеличить таймауты — одно решение.
Неужели действительно нет другого выхода? Что тогда все нахваливают эту прогу?


Записан



  • Печать

Страниц: [1] 2   Вверх

Страница 7 из 7

  1. А чего сами не сделаете несколько «левых» почт?

  2. Потому что нужно несколько сотен, зареганых на российские номера.

  3. А ни у кого нет видео с марафона пузата по СЯ? Когда-то на марафоне местном давали ссылку, но она сейчас не работает… А у меня по тому видео с КК все замечательно получалось. А сейчас что-то не идет совсем. Не собирает, и все:(

  4. Девочки, была с сайтом на длительном перерыве, сейчас на карантине появилось свободное время ним заняться. начала искать ключи в кк, все хорошо, собрало. Но когда нажимаю найти частоту к ним, не ищет и пишет:
    25.03.2020 15:13:24 ошибка NetworkMethods.LoadPage: Невозможно соединиться с удаленным сервером (no proxy)

    в чем может быть проблема?

    просто странно, что ключи нашло, а частоту нет.@

    Последнее редактирование модератором: 25 мар 2020

  5. У меня нормально работает. Если проблема осталась, то стоит сообщить разработчикам. Уверена, что ребята подскажут, что сделать.

  6. сообщила. сказали обновить, а я его итак обновила….

  7. Всё оказалось так просто и всё

Страница 7 из 7


Вебледи Клуб: форум вебмастеров

Понравилась статья? Поделить с друзьями:
  • Kernellbase dll ошибка windows 10
  • Kernelbase pdb не загружен ошибка
  • Kernelbase dll ошибка при запуске
  • Kernelbase dll ошибка как исправить windows 10 64 bit
  • Kernelbase dll ошибка в gta