WordKeeper 2.0 Перезапуск - Скоростной сборщик слов

Прошло уже больше года, как я запустил первую версию word-keeper и в июле месяце успешно закрыл его в личное пользование :) За это время было собрано более 1500 семантических ядер, сотни тысяч фраз скачено из wordstat, зарегалось более 300 человек. Были и постоянные пользователи. Это был маленький и приятный успех с учетом огромной конкуренции в этой сфере. Сервис был полностью бесплатный...

Но все, наверняка, знают каким трудом дается парсинг с wordstat, маленькая скорость, частые ошибки, куча прокси серверов, поиск качественных аккаунтов, постоянно сбои в частотностях (путаются). А если захотите использовать сервисы, то это бешеные ценники, где можно разориться при сборе большого ядра.

Я предлагаю свое решение парсинга актуальных данных из wordstat. Которое ускоряет сбор фраз в десятки раз и освобождает вас от головной боли капчи, прокси и т.д.. И это никакие не базы, а абсолютно актуальные данные за месяц из яндекса. Ссылка на сервис -> word-keeper.ru

Внимание! Сервис в данный момент на стадии тестирования, т.к. работает на новой системе, и могут появляться некоторые баги. Всех прежних пользователей просьба пройти регистрацию заново. Мобильная версия сайта не предусмотрена!

Встречайте, word-keeper 2.0 !

Так что будет в новом арсенале сборщика слов?

Новый Word-keeper

Общее

1. Проработанный удобный интерфейс, где каждая кнопка сделана для гибкого управления ядром. Все второстепенные элементы максимально уменьшены и главный акцент сделан на рабочую область.

Ядро

2. Добавлена возможность работы с большим количеством фраз практически без лагов. На скриншоте выше пример ядра из 100 000 фраз по шкафам. (500 страниц! По 200 фраз на каждую). Все это в вашем браузере с любой точки мира!

3. Убойная скорость сбора и считывания данных. Вот логи сбора фраз и частотностей ядра на 100 000 запросов по скриншоту выше. В целом, весь проект был готов за 5-6 минут. Однако, следует отметить, что в час пик (примерно с обеда и до 19:00 по МСК) сервера яндекса сильно нагружены и скорость может падать.

Логи сбора ядра на 100 000 фраз

4. Быстрая сортировка по любому из столбцов для удобного анализа вашего ядра.

5. Теперь вы можете добавить свои запросы в ядро (Кнопка "+ Запросы"). Это могут быть запросы из каких-либо баз, либо конкурентов или из метрики. Все, что угодно, чтобы сделать ваше ядро полноценным и большим! Вам не стоит переживать из-за дублей. Каждая фраза проходит анализ и явные дубли удаляются налету автоматически.

Добавляйте сколько угодно фраз в ядро!

6. Появились настройки сбора. Вы можете как обновить частоты вашего ядра, так и собрать пропуски (например, вновь добавленных фраз).

Настройки сбора

7. Быстрый поиск по ядру. Благодаря умному поиску вы запросто найдете любые запросы и слова, которые вам потребуются. Если добавить в конце слова * (звездочку), то он будет искать точное вхождение слова. Без звездочки, любое вхождение. Например, если искать по предлогу "на" без звездочки,то найдет все слова содержащее сочетание букв "на" (например, налегке, насморк, найди и т.д.). Если искать "на*", то покажет только предлоги.

Умный поиск

Так же появилась очень полезная функция двойного поиска. Пишем "слово|слово", если поставить * (звездочку), то будет идти поиск по целым словам.

Хитрый двойной поиск. Очень удобная штука!

8. Постраничная навигация. Удобная система навигации позволит вам быстро перемещаться даже по большому ядру. При наведении мышки на страницы, появляется блок содержащий все страницы. Так же реализована система горячих клавиш. При нажатии Ctrl + → (стрелка вправо), страница вперед. При нажатии ctrl + ← (стрелка влево), страница назад.

Навигация по ядру

9. Кнопки действия

• "Выделить все" (выделяет все запросы на данной странице),
• "Сгруппировать" (группирует выделенные запросы, подробнее ниже),
• "Удалить" (удаляет выбранные запросы),
• "Выгрузить" (Выгрузка в формате .csv)

Стеммер

1. Удобный стеммер, который показывает наиболее частые слова в вашем ядре. Многие помнят его с прошлой версии word-keeper, но теперь это еще более удобный инструмент. Теперь можно выделять как группы слов, так и отдельные слова. Также помимо действия "удалить" из ядра все строки с этим словом, появилась кнопка "В группу". Что позволяет быстро создавать группы на основе выбранного слова. При нажатии на слово оно переносится в быстрый поиск. Для выделения слова нужно зажать CTRL и кликнуть мышкой.

Интерфейс стеммера

2. Полностью отзывчивый модуль. Система следит за вашими действиями с ядром и моментально реагирует на любое удаление фраз из базы. Это будет автоматически обновлять ваш стеммер и вам не придется обновлять его вручную.

3. Кнопка "Обновить" полностью заново пересобирает стеммер. Нужна при добавлении новых слов или изменении конфигурации (подробнее ниже).

4. Настройка "С учетом групп" и "Без учета групп". Позволяет понять стеммеру какие слова показывать Вам. Если выбрать "с учетом групп", то вы увидите общий список слов из ВСЕГО ядра. Если "без учета групп", то фразы, которые сгруппированы уже не будут использованы стеммером (ни для удаления, ни для группировки). Он их будет игнорировать. Если вы изменили настройку, то нужно пересобрать стеммер по кнопке "Обновить".

5. Постраничная навигация такая же как и в основном ядре. При наведении мышки показывается блок со страницами. Горячие клавиши: при нажатии SHIFT + → (стрелка вправо), страница вперед. При нажатии SHIFT + ← (стрелка влево), страница назад.

Группы

1. Вы легко можете создавать группы из таблицы запросов или стеммера по нажатию одной кнопки. Для добавления последующих запросов предусмотрен интерфейс Drag & Drop, т.е. выделил запросы и перетащил в нужную группу. Группы и папки можно сворачивать и разворачивать.

Интерфейс групп

2. Также теперь появилась возможность создавать папки, куда вы сможете прятать группы. Для этого надо нажать на белые квадратики справа и вверху в панели выбрать папку куда переместить выделенные группы.

3. Группы и папки можно переименовывать. Зажать CTRL + клик мышкой по названию.

4. Возможность удалять группы и папки. Зажать CTRL + клик мышкой надписи "Del". Сделано для защиты от случайных нажатий. (Позже будет доработано.)

5. При нажатии на частоту (на скриншоте выше "[!W]") она будет меняться. Вы сможете выбрать удобный для себя показатель.

6. Кнопка "В буфер" копирует все запросы из группы.

Заметки

1. Область заметок для ваших записей, чтобы не забыть что-то важное.

Заметки

Инструменты

1. Пока реализован только один инструмент. Удаление фраз ниже определенной частотности. Но постепенно буду добавлять новое.

Инструменты будут и дальше обновляться

Настройки

1. Здесь будут выводиться различные настройки ядра, которые вы сможете поменять. Сейчас это название и регион. Далее будет все постепенно улучшаться.

Настройки вашего ядра

Добавление нового ядра

1. Можно выбрать любой из регионов. Указать количество собираемых фраз (подробнее ниже). Собираемые частотности. Очень важно: добавлена возможность сбора самой важной частотки "[!W]". Я думаю нет смысла говорить, насколько она важна в продвижении.

2. Доступен выбор стоплиста, который вы можете составить сами в разделе "Стоплисты".

3. Доступна настройка что именно собирать. Всего два режима: "Все фразы и нужные частотности из wordstat" и "Только частотности по моим фразам". Первый режим парсит фразы и частотки из вордстат, второй - парсит только нужные частотки по вашему списку фраз.

Добавление нового ядра

Стоплисты

1. Вы можете составлять собственные базы стоплистов и применять потом их на любых своих проектах. При сборе ядра они будут учитываться. Это удобно! При добавлении нового проекта, ваши слова будут просканированы и явные дубли будут удалены автоматически.

Стоплисты

Список всех проектов

1. Возможность видеть очередь вашего проекта. Возможность выгрузки. Также появилась новая функция: клонирование. Создает абсолютную копию вашего ядра.

Список всех проектов

Обсуждение (Интерактивный чат)

1. У проекта есть интерактивное обсуждение в виде простенького чата. Дописал модуль, согласно пожеланиям. В дальнейшем он будет еще улучшен. Но пока это второстепенное. Добавлены даты. Добавлена возможность ответа по нажатию на ник, улучшен интерфейс.

Чат проекта

Итог. Ограничения и чем все это обернется?

Сейчас сервис полностью БЕСПЛАТНЫЙ, так как продолжаю отлавливать баги и причесывать код. Но это продлится недолго.

Хочется сказать, что я потратил огромное количество сил. Это тысячи строк кода, и сотни часов. В этот раз я решил, что такие труды должны хоть как-то окупаться. И чтобы я мог поддерживать и улучшать дальше сервис, в ближайшем будущем внесу изменения.

На проекте сейчас предусмотрены 3 типа пользователей:

• Silver (максимально фраз в 1 проекте до 10 000 фраз).
• Gold (максимально фраз в 1 проекте до 30 000 фраз)
• VIP (максимально фраз в 1 проекте до 60 000 фраз)

Каждый новый пользователь имеет статус Silver. На данный момент никаких больше ограничений нет.

В дальнейшем, после окончательной доработки проекта, будут внесены и другие изменения, а также введены тарифы и стоимость обработки каждого запроса составит всего 0.005 руб. (5 руб за 1000 фраз).

Но сейчас сервис полностью БЕСПЛАТНЫЙ, и вы можете попробовать его возможности. Самые активные пользователи получат от меня бонусы!

Источник