Руководство: Создание доров на фрихостах с помощью R-Dorgen

Скажу сразу, это не мануал о том, как надо делать дорвеи с точки зрения сео, а о том, как можно превратить рутинную возню с дорами в автоматизированную работу при помощи лишь одного софта, название которого R-Dorgen.

Список основных этапов, которые я сегодня рассмотрю:

1. Работа с аккаунтами
2. Текстовка
3. Кейворды
4. Шаблоны
5. Генерация
6. Заливка
7. Дополнение

Всё со скринами и объяснениями, тематику я взял – аудиокниги.

1. Аккаунты фрихостов

Самое простое – взять акки. Закупаемся где удобно, я привык брать на account-mag.com, хотя если честно ассортимент сейчас у них не очень. Остановился на cwahi.net. В принципе фрихост подходит под наши нужды с технической стороны, а так же имеет тиц 100, алексу ~ 50.000, много проиндексированных страниц, около 2кк.

Специфика доргена такова, что привычный формат пакетки (как у джако и пандоры, например) имеет собственную логику. Привету из описания доргена:

В R-Dorgen есть возможность перепресвоить любой параметр из конфинга, за исключением некоторых критических, которые не могут быть изменены по ходу работы. По этому пакетка имеет немножко не стандартный вид. Все изменяемые параметры указываются через | . Формат для изменения значений:

Раздел>параметр=значение| раздел>параметр=значение

Не указанные параметры в пакетке автоматически берутся из основного файла конфинга. Все задания добавляются в packet.txt, одно задание – одна строка. Задания могут добавляться через интерфейс или непосредственно в сам файл. Нужный вам параметр можно посмотреть путём наведения на поле в интерфейсе либо в самом конфигурационном файле:

Пример для генерации 2х дорвеев с изменением кол-ва чистых страниц, настроек ftp и т.д:

settings>domain=site.ru|ftp>ftphost=ftp.ya.ru|settings>clearpages=10
settings>domain=site2.ru|ftp>ftphost=ftp.ya.ru|settings>clearpages=20

Суть такова – основные настройки распространяются на все доры в группе, но любой из параметров вы можете поменять для каждого дора индивидуально. Например, можно генерировать все доры на разных шаблонах, с разными видами урлов, с разным типом генерации текста и так далее, чего в других паблик доргенах сделать нельзя.

Закупаем и оставляем, обработаем позже.

2. Текстовка

Т.к. я изначально сделал акцент на автоматизации, на этом и остановимся, чтобы не уходить в дебри. Текстовку мы будем добывать при помощи доргена. Парсить R-Dorgen может из 3-х истоячников:

1) Google.com – Сайты из серпа
2) News.google.com
3) Wikipedia.org

По совету Раштера будем парсить википедию:

Выбираем вики и попадаем на натсройки парсинга. Я выбрал такие:

Запускаем парсер:

В общем я парсил до тех пор, пока файл не набрал вес в 1 мегабайт. Пока что подойдёт.

Попробуем спарсить первым способом – google.com. Логика парсера такова – указываем кол-во страниц выдачи, откуда будем брать урлы сайтов. Далее заходим на сайт, парсим оттуда текст, записываем и так для всех сайтов из указанных страниц выдачи.

Но мне этот способ показался не очень удобным: парсит медленно и не такой чистый текст.

3. Кейворды

Тут я пойду двумя путями. Во первых, в админке доргена есть раздел загрузок, оттуда можно слить интересные статы, кейворды, файлы для хрумера. Оттуда беру это базу:

Второй путь – распарсить вордстат.

Качаем актуальный Магадан, или покупаем KeyCollector (отличный многофункциональный софт) и парсим.

На примере Магадана – парсинг по запросу «скачать аудиокнигу»:

Экспортируем, объединяем.

Кстати я беру все кейворды, независимо от частоты запросов. На самом деле большоекол-во запросов не подразумевает высокую конкуренцию. Так что имеет смысл собирать всё, что есть.

Если есть желание отбросить конкурентные кейворды, юзаем AmazingNicheFinder, кстати он сейчас стал многопоточным

4. Шаблоны

Нам не придётся тратить время на то, чтобы создать шаблон – опять же за нас всё сделает дорген.

В настройках указываем данную опцию:

Немного справки по генерации шаблонов из руководства по доргену:

Генерация шаблонов:

Чтобы сгенерировать шаблон, в списке шаблонов нужно выбрать один из двух возможных методов генерации шаблона:
1) Generated – Одноуровневый шаблон
2) Generatedcat – Шаблон для полноценных категорий.
Стоит заметить, папки с такими же названиями в каталоге с шаблонами удалять строго запрещено. В данных папках будут сохранятся сгенерированные шаблоны и туда можно положить, как и в обычных шаблонах, подключаемые файлы.

Шаблоны генерируются относительно простые, отлично подойдут для google. Тесты показали, что такие шаблоны работают ничуть не хуже тех, которые сделаны вручную. Настройки для генерации шаблона минимальные – кол-во текстовых блоков, кол-во ссылок в блоке ссылок, дополнительные подключаемые файлы в header(Для редиректа), макрос в тайле, макрос в текстовом блоке и ещё несколько не значительных.

Принцип генерации: Случайно выбирается расположение текстовых блоков и блока ссылок, для этих блоков генерируются уникальные стили. Каркасы для генерации шаблонах находятся в папке files/parts. Редактировать данные файлы
нужно крайне осторожно.

Я рассчитываю на то, что юзеры не будут видеть дор, так что на внешний вид – наплевать. Слив всё равно через фрейм/редирект

5. Генерация

Т.к. генерировать мы будем пакеткой, составим сперва список параметров, про которые я говорил в 1 пункте.

Проще всего это сделать, воспользовавшись данной программой. Создаём файл с аккаунтами в формате «домен;хост;юзер;пароль», ставим настройки:

Вставляем полученные акки в раздел «Пакетка». Сохраняем. Теперь по настройкам.
Настройки проходят в 4 этапа.

1) Настройка доров
2) Настройка генерации шаблонов (Если юзаете свои – пропускаем)
3) Настройка заливки
4) Нактройка аддурла.

Важно: в поле подключаемые скрипты я рекомендую вписать какой-нибудь универсальный домен для ваших прокладок, скриптов и прочего. То есть на всех дорах будет один и тот же скрипт. Меняя что то в нем, будут менятся все доры. Я в поле поставил следующий код:

<script type="text/javascript" src="http://orskp.ru/r-gen/script.js"></script>

В принципе можно поступить иначе. Например можно создать в папке с шаблоном (если генерируете на своём) скрипт с именем script.js и написать в него готовый код для слива. Но если у партнерки возникнут проблемы с палтниками, или произойдет что то другое, вам нужно будет на всех доменах менять этот файл.

Правда у меня и с первым вариантом случилась недавно подобная хуйня: доры были живы и давали трафик, а файл скрипта находился на другом сервере, который успешно упал. И трафик вслед за ним.

И еще – не забывайте, что вы можете указать любой индивидуальный параметр для каждого дорвея: кол-во страниц, шаблон и тд.

Все, тыкаем на «Запустить». Ждём.

6. Заливка

Несмотря на то, что порядок заливки я уже указал в предыдущем пункте, есть другие альтернативы.

1. Простой способ. То, что я собственно заюзал. Поддерживается многопоточка, прокси трёх типов (http, socks 4, 5).

2. Быстрый способ. Запаковка дора в архив, заливка на сервер, распаковка. Разумеется такие фичи должны быть предусмотрены фрихостингом.

3. Filezilla. Для тех, кто не доверяет стороннему софту заливку доров.

// Пока писал этот пункт, доры сгенерировались и успешно залились первым способом в 1 поток. Так то

7. Дополнение

Хотел еще написать про продвижение, но это дело сугубо личное. В доргене предусмотрен аддурл, в принципе этого вполне хватит для ру доров. Для более волшебных вещей можно заказать написание плагина для доргена, подробнее об этом можно почитать руководство.

Слив трафа будет осуществляться через поключаемый скрипт, а там либо редирект, кропка или фрейм. В комментах к предыдущим постав просили поделиться методами редиректа и слива, так что скорее всего наверное один из следующих постов будет посвящен этой теме.

Многие вопросы освещены в руководстве. Так что прежде чем юзать дорген, советую прочитать его.
Дорген сложный, с этим не поспоришь, но его функционал и возможности делают его лучшим из имеющихся в паблике.

Доры, которые получились на выходе:
erdiaprofli.cwahi.neт (с картинками)
parvoikoty.cwahi.net

(без картинок)