Miky. Дневник дорвейщика

Итак, дорген есть, контент тоже, что нужно делать? Правильно, клепать дорвеи. Но если клепать бездумно – то ничего не получится. Нужно научится нормально делать один дорвей, который получает трафик, а потом уже расклонировать его. От этого я пока и отталкиваюсь, но чтобы внимательней наблюдать за тем, что происходит с дорвеев – нужна грамотная статистика. Её то мне и пришлось создавать…

Можно воспользоваться стандартными логами сервера и скриптами её анализа, но это простой путь, к тому же он плохо приспособлен для интеграции с доргеном. Статистика LI не катит по тем же причинам, а так же по отсутствию информации по ботам.

Для начала я вставил в каждый дор скрипт, который собирает нужную информацию и записывает её в базу данных. Такое разделение мне кажется наиболее логичным – базу собирать легко, а скрипт анализа всегда можно модифицировать и подогнать под свои нужды. Так как мне много не надо, я собирал лишь время посещения, user-agent, сайт, страницу и реферер. IP мне как то не особо не нужен, хотя его тоже можно приплести.

Пока что я осилил лишь простенький анализатор – вывод всех записей, выборку по поисковым ботам и сайтам. Но этого оказалось достаточно для анализа. К примеру, Googlebot очень медлительный, он сидит на сайте сутками, каждые 10-20 минут запрашивая очередную страницу. А бот рамблера наоборот очень шустрый – после добавления в аддурелку достаточно быстро приходит и индексит все страницы второго уровня. А так как я создал уже 6 поддоменах, остается только наблюдать, почему Гуглу понравился именно второй вариант (он даже 4 посетителей на него отправил), а Яндексу наоборот первый (Яндекс вообще жуткий тормоз).

К этому же анализатору добавил проверку нахождения в поисковых системах. Очень удобно. Сейчас думаю над третьей частью – собственно подборке ежедневной статистики по дорам – какая посещаемость, сколько боты проиндексировали и т.д.

Может как нибудь когда закончу выложу в паблик ) Если данная система конечно нужна кому нибудь кроме меня…

—————————-

Дописал дорген, теперь генерация доров стала проще)) Раньше приходилось заливать на хостинг 5 файлов, выставлять права двум папкам и инсталлятору, заливать файлы с текстами и кейвордами… После модификации остается только залить install.php и установит ему права – текст и ключи вводятся в формочку, что гораздо проще. Все создания дорвея, вместе с парсингом кеев, поиском текстов, установкой, добавления в три аддурелки, покупке нескольких ссылок – занимают 5-10 минут. Но все равно это слишком много, хотя я пока что понятия не имею, как некоторые шаги автоматизировать.

Первый дор начал получать трафик, в районе 10 уников… Индексация гугль: 450, яндекс: 110, рамблер: 108. Когда трафик перейдет 20 хостов в сутки – поставлю ссылку на фид)

———————
постовой
——————–

Rigor открыл акцию “А ТЫ оставил комментарий?!“. Прикольно, хотя и не особо поможет…

На сайте l00t.ru выложили базу в 3 миллиона кеев с “прямого эфира” Яндекса. Может пригодится..