Miky. Дневник дорвейщика


Путь программиста-самурая в нелегком черном деле..

Четверг

Июль 10, 2008

Все таки не зря я решил попробовать с дорвеями :) Так получилось, что 3 дня не был в инете (уезжал на природу), ничего не мониторил, не правил.. Но дорвеи, сцуко, самостоятельные :-D Без меня они успешно повысили планку ежедневного дохода до 4$, с пиком в 7.19$. Но, как ни странно, все идет по плану – я планировал именно такой доход к началу июля. Теперь осталось сохранить его и премножить, и, наконец, дойти до 10$. Пока что, правда, доры автоматом не делаются – все вучную, и, чтобы достичь этой суммы, надо добить примерно до 100 поддоменов.

После анализа статистики подкорректировал свои догадки.. Рамблер, как оказалось, не так прост, как кажется. Во первых, он с успехом банит дорвеи, но – постиндексно, то есть в индекс залетают почти все, но часть оттуда так же быстро выходит. Во вторых, большие сайты он не любит – эксперементальный дор на 150к страниц, после получения плюшки в 400 хостов (100 яндекс, 100 гугл, 200 рама) был успешно забанен. По моим наблюдениям, не стоит раме кормить нулевые доры с >3000 страниц, идеально 1-2к (меньше – мало трафика, больше – стремится к бану). Количество поддоменов еще не выяснял, но 10 поддоменов он держит отлично (как ни будь попозже надо проверить, проиндексирует ли он, к примеру, 100 поддоменов). Кстати, наличие внешних ссылок ускоряет индексацию, так что чуток спама и для рамы не помешает.

Яндекс наоборот, оказался чуть проще… Прекрасно жрет дорвеи, но – только на главных доменах. На поддомены никак не реагирует (читать: не посылает трафик), и, видимо, наличие подоменов плохо влияет на индексацию домена. У меня даже возникла мысль вообще не пускать яндекс на поддомены (не только роботсом, но и клоакингом сразу отсылать на домен) – таким образом и Яндекс немного трафика пришлет, и рама останется доволен. Хотя, на самом деле, достаточно чуток проспамить (или не чуток) – и трафик обеспечен. Недолго правда, но все же..

Гугль… куй поймешь этот гугл. Пошел он вообще в задницу, в буржунете тоже достаточно второстепенных поисковиков, с которых можно получать трафик. С этого момента – игнорирую гугл, если трафик есть – хорошо, если нет – хрен с ним. Одновременно работать 3 поисковика сложновато, с двумя то справиться сложно…

———————————–

От нефиг делать подсчитал… Я забираю у рамы примерно 0.06% всего трафика, которые он отправляет на сайты :) Это, конечно, прилизительно, по статистике LI, но более точных данных в паблике нет. Примерно каждый 2000-й, кто ищет что-то в рамблере, попадает на один и моих дорвеев. И это не предел, я стремлюсь пожрать у рамблера все 10% :-D Хотя, врятли им понравится мое стремление, но в данный момент меня это не волнует))))

————————————

Презренный манимейкер проводит LINK-парад. Интересный способ обменяться ссылками (и читателями) :) Лично я нашел несколько полезных в свете дорвеев постов – про сервисы закладок (обратите внимание на второй пункт – индексацию), про генерацию уникального читабельного контента из блогов (может и абсурдно, но дорвеи с таким контентом могут жить гораздо дольше. Я недавно как раз делал новые парсер текста напрямую из яндекс.блогов, чтобы получать читсый текст, но яндекс сцуко думает, что я робот. RSS – сила :)

Статистика дохода

Июль 4, 2008

Вот, доработал свою статистику :) Теперь нет подробностей по типу трафика (итак понятно, что рама лидирует), нет индексации. Зато добавилось поле количества кликов и дохода, что гораздо интереснее))) Доход пока что только из ричклика, причем до обработки (там какая то странная система, ручной аппрув кликов что ли… “плохие” клики считают только на следующий день, и то не всегда). Так же по другому разделил на графы, раньше было: сегодня, вчера, за все время, теперь – сегодня, за неделю (последние 7 дней), за месяц (с первого числа). В данный момент мне это кажется удобней.

В отличие от Toxic_Cat, с его многочисленными графическими барами, я предпочитаю текстовую информацию, причем объединенную. Зачем делать 5-10 баров с копейками, если заработок идет одним способом? Ну это конечно в моем случае.. Когда туристический дор выйдет в серп и начнет приносить траф, объединю его статистику с ричкликом :)

Итог за июнь

Июль 2, 2008

Публикую на день позже.. Хотел еще 30 запостить, но решил подождать… Кто ж знал, что проснувшись (в два часа дня) и пойдя гулять я буду 8 часов перепаивать контроллер клавиатуры в гитарку :-D И придя домой в два часа ночи, когда настроения писать отчет не было…

Доходы:
RichClick: +14$
TravelBoom: +0.16$

Расходы:
Домены: -16$ (4 дора)
Хостинг: -6$ (vds)
Прогон по каталогам: 2$ (хороший способ)

Итого: -10$

Гораздо лучше) На ричклике в конце месяца стало идти стабильно бакс в сутки, а рекорд – 1.95$ (3.26 без неучтенных). Пока что не все доры в индексе, но со временем выйдут в индекс Рамблера, что даст неплохой прирост трафика. Так же хоршо себя зарекомендовал фрейм перед контентов – CTR гораздо выше, скоро я переведу большинство доров, что еще больше увеличит доход.

Открыл для себя партнерку TravelBoom. Туризм – одна из вечных тем, особенно активизирующееся во время сезонов. Поэтому я и сделал один дорвей на эту тематику, а травелбум гораздо удобней ричклика – свободная регистрация, дает ява выдачу фида (как у контекста) – что повышает CTR, да и стабильные 8 центов за клик.. У ричклика в основном 1-3 центовые клики, на дорогую тематику (20-50 центов за клик) почти все клики не засчитываются (это просто наблюдение, IPSHORTCLICKS…).

Вообще, в этом месяце я много катал ваты, мало кодил, изредка делал доры… Но все равно, на доры пришлось потратить достаточно много времени. Но смысла делать очень много доров не вижу – я пока охватываю только рамблер, а это делает меня сильно уязвимым, если я буду надеяться только на него. Нужно разрабатывать другие пути, чтобы покорять гугл и яндекс, только после этого начинать массовое создание доров. Тем более, я пока почти все делаю вручную (((

Что сделано за июнь:
- 5 доров с поддоменами
- Модификация старого доргена
- Полезные функции – парсинг текста, кеев, доменов, улучшенная работа через прокси и т.д.
- Выяснил некоторые эксперементальные данные относительно дорвеев и ПС

Теперь посмотрим планы, которые я строил в мае:
“Полностью закончить дорген, без всяких отсрочек и т.д.”
“приделать к доргену другие схемы генерации (сейчас только один – Википедия style v1, нужно еще хотя бы два для разнообразия)”

Дорген дошел до стадии бета, затем отложен до лучших времен (хотя в данный момент уже много багов исправил). Мощная штучка, и к этой системе я еще вернусь..

Как минимум 10 дорвеев, причем минимум, в идеале – 30 (на сколько денег на домены хватит)
Доменов – сделал 5 штук, с поддоменами – около 40. Неплохо поработал, хотя можно было и лучше.

“Если хватит времени – еще несколько штук для буржунета (тим биды по 1$ каждый. У меня трафика в три раза больше, кликов тоже, а доход – в 16 раз меньше…)
Нее, нафиг-нафиг-нафиг… У меня с гугла трафика почти нет, когда в рунете научусь с гугла трафик собирать, тогда и начну.

По доходу – выйти в плюс во первых, во вторых – дойти до хотябы 3-5$ в сутки
В плюс выйти не удалось, как и на уровень 3-5$ в сутки… Доры вышли в индекс очень поздно

Ну и напоследок, по блогу – приблизиться к 100 читателям))
Хех, самый смешной пункт)))

Планы на июль:
- Выйти на стабильные 5$ в день
- Создать модификацию доргена, возможно – начать исправлять баги в бете.
- 5 дорвеев будет вполне достаточно :)
- Создать БД кеев (в данный момент 7 лямов неочищенного, несортированного говна… Нужны еще базы + постоянный парсинг + обработка базы)
- Выйти наконец то в плюс и обналичить минималку в ричклике (еще 25$ надо)

Вот в принципе все…
radicat уже отчитался, теперь я понял, почему он столько зарабатывает в умаксе, но не считает это основным.. Надеюсь, он накопит на обучение в ВУЗе (хотя осталось всего полтора месяца)

Статика vs. Динамика

Июнь 28, 2008

Доргены можно условно разделить на статические и динамические. Условно – потому что для поисковиков все равно, каким способом сделан дорвей, это лишь удобство для дорвейщиков :)

Статичные
Это – самый простой способ. Дорген сразу создает страницы дорвея, которые остается просто залить по фтп. Ну или дорген сам заливает. В чем плюсы? Во первых, работает на фрихостах (типа народа), да и вообще, не требует каких то настроек хостинга/сервера, не загружает память, процессор и т.д. Во вторых – это не вызывает сложностей, то есть все просто – только html страницы, не надо заботиться о мускуле, установке и т.д. Но, есть и минусы. Во первых, отсутствие динамического изменения (поставить редирект к примеру) – но это легко решается яваскриптом, подключаемым с основного сайта. Или, к примеру, подробную статистику собирать сложнее, но это опять решается яваскриптом, или же создание .php страниц с инклудом (как сделал я, мне проще это сделать, чем изучать яваскрипт). Во вторых, статичные дорвеи имеют простую структуру, которая не меняется со временем (к примеру, там не сделать постепенный постинг). Гугл, к примеру, обожает проверять сайт на обновление, а тут – никакого движения… Не то, чтобы он сильно обижается, но наверняка немного расстраивается) И в третьих, хоть он и не грузит сервер, но занимает много места, это иногда сильно затрудняет работу.

Динамичные
Собственно, динамичные доры почти всегда делают серверными. Фактически, все плюсы вытекают из минусов статичных, и наоборот :) На совсем фрихостах обычно не работает. Если дорген более-менее сложный, то нужно отдельно настраивать и подключать модули на хостинге. Так же много доров могут вызвать существенную нагрузку на сервер (как и прочие часто посещаемые сайты) – что вынуждает использовать VDS и собственные серверы (хотя, для начала они не нужны). Можно широко управлять дорвеем – менять шаблон, коды рекламы/редиректа, добавлять новые страницы и т.д. (все зависит от доргена и собственно системы управления дором, CMD блин :-D).

Динамичные доры – более гибкие, их можно сделать действительно похожими на сайты для людей, и они даже могут там найти что-то полезное (если будет такая цель стоять при создании дорвея). Статичные же – простые, как черенок от лопаты, но это отнють не мешает генерировать их сотнями и тысячами, и получить лавину трафика :)

Я, к примеру, делаю дорвеи модифицированным доргеном от Egis’a (полгода назад где то купил), он генерирует странички на лету, причем текст на страницах каждый раз разный :-D Гугля это палит и не индексирует, Яндекс после проспамки просто фильтр накладывает, а Рамблеру, видимо, как то пофиг, трафик он дает)) Плюсы – занимает очень мало места, не надо ничего особо настраивать.. Минусы – загружает сервер, гугля не любит, поэтому сейчас думаю, как сохранять тексты… Но это в принципе не так сложно, поэтому, гугля, держись))))

Вообще, без разницы, каким молотком пользоваться – главное уметь гвозди забивать, чем то лучше, чем то хуже, но молоток – не главное. Образно конечно, но думаю, вы поняли мысль.

——————-

Решил собрать базу кейвордов для себя, парсить постоянно директ как то надоедает ( А на пастухова денег пока нет, хотя сейчас это был бы идеальный вариант, пока вручную делаю доры. Поэтому я запасся бесплатными мусорными базами (здесь и здесь, а так же свои наработки). В итоге получилось ~7 миллионов нефильтрованных кеев, сейчас их импортирую в mysql базу, что занимает дикое количество времени ((( выборки то быстро получается сделать, а вот проверять на дубли (а потом еще и по всей базе проходить и высчитывать количество упоминаний…) – нагружают комп по самое не хочу. 100к кеев несколько часов добавляется, я наверно всю неделю буду импортировать(( Придется включать ноутбук в режим “Йа маленький сервер!” – оставлять сутками включенным, на ночь убирать подальше (чтобы не шумел), отрубать режим сна и импортировать, импортировать, импортировать….ЫЫыы, как Пастухов орудует 60-миллионными базами?)

——————-

Anatol22 написал пост о видах дорвеев. Неплохая идея насчет Short Url – дополнительное шифрование, но это работает только при передаче постеителя без кейворда и реферер инфо (к примеру, адалт смс-партнерки).

Toxic_Cat сделал виджет для показа доходов в умаксе. Классно, надо бы тоже распарсивать ричклик, да и вообще расширять информация в сайдбаре по своим дорам :)

Йаху! Бакс в сутки))

Июнь 27, 2008

Так сказать, одна десятая цели) Трафик суммарно приближается к отметке 1к в сутки, на 90% – с рамблера. Сейчас уже начинаю думать, как получать еще больше денег (в данный момент – 1-2$ с 1к), а так же больше переходов на фид (без редиректа, сейчас просто ссылкой – 40-60%) – экспериментирую с выдачей фрейма перед контентом и убирания полосы прокрутки. Сейчас у меня чуть больше 40 дорвеев (включая поддомены), где то половина приносит трафик, остальная половина еще недопроиндексирована рамблером.

Что меня больше всего тревожит – это преобладание рамблера… Фактически, я работаю только под него, Яндекс дает трафик только на основные домены, и то только после проспамки. Гугл тоже жадничает, в песок потихоньку стирает ( Надо дорген переделать (старенький), чтобы яндекс и гугл лучше относились. По этому поводу есть несколько мыслей – к примеру, постепенная публикация страниц, добавление фото и видео контента и т.д. Вобщем, увеличивать качество самих дорвеев (а не автоматизацию, хотя я уже порядком задолбался вручную все парсить, особенно кеи… ).

—————————–

Rigor написал обобщающий пост про Дорвеи. В принципе, неплохо обобщил :) Для введения в тему вполне достаточно.

DMaster продолжает радовать полезными скриптами и программами) С его же наводки нашел сервис кодирования HTML кода – iFrame.in (некоторый код полезно зашифровать).