Miky. Дневник дорвейщика


Путь программиста-самурая в нелегком черном деле..

Итог за июнь

Июль 2, 2008

Публикую на день позже.. Хотел еще 30 запостить, но решил подождать… Кто ж знал, что проснувшись (в два часа дня) и пойдя гулять я буду 8 часов перепаивать контроллер клавиатуры в гитарку :-D И придя домой в два часа ночи, когда настроения писать отчет не было…

Доходы:
RichClick: +14$
TravelBoom: +0.16$

Расходы:
Домены: -16$ (4 дора)
Хостинг: -6$ (vds)
Прогон по каталогам: 2$ (хороший способ)

Итого: -10$

Гораздо лучше) На ричклике в конце месяца стало идти стабильно бакс в сутки, а рекорд – 1.95$ (3.26 без неучтенных). Пока что не все доры в индексе, но со временем выйдут в индекс Рамблера, что даст неплохой прирост трафика. Так же хоршо себя зарекомендовал фрейм перед контентов – CTR гораздо выше, скоро я переведу большинство доров, что еще больше увеличит доход.

Открыл для себя партнерку TravelBoom. Туризм – одна из вечных тем, особенно активизирующееся во время сезонов. Поэтому я и сделал один дорвей на эту тематику, а травелбум гораздо удобней ричклика – свободная регистрация, дает ява выдачу фида (как у контекста) – что повышает CTR, да и стабильные 8 центов за клик.. У ричклика в основном 1-3 центовые клики, на дорогую тематику (20-50 центов за клик) почти все клики не засчитываются (это просто наблюдение, IPSHORTCLICKS…).

Вообще, в этом месяце я много катал ваты, мало кодил, изредка делал доры… Но все равно, на доры пришлось потратить достаточно много времени. Но смысла делать очень много доров не вижу – я пока охватываю только рамблер, а это делает меня сильно уязвимым, если я буду надеяться только на него. Нужно разрабатывать другие пути, чтобы покорять гугл и яндекс, только после этого начинать массовое создание доров. Тем более, я пока почти все делаю вручную (((

Что сделано за июнь:
- 5 доров с поддоменами
- Модификация старого доргена
- Полезные функции – парсинг текста, кеев, доменов, улучшенная работа через прокси и т.д.
- Выяснил некоторые эксперементальные данные относительно дорвеев и ПС

Теперь посмотрим планы, которые я строил в мае:
“Полностью закончить дорген, без всяких отсрочек и т.д.”
“приделать к доргену другие схемы генерации (сейчас только один – Википедия style v1, нужно еще хотя бы два для разнообразия)”

Дорген дошел до стадии бета, затем отложен до лучших времен (хотя в данный момент уже много багов исправил). Мощная штучка, и к этой системе я еще вернусь..

Как минимум 10 дорвеев, причем минимум, в идеале – 30 (на сколько денег на домены хватит)
Доменов – сделал 5 штук, с поддоменами – около 40. Неплохо поработал, хотя можно было и лучше.

“Если хватит времени – еще несколько штук для буржунета (тим биды по 1$ каждый. У меня трафика в три раза больше, кликов тоже, а доход – в 16 раз меньше…)
Нее, нафиг-нафиг-нафиг… У меня с гугла трафика почти нет, когда в рунете научусь с гугла трафик собирать, тогда и начну.

По доходу – выйти в плюс во первых, во вторых – дойти до хотябы 3-5$ в сутки
В плюс выйти не удалось, как и на уровень 3-5$ в сутки… Доры вышли в индекс очень поздно

Ну и напоследок, по блогу – приблизиться к 100 читателям))
Хех, самый смешной пункт)))

Планы на июль:
- Выйти на стабильные 5$ в день
- Создать модификацию доргена, возможно – начать исправлять баги в бете.
- 5 дорвеев будет вполне достаточно :)
- Создать БД кеев (в данный момент 7 лямов неочищенного, несортированного говна… Нужны еще базы + постоянный парсинг + обработка базы)
- Выйти наконец то в плюс и обналичить минималку в ричклике (еще 25$ надо)

Вот в принципе все…
radicat уже отчитался, теперь я понял, почему он столько зарабатывает в умаксе, но не считает это основным.. Надеюсь, он накопит на обучение в ВУЗе (хотя осталось всего полтора месяца)

Статика vs. Динамика

Июнь 28, 2008

Доргены можно условно разделить на статические и динамические. Условно – потому что для поисковиков все равно, каким способом сделан дорвей, это лишь удобство для дорвейщиков :)

Статичные
Это – самый простой способ. Дорген сразу создает страницы дорвея, которые остается просто залить по фтп. Ну или дорген сам заливает. В чем плюсы? Во первых, работает на фрихостах (типа народа), да и вообще, не требует каких то настроек хостинга/сервера, не загружает память, процессор и т.д. Во вторых – это не вызывает сложностей, то есть все просто – только html страницы, не надо заботиться о мускуле, установке и т.д. Но, есть и минусы. Во первых, отсутствие динамического изменения (поставить редирект к примеру) – но это легко решается яваскриптом, подключаемым с основного сайта. Или, к примеру, подробную статистику собирать сложнее, но это опять решается яваскриптом, или же создание .php страниц с инклудом (как сделал я, мне проще это сделать, чем изучать яваскрипт). Во вторых, статичные дорвеи имеют простую структуру, которая не меняется со временем (к примеру, там не сделать постепенный постинг). Гугл, к примеру, обожает проверять сайт на обновление, а тут – никакого движения… Не то, чтобы он сильно обижается, но наверняка немного расстраивается) И в третьих, хоть он и не грузит сервер, но занимает много места, это иногда сильно затрудняет работу.

Динамичные
Собственно, динамичные доры почти всегда делают серверными. Фактически, все плюсы вытекают из минусов статичных, и наоборот :) На совсем фрихостах обычно не работает. Если дорген более-менее сложный, то нужно отдельно настраивать и подключать модули на хостинге. Так же много доров могут вызвать существенную нагрузку на сервер (как и прочие часто посещаемые сайты) – что вынуждает использовать VDS и собственные серверы (хотя, для начала они не нужны). Можно широко управлять дорвеем – менять шаблон, коды рекламы/редиректа, добавлять новые страницы и т.д. (все зависит от доргена и собственно системы управления дором, CMD блин :-D ).

Динамичные доры – более гибкие, их можно сделать действительно похожими на сайты для людей, и они даже могут там найти что-то полезное (если будет такая цель стоять при создании дорвея). Статичные же – простые, как черенок от лопаты, но это отнють не мешает генерировать их сотнями и тысячами, и получить лавину трафика :)

Я, к примеру, делаю дорвеи модифицированным доргеном от Egis’a (полгода назад где то купил), он генерирует странички на лету, причем текст на страницах каждый раз разный :-D Гугля это палит и не индексирует, Яндекс после проспамки просто фильтр накладывает, а Рамблеру, видимо, как то пофиг, трафик он дает)) Плюсы – занимает очень мало места, не надо ничего особо настраивать.. Минусы – загружает сервер, гугля не любит, поэтому сейчас думаю, как сохранять тексты… Но это в принципе не так сложно, поэтому, гугля, держись))))

Вообще, без разницы, каким молотком пользоваться – главное уметь гвозди забивать, чем то лучше, чем то хуже, но молоток – не главное. Образно конечно, но думаю, вы поняли мысль.

——————-

Решил собрать базу кейвордов для себя, парсить постоянно директ как то надоедает ( А на пастухова денег пока нет, хотя сейчас это был бы идеальный вариант, пока вручную делаю доры. Поэтому я запасся бесплатными мусорными базами (здесь и здесь, а так же свои наработки). В итоге получилось ~7 миллионов нефильтрованных кеев, сейчас их импортирую в mysql базу, что занимает дикое количество времени ((( выборки то быстро получается сделать, а вот проверять на дубли (а потом еще и по всей базе проходить и высчитывать количество упоминаний…) – нагружают комп по самое не хочу. 100к кеев несколько часов добавляется, я наверно всю неделю буду импортировать(( Придется включать ноутбук в режим “Йа маленький сервер!” – оставлять сутками включенным, на ночь убирать подальше (чтобы не шумел), отрубать режим сна и импортировать, импортировать, импортировать….ЫЫыы, как Пастухов орудует 60-миллионными базами?)

——————-

Anatol22 написал пост о видах дорвеев. Неплохая идея насчет Short Url – дополнительное шифрование, но это работает только при передаче постеителя без кейворда и реферер инфо (к примеру, адалт смс-партнерки).

Toxic_Cat сделал виджет для показа доходов в умаксе. Классно, надо бы тоже распарсивать ричклик, да и вообще расширять информация в сайдбаре по своим дорам :)

Йаху! Бакс в сутки))

Июнь 27, 2008

Так сказать, одна десятая цели) Трафик суммарно приближается к отметке 1к в сутки, на 90% – с рамблера. Сейчас уже начинаю думать, как получать еще больше денег (в данный момент – 1-2$ с 1к), а так же больше переходов на фид (без редиректа, сейчас просто ссылкой – 40-60%) – экспериментирую с выдачей фрейма перед контентом и убирания полосы прокрутки. Сейчас у меня чуть больше 40 дорвеев (включая поддомены), где то половина приносит трафик, остальная половина еще недопроиндексирована рамблером.

Что меня больше всего тревожит – это преобладание рамблера… Фактически, я работаю только под него, Яндекс дает трафик только на основные домены, и то только после проспамки. Гугл тоже жадничает, в песок потихоньку стирает ( Надо дорген переделать (старенький), чтобы яндекс и гугл лучше относились. По этому поводу есть несколько мыслей – к примеру, постепенная публикация страниц, добавление фото и видео контента и т.д. Вобщем, увеличивать качество самих дорвеев (а не автоматизацию, хотя я уже порядком задолбался вручную все парсить, особенно кеи… ).

—————————–

Rigor написал обобщающий пост про Дорвеи. В принципе, неплохо обобщил :) Для введения в тему вполне достаточно.

DMaster продолжает радовать полезными скриптами и программами) С его же наводки нашел сервис кодирования HTML кода – iFrame.in (некоторый код полезно зашифровать).

Леень…

Июнь 21, 2008

Да, лень – двигатель прогресса, абсолютно согласен.. Но иногда это заходит слишком далеко ( Не позволяйте лени распоясываться, лень, сука, хитрая…

Я сам, как начал вручную делать дорвеи, выработал для себя график – день клепаю доры, день – дорабатываю дорген, сервисы и т.д., програмирую короче. Вроде бы так недельку все нормально, потом начало обламывать и то, и другое… Дорвеи – потому что сука наполовину вручную, фтп здох (заливая файлы через веб-интерфейс, лень перезагружать комп), анонимайзер – потому что маленький (700 рабочих проксей, сейчас чищу – останется около 400), парсинг директа получается только один раз (зато за пару минут), потом яндекс банит (опять таки лень дописать, чтобы контролировал забаненность яндексом и принимал меры…), хорошо хоть в индекс стали выходить. Кодить – потому что кодинге сука дохрена рутины – вылизывание SQL запросов, настройка вдс, стандартных функций и прочая хрень, самого творчества мало (и оно только в начале, к примеру охрененное удовольствие приносит работа через прокси, или индексатор сайтов, и то лишь в самом начале работы). И в итоге – ничего не хочется делать, тупо фтыкаю в монитор, пока не снизойдет великий поджопник..

Наверно, для поддержания “тонуса” буду разрабатывать новые интересные сервисы для себя, а так же автоматизировать дальше. Некоторое, кстати, выкладываю в паблик – генерацию доменного имени (только домены ru), парсинг текста (левые кодировки вручную надо убирать :-D ). Осталось еще достаточно много областей, в которые еще стоит заглянуть, разобраться и автоматизировать… Возможно, это займет меня делом, чуток повысит опыт, да и вобще это полезно))) К тому же великий шанс получить поджопник (протестировать новую фичу, новый дорген, etc.).

Насчет дохода – хреново у меня с финансами… Можно сказать, центов 20 стабильно, полбакса в среднем, изредка пробивает до 1$ в день… Мало некачественнх доров = мало денег, много хреновых доров = средне денег, дофига хороших доров – много денег ))) Что в принципе понятно. Если все пойдет по плану, к началу июля должно быть стабильно 1-2$ (то есть все новые доры выйдут в индекс + я создам еще несколько штук). Если выйдет в индекс эксперементальный дор на 140к страниц – будет ваще охрененно :-D

И еще одно маленькое объявление. Если вам нужны домены в зоне .ru, можете зарегать их через меня, цена – 100 рублей, панели управления нет (если только у регистратора), регистратор – WebNames.ru, есть регистрация на приват персону. Не то чтобы я хочу подзаработать, просто хочу оборотные средства увеличить для снижения цены, а для этого нужно домены регистрировать (просто добавлять средства не катит). Вобщем, если нужны домены – обращайтесь)

Хочешь денег? Въебывай!

Июнь 13, 2008

Суровая правда жизни блин… Если ничего не делаешь – ничего и не получишь. Нет, не в концепции разгрузил два вагона угля получил столько то денег. Хочешь денег с дорвеев – делай дорвеи, а не дорген. Дорген потом сам допишешь от лени, но сначала – дорвеи. Вот я и попался, хотел всего и сразу с этим доргеном…

Как ни странно, но подобный дорген (с полной автоматизацией) – мне пока что НЕ НУЖЕН. У меня нет большого опыта для раскрутки дорвеев, нет сервера, который бы выдержал дорген, нет тысяч баксов на домены. У меня даже опыта в создании дорвеев не так много. Ничего нет. Но я начал делать этот дорген… Угрохал на него кучу времени. И теперь придется начинать опять с самого начала.

Вот, сегодня весь день, что называется, въебывал дорвеи. Да, для кого то 9 дорвеев – это мало, но я то нифига не делал уже месяц, поэтому это много. Я взял старый динамический доргин от egis, который я сам же модифицировал, проагрейдил его своими функциями, сделал несколько веб-сервисов (именно сервисов, с простым интерфейсом), и начал наполовину вручную генерировать дорвеи… Уже после третьего дорвея я понял, что скорость парсинга кеев – чудовищная, чуток подхимичил с проксями, и вот он – 5-10 кратный прирост в скорости работы :) Впервые начал работать с проксями (чекер давно написал). Заодно вычислил наконец то подлую ошибку в генерации текста, которая убивала весь текст, что увеличило стабильность (это кстати чуток улучшает основной дорген).

Теперь я гораздо глубже понимаю если не принципы, то хотя общий путь развития в генерации дорвеев. Регистрацию доменов, к примеру, автоматизировать нерентабельно, даже 50 доменов в месяц можно легко регистрировать вручную. Вот при большем объеме – да, уже стоит призадуматься, но чтобы этого достичь, надо ручками немало поработать. Добавление доменов на хостинг – вещь удобная, но вполне достаточно оформить её в качестве простого сервиса. Парсинг текста – так же отличная штука, но её надо дорабатывать для работы в одной кодировке (хотя все равно экономия времени – колоссальная, не то что вручную искать и выдирать куски текста, надо всего лишь почитать текст) и дополнительной очистке от мусора.

Вот завтра еще с десяток доров сделаю, буду думать, что отнимает больше всего времени, и автоматизирую эту часть. Пока что даже не знаю, может GUI прикрутить и заливку по фтп..

Мораль: работать надо, а не сидеть в розовых очках и мечтать о лавинах трафика, машинах и островах. Так работать, чтобы свободного времени вообще не оставалось, даже чтобы херней пострадать.

————————–

Кстати, я в последнее время увлекся универсальными сервисами :) То есть заместо того, что бы подключаться к мускулю, добавлять новую записать о статистике и т.д. я просто делаю так “implode(file(http://сайт.ру/stat.php?параметры))”, и уже на сервере добавляю запись в статистику. Это позволяет, во первых, сокращать код в дорвее, во вторых – оперативно изменять инфу (к примеру, переход на новую партнерку). И в третьих – работать на разных хостингах, в том числе и фрихостах. Точно так же я реализовал выдачу фида/ссылки на фид/редиректа (только не много ступил – надо еще сайт передавать, а не только реферер), работу с прокси (заместо полукилобайтного кода с проверкой работоспособности прокси, получения данных для реферера, собственну кучи курл кода – всего одна строка вызова). Так же думаю буду делать перелинковку, вручную заколебался править)))) Единственный минус, исполняемый код не вставишь, но это тоже решается.

В следующих постах, кстати, может опубликую несколько сервисов (скорее всего, онлайн парсер директа и генератор имен доменов). Я все равно не использую их на полную катушку, а так может кому то польза будет :)

—————————-

Еще один знакомый открыл блог – DMaster. Хотя блог свежий, но я уже нашел для себя полезное – сайты с бесплатными шаблонами (один уже юзаю), сервис для кодирования редиректа. Если он будет продолжать в том же духе, это будет мегаполезный блог для дорвейщиков :)