Комментарии на: Статика vs. Динамика

От: 99th

99th — Mon, 14 Jul 2008 22:29:20 +0000

>>Если есть хороший контент, двигло для него вообще писать смысла нет, уже можно бабки делать сразу

угу. проблема один: реюзабельность. т.е. как долго контент будет оставаться хорошим. без нормального двигла показатель стремится к нулю.
проблема два: вопрос оприходования (которая при топорном подходе рождает проблему один). представь что сейчас дам пятьдесят гигов уникального текста про машинки. как скоро и насколько эффективно можно будет оприходовать этот контент, юзая обычные постеры/доргены/ручки? я уверен, кпд будет запорото.

От: Miky

Miky — Sat, 12 Jul 2008 03:55:45 +0000

Секрет, проблема не в этом)) У меня уже давно вся статистика по дорам (200к пока что), прокси, кейворды лежат в БД. Баго с мускулем я разобрался давно. Просто у меня очень кривые руки, и я до сих пор не могу вкурить, как захреначить нормальную кодировку для базы, постоянно кракозябры выходят. На обычном хостинге все ок, на VDS (first) – лажа. Нашел один очень умный вариант – урлкодирование-декодирование, но это херня а не вариант при работе с кучей текста.

От: Секрет

Секрет — Fri, 11 Jul 2008 22:41:35 +0000

Если есть хороший контент, двигло для него вообще писать смысла нет, уже можно бабки делать сразу

> Надо либо в БД все загонять (что пока что рано),

Пороть надо. Реально надо всех, кто за программирование берётся, сначала хорошо выпороть. Что рано-то? Рано учиться загонять в базу? Да загнать\взять из базы проще, чем хуй вовремя вытащить, когда кончаешь. Причём намного проще, хотя и не скажу, что последнее так уж сложно.

Так что потрать два дня на обучение работе с mysql (или с любой другой базой на выбор). Будешь юзать или нет – сам решишь, не всегда mysql нужен, но уметь там особо нечего, про сложность см. выше.

От: 99th

99th — Wed, 09 Jul 2008 22:07:45 +0000

насчет необновляемости статики очень сильно ошибаешься. ну, не то чтобы ошибаешься, просто типовой расклад описываешь. у меня вот все в статике, а обновляется новыми постами еженедельно (можно и чаще, был бы контент). вообще, контент – единственная действительно острая проблема всех сеошников. Остальное – достаточно легко решаемая фигня (написать отличное двигло для постинга, которому нет аналогов в паблике – это три месяца работы, если есть опыт).

От: Miky

Miky — Mon, 07 Jul 2008 14:54:59 +0000

Ваш любимый Платон Щукин, точно! Что-то мне явно не хватает знаний по оптимизации программирования… Операциям с большим количеством данных…

От: Ваш любимый Платон Щукин

Ваш любимый Платон Щукин — Mon, 07 Jul 2008 06:00:43 +0000

>>100к кеев несколько часов добавляется….

а ты случайно каждый кей не отдельным INSERT вставляешь? Пробуй одним INSERT вставлять по 250 кеев, быстродействие вырастет в 200 раз.

От: Miky

Miky — Fri, 04 Jul 2008 08:07:40 +0000

Хм.. а ты ведь прав, получится файл размером 5-10 метров, и при каждом посещении его загружать в память… явно не самый лучший способ.

Надо либо в БД все загонять (что пока что рано), либо, как наиболее оптимально, сразу генерировать и сохранять страницы дора. И память не нагружается, и сложностей в исполнении нет. Правда, занимает место на винте, но места гораздо больше, чем оперативки…

От: Секрет

Секрет — Fri, 04 Jul 2008 07:00:05 +0000

А юзать-то ты как будешь? Грузить весь файл в память и брать элемент массива? Доры маленькие или полгига памяти – не проблема?

В один файл – это нужно будет индекс делать. Где записано положение текста под номером n. Потом в основном файле делаешь
seek($pos[$n]);
fread($fp,$pos[$n+1]-$pos[$n]);

Однако куча файлов – это не плохо. Совсем не плохо. Не стоит видеть проблему там, где её нет. Место на винте нынче дешёвое.

От: Miky

Miky — Fri, 04 Jul 2008 03:45:23 +0000

Секрет, я думаю закешировать сам текст.. Только без кучи файлов, все в один, может даже в php формате (массивом). Шаб и ссылки не обязательно кешировать, они во первых не нагружают, а во вторых – статичны.

Ага, снял уже, задолбался ждать Все просто импортировал, а при выборке беру DISTINCT. Проблема в том, что какие то тематики в базе есть, каких то нет, но все равно приходится постоянно парсить…. Наверно, поставлю парсер прямого эфира на автомат, авось наберет постепенно базу…

От: Секрет

Секрет — Fri, 04 Jul 2008 00:34:12 +0000

> поэтому сейчас думаю, как сохранять тексты…
Самый простой способ – srand();
по-сложнее – банальный кеш. if (file_exists()) {} else {}

> 100к кеев несколько часов добавляется, я наверно всю неделю буду импортировать
А ты уникальное поле-то сними. Профильтровать и файлом можно, без базы. Тем более что быстрее порядка на 4. (7 лямов минут за 20 должен успеть).

Mysql вообще нагрузки держит замечательно, если его готовить правильно. А 60 лямов пастуховских строк в базу добавляются несколько часов.