Сервер настолько крут, что ему по барабану дневная нагрузка.

4) У нас атипичная особая аудитория (хз в чём особенность)

RSS

backup'ы много проца жрут, а конкретно - duplicity.

5) Статистика рисуется от балды.

Основную нагрузку на сайт создаёт бэкап? Т.е. они жрут в разы больше чем лор? Ну или столько же?

нет, backup не основная нагрузка. Тут не понятно как правильно измерить, если хочешь я тебе могу atop записать для исследований.

Реально пользователей (по google analytics) ночью раз в 5 меньше чем днем, но трафик падает всего в два раза. Лор постоянно шерстят боты, поисковики там всякие и т.п.

Запиши пожалуйста. Я провожу мини-исследование по поводу суточного изменения нагрузки в датацентрах. Начал с лора, данные не совпадают с ожиданиями. На msk-ix min/max траф отличается в 8 раз. Я предполагал примерно такого же изменения в нагрузке среднестатистического сайта.

Может тупо мало юзьверей для обеспечения высокого перепада?

Я провожу мини-исследование по поводу суточного изменения нагрузки в датацентрах.

Это исследование ради исследования или какая цель (если не секрет)?

Пишу вступление к дисеру :). А почему ты спрашиваешь?

Просто интересно. Может на основании этих данных можно получить ответ на главный вопрос жизни, вселенной и всего такого. Ну а вообще я понимаю зачем мерить посещаемость своих ресурсов, а вот зачем обирать какую-то статистику по Интернету не понял.

Могу подогнать графики заббикса с ресурсов с миллионом уников в сутки. Посетители русскоговорящие.

О, я с тобой дружу :) Я напишу на почту.

Ок, не вопрос.

Реально пользователей (по google analytics) ночью раз в 5 меньше чем днем, но трафик падает всего в два раза.

Наверное это тот самый универсальный принцип «80х20»? Когда 80 процентов трафика генерят 20 процентов юзверей. И именно они часто приходят ночью и рефрешат страницу раз в 5 секунд и пишут по 10050 постов в ночных посиделках. А обычные пользователи обновляют ЛОР гораздо реже, но днем этих юзеров гораздо больше. Да и днем многие с работы, потому нет возможности часто писать, а ночью отрываются по полной.

Настроил запись, напомни через пару дней, пришлю результат.

зачем обирать какую-то статистику по Интернету не понял.

Моя тема — «как облака делают ваши волосы нежными и шелковистыми». Если есть большое суточные колебания в нагрузке то я могу написать: смотрите, в клауде вы платите только за те ресурсы которые потребляете. Значит, ночью, когда трафик в 10 раз меньше, вы почти ничего не платите.

Но, как видно, всё оказалось не так просто. В принципе, я на простую жизнь и не рассчитывал.

на самом деле нет

http://imageshack.com/a/img907/4738/lvR5jJ.png

OMG LOL

Ты пробовал выяснять модель ценообразования у операторов связи? Какая разница, что там ночью, если на трафик 95% перцентиль, например. Вообще, если тебе интересно, я тебе могу дать графики ЛОРа с грануляцией до 3х минут.

И вдогонку: в облаке экономия вовсе не на том, если облако - действительно эникастовое и все из себя распределенное-сбалансированное, а не просто 3 компа у кого-то под столом, 2 в германии и один в США (плюс геоDNS). Например, у нас ты вообще ничего не накроишь на том, что ночью никто не ходит.

Тоже могу подкинуть пару графиков, например: https://www.dim13.org/tmp/weekly_rps.png (это «нормальные» пользователи-домохозяйки, закономерность просматривается)

Pentium 4

Вот объясните мне, это правда? четвертопень тащит нагрузку лора? в чем секрет такой хорошей оптимизации?

ЛОР, между прочим, очень хорошо написан и исключительно надежен и стабилен, на фоне разных сайтов рунета и нерунета, как видящий трафик очень многих популярных ресурсов говорю (тут я не нарушаю NDA, так как не персонифицирую и дальше не буду, не просите). Мы платим за это (но не страдаем, а наслаждаемся) его концепцией Web 1.0 over Web 2.0 во все места: от поддержки lynx и links отказались совсем недавно.

вот зря отказались
я вот две темы создал с своего домашнего сервера, на котором фрибзд и нет иксов
а так было проще
ну и порой нету доступа к гуи, а помощь нужна срочно

Хорошая железка, не смотря на то что ей уже лет 8. Там P4 Xeon, две штуки.

так там два пня? а я думал на одном ядре все висит
они двухядерные? неужели java так быстро бегает?

Два пня, у каждого одно ядро с hyperthreading.

Lynx я специально не ломал, думаю оно там в каком-то виде работает.

Миф о медленности java создается косорукими кретинами. На других языках тырпрайзный индусокод был бы еще хуже.

Bery svoi slova obranto. No UTF-8 tolko na vivod.

Пруф UA: Lynx/2.8.8dev.15 libwww-FM/2.14 SSL-MM/1.4.1 OpenSSL/1.0.1e-fips

Все понимают что никакой магии нет и что клауд-провайдеры в убыток себе не работают. Суть просто показать что нагрузка за сутки сильно меняется и для маленькой конторы которая платит pay-as-you-go клауды это благо. С ростом масштабов экономическая целесообразноть теряется (потому что всякие амазоны продают ресурсы втридорога) и с какого-то момента становится дешевле нанять девопа/сисадмина. Я об этом тоже рассказываю.

Суть в том что мелких проектов больше чем больших. И никто не хочет возиться со своей инфраструктурой. За счёт этого амазон и живёт.

Примерно в таком ключе вступление. Комментарии/предложения? :)

ЛОР засыпает, просыпается мафия.

Эээм, и чо, ему серьёзно хватает двух галлатинов/пресков 4м?

исключительно надежен и стабилен

Насколько часто ЛОР ддосят? Это единичные случаи в год или чаще одного раза в месяц? Если вы отсекаете часть атаки, мы её можем и не видеть. Сколько по времени длится атака?

Комментарии/предложения? :)

Выложи потом почитать)

Мы отсекаем не часть, а полностью, вы ее не видите (всплеск ошибок на 20-30 секунд, потом опять норм). ДДоСят иногда пару раз в месяц, иногда не ддосят. По времени - минуты, так как атакующая сторона в основном снимает нагрузку, если удачи нет.

У меня (как у продажника) есть мнение, что при любом pay-as-you-go есть выручка для конкретного пользователя и ARPU по деревне, ниже которого связываться вообще не стоит. Какой бы ни был тариф у сотового оператора, я ниже $5/мес тратить не буду, какой бы ни был pay-as-you-go, ниже тех же условных пяти баксов будет «воздух», то есть реально отсутствующий или неработающий сервис. Разница в «битриксе на джеластике» за $3 и VPSке у Лизвеба за $6 (цены на тот момент, когда я имел счастье столкнуться), а не в 2 раза, а в бесконечность: тот битрикс на том джеластике просто не работал, тариф можно было выбрать, купить, оплатить. Он был просто на случай «а вдруг купят впрок и не будут пользоваться». Не выйдет тут заметной экономии (заметной == 1 рабочий день медианы FTE).

Да :) Потому-что, как Шаман написал выше «ЛОР, между прочим, очень хорошо написан и исключительно надежен и стабилен, на фоне разных сайтов рунета и нерунета»

Какбе, для тех кому не надо звонить часто (вторая симка для семейной связи) - сойдёт и еле2 за 1.5$.

И да, свои копейки они честно отбивают - интернет работает (даже LTE в метро есть) и звонки звонятся.

То-то недавно была история со сдохшим хардом. Или это не у лора, а у попеннета?

У ЛОРа была история со сдохшим винтом давноооо очень.

У опеннета сгорел БП скорее всего.

На самом деле нет: см. вопрос о тарификации неотвеченных вызовов у Tele2, вопросы их редистрибуции ритейлом и т.п. В итоге пообещают %1.5, возьмут $3 и добавят всяких неожиданных (но прописанных в контракте) приколов, хотя за углом не принципиальные $5 без мелкого шрифта и с поддержкой Подмосковья.

Как потребитель продукции Mercedes и Apple говорю: лучше сразу на берегу всю детализацию возможных капексов и опексов на 5 лет вперед по худшему раскладу. Не лезет в бюджет - не мой поставщик.

Подмосковье

Для меня, как живущего в дофига км северозападнее, очень актуально.

штрафы

Вы с большой тгойкой таки путаете, которая любит оставлять абонентов с неоплаченной абонкой с балансом -500...N и без связи.

продукция мерцедес

И как, уже посчитали во что влетит ремонт движка после снятия с производства миллионников?

И как, уже посчитали во что влетит ремонт движка после снятия с производства миллионников?

Во-первых, нет и не было никаких особенных «миллионников», это пересевшие с Волг на Литовский Конструктор сказки рассказывают. Видел я и Альфы с пробегом 200к без проблем и Мерседесы с дохлой турбиной в 15к: зависит от ухода, условий эксплуатации и удачи. Да, во все времена были крайне неудачные экземпляры и крайне удачные: Тойота Е12 2006 года тебе вполне может встретиться в дикой природе и у нее вполне может быть 400к пробега, одна капиталка и родная коробка (и 4 рулевых рейки, лол). Во-вторых, автомобиль стал НЕСОИЗМЕРИМО дешевле относительно среднего дохода его владельца и на 20 лет единоличного владения их покупают единицы. То же касается «ненадежных» телевизоров: да, служит 10 лет, а не 30 и стоит 30% оклада, а не 400.

Ну пусть так.

Учитывая пробег машины в 8-12 000км в год до проблем мне примерно 10-12 лет. Коробка - тысяча евро, двигатель - тысяча евро. Ну две. Ну одновременно. В этой истории меня больше будет волновать, чому я, мама, такой неудачник и 12 лет один Мерседес эксплуатирую, а не чаемые пусть даже это в один несчастный год сразу 5 000 евро.

Да, у меня была машина старше меня (Гелендваген) и там главная проблема была в том, что нормально делать - долго и дорого (но сначала все-таки идет долго), а вконце ты получаешь музейный экспонат в идеале, но без кондиционера и на котором жалко ездить в лес. А колхозить - ну его, противно.

кондиционер в гелике

Может ещё круизконтроль в бобик или бухлобус?

Чтоб 2 раза не вставать, самая дорогая машина, которой владела моя семья - ВАЗ 2103. 20 лет эксплуатации, 100 000 км пробега. Перебрать переднюю подвеску и тормоза в конце 80х-начале 90х - примерно месячный отпуск под Геленджиком. Вмятина - катастрофа, поломка ГРМ - дыра в бюджете размером с внешний долг Анголы (потому что детали - дефицит). Как результат - колхоз, инженерные мысли и вечное «цилиндры залил». Сейчас такого даже Альфе будет сложно доставить.

Молодой человек, вы 460 от 463 отличаете?

То-то недавно была история со сдохшим хардом.

Ну да, мне тоже иногда кажется, что Reload - последний альбом у Металлики.

Стой, 10 лет уже? А, 9!