LXC производительность сети

42

Что 42 ?

Топик был пустой :).

Это потомучто по энтеру форма сабмитится - раздражает иногда. А на моем Lenovо энтер маленький и со всех сторон окружен другими кнопками - вечно под руку лезет ...

Форма по энтеру не сабмитится. По Ctrl+Enter — да.

Какие у LXC/Docker накладные разсходы на сеть ?

ab -n100 -c10 на статический файл через nginx с локалхоста и через lxc:

Requests per second: 11583.46 [#/sec] (mean)
Time per request: 8.633 [ms] (mean)

Requests per second: 3725.78 [#/sec] (mean)
Time per request: 26.840 [ms] (mean)

Поскольку реальная нагрузка на контейнер редко превышает сотни запросов в секунду, то накладные расходы, большие в относительных значениях, в абсолютных — пренебрежимые.

буду роутить пакеты в между реальными и виртуальными интерфейсами

Как можно роутить «в между» ? Хорошо хоть не «в на».

стоимость форвардинга пакетов внутри машины через veth мизерная ( если только у тебя не 100500 маршрутов или безумные правила фильтрации)

С другой стороны, если в контейнер отдать vlan или целиком сетевой интерфейс, то надобность в форвардинге отпадет (вместе с накладными расходами)

Запусти iperf между контейнером и хостом чтобы понять будет ли это узким горлышком.

Могу за докер сказать.

По моим наблюдениям. Оверхеда по CPU нет. В режиме host сеть чувствует себя хорошо, latency почти не растет, throughput просаживается в худщем случае процентов на 10. В режиме nat, latency может увеличиться до двух раз, throughput падает процентов на 30.

Но эти данные могли устареть, и могут зависеть от железа. И вообще лучше загугли какие-нибудь авторитетные бенчмарки :)

Macvlan нужно пробовать- заметных потерь производительности быть не должно.

спасибо большое за цифры.

Поскольку реальная нагрузка на контейнер редко превышает сотни запросов в секунду, то накладные расходы, большие в относительных значениях, в абсолютных — пренебрежимые.

Есть идея засунуть в контейнер ПО которое сейчас обрабатывает порядка 30000 запросов в секунду, такчто накладные расходы могут быть существенны ...

Проверил в docker 1.10 на nginx из fedora 24:

localhost:
Requests per second: 23435.67 [#/sec] (mean)

docker:
Requests per second: 5301.66 [#/sec] (mean)

docker --net host:
Requests per second: 21781.75 [#/sec] (mean)

Че-то херня какая-то с докером - почему так проседает...

Обсуждение вашего бага: https://github.com/docker/docker/issues/7857

Ага, docker-proxy тормозит. Можно попробовать без него или дождаться 1.12

ab -n100 -c10 на статический файл через nginx с локалхоста и через lxc

Забавно, но в Ubuntu сейчас, по сравнению с 14.04 скорость LXC упала, а скорость Docker выросла. Раньше LXC-контейнер отдавал статику и PHP-скрипты с такой же скоростью, как и хост, а Docker — раз в 5 медленнее. Сейчас, не знаю, что повлияло больше, ядро системы или соответствующие версии софта, но для простого `echo 2*2` на php7 скорость отдачи у меня:

- На хосте: 20-22 krps
- В LXC-контенере: 8-10 krps
- В Docker-контейнере: 9-15 krps

При чём у LXC более быстрый вариант php-fpm, с сокетом, а в Doker — с сетевым интерфейсом.

хм. а если сравнить iperf3 ?

на localhost это c MTU 64K без КС.

А остальное что ? veth + bridge/openvswitch

А остальное что ? veth + bridge

Видимо, так. У Docker ещё дисковая система, вроде, тормозит из-за aufs, но в таком примитивном примере она, как раз, не сказывается, всё должно сидеть в кеше.