Скорость «маршрутизации»

Щито по RAM? В плане утилизации.

свободно почти 4 гиг

Карты какие?

Сейчас стоят не фонтан, на чипе реалтек. Но если бы при 300 мбит/с загрузка процессоров была 100% вопросов бы не было.

К слову об интерфейсах. Посмотри статистику, нет ли дропов.

Какой nice у демона?

Есть. Карта что смотрит в локалку RX packets 10145978816 bytes 5336632050129 (4.8 TiB) RX errors 0 dropped 1 overruns 0 frame 0

Карта что смотрит в мир RX packets 14780296744 bytes 17110674699718 (15.5 TiB) RX errors 0 dropped 3493 overruns 0 frame 0

На фоне общего трафика это мелочь.

Правде не обращал внимания когда эти дропы появляются. Возможно какраз когда упираемся в 300 мбит/с. Понаблюдаю.

К слову сказать, как ты пропускную способность максимальную замерял?

nload к примеру исх 30мбит вх. 270 идет ровная полоса на графике без пиков. :)

Тащемта, nload просто измеряет текущую утилизацию, а не проверяет максимально возможную, не?

«Карта что смотрит в мир»

тариф 300Мб/с?

Согласен.

Искусственно трафик не генерировал. Канал в инет 500 мбит. Когда качаю с самого PC например с ftp://ftp.yandex.ru все отрабатывает на 100% если через него, больше 300 не идет.

В общем прихожу к выводу, что нужно снимать PC и ставить что-то железное :)))

Ну не на столько у меня все плохо с соображалкой :)))

Что у тебя за демон маршрутизации, и какой у него приоритет?

В общем прихожу к выводу, что нужно снимать PC и ставить что-то железное :)))

Cisco ASR, ога.

Все SOHO-раутеры - программные.

я смотрю в сторону Cisco 6500 хоть это и не роутер :) но с нужными модулями с моими задачами справится

Кхм. На кой чёрт ставить каталист на бордер? Я что-то не знаю о последний тенденциях в проектировании сетей?

ну, выкладывай top с детализацией по ядрам во время роутинга в полке, погадаем по фотографии

Я что-то не знаю о последний тенденциях в проектировании сетей?

Стильно, модно, молодежно.

Этак ТС скоро до микротиков дойдет.

Советую форум http://forum.nag.ru/forum/index.php?showforum=3 там роутеру из тазика уже 100500 раз косточки перемыли.

Что у тебя за демон маршрутизации, и какой у него приоритет?

Этот «демон» называется linux kernel вообще-то. А то, что маршруты строит (quagga, bird, xorp), если оно там есть, то это к деру не относится.

А кто говорил за бордер? :)

Нет! До микротика не дойдем! :) По мне так лучше PC с Linux чем микротик )

И тему можно закрыть! Виноват я сам.

Всетаки упираемся в загрузку проца!

Прошу прощение за этот спам :(((

Всетаки упираемся в загрузку проца!

Тогда, если будете думать в сторону PC, то надо смотреть на сетевые карты с несколькими очередями. А то получится, что ядер 8 или больше, а сетевую карту можно только на одно прерывание зацепить. А у современных PC уже не встречается такое (мне, по крайней мере, давно не попадалось), чтобы одно прерывание на несколько ядер развесить было можно.

А у Микротика, кстати, прикольные железки есть - CCR. Выглядят красиво, одну подержал даже. Но не сильно долго, на скорость не проверял особо.

Нет! До микротика не дойдем! :) По мне так лучше PC с Linux чем микротик )

Ты неправ, у микротика есть интересные и недорогие железки, лучше и дешевле чем колхоз из писюка, но это неважно. Главное чтобы тебе нравилось, лол

Согласен, на вкус и цвет...

Но микротик меня не впечатлил! :)

Всем спасибо за участие!

У тебя мульён правил и атом в качестве процессора ?

А что за ядро ?

А что за трафик ? 64-байтные пакеты ?

Да разобрались уже! :)

Нужно ставить или железное решение или многопоточные серверные сетевки и многоядерный процессор :)

А трафик настоящий, рабочий :)

или многопоточные серверные сетевки

Кстати, Intel Corporation 82574L Gigabit Network Connection десктопная, но две очереди имеет. Может и сойдёт где. Выглядит это как-то так:

           CPU0       CPU1
 31: 1349761586          0   PCI-MSI-edge      eth2-rx-0
 32:         88 1496696013   PCI-MSI-edge      eth2-tx-0
 33:          2          0   PCI-MSI-edge      eth2

Всетаки упираемся в загрузку проца!

Так во что именно упираемся ? В число прерываний или сложную обработку трафика (NAT не в счет) ? mpstat хорошо показывает эти моменты.

Возможно нормальна сетевая карта с offload и interrupt moderation на современном ядре ( не 2.6) реально изменит ситуацию.

Когда подходим к суммарному трафику 300 мбит, ядро грузится почти до 100%. ничего сложного нет. NAT и все.

У тебя 300 мбит поток и такое плюшевое железо.

дороже в разы в общем-то. ихние вундервафли CCR1036 к примеру затыкаются на 4-5 гигабитах траффика - это где-то уровень тазика на i3. цена на который в несколько раз ниже.

а уж стабильность софта - это отдельная печальная пестня...

300 мбит вообще-то пронатит какой-то пентиум 3, не особо напрягаясь...

тут либо с сетевухами что-то сильно не то, либо 100500 правилл в файрволе.

та не такие уж и прикольные, у меня на bgp fv сессии из двух ядер, тупо на 100 % жрет только одно ядро. Как не странно на всех железках там вот и на CCR https://www.youtube.com/watch?v=XJ7qQCJI8pA
Возможно х86 решит вопрос, надо будет проверить

300 мбит вообще-то пронатит какой-то пентиум 3, не особо напрягаясь...

+1

Все! Разобрался! Тему можно считать закрытой!

Нарыл,что в системе была запущена такая хрень как «irqbalance» Которая, якобы, была призвана равномерно распределять прерывания по ядрам и она вешала все сетевки то на одно ядро то на другое.

Начал копать более детально ,когда вручную раскидал прерывания по ядрам, а в итоге заметил, что через некоторое время все карты вешались на одно ядро.

Сейчас все шикарно работает! Всем спасибо!!!

Нарыл,что в системе была запущена такая хрень как «irqbalance»
Которая, якобы, была призвана равномерно распределять прерывания
по ядрам и она вешала все сетевки то на одно ядро то на другое.

В общем-то, не якобы, а вполне развешивает. Там есть разная логика работы, ориентированная на разное применение. При этом, ручное развешивание части прерываний может дать лучший эффект, чем автоматика. Там есть параметр --banirq, посредством которого можно задать список прерываний, которые irqbalance не должен трогать. Правда, прерывания могут меняться, потому надо как-то так на старте делать:

ETH1=`cat /proc/interrupts|egrep "eth1"|awk '{ print $1 }'| sed "s/://"`
irqbalance --banirq=$ETH1