Portage + многоядерный процессор.

MAKEOPTS="-j2"

Он будет использовать два ядра или одно ядро + НТ?

Как повезет.

Спасибо за наводку, заюзаю такое на ноуте и на воркстэйшине.

Вот видите, а мне надо чтобы было железно. У меня 4-ядерный процессор + НТ, это всего 8 потоков. Нужно чтобы Portage всегда использовал 2 настоящих ядра.

Нынешние гентушники совсем в хэндбук не заглядывают?

man make.conf

MAKEOPTS

Use this variable if you want to use parallel make. For example, if you have a dual-processor system, set this variable

to "-j2" or "-j3" for enhanced build performance with many packages. Suggested settings are between CPUs+1 and 2*CPUs+1.

In order to avoid excess load, the --load-average option is recommended. For more information, see make(1). Also see

emerge(1) for information about analogous --jobs and --load-average options.

Вся соль в НТ. Непонятно будет ли Portage считать поток НТ за отдельное ядро или нет.

Это уже не к портежу, а к make

А MAKEOPTS разве не к make относится?

>Непонятно будет ли Portage считать поток НТ за отдельное ядро или нет.

А что, это кто-то может определить?

А что мешает проверить?

Я думаю, что будет... и вам лучше MAKEOPTS="-j4" сделать. Проверьте лучше.

А вообще - зачем вам это? Не лучше ли установить PORTAGE_NICENESS=«19» ?

Просто когда процессор простаивает - это не есть хорошо... задействовав все четыре ядра, программы будут компилироваться быстрее. Коли они всё равно свободны.

Если они для чего-то используются, то по идее portage будет уступать процессор, если nice установить в большое число (19 - максимум)

«свободные» ядра ни к чему не нужны... только зря киловатты-часы гоняют, но при этом ничего не вычисляют. В лучшем случае какой-нить cpufreq может частоту проца занизить (если он не используется), но всё равно...

>А MAKEOPTS разве не к make относится?
Я так и сказал, что портеж ни при чем

>Нужно чтобы Portage всегда использовал 2 настоящих ядра.

Отключить НТ?
Либо играться с планировщиком.

Гипотеза

и вам лучше MAKEOPTS="-j4" сделать

нуждается в эксперементальной проверке. Я считаю, что в ее случае больше пользы будет от:

MAKEFLAGS="-j1"
EMERGE_DEFAULT_OPTS="--load-average 4 --jobs 5"

>--load-average 4

Что это значит?

--jobs 5

Я никак не могла понять как Portage может собирать несколько пакетов одновременно, если они должны собираться по порядку с учётом зависимостей.

Что это значит?

man emerge

-j [JOBS], --jobs[=JOBS]

Specifies the number of packages to build simultaneously. If this option is given without an argument, emerge will not

limit the number of jobs that can run simultaneously. Also see the related --load-average option. Note that interactive

packages currently force a setting of --jobs=1. This issue can be temporarily avoided by specifying --accept-proper‐ ties=-interactive.

man emerge

--load-average=LOAD

Specifies that no new builds should be started if there are other builds running and the load average is at least LOAD (a

floating-point number). This option is recommended for use in combination with --jobs in order to avoid excess load. See

make(1) for information about analogous options that should be configured via MAKEOPTS in make.conf(5).

Я никак не могла понять как Portage может собирать несколько пакетов одновременно, если они должны собираться по порядку с учётом зависимостей.

Все верно… Когда к примеру

emerge xorg-x11

там в процессе сборки есть кучи шрифтов. Что мешает их ставить параллельно? Так же и со всеми остальными зависимостями и при сборке чего угодно. Если оно может быть собрано параллельно оно будет собрано параллельно, если юзер сам намерено не отключил параллельность. А если возможности параллельной сборки нет - то сборка пойдет в один «поток» сколько не крути…

Я думаю, таких случаев немного. Лучше включить MAKEOPTS="-j8" )

Я думаю, таких случаев немного. Лучше включить MAKEOPTS="-j8" )

Это разные болтики одного механизма.

Если у тебя устанавливаемый ебюлд не требует никаких зависимостей(все уже есть в системе) то да большие MAKEOPTS это хорошо… А если в системе чего то все же нет и что то нужно дособрать… то хорошо MAKEOPTS="-j1" или "-j2" зато большие --load-average & --jobs

…а так как зачастую дособирать что то все же надо

+ При глобальной пересборке всего мира вариант маленький MAKEOPTS + --load-average & --jobs полюбому выиграет во времени по сравнению с просто большим MAKEOPTS.

>Я думаю, таких случаев немного. Лучше включить MAKEOPTS="-j8" )

Лучше вырубить нафиг этот маркетинговый развод под названием HT

Никакой не развод, а очень хорошая технология. Прирост ощутим особенно при компиляции.

нужные ядра можно задать через аффинити к ядрам:

schedtool -a 0,3 emerge <аргументы>

можно использовать taskset вместо schedtool

MAKEOPTS=-j2

schedtool -a 0,3 -e emerge <args>

//fix

>Никакой не развод, а очень хорошая технология.

Ну-ну...

линуксовый ядерный шедуллер процессов - вовсе ненастолько глуп - чтоб посылать процесс работать на HT вместо реального процессора

такчто все будет работать по умолчанию

Тупость сказал.

покажи мне софт/целуюОС, которая отличит реальное ядро от HT-ядра

CONFIG_SCHED_SMT: SMT (Hyperthreading) scheduler support

первое упоминание о надобности потдержки HT в шедулере относиться к 2002 году

вы реально думаете что современная ОС незнает о такой особености смп систем как эта ?
это чуть ли не первое что долдно быть учтено в ОС для потдержки этой технологии
иначе ос засунет 2 нагруженных процесса на 1 физ ядро - и будет считать что все хорошо :) когда как они будут работать в половину мощности

любая работающая на интелах и потдерживающая smp знает про эту особенность

Ты прочти два раза тот пост, и вдумайся в написанное.

опцию -j2 указали - но вопрос то остался в том - будет ли эти процессы попадать на реальные ядра - а не на виртуальные

я и ответил что так и будет по умолчанию

ну знает и что?
ты покажи то что отличит одно ядро от другого

пажалста - на одно ядро ставит номер 0 - на второе ядро ставит номер 1
и считает что 0 это нормальное а 1 это HT

вот и отличила :)

т.е. думаешь все нечётные ядра и 0-ое - реальные, а чётные вирт?

нет - я думаю что все проще
неважно какой из 2 - она посчитает за обрубок
просто она знает что эти оба - это проц + HT
а какой именно - 0 или 1 - без разници

разница таки есть - речь шла об «отличить реал от вирт»
посему очень важно

Я больше скажу. Ядро может два потока и на одном ядре крутить, если загрузка низкая и sched_mc_powersaving включено.

а что, какое либо userspace приложение или даже kernel может это определить?

отличить - вот и есть отличие 0 или 1

http://www.linux.org.ru/jump-message.jsp?msgid=5862818&cid=5865715

http://www.linux.org.ru/jump-message.jsp?msgid=5862818&cid=5865790
:) цикл замкнут

вот лежат два предмета
какое из них первое а какое второе ?

ну иль чтото из принципа неопределенности - система зависит от наблюдателя
в данном случае - HT являеться ядро - отличное от того на котором щас наблюдаем работабщий процесс

если первый раз прецесс работает на 0ом ядре - то HT ядро 1
если процесс работает на 1 ядре - то HT ядро 0

Он будет использовать два потока.

>Непонятно будет ли Portage считать поток НТ за отдельное ядро или нет.
Хто, што? Не с той стороны рассматриваете. Если процессор посчитает что задача достойно параллелится via HT, то он пошинкует её на HT ядра. Если же нет, то в случае -j2 заюзаются уже два железных йадра. Вроде так было.

>любая работающая на интелах и потдерживающая smp знает про эту особенность
аа, эм. Покажите мне строчки в ядре, о распознавании HT.

2 TC. BTW, HT должен отключаться в расширенных настройках БИОСа.

>о распознавании HT.
В смысле, об том, как он сумеет отличить программное ядро от железного

какое еще программное ядро ?