equery - тормозная кривая [вырезано]!

Уххх...даже легче стало :3

Ты это, дыши ровнее, спокойнее, прими валидолу, а то, того и гляди, кондрашка хватит :D

да вот дышу
но глядя в историю...охереваю
некий клоун предложил забивать на контрольные суммы файлов, по которым прошёлся прелинк
дегенераты-разрабы поддержали
вместо того, чтобы сделать обёртку над прелинком и фиксить базу пакетов на предмет изменившихся хэшей, они тупо забивают хер на это
в чём смысл тогда этих контрольных сумм?
ненавижу дегенератов!

Тихо, тихо. Сделай свою генту с бд и ш или переходи на exherbo. Палудис на сях написан.

подделки не прокатят
и ПМ тут никаким боком

Пинай разрабов.

а толку их пинать?
эти клоуны даже # обработать нормально не хотят, хотя препятствий никаких нет
«мы хотим 'правильно', а не 'хорошо'» <--- официальный ответ

Да чё-то питоноподелия вообще тормозят безбожно. И portage последнее время стал просто адово тормозить.

wtf is # ?

комментарий
/Кэп
конкретно: речь о инлайн камментах
-use # обработает нормально
как и
useX # где X цЫыыферка
а вот
-use#
или
useX# будут криво обработаны
такие они...дегенераты-разрабы

Поди ты и emerge перепиешь, а то он зависимости долго считает :3

на правах кэпа: тут либо форкать gentoolkit, либо патчить и слать все в апстрим, либо изобрести gentoolkit с нуля(чем ты и начал заниматься). Любой из путей по-своему хорош...

app-portage/fquery?

плохо то, что хаскелев форк не в основном дереве, в отличии от кривого и тормозного сабжа

я вот не уверен, что оно соберётся на том, что в дереве. А в дерево пихать upstream не хочется потому, что мороки много. Хотя если fquery будет нужно, то впихнуть могу.

вместо того, чтобы сделать обёртку над прелинком и фиксить базу пакетов на предмет изменившихся хэшей, они тупо забивают хер на это

ещё какие-либо проблемы кроме неконсистентности базы возникают? можешь скинуть ссылку на баг?

Видимо в equerry дофига всяких проверок, перепроверок и ветвлений, которых нет в баш-скрипте. Вот что бывает, когда ООП-еры до прикладных утилит свои некромантские ручищи дотягивают ((

https://bugs.gentoo.org/show_bug.cgi?id=273041
идеи норм, а реализация...откати прелинк, проверь, опять слинкуй - охереть!

так а ты прелинк через FEATURES делаешь или так руками?

руками
да и профита от той «фичи» ноль
If prelink(8) is installed then use it to undo any prelinks on files before computing checksums for merge and unmerge.
спасибо, кушайте такое сами

мне как-то лень щас пинать zmedico, и других портаж девов по поводу того, где ещё используется md5 (т.к. сам пока не до конца разобрался в вопросе), оно точно в quickpkg используется и возможно где-то ещё. В общем, если в базе по каким-то причинам должно храниться оригинальное значение md5 то решение оправдано.

И да, оно ж щас само при equery check за тебя всё делает, во всяком случае у тех, кого попросил воспроизвести ситуацию.

«мы хотим 'правильно', а не 'хорошо'» <--- официальный ответ

комментарий /Кэп конкретно: речь о инлайн камментах -use # обработает нормально как и useX # где X цЫыыферка а вот -use# или useX# будут криво обработаны такие они...дегенераты-разрабы

А я считаю, что хорошо — это когда комменты начинаются с двух слэшей (//). Разрабы дегенераты, потому что в шеллах и в стандарте posix синтаксис комментариев сделан не так, как я хочу, и не хотят тратить время на написание нужных только мне костылей?

тебе не кажется, что откатывать прелинк при ПРОВЕРКЕ, мягко говоря, дебилизм?
может проще обёртку над прелинком, которая будет фиксить хэши в базе?
при прелинке потери времени будут 0 целых хрен сотых секунды
а при проверке с откатом...в 40 медленнее нормальной проверки
подумай

опять же - быстропакеты
при создании пакета потери на откат прелинка для одного пакета будут тоже 0 целых хрен сотых
а вот проверка всех установленных пакетов...да-да - в 40 раз тормознее
если ушло 40 сек на 14 пакетов, то представь себе средненький десктоп в 1000 пакетов

не кажется, что откатывать прелинк при ПРОВЕРКЕ, мягко говоря, дебилизм?

да, если в базе портежа не нужны оригинальные md5. В случае если нужны нужно или расширять набор переменных или откатывать прелинк. Я не могу ответить на вопрос о всех юзкейсах, где нужна md5.

может проще обёртку над прелинком, которая будет фиксить хэши в базе?

проще.

https://github.com/funtoo/portage-classic

ты ещё не думал взять класический портаж на баше и дописать его своими скриптами?

Пичалька, ничего за последние 6 лет не изменилось. На мощных серверах всё работает шустро, а вот в слабой виртуалке любой emerge/equery заканчивается болью. Поэтому и держу eix.

Ух ты, мегабаксик бугуртит. Ждем Портаж Мегабакс Эдишен. Единственный и хороший.

<offtop>еда!! :)<offtop>

• Python как ЯП здесь абсолютно не причем. Надеюсь мегабакс ты это понимаешь.
• «привет» можна передавать программеру на любом ЯП, в тч и фанату Bash ;)
• А тормозит оно скорее всего по той же причине (или похожей) по котороя я создал этот тред

теперь моя очередь показать велосипед

vv@crusader ~/work/own/python/portage3/bin/samples $ time ./equery2.rb -k media-sound/alsa-utils
 * Checking of media-sound/alsa-utils-1.0.24.2-r1:
Next files have mismatch
/etc/conf.d/alsasound: ctime  mismatch
/etc/modprobe.d/alsa.conf: hash, ctime  mismatch
	106 out of 108 files passed

real	0m2.757s
user	0m0.219s
sys	0m0.055s
vv@crusader ~/work/own/python/portage3/bin/samples $ time ./equery2.rb -k media-sound/alsa-utils
 * Checking of media-sound/alsa-utils-1.0.24.2-r1:
Next files have mismatch
/etc/conf.d/alsasound: ctime  mismatch
/etc/modprobe.d/alsa.conf: hash, ctime  mismatch
	106 out of 108 files passed

real	0m0.255s
user	0m0.210s
sys	0m0.026s
vv@crusader ~/work/own/python/portage3/bin/samples $ 

Надеюсь мегабакс ты это понимаешь.

иначе не было бы тега...

А тормозит оно скорее всего по той же причине (или похожей) по котороя я создал этот тред

мне лень разбираться

А тормозит оно скорее всего по той же причине (или похожей) по котороя я создал этот тред

мне лень разбираться

ну там все просто: функция, которая делает сравнение версий ебилда (кто «больше»: 1.0.0-r1 или 1.0.0-beta2-r3) при установке пакета вызывается всего-то 689 раз..

ну это я уже прочитал

Зачем так много? о_О

здесь этого никто не знает. и кажется знать не хочет. пинай разрабов портажа

А что ты хотел, «петон: глобально и надежно.»

Питон, он такой.

# time equery k media-sound/alsa-utils
* Checking media-sound/alsa-utils-1.0.25-r1 ...
!!! /etc/conf.d/alsasound has wrong mtime (is 1338839783, should be 1334096414)
   101 out of 102 files passed

real	0m1.809s
user	0m1.660s
sys	0m0.080s

# time qcheck media-sound/alsa-utils
Checking media-sound/alsa-utils-1.0.25-r1 ...
 MTIME: /usr/share/man/man1/arecord.1.bz2
 MTIME: /usr/lib/systemd/system/basic.target.wants/alsa-restore.service
 MTIME: /usr/lib/systemd/system/shutdown.target.wants/alsa-store.service
 MTIME: /usr/bin/arecord
 MTIME: /etc/conf.d/alsasound
  * 97 out of 102 files are good

real	0m0.115s
user	0m0.090s
sys	0m0.020s

Гентушники написали на питоне тормозный говноскрипт?
Да не может быть.

пообщайся с разрабами - пусть объяснят почему врапера до сих пор нет
а я пока запилил таки обёртку над прелинком:
фиксит хэши в базе и при связывании и при откате оного
сам врапер

#!/bin/bash

############################################################################
################ init ######################################################
PKGDB="/var/db/pkg"
CONTENT="${PKGDB}/*/*/CONTENTS"
opts="-v"
OPTS="${opts} ${*}"
################ colors ####################################################
green="\033[01;32m"
red="\033[01;31m"
restore="\033[00m"
contrast="\033[1m"
underline="\033[4m"
################ check_openrc ##############################################
[ -f "/etc/init.d/functions.sh" ] && . /etc/init.d/functions.sh
############################################################################
################ run #######################################################
echo -e "${green}Prelink${restore}"

if ! grep -q "u" <<< "${OPTS}";then
	TARGETS="$(prelink ${OPTS} | awk '/Prelinking/ {print $2}')"
else
	TARGETS="$(prelink ${OPTS} | awk '/Undoing/ {print $2}')"
fi
COUNT="$(wc -l <<< "${TARGETS}")"
############################################################################
################ fixing db #################################################
#field
field(){
 echo $(( ${#} - 1 ))
}

echo -e "${green}Database${restore}"

while read target;do
	einfon $((COUNT--)) "files left:" 2>/dev/null
	all="$(grep -m1 "obj ${target/[/\[} " ${CONTENT})"
	if [[ -n "${all}" ]];then
		file="${all%%:*}"
		package="$(cut -d\/ -f5,6 <<< "${file}")"
		old_stuff="${all#${file}* }"
		x="$(field ${old_stuff})"
		old_md5="$(cut -d " " -f${x} <<< "${old_stuff}")"
		new_md5="$(md5sum "${target}" | cut -d " " -f1)"
		new_stuff="${old_stuff/${old_md5}/${new_md5}}"
		echo -e "\t${red}${old_md5}${restore} ---> ${green}${new_md5}${restore} for ${contrast}${package}${restore}"
		sed -e "s|${old_stuff}|${new_stuff}|" -i "${file}" 2>/dev/null
		eend $? 2>/dev/null
	else
		echo -e "\tCan't find ${contrast}${target}${restore} in ${PKGDB}!"
		eend 1 2>/dev/null
	fi
done <<< "${TARGETS}"
echo -e "${green}Fixed!${restore}"
eend 0 2>dev/null

на правах кэпа: тут либо форкать gentoolkit, либо патчить и слать все в апстрим, либо изобрести gentoolkit с нуля(чем ты и начал заниматься).

они вырезали из апстрима все утилиты(или не пустили в него), которые делали всё тоже самое, или многое похожее, но были на компилируемых языках.

был ept-get и что то ещё вместе с ним. Не фонтан, но маленькие и быстрые, при определённом уровне функциональности. этот проект мог вырасти во что то большее, если бы он активнее использовался

подозреваю тысячи подобных историй

не, так лучше

#!/bin/bash

############################################################################
################ init ######################################################
PKGDB="/var/db/pkg"
CONTENT="${PKGDB}/*/*/CONTENTS"
opts="-v"
OPTS="${*} ${opts}"
################ colors ####################################################
green="\033[01;32m"
red="\033[01;31m"
restore="\033[00m"
contrast="\033[1m"
underline="\033[4m"
################ check_openrc ##############################################
[ -f "/etc/init.d/functions.sh" ] && . /etc/init.d/functions.sh
############################################################################
################ run #######################################################
echo -e "${green}Prelink${restore}"

if ! grep -q "u" <<< "${OPTS}";then
	TARGETS="$(prelink ${OPTS} | awk '/Prelinking/ {print $2}')"
else
	TARGETS="$(prelink ${OPTS} | awk '/Undoing/ {print $2}')"
fi
COUNT="$(wc -l <<< "${TARGETS}")"
############################################################################
################ fixing db #################################################
#field
field(){
 echo $(( ${#} - 1 ))
}

echo -e "${green}Database${restore}"

while read target;do
	einfon $((COUNT--)) "files left:" 2>/dev/null
	all="$(grep -m1 "obj ${target/[/\[} " ${CONTENT})"
	if [[ -n "${all}" ]];then
		file="${all%%:*}"
		package="$(cut -d\/ -f5,6 <<< "${file}")"
		old_stuff="${all#${file}* }"
		x="$(field ${old_stuff})"
		old_md5="$(cut -d " " -f${x} <<< "${old_stuff}")"
		new_md5="$(md5sum "${target}" | cut -d " " -f1)"
		if [[ "${old_md5}" != "${new_md5}" ]];then
			new_stuff="${old_stuff/${old_md5}/${new_md5}}"
			echo -e "\t${red}${old_md5}${restore} ---> ${green}${new_md5}${restore} for ${contrast}${package}${restore}"
			sed -e "s|${old_stuff}|${new_stuff}|" -i "${file}" 2>/dev/null
			eend $? 2>/dev/null
		else
			echo -e "\t${old_md5} ${green}<-->${restore} ${new_md5} for ${contrast}${package}${restore}"
			eend 0 2>/dev/null
		fi
	else
		echo -e "\tCan't find ${contrast}${target}${restore} in ${PKGDB}!"
		eend 1 2>/dev/null
	fi
done <<< "${TARGETS}"
echo -e "${green}Fixed!${restore}"
eend 0 2>/dev/null

они вырезали из апстрима все утилиты(или не пустили в него), которые делали всё тоже самое, или многое похожее, но были на компилируемых языках.

ой какие подлые..

<вброс>Привет, питонисты :3</вброс>

Привет. Шли патчи, ваяй свои костыли, что ты как маленький, ну :3

подлые не подлые( скорее просто недалёкие ), но кучу софта, который так или иначе мог конкурировать с этими подделиями они просто не впускали в апстрим, я сам читал переписку

ну так «это же опенсорс, детка» (c). Форк решает проблему нерадивого апстрима. Небольшой положительный пример: слияние форка qxmpp, который поддерживал 0xd34df00d(автор LeechCraft) с апстримом после >года раздумий апстрима на тему внесенных изменений.

и прям таки отдельными пакетами не брали в ни дерево и ни в какие оверлеи? а fquery наверное миф.

Ну и как обычно ссылки на переписки привествуются.

проект где то существует, пакеты можно скачать, но были бы пакеты в апстриме, было бы больше пользователей, проект развивался бы.

ты что, думаешь я разработчик этого пакета, и ищу поддержки ? много воды утекло с тех пор, когда то я это читал. Названия пакета я привёл, там была группа из трёх пакетов - epkg, eorphan, ept-get, если мне память не изменяет.

Я просто вспомнил по случаю.

ept-get и компания прекрасно живут в оверлеях, и то, что их нет в дереве это скорее проблема качества данной программы, а не девелоперов. Тем более eix решающий почти всё что делают эти утилиты там живёт.

ты так и не понял, или не захотел понять простых вещей - я не защищаю конкретные пакеты, и я не нападаю на ментейнеров/разработчиков генты, я просто анализирую их позицию применительно к теме

и да, сейчас, никакого оверлея для названных мной пакетов не существует.

плохо анализируешь. и плохо ищешь. Никто не запрещает писать годные аналоги питоноутилит и как только они будут - они будут в дереве, в указанных пакетах проблема исключительно в них (и возможно в авторах). На закуску:

http://gpo.zugaina.org/Search?search=ept-get
http://gpo.zugaina.org/Search?search=epkg

я хорошо делаю и то, и другое.

И то, что ты утверждаешь, что я плохо ищу, как раз доказывает, что я ищу хорошо, а ты плохо. Иначе ты уже задал бы вопрос самому автору...

http://bgo.zugaina.org/ - к вопросу о том, кто из нас плохо соображает