[РЕШЕНО] Сжатие пакетов на всех ядрах

Max77	# 2 года, 6 месяцев назад (отредактировано 2 года, 6 месяцев назад)
Темы: 34 Сообщения: 138 Участник с: 19 марта 2017	При сборке пакетов из AUR этап "Сжатие пакета" всегда грузит только 1 ядро. Можно ли задействовать все ядра процессора для ускорения сжатия пакетов?

nafanja	# 2 года, 6 месяцев назад
Темы: 94 Сообщения: 9252 Участник с: 02 июня 2012 заблокирован	/etc/makepkg.conf в разделе COMPRESSION DEFAULTS прописываешь нужные опции. Псевдографический инсталлятор Arch Linux ver. 3.8.2 Благодарности принимаются на ЯД 410012815723874

Aivar	# 2 года, 6 месяцев назад
Темы: 4 Сообщения: 6897 Участник с: 17 февраля 2011	nafanja в разделе COMPRESSION DEFAULTS прописываешь нужные опции. Вообще-то в MAKEFLAGS указывается количество ядер+1. Напр., для 2-х ядер: `MAKEFLAGS="-j3"`

Aivar

# 2 года, 6 месяцев назад

Темы: 4

Сообщения: 6897

Участник с: 17 февраля 2011

nafanja
в разделе COMPRESSION DEFAULTS прописываешь нужные опции.

Вообще-то в MAKEFLAGS указывается количество ядер+1. Напр., для 2-х ядер:

MAKEFLAGS="-j3"

nafanja	# 2 года, 6 месяцев назад
Темы: 94 Сообщения: 9252 Участник с: 02 июня 2012 заблокирован	Max77 "Сжатие пакета" всегда грузит только 1 ядро. Aivar, ты ошибся. речь о сжатии пакета а не о компиляции... Псевдографический инсталлятор Arch Linux ver. 3.8.2 Благодарности принимаются на ЯД 410012815723874

vall	# 2 года, 6 месяцев назад
Темы: 45 Сообщения: 1786 Участник с: 28 марта 2017	Ускорение сборки пакетов AUR Если не делить сборку на стадии -- компилирование, сжатие, а поставить задачу в общем. То по ссылке вопрос обсуждался на другом форуме. Может кому-нибудь пригодится. Возможно, что-то уже требует изменений. Но пока работает.

vall

# 2 года, 6 месяцев назад

Темы: 45

Сообщения: 1786

Участник с: 28 марта 2017

Ускорение сборки пакетов AUR
Если не делить сборку на стадии -- компилирование, сжатие, а поставить задачу в общем. То по ссылке вопрос обсуждался на другом форуме. Может кому-нибудь пригодится. Возможно, что-то уже требует изменений. Но пока работает.

redix	# 2 года, 6 месяцев назад
Темы: 34 Сообщения: 3433 Участник с: 11 марта 2013	vall Возможно, что-то уже требует изменений. Требует, я вернул все по умолчанию, после того, как при сборке стали появляться ошибки. В качастве АУР-хелпера использую уау. In Tux We Trust

vall	# 2 года, 6 месяцев назад
Темы: 45 Сообщения: 1786 Участник с: 28 марта 2017	redix использую уау pikaur работает как часы.

RusWolf	# 2 года, 6 месяцев назад
Темы: 11 Сообщения: 2394 Участник с: 16 июля 2016	vall Ускорение сборки пакетов AUR Я конечно дико извиняюсь, но https://wiki.archlinux.org/index.php/Makepkg всё расписано, зачем нам манжаровские советы?

nafanja	# 2 года, 6 месяцев назад
Темы: 94 Сообщения: 9252 Участник с: 02 июня 2012 заблокирован	vall, вот ты там писал `Опция в COMPRESSXZ --threads=0 включает все ядра для сжатия.` а ты точно в этом уверен? стандартный XZ вроде как не умел мультипоток... опция хоть и была но не работала... или это только относилось к tar.xz, уже не помню точно... Псевдографический инсталлятор Arch Linux ver. 3.8.2 Благодарности принимаются на ЯД 410012815723874

nafanja

# 2 года, 6 месяцев назад

Темы: 94

Сообщения: 9252

Участник с: 02 июня 2012

заблокирован

vall, вот ты там писал

 Опция в COMPRESSXZ --threads=0 включает все ядра для сжатия.

а ты точно в этом уверен? стандартный XZ вроде как не умел мультипоток... опция хоть и была но не работала... или это только относилось к tar.xz, уже не помню точно...

Псевдографический инсталлятор Arch Linux ver. 3.8.2
Благодарности принимаются на ЯД 410012815723874

RusWolf	# 2 года, 6 месяцев назад (отредактировано 2 года, 6 месяцев назад)
Темы: 11 Сообщения: 2394 Участник с: 16 июля 2016	nafanja стандартный XZ вроде как не умел мультипоток… опция хоть и была но не работала… вики говорит что можно. `Utilizing multiple cores on compression xz supports symmetric multiprocessing (SMP) via the --threads flag to speed up compression. For example, to let makepkg use as many CPU cores as possible to compress packages, edit COMPRESSXZ array in /etc/makepkg.conf: COMPRESSXZ=(xz -c -z - --threads=0)` COMPRESSXZ=(xz -c -z - --threads=0) уже не актуально. COMPRESSZST=(zstd -c -z -q - --threads=0) -теперь же.

RusWolf

# 2 года, 6 месяцев назад (отредактировано 2 года, 6 месяцев назад)

Темы: 11

Сообщения: 2394

Участник с: 16 июля 2016

nafanja
стандартный XZ вроде как не умел мультипоток… опция хоть и была но не работала…

вики говорит что можно.

Utilizing multiple cores on compression
xz supports symmetric multiprocessing (SMP) via the --threads flag to speed up compression. For example, to let makepkg use as many CPU cores as possible to compress packages, edit COMPRESSXZ array in /etc/makepkg.conf:

COMPRESSXZ=(xz -c -z - --threads=0)

COMPRESSXZ=(xz -c -z - --threads=0) уже не актуально.
COMPRESSZST=(zstd -c -z -q - --threads=0) -теперь же.