Bug 35721 - Сломалась сборка
Summary: Сломалась сборка
Status: CLOSED FIXED
Alias: None
Product: Sisyphus
Classification: Development
Component: racket (show other bugs)
Version: unstable
Hardware: all Linux
: P3 normal
Assignee: Nobody's working on this, feel free to take it
QA Contact: qa-sisyphus
URL:
Keywords:
: 36203 40313 (view as bug list)
Depends on:
Blocks:
 
Reported: 2018-12-04 05:18 MSK by AEN
Modified: 2021-06-29 10:34 MSK (History)
2 users (show)

See Also:


Attachments

Note You need to log in before you can comment on or make changes to this bug.
Description AEN 2018-12-04 05:18:02 MSK
Прошу собрать.
Comment 1 Aleksei Nikiforov 2018-12-06 15:27:31 MSK
Проблема с racket, похоже, плавающая.

Один день оно не пересобирается, затем опять собирается:
https://lists.altlinux.org/pipermail/sisyphus-cybertalk/2018-December/105191.html
https://lists.altlinux.org/pipermail/sisyphus-cybertalk/2018-December/105199.html

Аналогичное поведение я замечал и раньше. Вот, например, такое же повторялось в конце ноября:
https://lists.altlinux.org/pipermail/sisyphus-cybertalk/2018-November/105140.html
https://lists.altlinux.org/pipermail/sisyphus-cybertalk/2018-November/105148.html

Локально мне пока что не удавалось воспроизвести проблему. Я собираюсь обновить версию, но нет гарантии, что данная плавающая проблема будет решена таким образом.
Comment 2 Anton Farygin 2018-12-06 15:28:36 MSK
Это уж точно какая-то проблема на сборочнице.
Comment 3 Dmitry V. Levin 2018-12-06 16:04:42 MSK
(In reply to comment #2)
> Это уж точно какая-то проблема на сборочнице.

Не похоже.  Судя по логу, raco setup иногда просто зацикливается.

> 7885.91user 595.28system 39:38.63elapsed 356%CPU (0avgtext+0avgdata 4378412maxresident)k

Причём зацикливается в userspace.
Comment 4 Aleksei Nikiforov 2018-12-06 16:07:37 MSK
(В ответ на комментарий №3)
> (In reply to comment #2)
> > Это уж точно какая-то проблема на сборочнице.
> 
> Не похоже.  Судя по логу, raco setup иногда просто зацикливается.
> 
> > 7885.91user 595.28system 39:38.63elapsed 356%CPU (0avgtext+0avgdata 4378412maxresident)k
> 
> Причём зацикливается в userspace.

Он не зацикливается, он может долго работать в секции %install, но локально он ни разу не вис у меня, всегда через некоторое время он успешно завершал свою работу. Похоже, сборочница иногда зря его прибивает, и делает это на основе каких-то неизвестных факторов.
Comment 5 Dmitry V. Levin 2018-12-06 16:13:59 MSK
(In reply to comment #4)
> (В ответ на комментарий №3)
> > (In reply to comment #2)
> > > Это уж точно какая-то проблема на сборочнице.
> > 
> > Не похоже.  Судя по логу, raco setup иногда просто зацикливается.
> > 
> > > 7885.91user 595.28system 39:38.63elapsed 356%CPU (0avgtext+0avgdata 4378412maxresident)k
> > 
> > Причём зацикливается в userspace.
> 
> Он не зацикливается, он может долго работать в секции %install, но локально он
> ни разу не вис у меня, всегда через некоторое время он успешно завершал свою
> работу. Похоже, сборочница иногда зря его прибивает, и делает это на основе
> каких-то неизвестных факторов.

Судя по логу, оно само умирает:
make[1]: *** [Makefile:178: install-3m] CPU time limit exceeded

В /etc/hasher-priv/system написано:
rlimit_soft_cpu=7200
rlimit_hard_cpu=7260

Другими словами, каждому процессу выделено до 2 часов CPU time.
Это очень много.
Comment 6 Aleksei Nikiforov 2018-12-06 16:22:53 MSK
(В ответ на комментарий №5)
> Судя по логу, оно само умирает:
> make[1]: *** [Makefile:178: install-3m] CPU time limit exceeded
> 
> В /etc/hasher-priv/system написано:
> rlimit_soft_cpu=7200
> rlimit_hard_cpu=7260
> 
> Другими словами, каждому процессу выделено до 2 часов CPU time.
> Это очень много.

Судя по логу, его убивают лимиты, а вовсе не само оно умирает.

Это не противоречит тому, что иногда из-за некоторых факторов, предположительно внешних, этих лимитов для установки ему хватает, а иногда - нет.
Comment 7 Anton Farygin 2018-12-06 16:26:30 MSK
Дим, а может ли быть такая ситуация, что по каким-то внешним причинам (загруженность машины, overcommit или ещё что-то) процесс начинает долго висеть ?

У меня тоже был какой-то пакет, который умирал по CPU Time, но как-то оно само рассосалось.
Comment 8 Dmitry V. Levin 2018-12-06 16:32:25 MSK
(In reply to comment #7)
> Дим, а может ли быть такая ситуация, что по каким-то внешним причинам
> (загруженность машины, overcommit или ещё что-то) процесс начинает долго висеть
> ?

Висение процесса не влияет на то время, которое ограничивает RLIMIT_CPU,
если, конечно, ядро не спятило.

> У меня тоже был какой-то пакет, который умирал по CPU Time, но как-то оно само
> рассосалось.

Это, наверное, был wlimit_time_elapsed или wlimit_time_idle.
Comment 9 Dmitry V. Levin 2018-12-06 16:35:45 MSK
(In reply to comment #6)
> (В ответ на комментарий №5)
> > Судя по логу, оно само умирает:
> > make[1]: *** [Makefile:178: install-3m] CPU time limit exceeded
> > 
> > В /etc/hasher-priv/system написано:
> > rlimit_soft_cpu=7200
> > rlimit_hard_cpu=7260
> > 
> > Другими словами, каждому процессу выделено до 2 часов CPU time.
> > Это очень много.
> 
> Судя по логу, его убивают лимиты, а вовсе не само оно умирает.
> 
> Это не противоречит тому, что иногда из-за некоторых факторов, предположительно
> внешних, этих лимитов для установки ему хватает, а иногда - нет.

Я могу попробовать увеличить этот лимит (который призван ловить зацикливания) раза в два, тогда мы сможем понаблюдать, как это повлияет на результат.
Comment 10 Anton Farygin 2018-12-06 16:50:55 MSK
Да, я тоже хотел тебе предложить.
Я посмотрел на разницу между успешной и ошибочной сборкой racket и вижу, что в случае успеха он просто успевает ещё выполнить 56 операций по сборке.

на fail дополнительных повторных процессов raco setup , отсутствующих на success - я не вижу.
Comment 11 Anton Farygin 2018-12-07 10:01:37 MSK
2ldv: не увеличил ?
Comment 12 Dmitry V. Levin 2018-12-10 18:23:19 MSK
(In reply to comment #11)
> 2ldv: не увеличил ?

Увеличил с двух часов до трёх.  Кажется, не помогло.
Видимо, всё-таки зацикливается с некоторой вероятностью.
Comment 13 Repository Robot 2018-12-12 10:34:06 MSK
racket-6.12-alt1 -> sisyphus:

Mon Dec 10 2018 Aleksei Nikiforov <darktemplar@altlinux> 6.12-alt1
- Updated to upstream version 6.12 (Closes: #35721)
Comment 14 AEN 2018-12-12 10:41:05 MSK
Спасибо!
Comment 15 Aleksei Nikiforov 2019-03-01 18:42:01 MSK
*** Bug 36203 has been marked as a duplicate of this bug. ***
Comment 16 Dmitry V. Levin 2019-03-01 18:45:16 MSK
Сейчас там наблюдается
hasher-priv: master: idle time limit (3600 seconds) exceeded
hsh-rebuild: rebuild of `racket-6.12-alt1.src.rpm' failed.

Насколько я понимаю, сборка racket очень чувствительна к загруженности сборочного сервера.
Comment 17 Aleksei Nikiforov 2021-06-29 10:34:42 MSK
*** Bug 40313 has been marked as a duplicate of this bug. ***