<?xml version="1.0" encoding="UTF-8" ?>

<bugzilla version="5.2"
          urlbase="https://bugzilla.altlinux.org/"
          
          maintainer="jenya@basealt.ru"
>

    <bug>
          <bug_id>50198</bug_id>
          
          <creation_ts>2024-04-26 19:07:01 +0300</creation_ts>
          <short_desc>broken output for beehive results</short_desc>
          <delta_ts>2026-08-05 16:22:21 +0300</delta_ts>
          <reporter_accessible>1</reporter_accessible>
          <cclist_accessible>1</cclist_accessible>
          <classification_id>2</classification_id>
          <classification>Infrastructure</classification>
          <product>Infrastructure</product>
          <component>beehive</component>
          <version>unspecified</version>
          <rep_platform>x86_64</rep_platform>
          <op_sys>Linux</op_sys>
          <bug_status>CLOSED</bug_status>
          <resolution>FIXED</resolution>
          
          <see_also>https://bugzilla.altlinux.org/show_bug.cgi?id=50071</see_also>
          <bug_file_loc></bug_file_loc>
          <status_whiteboard></status_whiteboard>
          <keywords></keywords>
          <priority>P5</priority>
          <bug_severity>major</bug_severity>
          <target_milestone>---</target_milestone>
          
          
          <everconfirmed>1</everconfirmed>
          <reporter name="Arseny Maslennikov">arseny</reporter>
          <assigned_to name="placeholder@altlinux.org">placeholder</assigned_to>
          <cc>glebfm</cc>
    
    <cc>ldv</cc>
    
    <cc>placeholder</cc>
          
          <qa_contact name="Andrey Cherepanov">cas</qa_contact>

      

      

      

          <comment_sort_order>oldest_to_newest</comment_sort_order>  
          <long_desc isprivate="0" >
    <commentid>245521</commentid>
    <comment_count>0</comment_count>
    <who name="Arseny Maslennikov">arseny</who>
    <bug_when>2024-04-26 19:07:01 +0300</bug_when>
    <thetext>https://lore.altlinux.org/sisyphus-cybertalk/Zis7Kz0Kbptadc9G@beehive.mskdc.altlinux.org/T/#u

Вместо результатов пакетов какая-то вирусня (&quot;message.gz&quot;). В архиве её тоже не показывают; результаты не веб-индексируемы и, что важнее, на них невозможно дать гиперссылку.</thetext>
  </long_desc><long_desc isprivate="0" >
    <commentid>245522</commentid>
    <comment_count>1</comment_count>
    <who name="Arseny Maslennikov">arseny</who>
    <bug_when>2024-04-26 19:07:12 +0300</bug_when>
    <thetext>
В секретном (хоть и публично доступном) репозитории с исходниками beehive подстроки &quot;message&quot; и &quot;message.gz&quot; не упоминаются, поэтому проблема, скорее всего, не там.
В теме письма есть подстрока beehive_status; она в этом репозитории встречается 1 (один) раз, как слово в команде на шелле.</thetext>
  </long_desc><long_desc isprivate="0" >
    <commentid>245523</commentid>
    <comment_count>2</comment_count>
    <who name="Arseny Maslennikov">arseny</who>
    <bug_when>2024-04-26 19:12:05 +0300</bug_when>
    <thetext>Судя по всему, проблема не в beehive, а в уже не секретном пакете qa-robot.

118 zmail()
119 {
120         local subj=&quot;$1&quot; file=&quot;$2&quot;; shift 2
121         local size=&quot;$(du -bk &quot;$file&quot; |cut -f1)&quot;
122         local LC_ALL=
123         if [ &quot;$size&quot; -gt 1024 ]; then
124                 echo &quot;Message size is ${size}K, E2BIG.&quot; &gt;&amp;2
125                 return 1
126         elif [ &quot;$size&quot; -gt 32 ]; then
127                 gzip -9nf &quot;$file&quot;
128                 mutt -x -s &quot;$subj&quot; -a &quot;$file.gz&quot; -- &quot;$@&quot; &lt;/dev/null
129                 gzip -df &quot;$file.gz&quot;
130         elif [ -f signature ]; then
131                 { echo; cat signature; } |mutt -x \
132                         -s &quot;$subj&quot; -i &quot;$file&quot; -- &quot;$@&quot;
133         else
134                 mutt -x -s &quot;$subj&quot; -i &quot;$file&quot; -- &quot;$@&quot; &lt;/dev/null
135         fi
136 }

Начиная с корневого коммита от 2005 года он присылает данные, если их размер свыше 32K, в испорченном виде. Предлагаю это прекратить, потому что службы архивации писем и так сжимают письма (возможно, целыми тредами), а если они этого не делают, то это странная какая-то архивация.

А вот верхнюю грань, добавленную позже (1024K), можно и оставить.</thetext>
  </long_desc><long_desc isprivate="0" >
    <commentid>258682</commentid>
    <comment_count>3</comment_count>
    <who name="Arseny Maslennikov">arseny</who>
    <bug_when>2025-02-05 17:41:02 +0300</bug_when>
    <thetext>https://git.altlinux.org/tasks/351403</thetext>
  </long_desc><long_desc isprivate="0" >
    <commentid>290415</commentid>
    <comment_count>4</comment_count>
    <who name="Arseny Maslennikov">arseny</who>
    <bug_when>2026-06-30 14:32:43 +0300</bug_when>
    <thetext>(In reply to Arseny Maslennikov from comment #0)
&gt; https://lore.altlinux.org/sisyphus-cybertalk/Zis7Kz0Kbptadc9G@beehive.mskdc.
&gt; altlinux.org/T/#u
&gt; 
&gt; Вместо результатов пакетов какая-то вирусня (&quot;message.gz&quot;). В архиве её тоже
&gt; не показывают; результаты не веб-индексируемы и, что важнее, на них
&gt; невозможно дать гиперссылку.
Ещё пример:
https://lore.altlinux.org/sisyphus-cybertalk/ajzQmCtdTv3ihPax@beehive.mskdc.altlinux.org/T/#u

Что характерно, текст письма обращается в тыкву обычно в самый интересный момент: когда появляется много новых error logs, и выдержки из них длинны. Здесь, например, разъезд в m4-макросах вокруг gnu build system повлиял на десятки пакетов, но читать это нереально.</thetext>
  </long_desc><long_desc isprivate="0" >
    <commentid>291482</commentid>
    <comment_count>5</comment_count>
    <who name="Arseny Maslennikov">arseny</who>
    <bug_when>2026-07-22 15:45:16 +0300</bug_when>
    <thetext>(In reply to Arseny Maslennikov from comment #4)
&gt; (In reply to Arseny Maslennikov from comment #0)
&gt; &gt; https://lore.altlinux.org/sisyphus-cybertalk/Zis7Kz0Kbptadc9G@beehive.mskdc.
&gt; &gt; altlinux.org/T/#u
&gt; &gt; 
&gt; &gt; Вместо результатов пакетов какая-то вирусня (&quot;message.gz&quot;). В архиве её тоже
&gt; &gt; не показывают; результаты не веб-индексируемы и, что важнее, на них
&gt; &gt; невозможно дать гиперссылку.
&gt; Что характерно, текст письма обращается в тыкву обычно в самый интересный
&gt; момент: когда появляется много новых error logs, и выдержки из них длинны.
&gt; Здесь, например, разъезд в m4-макросах вокруг gnu build system повлиял на
&gt; десятки пакетов, но читать это нереально.
https://lore.altlinux.org/sisyphus-cybertalk/amBbefhMV%2Faipm7C@beehive.mskdc.altlinux.org/T/#u
https://lists.altlinux.org/pipermail/sisyphus-cybertalk/2026-July/130118.html
Очень вроде бы интересное письмо должно быть: python 3.14, boost 1.91. Но оно нечитаемо: ни на сайте, ни на прежнем сайте, ни в виде public-inbox.</thetext>
  </long_desc><long_desc isprivate="0" >
    <commentid>291545</commentid>
    <comment_count>6</comment_count>
    <who name="Arseny Maslennikov">arseny</who>
    <bug_when>2026-07-23 16:47:58 +0300</bug_when>
    <thetext>&gt; #200 qa-robot 0.3.10-alt1 -&gt; 0.3.11-alt1
&gt;  Wed Jul 22 2026 Arseny Maslennikov &lt;arseny@altlinux&gt; 0.3.11-alt1
&gt;  - Stopped gzipping message body parts.
&gt;  - csv2tab: Explicitly set encoding of standard streams to UTF-8.
&gt;    This gets rid of the &quot;Wide character in print&quot; Perl warning.
&gt;  - bugs: The default Product is now &quot;Sisyphus&quot; if no URL is specified.
&gt; &lt;...&gt;
&gt; girar-check-perms: access to qa-robot ALLOWED for glebfm: member of approved group
&gt; check-subtask-perms: #200: qa-robot: approved by glebfm
&gt; &lt;...&gt;
&gt; 2026-Jul-23 13:43:44 :: task #351403 for sisyphus DONE

Благодарю!
Теперь осталось, чтобы qa-robot обновился (т. е. изменения появились) на сервере.</thetext>
  </long_desc><long_desc isprivate="0" >
    <commentid>291557</commentid>
    <comment_count>7</comment_count>
    <who name="Gleb F-Malinovskiy">glebfm</who>
    <bug_when>2026-07-23 17:39:51 +0300</bug_when>
    <thetext>(In reply to Arseny Maslennikov from comment #6)
&gt; Теперь осталось, чтобы qa-robot обновился (т. е. изменения появились) на
&gt; сервере.
Это теперь тоже сделано.</thetext>
  </long_desc><long_desc isprivate="0" >
    <commentid>292046</commentid>
    <comment_count>8</comment_count>
      <attachid>21960</attachid>
    <who name="Arseny Maslennikov">arseny</who>
    <bug_when>2026-07-30 22:54:05 +0300</bug_when>
    <thetext>Created attachment 21960
converts broken emails into the expected form</thetext>
  </long_desc><long_desc isprivate="0" >
    <commentid>292047</commentid>
    <comment_count>9</comment_count>
    <who name="Arseny Maslennikov">arseny</who>
    <bug_when>2026-07-30 22:54:37 +0300</bug_when>
    <thetext>(In reply to Arseny Maslennikov from comment #2)
службы
&gt; архивации писем и так сжимают письма (возможно, целыми тредами), а если они
&gt; этого не делают, то это странная какая-то архивация.
&gt; 
&gt; А вот верхнюю грань, добавленную позже (1024K), можно и оставить.

Проиллюстрирую тут посыл, чтобы не пропало:
  (set -eux;
  curl -fsSL \
    https://lore.altlinux.org/sisyphus-cybertalk/aml4cKhHqNuD5lYj@beehive.mskdc.altlinux.org/t.mbox.gz \
    -o &apos;cyber-I-Sisyphus-20260729-x86_64-beehive_status-758-44-1279.mbox.gz&apos;
  gunzip -9k cyber-I-Sisyphus-20260729-x86_64-beehive_status-758-44-1279.mbox.gz
  python3 regen.py cyber-I-Sisyphus-20260729-x86_64-beehive_status-758-44-1279.mbox o.mbox
  gzip -9k o.mbox
  ls -l cyber-I-Sisyphus-20260729-x86_64-beehive_status-758-44-1279.mbox* o.mbox*
  )
  +zsh:2&gt; curl -fsSL https://lore.altlinux.org/sisyphus-cybertalk/aml4cKhHqNuD5lYj@beehive.mskdc.altlinux.org/t.mbox.gz -o cyber-I-Sisyphus-20260729-x86_64-beehive_status-758-44-1279.mbox.gz
  +zsh:5&gt; gunzip -9k cyber-I-Sisyphus-20260729-x86_64-beehive_status-758-44-1279.mbox.gz
  +zsh:6&gt; python3 regen.py cyber-I-Sisyphus-20260729-x86_64-beehive_status-758-44-1279.mbox o.mbox
  +zsh:7&gt; gzip -9k o.mbox
  +zsh:8&gt; ls &apos;--color=auto&apos; -l cyber-I-Sisyphus-20260729-x86_64-beehive_status-758-44-1279.mbox cyber-I-Sisyphus-20260729-x86_64-beehive_status-758-44-1279.mbox.gz o.mbox o.mbox.gz
  -rw-r--r-- 1 ar ar  51710 Jul 30 22:37 cyber-I-Sisyphus-20260729-x86_64-beehive_status-758-44-1279.mbox
  -rw-r--r-- 1 ar ar  38810 Jul 30 22:37 cyber-I-Sisyphus-20260729-x86_64-beehive_status-758-44-1279.mbox.gz
  -rw-r--r-- 1 ar ar 248186 Jul 30 22:37 o.mbox
  -rw-r--r-- 1 ar ar  37539 Jul 30 22:37 o.mbox.gz

Пожатый mbox пожался _лучше_ после превращения письма с бинарным вложением message.gz в письмо с телом text/plain.</thetext>
  </long_desc><long_desc isprivate="0" >
    <commentid>292048</commentid>
    <comment_count>10</comment_count>
    <who name="Arseny Maslennikov">arseny</who>
    <bug_when>2026-07-30 22:58:25 +0300</bug_when>
    <thetext>(In reply to Arseny Maslennikov from comment #9)
&gt; Пожатый mbox пожался _лучше_ после превращения письма с бинарным вложением
&gt; message.gz в письмо с телом text/plain.
Не исключаю, что на результат повлияло base64-представление для message.gz. gzip (внешний) as-is почему-то плохо сжимает заведомо корректный base64.</thetext>
  </long_desc>
      
          <attachment
              isobsolete="0"
              ispatch="0"
              isprivate="0"
          >
            <attachid>21960</attachid>
            <date>2026-07-30 22:54:05 +0300</date>
            <delta_ts>2026-07-30 22:54:05 +0300</delta_ts>
            <desc>converts broken emails into the expected form</desc>
            <filename>regen.py</filename>
            <type>text/plain</type>
            <size>1731</size>
            <attacher name="Arseny Maslennikov">arseny</attacher>
            
              <data encoding="base64">IyEvdXNyL2Jpbi9weXRob24zCmltcG9ydCBnemlwCmltcG9ydCBtYWlsYm94CmZyb20gZW1haWwu
bWVzc2FnZSBpbXBvcnQgRW1haWxNZXNzYWdlCgppbXBvcnQgc3lzCgoKZGVmIHJlcGxhY2VfYWxs
X3BhcnRzKG1lc3NhZ2UsIGJ5KToKICAgIG1lc3NhZ2Uuc2V0X3BheWxvYWQoYnkpCiAgICAjIFVw
ZGF0ZSBoZWFkZXJzCiAgICBtZXNzYWdlLnJlcGxhY2VfaGVhZGVyKCdDb250ZW50LVR5cGUnLCAn
dGV4dC9wbGFpbicpCiAgICBtZXNzYWdlLnNldF9wYXJhbSgnY2hhcnNldCcsICd1bmtub3duLThi
aXQnLCBoZWFkZXI9J0NvbnRlbnQtVHlwZScpCiAgICBtZXNzYWdlLnJlcGxhY2VfaGVhZGVyKCdD
b250ZW50LURpc3Bvc2l0aW9uJywgJ2lubGluZScpCiAgICBpZiAnQ29udGVudC1UcmFuc2Zlci1F
bmNvZGluZycgaW4gbWVzc2FnZToKICAgICAgICBkZWwgbWVzc2FnZVsnQ29udGVudC1UcmFuc2Zl
ci1FbmNvZGluZyddCgoKZGVmIHByb2Nlc3MobWVzc2FnZSk6CiAgICBpZiBub3QgbWVzc2FnZS5p
c19tdWx0aXBhcnQoKToKICAgICAgICByZXR1cm4gbWVzc2FnZQoKICAgIHBhcnRzID0gW3BhcnQg
Zm9yIHBhcnQgaW4gbWVzc2FnZS53YWxrKCldCiAgICBpZiBsZW4ocGFydHMpICE9IDM6CiAgICAg
ICAgIyBEbyBub3QgcmlzayBsb3NpbmcgZGF0YS4KICAgICAgICBwcmludChmJ3tsZW4ocGFydHMp
PX0nLCBmaWxlPXN5cy5zdGRlcnIpCiAgICAgICAgcmV0dXJuIG1lc3NhZ2UKCiAgICBmb3IgcGFy
dCBpbiBwYXJ0czoKICAgICAgICBmaWxlbmFtZSA9IHBhcnQuZ2V0X2ZpbGVuYW1lKCkgb3IgIiIK
ICAgICAgICBjX3R5cGUgPSBwYXJ0LmdldF9jb250ZW50X3R5cGUoKQogICAgICAgIGlmIGNfdHlw
ZSBpbiBbCiAgICAgICAgICAgICJhcHBsaWNhdGlvbi94LWd6aXAiLAogICAgICAgICAgICAiYXBw
bGljYXRpb24vZ3ppcCIsCiAgICAgICAgXSBhbmQgZmlsZW5hbWUuZW5kc3dpdGgoIm1lc3NhZ2Uu
Z3oiKToKICAgICAgICAgICAgY19kYXRhID0gcGFydC5nZXRfcGF5bG9hZChkZWNvZGU9VHJ1ZSkK
ICAgICAgICAgICAgaWYgY19kYXRhOgogICAgICAgICAgICAgICAgdHJ5OgogICAgICAgICAgICAg
ICAgICAgIHVuY19kYXRhID0gZ3ppcC5kZWNvbXByZXNzKGNfZGF0YSkKICAgICAgICAgICAgICAg
ICAgICByZXBsYWNlX2FsbF9wYXJ0cyhtZXNzYWdlLCB1bmNfZGF0YSkKICAgICAgICAgICAgICAg
ICAgICBicmVhawogICAgICAgICAgICAgICAgZXhjZXB0IChPU0Vycm9yLCBFT0ZFcnJvcikgYXMg
ZToKICAgICAgICAgICAgICAgICAgICAjIFNraXAgaWYgZGVjb21wcmVzc2lvbiBmYWlscy4KICAg
ICAgICAgICAgICAgICAgICBwcmludChlKQoKICAgIHJldHVybiBtZXNzYWdlCgoKaWYgX19uYW1l
X18gPT0gJ19fbWFpbl9fJzoKICAgIHNyY19tYm94X3BhdGggPSBzeXMuYXJndlsxXQogICAgZHN0
X21ib3hfcGF0aCA9IHN5cy5hcmd2WzJdCgogICAgc3JjX21ib3ggPSBtYWlsYm94Lm1ib3goc3Jj
X21ib3hfcGF0aCkKICAgIGRzdF9tYm94ID0gbWFpbGJveC5tYm94KGRzdF9tYm94X3BhdGgpCiAg
ICBkc3RfbWJveC5sb2NrKCkKICAgIHRyeToKICAgICAgICBmb3IgbWVzc2FnZSBpbiBzcmNfbWJv
eDoKICAgICAgICAgICAgZHN0X21ib3guYWRkKHByb2Nlc3MobWVzc2FnZSkpCiAgICBmaW5hbGx5
OgogICAgICAgIGRzdF9tYm94LnVubG9jaygpCiAgICAgICAgZHN0X21ib3guY2xvc2UoKQogICAg
ICAgIHNyY19tYm94LmNsb3NlKCkK
</data>

          </attachment>
      

    </bug>

</bugzilla>