В логе Journald множество вот таких сообщений:

апр 06 17:42:00 comp-core-i5-7200u-758da3 kernel: VBoxClient[3240]: segfault at 968 ip 00007fb5b0452ead sp 00007fff21e63cb0 error 4 in libX11.so.6.3.0[7fb5b0435000+8a000]
апр 06 17:42:00 comp-core-i5-7200u-758da3 kernel: Code: 56 49 89 d6 41 55 49 89 cd 41 54 4d 89 c4 55 48 89 f5 53 48 89 fb 48 83 ec 38 64 48 8b 04 25 28 00 00 00 48 89 44 24 28 31 c0 <48> 8b 87 68 09 00 00 48 85 c0 74 02 ff 10 ba 08 00 00 00 be 62 00

Сообщения перестают валиться после того, как убираешь строку в /etc/X11/xinit.d/98vboxadd-xclient:
/usr/bin/VBoxClient --vmsvga-x11

И действительно, проблема такая только при использовании vboxvga и vboxsvga.

Так что предлагаю отгородить запуск /usr/bin/VBoxClient --vmsvga-x11 отдельным условием проверки.