Kernel/Kdump: различия между версиями

Материал из ALT Linux Wiki
Нет описания правки
(span style)
Строка 9: Строка 9:
= Пример конфигурации системы по шагам =
= Пример конфигурации системы по шагам =


   # '''apt-get uodate'''
   <span style="color:blue">#</span> '''apt-get uodate'''
   # '''apt-get install''' -y kdump-tools
   <span style="color:blue">#</span> '''apt-get install''' -y kdump-tools


Добавьте параметр <code>crashkernel=256M</code> в kernel command line, для этого (при использовании загрузчика grub2) редактируйте файл <code>/etc/sysconfig/grub2</code> строку <code>GRUB_CMDLINE_LINUX_DEFAULT=</code>, например:
Добавьте параметр <code>crashkernel=256M</code> в kernel command line, для этого (при использовании загрузчика grub2) редактируйте файл <code>/etc/sysconfig/grub2</code> строку <code>GRUB_CMDLINE_LINUX_DEFAULT=</code>, например:


   # vim /etc/sysconfig/grub2
   <span style="color:blue">#</span> '''vim''' /etc/sysconfig/grub2
   GRUB_CMDLINE_LINUX_DEFAULT='panic=10 console=ttyS0 audit=0 '''crashkernel=256M''''
   GRUB_CMDLINE_LINUX_DEFAULT='panic=10 console=ttyS0 audit=0 '''crashkernel=256M''''


Затем нужно [перегенерировать grub.cfg], чтоб новый параметр применился при следующей загрузке системы:
Затем нужно [перегенерировать grub.cfg], чтоб новый параметр применился при следующей загрузке системы:


   # '''update-grub'''
   <span style="color:blue">#</span> '''update-grub'''


И включить сервис <code>kdump-tools</code>:
И включить сервис <code>kdump-tools</code>:


   # '''systemctl''' enable kdump-tools
   <span style="color:blue">#</span> '''systemctl''' enable kdump-tools


После этого можно (нужно) перезагрузить систему (reboot).
После этого можно (нужно) перезагрузить систему (reboot).
Строка 29: Строка 29:
Результат работы сервиса можно будет посмотреть командами <code>kdump-config show</code> (выведет больше подробностей) или <code>kdump-config status</code> (кратко) — в их выводе должен быть текст <code>ready to kdump</code>:
Результат работы сервиса можно будет посмотреть командами <code>kdump-config show</code> (выведет больше подробностей) или <code>kdump-config status</code> (кратко) — в их выводе должен быть текст <code>ready to kdump</code>:


   # '''kdump-config''' status
   <span style="color:blue">#</span> '''kdump-config''' status
   current state  : ready to kdump
   current state  : ready to kdump


Строка 36: Строка 36:
Системы разные и после первоначальной установки на всякий случай можно убедиться, что всё работает. Для этого после рубута (при наличии статуса "ready to kdump") искусственно вызовите крэш системы:
Системы разные и после первоначальной установки на всякий случай можно убедиться, что всё работает. Для этого после рубута (при наличии статуса "ready to kdump") искусственно вызовите крэш системы:


   # sync
   <span style="color:blue">#</span> '''sync'''
   # echo 1 > /proc/sys/kernel/sysrq
   <span style="color:blue">#</span> '''echo''' 1 > /proc/sys/kernel/sysrq
   # echo c > /proc/sysrq-trigger
   <span style="color:blue">#</span> '''echo''' c > /proc/sysrq-trigger


Возникнет kernel panic после чего система должна загрузится в dump-capture ядро, которое запишет дамп предыдущего ядра в подкаталог названый по дате и времени в <code>/var/crash</code>. Пример:
Возникнет kernel panic после чего система должна загрузится в dump-capture ядро, которое запишет дамп предыдущего ядра в подкаталог названый по дате и времени в <code>/var/crash</code>. Пример:


   # ls -l /var/crash/202211220350
   <span style="color:blue">#</span> '''ls''' -l /var/crash/202211220350
   total 137928
   total 137928
   -rw------- 1 root root    151909 Nov 22 03:50 dmesg.202211220350
   -rw------- 1 root root    151909 Nov 22 03:50 dmesg.202211220350
   -rw-r--r-- 1 root root 141075304 Nov 22 03:50 dump.202211220350
   -rw-r--r-- 1 root root 141075304 Nov 22 03:50 dump.202211220350


Файл dump.202211220350 записывается по умолчанию во flattened формате.
Файл <code>dump.202211220350</code> записывается по умолчанию во flattened формате.


= Анализ дампа =
= Анализ дампа =
Для анализа необходима утилита [https://crash-utility.github.io/ <code>crash</code>] и <code>-debuginfo</code> пакет для ядра соответствующий по версии упавшему ядру. ([[Debuginfo|Статья по установке -debuginfo пакетов]]. Учтите, что -debuginfo пакеты для ядра огромны). Например, для ''un-def'' ядра:
Для анализа необходима утилита [https://crash-utility.github.io/ <code>crash</code>] и <code>-debuginfo</code> пакет для ядра соответствующий по версии упавшему ядру. ([[Debuginfo|Статья по установке -debuginfo пакетов]]. Учтите, что -debuginfo пакеты для ядра огромны). Например, для ''un-def'' ядра:


   # '''apt-get install''' crash kernel-image-un-def-debuginfo
   <span style="color:blue">#</span> '''apt-get install''' crash kernel-image-un-def-debuginfo


В -debuginfo пакете находится необходимое для анализа дампа ядро в несжатом виде <code>vmlinux</code> (в отличии от <code>vmlinuz</code> используемого для загрузки). Пример запуска утилиты crash, допустим, у нас дамп для ядра версии <code>6.0.9-un-def-alt1</code> (версию ядра проще всего посмотреть в файле <code>dmesg.*</code> в каталоге с дампом):
В -debuginfo пакете находится необходимое для анализа дампа ядро в несжатом виде <code>vmlinux</code> (в отличии от <code>vmlinuz</code> используемого для загрузки). Пример запуска утилиты crash, допустим, у нас дамп для ядра версии <code>6.0.9-un-def-alt1</code> (версию ядра проще всего посмотреть в файле <code>dmesg.*</code> в каталоге с дампом):


   # '''head''' -1 /var/crash/202211220350/dmesg.202211220350
   <span style="color:blue">#</span> '''head''' -1 /var/crash/202211220350/dmesg.202211220350
   [    0.000000] Linux version 6.0.9-un-def-alt1 (...
   [    0.000000] Linux version 6.0.9-un-def-alt1 (...
   # '''crash''' /usr/lib/debug/lib/modules/6.0.9-un-def-alt1/vmlinux /var/crash/202211220350/dump.202211220350
   <span style="color:blue">#</span> '''crash''' /usr/lib/debug/lib/modules/6.0.9-un-def-alt1/vmlinux /var/crash/202211220350/dump.202211220350
   crash> bt
   <span style="color:green">crash></span> bt


Документация по '''crash''' (англ.): https://crash-utility.github.io/crash_whitepaper.html
Документация по '''crash''' (англ.): https://crash-utility.github.io/crash_whitepaper.html

Версия от 20:31, 24 ноября 2022

Kdump предоставляет возможность получить дамп ядра в случае падения ядра (kernel panic) для последующего анализа разработчиками.

В Альте используется интерфейс на базе дебиановского kdump-tools с утилитой kdump-config.

Примечание: В отличии от дебиановких утилит у нас нет генерации специального мини-initrd для kdump, а используется обычный initrd с обычным ядром. Так же не поддерживается дамп по ftp.


Описание используемого механизма ядра: https://www.kernel.org/doc/html/latest/admin-guide/kdump/kdump.html (англ.)

Пример конфигурации системы по шагам

 # apt-get uodate
 # apt-get install -y kdump-tools

Добавьте параметр crashkernel=256M в kernel command line, для этого (при использовании загрузчика grub2) редактируйте файл /etc/sysconfig/grub2 строку GRUB_CMDLINE_LINUX_DEFAULT=, например: 

 # vim /etc/sysconfig/grub2
 GRUB_CMDLINE_LINUX_DEFAULT='panic=10 console=ttyS0 audit=0 crashkernel=256M'

Затем нужно [перегенерировать grub.cfg], чтоб новый параметр применился при следующей загрузке системы: 

 # update-grub

И включить сервис kdump-tools: 

 # systemctl enable kdump-tools

После этого можно (нужно) перезагрузить систему (reboot).

Результат работы сервиса можно будет посмотреть командами kdump-config show (выведет больше подробностей) или kdump-config status (кратко) — в их выводе должен быть текст ready to kdump: 

 # kdump-config status
 current state   : ready to kdump

Проверка работоспособности Kdump

Системы разные и после первоначальной установки на всякий случай можно убедиться, что всё работает. Для этого после рубута (при наличии статуса "ready to kdump") искусственно вызовите крэш системы: 

 # sync
 # echo 1 > /proc/sys/kernel/sysrq
 # echo c > /proc/sysrq-trigger

Возникнет kernel panic после чего система должна загрузится в dump-capture ядро, которое запишет дамп предыдущего ядра в подкаталог названый по дате и времени в /var/crash. Пример: 

 # ls -l /var/crash/202211220350
 total 137928
 -rw------- 1 root root    151909 Nov 22 03:50 dmesg.202211220350
 -rw-r--r-- 1 root root 141075304 Nov 22 03:50 dump.202211220350

Файл dump.202211220350 записывается по умолчанию во flattened формате.

Анализ дампа

Для анализа необходима утилита crash и -debuginfo пакет для ядра соответствующий по версии упавшему ядру. (Статья по установке -debuginfo пакетов. Учтите, что -debuginfo пакеты для ядра огромны). Например, для un-def ядра: 

 # apt-get install crash kernel-image-un-def-debuginfo

В -debuginfo пакете находится необходимое для анализа дампа ядро в несжатом виде vmlinux (в отличии от vmlinuz используемого для загрузки). Пример запуска утилиты crash, допустим, у нас дамп для ядра версии 6.0.9-un-def-alt1 (версию ядра проще всего посмотреть в файле dmesg.* в каталоге с дампом): 

 # head -1 /var/crash/202211220350/dmesg.202211220350
 [    0.000000] Linux version 6.0.9-un-def-alt1 (...
 # crash /usr/lib/debug/lib/modules/6.0.9-un-def-alt1/vmlinux /var/crash/202211220350/dump.202211220350
 crash> bt

Документация по crash (англ.): https://crash-utility.github.io/crash_whitepaper.html


Ссылки

Настройка Kdump в других дистрибутивах: