Запишу, чтобы снова не забыть =)
В /etc/yum.conf есть параметр installonly_limit, который отвечает за количество устанавливаемых ядер Linux.
По умолчанию этот параметр равен 5.
Чтобы удалить лишние ядра и оставить только 2 последних, потребуется доустановить пакет yum-utlis
yum install -y yum-utils
И выполнить команду
package-cleanup --oldkernels --count=2
CentOS. Ограничение установленных ядер и удаление старых