Так что я был прав, есть некоторая разница между конфигурацией ядра ELREPO и той, что используется в Ubuntu и Fedora, которые вызывают эту проблему. Я не мог найти, какая опция вызывает это, когда я сравниваю конфигурации ядра.
Так что я сделал cat / boot / config * на рабочей станции fedora и использовал его для компиляции ядра ELREPO src rpm. После установки нового ядра мышь была обнаружена немедленно.
Лучше использовать конфигурацию ядра рабочей станции, чем универсальную Centos, которая в любом случае оптимизирована для серверов.