i moduli vengono caricati in base a quello che si ha nel computer
lsmod da l'elenco dei moduli caricati
gli altri sono li (/lib/modules) e non influiscono sul sistema

se ti caricasse un modulo inutile puoi provare a dare un
modprobe -r nome modulo
e nelle distro che lo hanno un update-modules o un generate-modprobe.conf se lo ha

questo in teoria dovrebbe aggiornare l'elenco dei moduli da caricare al boot anche se in realta hotplug poi fa come di default