Muitos periféricos são removíveis (USB, Firewire, PCMCIA, PCI hotplugable etc.). Além disso, uma instalação do sistema pode ser movida para um novo hardware se o hardware antigo falhar ou tiver que ser atualizado. As distribuições do Linux tendem a fornecer todos os drivers que você pode precisar, preferindo perder alguns megabytes de espaço em disco em vez de dizer “teclado não reconhecido, pressione F1 para continuar” ou “adaptador de rede não reconhecido; o download do driver falhou: rede não alcançável ”².
Atualizações são oferecidas para todos os softwares que você instalou. O gerenciador de pacotes não pode prever que você nunca usará algum software. A maneira de dizer ao gerenciador de pacotes que você não quer um software é instalá-lo.
Se tiver certeza de que não precisará de algum driver ou de algum firmware - por exemplo, wifi em um servidor que está em um rack ou em execução em uma máquina virtual, você pode remover com segurança pacotes que fornecem add-on drivers e firmware. Nunca remova arquivos individuais, apenas pacotes RPM. Se a remoção de um pacote também retirar algum pacote cuja função você não entende, deixe-o em paz.
¹ Visto em muitos BIOSes (parafraseado).
² Visto no Windows (parafraseado).