Eu não contaria com a instalação básica sendo segura, não importa qual distribuição você usa e não importa o que você espera. Percorra sua configuração básica e aperte as coisas.
Se eu estiver configurando um servidor de Internet, removerei todos os servidores possíveis, exceto o que você precisa, desative o máximo de serviços possível, instale o OpenSSH e diminua a configuração (você pode até limitá-lo a chaves públicas se você gosta), instale e ative portsentry, e outras coisas similares.
Não assuma nada.
Mais uma coisa muito importante: faça uma atualização para garantir que você tenha os lançamentos mais atuais. Isso por si só reduzirá drasticamente seu perfil de risco.