CertWatch fará isso - aparecerá uma caixa de diálogo mostrando o certificado usado para o site
A primeira reinicialização após a instalação do complemento levará algum tempo, já que ele precisa criar o banco de dados de certificados disponíveis - portanto, não pense que o Firefox travou depois de instalá-lo.