Olhe nos logs do Apache para ver o que está errado. Parece que o apache não pode verificar o certificado do cliente.
Você tem a diretiva SSLCACertificateFile definida corretamente? Isso é necessário, o apache não pode verificar o certificado de outra forma.