Então, de acordo com sua descrição, você tem dois hosts definidos, um é para HTTP e um é para HTTPS, certo?
Então, no HTTP, você pode adicionar uma linha como esta:
RedirectMatch .* https://yourdomain
Isso corresponderá ao URI solicitado em relação ao padrão .*
, por isso sempre será igual. Em seguida, ele redireciona para a URL absoluta https://yourdomain