Você pode escapar do $
, forçando o bash a tratá-lo como um caractere literal e não como o início de uma variável.
Você faz isso com o caractere de barra invertida ( \
).
Então use isso:
RedirectMatch /(.*) https://$WEBSITENAME/\
no documento aqui.