Na verdade, um dos exemplos deles é uma correspondência quase perfeita com seus requisitos - só precisa ser ajustado para funcionar apenas no diretório seguro:
$HTTP["url"] =~ "^/secure/" {
$HTTP["host"] =~ "(.*)" {
url.redirect = ( "^/(.*)" => "https://%1/$1" )
}
}