Se você usar um caminho absoluto em um filtro (incluir / excluir), ele será interpretado a partir da raiz da sincronização. Você não está excluindo um diretório na origem ou excluindo um diretório no destino, você está excluindo um diretório na árvore para sincronizar.
Assim:
rsync -av --delete --progress --exclude "/folder4/mytestfolder1" /source/ /destination/