Tente citar nomes com ls e use o bash array:
#!/usr/bin/env bash
filels="( $(ssh $USER@$SERVER ls -Q "$FOLDER*.avi") )"
IFS='\n' for f in $filels; do
echo "$f" done
Opção ls
-Q, --quote-name
enclose entry names in double
quotes
Ou se você tiver rsync :
~$ rsync -var --progress $USER@$SERVER:/PATH_TO_FOLDER/*avi ./
# do anything with files