Você precisa escapar do caractere corretamente, dependendo do shell que estiver usando, se não puder / não quiser confiar na conclusão interna. Por exemplo, no Bash, a maneira correta de escapar seria:
$ ls $'Foo\uFFFDo'
Foo�o
Veja a seção sobre citações na página man do seu shell.