De man at
:
at and batch read commands from standard input or a specified file which are to be executed at a later time, using /bin/sh.
Então, basta enviar o comando que você digitaria interativamente para at
como entrada:
echo 'rm that.file' | at now+10min