Eu finalmente descobri. O manual realmente não é muito claro sobre esta funcionalidade essencial. Para ensinar o filtro sobre mensagens de spam, digite:
rspamc learn_spam email_file1 email_file2 etc
Para ensinar o filtro sobre mensagens normais, digite:
rspamc learn_ham email_file1 email_file2 etc