Você pode adicionar um script postrotate ao seu bloco atual para excluir arquivos com mais de n
dias com o seguinte:
find /var/log/apache2 -maxdepth 1 -mtime +<n> -name "*.log.*.gz" -delete &>/dev/null
Espere pela próxima rotação, em seguida, remova-a e deixe o logrotate fazer seu trabalho normal novamente.