Então, descobri que precisava definir os back-ends no script vcl, mais abaixo. Se isso ajudar alguém, esse é o código do qual eu copiei ( link )
sub vcl_recv {
if (req.restarts == 0) {
set req.backend = b1;
} else if (req.restarts == 1) {
set req.backend = b2;
} else {
set req.backend = b3;
}
}
Bizarro, mas é verdade