No painel de pesquisa do Windows Explorer, verifique se Mais opções avançadas estão expandidas (nem todas as versões do Windows exigem que você expanda explicitamente isso).
Encontre o menu suspenso marcado como Tipo de arquivo (normalmente é a primeira opção avançada) e escolha Pasta.
Os resultados da sua pesquisa agora só incluem pastas.
Editar: Se você tem o cachorro "ajudando" a pesquisar, então você está na caixa de diálogo de pesquisa básica e as instruções acima podem estar erradas. A opção Tipo de arquivo provavelmente existe aqui (você só precisa procurá-lo), mas provavelmente é melhor mudar para a pesquisa "clássica" de qualquer maneira.