Contanto que você esteja usando o Windows Media Player 10 ou superior fora da caixa, isso deve aparecer automaticamente como uma biblioteca compartilhada. Normalmente não há configuração necessária. Eu olharia potencialmente um firewall bloqueando o acesso. Eu corri com sucesso TVersity assim por mais de um ano.
Você pode precisar verificar nas configurações do Media Player que a procura de mídia compartilhada está ativada. Eu tenho o Windows 7 e as opções de streaming mudaram, mas lembre-se que esta era uma opção em outras versões.
Como alternativa, você pode tentar o XBMC para reproduzir os vídeos, já que ele tem melhor suporte para as estruturas de pastas.
Verifique também se você não está usando várias placas de rede para se conectar à sua rede na máquina host. A TVersity só se liga a um único endereço IP e, se não estiver visível para a rede, os seus PCs não permitirão a transmissão. Eu tive que mudar para Twonky Media Server por causa desta limitação.