Tente acessar as opções de Compartilhamento de conexão com a Internet (na guia Compartilhamento nas propriedades do adaptador de rede), clique em Configurações e em Servidor da Web (HTTP). Coloque o endereço IP do computador B no campo onde solicitado. Isso deve expor os serviços do Computador B à sua LAN e permitir que você acesse a porta 80 do computador B, ao entrar em contato com a porta 80 do computador A - com base em meu entendimento.
Eu não usei esse recurso pessoalmente, mas ele é muito semelhante às configurações de encaminhamento de porta nos roteadores. O Compartilhamento de Conexão com a Internet basicamente configura seu computador para ser um roteador NAT.