Você precisa configurar suas portas de switch PVID para a VLAN a que pertencem ou configurar cada dispositivo para marcar seus pacotes para uma determinada VLAN (não comum).
Como alternativa, se você tiver dois switches separados, você pode designar um para a VLAN privada e um para a VLAN convidada.
Por favor, poste informações adicionais na configuração do seu switch e nós podemos ajudá-lo a refinar o problema.