Sim, você pode. Eu realmente recomendo fazê-lo desta forma, pois evita qualquer conflito com o DHCP. A maioria das guias sobre como configurar IPs estáticos lhe dirá para colocá-lo fora do intervalo de DHCP. Enquanto estiver na mesma sub-rede. Se o seu roteador era 192.168.1.1, você desejaria manter o 192.168.1.X. Tenho certeza que mudar a sub-rede pode causar problemas.
Para realmente fazer isso, vá em Painel de Controle, Conexões de Rede, clique com o botão direito do mouse na conexão que você deseja configurar e vá em Propriedades. Clique em TCP / IP e clique em propriedades.
Altere o botão de opção de Obter automaticamente para "Usar o seguinte endereço IP". Entre no IP que você deseja usar, pressione tab para ir para a máscara de sub-rede, pressione tab novamente e ele se preencherá automaticamente. O Gateway Padrão é o IP do seu roteador, então ele sabe onde a internet pode ser encontrada. Você também deve definir as configurações de DNS se for usar a Internet do computador.
É isso, você já definiu um IP estático!
Editar: Isso é para o Win XP. Vista e 7 são ligeiramente diferentes, mas mesmo princípio e opções.