Não precisa, eles estão lá por razão - «… O objetivo do TIME-WAIT é para evitar que pacotes atrasados de uma conexão sejam aceitos por uma conexão posterior… »
O Linux também tem net.ipv4.tcp_tw_recycle e net.ipv4.tcp_tw_reuse que pode ser útil. Outra ferramenta para mencionar é o linux-tcp-drop