Transferências lentas de rede podem ter várias razões, basicamente uma para cada camada no modelo OSI (na verdade, é um caso em que é útil: -))
Primeiro de tudo, a camada física. Você não menciona se você usa o cabo ou as placas de Wi-Fi para a transferência, então eu suspeito wifi: Mesmo com seus computadores na mesma sala, uma conexão Wi-Fi pode sofrer de interferência, seja de outros componentes Wi-Fi usando o mesmo freqüência ou outros usuários da banda livre de licença de 2.4 GHz. Sem um analisador de espectro, seu método mais simples para analisar isso é verificar se uma transmissão baseada em netcat simples é mais rápida. Se for tão lento, seu problema provavelmente está aqui. Experimente mudar de canal nas suas placas de Wi-Fi.
Caso contrário, verifique com arquivos maiores e informe seus resultados aqui. Para arquivos pequenos, o tempo necessário para o aperto de mão pode dominar o tempo real de transferência.