Após semanas eu finalmente encontrei. Existe uma linha no smb.conf que não define nenhum atraso na conexão. Por padrão, é comentado. Eu apenas descomenteço a linha e voila! Esta é a linha:
socket options = TCP_NODELAY
é por padrão comentada. Se você está tendo um problema com isso, descomente essa linha em seu smb.conf e reinicie o samba.