Planejamento de capacidade: medindo o tráfego de rede por solicitação de HTTP

Question

Planejamento de capacidade: medindo o tráfego de rede por solicitação de HTTP

#1 resposta do (1 votos)
#2 resposta do (1 votos)
#3 resposta do (1 votos)
#4 resposta do (0 votos)
#5 resposta do (0 votos)
#6 resposta do (0 votos)

2

Estou tentando descobrir exatamente quantos dados de rede são necessários para executar uma única solicitação HTTP

Atualmente estou simulando a solicitação usando o curl

curl -v  -X POST ${vehicles_endpoint}/updateMileageAndErrorCodes/abc123/9500/P0187,P0191,P0213

E capturando a resposta:

* About to connect() to localhost port 8088 (#0)
*   Trying ::1... connected
* Connected to localhost (::1) port 8088 (#0)
> POST /vdm/vehicles/updateMileageAndErrorCodes/abc123/15000/P0110 HTTP/1.1
> User-Agent: curl/7.21.4 (universal-apple-darwin11.0) libcurl/7.21.4 OpenSSL/0.9.8r zlib/1.2.5
> Host: localhost:8088
> Accept: */*
> 
< HTTP/1.1 204 No Content
< Server: Apache-Coyote/1.1
< Date: Wed, 28 Aug 2013 08:20:18 GMT
< 
* Connection #0 to host localhost left intact
* Closing connection #0

Como posso descobrir o número exato de bytes necessários para fazer essa solicitação / resposta?

Eu posso ver o número de caracteres na solicitação (211)

POST /vdm/vehicles/updateMileageAndErrorCodes/abc123/9500/P0187,P0191,P0213 HTTP/1.1
User-Agent: curl/7.21.4 (universal-apple-darwin11.0) libcurl/7.21.4 OpenSSL/0.9.8r zlib/1.2.5
Host: localhost:8088
Accept: */*

e a resposta (86):

HTTP/1.1 204 No Content
Server: Apache-Coyote/1.1
Date: Wed, 28 Aug 2013 08:20:18 GMT

Mas suponho que haja alguma outra sobrecarga relacionada ao protocolo?

Se eu fizer um tcpdump

sudo tcpdump -s 0 -X 'tcp dst port 80'

Isso me dá a seguinte saída:

tcpdump: verbose output suppressed, use -v or -vv for full protocol decode
listening on eth0, link-type EN10MB (Ethernet), capture size 65535 bytes
10:41:47.442934 IP 34-188-5-188.mobileinternet.proximus.be.51905 > CentOS-63-64-minimal.http: Flags [S], seq 1277831461, win 13140, options [mss 1460,sackOK,TS val 3832792 ecr 0,nop,wscale 1], length
0
        0x0000:  4500 003c 52fd 4000 2906 b6e0 bc05 bc22  E..<R.@.)......"
        0x0010:  904c 3f6a cac1 0050 4c2a 2925 0000 0000  .L?j...PL*)%....
        0x0020:  a002 3354 1060 0000 0204 05b4 0402 080a  ..3T.'..........
        0x0030:  003a 7bd8 0000 0000 0103 0301            .:{.........
10:41:47.862952 IP 34-188-5-188.mobileinternet.proximus.be.51905 > CentOS-63-64-minimal.http: Flags [.], ack 197676124, win 6570, options [nop,nop,TS val 3832868 ecr 2984946753], length 0
        0x0000:  4500 0034 52fe 4000 2906 b6e7 bc05 bc22  E..4R.@.)......"
        0x0010:  904c 3f6a cac1 0050 4c2a 2926 0bc8 4c5c  .L?j...PL*)&..L\
        0x0020:  8010 19aa a223 0000 0101 080a 003a 7c24  .....#.......:|$
        0x0030:  b1ea ac41                                ...A
10:41:48.144006 IP 34-188-5-188.mobileinternet.proximus.be.51905 > CentOS-63-64-minimal.http: Flags [P.], seq 0:317, ack 1, win 6570, options [nop,nop,TS val 3832874 ecr 2984946753], length 317
        0x0000:  4500 0171 52ff 4000 2906 b5a9 bc05 bc22  E..qR.@.)......"
        0x0010:  904c 3f6a cac1 0050 4c2a 2926 0bc8 4c5c  .L?j...PL*)&..L\
        0x0020:  8018 19aa 63e2 0000 0101 080a 003a 7c2a  ....c........:|*
        0x0030:  b1ea ac41 504f 5354 202f 7664 6d2f 7665  ...APOST./vdm/ve
        0x0040:  6869 636c 6573 2f75 7064 6174 654d 696c  hicles/updateMil
        0x0050:  6561 6765 416e 6445 7272 6f72 436f 6465  eageAndErrorCode
        0x0060:  732f 6162 6331 3233 2f39 3530 302f 5030  s/abc123/9500/P0
        0x0070:  3138 372c 5030 3139 312c 5030 3231 3320  187,P0191,P0213.
        0x0080:  4854 5450 2f31 2e31 0d0a 5573 6572 2d41  HTTP/1.1..User-A
        0x0090:  6765 6e74 3a20 4461 6c76 696b 2f31 2e36  gent:.Dalvik/1.6
        0x00a0:  2e30 2028 4c69 6e75 783b 2055 3b20 416e  .0.(Linux;.U;.An
        0x00b0:  6472 6f69 6420 342e 333b 2047 616c 6178  droid.4.3;.Galax
        0x00c0:  7920 4e65 7875 7320 4275 696c 642f 4a57  y.Nexus.Build/JW
        0x00d0:  5236 3659 290d 0a48 6f73 743a 2076 646d  R66Y)..Host:.vdm
        0x00e0:  2d61 7069 2e65 636f 6d6d 6974 2d63 6f6e  -api.ecommit-con
        0x00f0:  7375 6c74 696e 672e 6265 0d0a 436f 6e6e  sulting.be..Conn
        0x0100:  6563 7469 6f6e 3a20 4b65 6570 2d41 6c69  ection:.Keep-Ali
        0x0110:  7665 0d0a 4163 6365 7074 2d45 6e63 6f64  ve..Accept-Encod
        0x0120:  696e 673a 2067 7a69 700d 0a43 6f6e 7465  ing:.gzip..Conte
        0x0130:  6e74 2d54 7970 653a 2061 7070 6c69 6361  nt-Type:.applica
        0x0140:  7469 6f6e 2f78 2d77 7777 2d66 6f72 6d2d  tion/x-www-form-
        0x0150:  7572 6c65 6e63 6f64 6564 0d0a 436f 6e74  urlencoded..Cont
        0x0160:  656e 742d 4c65 6e67 7468 3a20 300d 0a0d  ent-Length:.0...
        0x0170:  0a                                       .
10:41:49.603082 IP 34-188-5-188.mobileinternet.proximus.be.51905 > CentOS-63-64-minimal.http: Flags [.], ack 162, win 6490, options [nop,nop,TS val 3833096 ecr 2984948484], length 0
        0x0000:  4500 0034 5300 4000 2906 b6e5 bc05 bc22  E..4S.@.)......"
        0x0010:  904c 3f6a cac1 0050 4c2a 2a63 0bc8 4cfd  .L?j...PL**c..L.
        0x0020:  8010 195a 98ee 0000 0101 080a 003a 7d08  ...Z.........:}.
        0x0030:  b1ea b304                                ....
10:41:49.622962 IP 34-188-5-188.mobileinternet.proximus.be.51905 > CentOS-63-64-minimal.http: Flags [F.], seq 317, ack 163, win 6490, options [nop,nop,TS val 3833098 ecr 2984948484], length 0
        0x0000:  4500 0034 5301 4000 2906 b6e4 bc05 bc22  E..4S.@.)......"
        0x0010:  904c 3f6a cac1 0050 4c2a 2a63 0bc8 4cfe  .L?j...PL**c..L.
        0x0020:  8011 195a 98ea 0000 0101 080a 003a 7d0a  ...Z.........:}.
        0x0030:  b1ea b304                                ....

Eu notei que o tamanho total da solicitação (incluindo todos os cabeçalhos de solicitação HTTP) é de 317, mas também vejo muito tempo: 0 saídas.

Como posso descobrir o número exato de bytes transferidos para essa solicitação? (Eu usei minha ferramenta de uso de dados de telefones Android e notei que ela tinha cerca de 900 bytes por solicitação).

networking

por ddewaele 30.08.2013 / 12:33

6 respostas

Tags networking

Como hospedar um site do Wordpress em vários servidores devido a problemas de siteload geográfico? Nginx: servindo arquivos como texto sem ter .txt anexado a ele

score 1 · Answer 1

O pai grande para descobrir o conteúdo total de uma única solicitação (incluindo arquivos externos que sua página principal chama), confira Pingdom's Teste de velocidade do site

Você pode usar curl -I http://sitename ou wget do site.

curl -I exibe apenas os cabeçalhos (incluindo Content-Length), mas descarta o arquivo, onde wget realmente salva o arquivo do site principal (como index.html). Isso faz com que você tenha o tamanho do arquivo principal, mas nem todos os arquivos que essa página também chama.

Você também pode tentar usar as ferramentas do Chrome Dev para obter algumas informações.

score 1 · Answer 2

tente tcpdump -v para obter o comprimento total do pacote. O que você obtém aqui (sem "-v") é o tamanho da carga útil (igual ao tamanho do pacote menos os cabeçalhos ethernet / IP / TCP).

Em seguida, basta somar o total da comunicação completa (filtrar "host src" pode ajudar a diminuir o fluxo)

Não está claro se você está interessado em contar apenas os pacotes de saída ou ambos os que entram e saem.

score 1 · Answer 3

Você pode tentar o utilitário HttpAnalyzer como parte de PcapPlusPlus . Esse utilitário captura dados HTTP e coleta muitas estatísticas sobre isso. Entre o resto, ele coleta o tamanho de solicitações / respostas HTTP. Você pode ler mais aqui: link

score 0 · Answer 4

Use o tshark / wireshark para capturar todo o tráfego e analisá-lo visualmente - será mais fácil para você.

score 0 · Answer 5

A ferramenta iftop ( man iftop ) exibe o uso da largura de banda em uma interface por host, estatísticas cumulativas de bytes transmitidos / recebidos / total e suporta a definição de filtros PCAP conhecidos (como o tcpdump) para contar apenas tráfego. Você pode tentar monitorar o tráfego HTTP com comandos simples como

iftop -P -i eth0 -f "dst port http"

Por padrão, quando o iftop inicia a parte superior da tela mostra o uso atual da largura de banda entre o (s) cliente (s) e o (s) servidor (es) enquanto a parte inferior mostra as estatísticas cumulativas. Você pode alterar isso criando um arquivo de configuração em ~/.iftoprc ou especificando-o com a opção -c .

score 0 · Answer 6

Usando o ifconfig, você pode ver quantos bytes foram enviados e recebidos em cada interface de rede. Você poderia executar ifconfig antes e depois do teste e subtrair o número de bytes antes do número de bytes depois.