Não, isso significa que, se seus scripts costumam gerar menos de 256 mil respostas, o buffer geralmente fica meio vazio e você acaba desperdiçando a memória:
Beffer funciona assim: nginx lê min(buffer_size,response_size)
bytes do script FCGI, envia para um cliente e esvazia o conteúdo do buffer. Se houver mais dados de resposta, leia & envia novamente.
Se o seu site geralmente fornece pequenas páginas geradas por script, o valor ideal é um pouco maior que o tamanho de um tamanho típico de resposta do script: cabeçalhos + conteúdo.