Com milhões de usuários pesquisando por tantas coisas no google, yahoo e assim por diante. Como o servidor pode lidar com tantas pesquisas simultâneas? Eu não tenho idéia de como eles fizeram isso tão escalável. Qualquer visão sobre sua arquitetura seria bem-vinda.
Existem inúmeros estudos de caso e conversas de engenheiros do Google disponíveis on-line com pouca pesquisa. Basta dizer que a Pesquisa do Google é altamente distribuída e expulsa datacenters em todo o mundo.
Há muitas informações disponíveis no link .
Como já foi mencionado, as redes e a arquitetura de sites de larga escala são altamente distribuídas em muitos data centers e dezenas de milhares de servidores. Se estiver interessado em saber como isso funciona, recomendo um livro chamado Arquiteturas escalonáveis na Internet , que descreve algumas das os conceitos e teorias por trás de sistemas escaláveis e distribuídos.
Entre outras coisas, eles usam 100.000 servidores e o MapReduce. Massivamente paralela.
Tags scalability