Eu tive o mesmo problema. Sempre que eu abria um dos meus projetos do VS 2005, os controles dentro das páginas demoravam a carregar. Mas finalmente consegui resolver o problema. Descobri que minhas páginas tinham referências a um componente de terceiros que eu não usava mais no projeto.
Quando eu apaguei as referências, o VS carrega em segundos.