Muitos ISPs e locais públicos de acesso à Internet bloqueiam as portas de email por motivos de segurança. O GMail funciona muito bem porque está sendo acessado por meio de portas HTTP e / ou HTTPS típicas (que geralmente são abertas em locais públicos), mas (como você indicou) o IMAP e o POP usam portas diferentes, que geralmente são fechadas.