No Firefox, usando o add-on Web Developer Toolbar : use Information »Exibir âncoras (apesar de seu nome e, apesar de um ID de exibição e detalhes de classe dedicados, isso também mostrará os ids).
Há um add-on dedicado, que na verdade acho um pouco mais difícil de usar, já que ele precisa de um clique com o botão direito para ver o nome da âncora: Mostrar Âncoras . Ele renderiza as âncoras bem:
No Safari e no Chrome: clique com o botão direito do mouse e o Inspecionar elemento faz com que o Web Inspector avance imediatamente para o elemento de seu interesse. (Da mesma forma no Firefox quando você tem o complemento do Firebug instalado.)