É um "marcador de rolagem". Vá para Ferramentas, Preferências, Avançado, Navegação e marque ou desmarque "Mostrar marcador de rolagem" para ativá-lo ou desativá-lo.
Para que serve: quando você baixa a página, normalmente você olha de volta para o topo da tela para começar a ler novamente. No entanto, quando você baixa a página na parte inferior da página, pode não haver conteúdo suficiente para preencher outra tela inteira. Nesse caso, o marcador de rolagem mostrará onde as novas coisas começam. (A mesma coisa acontece ao contrário, se você for para cima.)