Sem especificar exatamente o que você está fazendo, é difícil dizer que isso é um problema real.
Há um equívoco comum de que usar muita memória é ruim. No entanto, a memória não usada é um desperdício. É como manter um depósito quase vazio porque você acha que é mais limpo. Mantendo o máximo que puder na memória, ele economiza ao ter que ir ao disco e também recarregar o conteúdo desnecessariamente. Contanto que o programa seja bom para liberar memória, isso não é absolutamente necessário para outros programas, não é um problema.
Se é um vazamento de memória, por outro lado, isso seria um grande problema. Você pode verificar isso fechando todas as suas guias, exceto dizer uma em branco. Em seguida, comece a carregar outros programas intensivos de memória. Se você tiver outro navegador instalado, como o Chrome, comece a carregar páginas em massa nele. Se o Firefox ainda está mostrando uso massivo de memória, então é um vazamento. Seu sistema provavelmente ficará lento em relação aos outros programas que exigem memória indisponível.
Pode ser o Firefox, mas geralmente é um complemento ou uma combinação de complementos que causam o vazamento. Você pode desativar todos os complementos iniciando o Firefox no modo de segurança a partir do terminal, firefox -safe-mode , para ver se você tem a mesma coisa.
Se você está dizendo que com apenas alguns sites "leves" abertos, e não fazendo nada no Firefox, que o Firefox só começa a ocupar mais e mais memória, então é plausível que seja apenas Flash ou algum script ficando maluco. É por isso que eu coloco "light" entre aspas. É inacreditável o quanto alguns sites simples são projetados.