É totalmente possível que a bateria esteja morrendo e precise ser substituída.
Um dos problemas reais com as baterias é que, na verdade, é muito difícil estimar quanto de carga sobrou. Normalmente, isso é feito aplicando-se uma carga específica e vendo-se o que a tensão reduz e, em seguida, observando um gráfico de milhares de descargas completas da bateria e vendo onde você está no gráfico.
O problema é que, se o contato da bateria tiver sofrido uma leve erosão ou se um filme tiver se acumulado nela, isso dificultará o fluxo da corrente. Isso faz com que a resistência aparente aumente e aumente a tensão quando uma corrente é aplicada. O resultado é que aparece para o mundo exterior que a bateria está muito mais tarde no ciclo de descarga do que realmente é. Ele ainda pode fornecer praticamente toda a carga, mas algo está fazendo com que a voltagem fique bem menor.
O Windows (e outros sistemas operacionais) apenas mostrará o que a bateria está relatando, que a voltagem da bateria é menor e, portanto, provavelmente (até onde eles sabem) está praticamente descarregada.
Efetivamente, você acaba com as células da bateria podendo armazenar a carga, mas não é capaz de liberá-la de forma tão eficiente quanto costumava. Isso também pode fazer com que a bateria fique mais quente do que costumava.
Se eu fosse você, então eu pegaria uma bateria nova e levaria a sua antiga para um centro de descarte local.