Acho que descobri a solução. Eu precisava verificar entre 0 e lt; x < 7. Veja abaixo:
= AND(TODAY()-$B6)<=7, TODAY()-$B6)>=0)
Isso destacará a linha cuja data reflete a semana atual.
Além disso, se você quiser destacar a (s) linha (s) no mês atual, use a seguinte fórmula condicional e aplique-a à tabela inteira:
=AND(MONTH(TODAY())=MONTH($B6),YEAR(TODAY())=YEAR($B6))