Sim, isso é exatamente o que significa cumulativo, que inclui todas as atualizações anteriores.
Por exemplo, as atualizações do Windows NT eram cumulativas (significando que você poderia simplesmente aplicar o service pack mais recente disponível), mas não acredito que o Windows Vista ou os 7 service packs sejam cumulativos e tenha que instalar o service pack anterior antes de instalar o próximo . Pelo menos é assim que as atualizações do Windows obtêm as atualizações para você, o SP1 é instalado antes do SP2.
- = EDIT = -
Como fui corrigido nos comentários, os service packs do Windows são cumulativos, portanto, você pode simplesmente instalar o service pack mais recente sem a necessidade de instalar service packs anteriores. Eu simplesmente não tinha certeza se eles eram devido ao comportamento do Windows Update que eu vi.