Então, depois de um longo tempo olhando em volta e consertando as coisas sozinho, finalmente encontrei o problema.
Eu fiquei curioso sempre que @James mencionou Superfetch, e eu olhei para cima, apenas para descobrir que era o meu problema. Meu problema, depois de desabilitá-lo, desapareceu magicamente e não apareceu de novo.