Eu tive seu mesmo problema em relação a atrasos e congelamentos, mesmo com uso muito baixo de CPU e RAM. Você já tentou usar o X-org inspirado em Wayland como um ambiente de destock? você pode selecionar o Ubuntu (X.org) como um desktop na tela de login. Eu tenho medo de que possa haver um bug afetando minhas especificações, mas depois de usar o X.org como meu servidor de exibição padrão, não tenho mais atrasos e congelamentos.