Tenho certeza que você não pode. O terminal virtual Ctrl-Alt-F1 é separado de X e apenas um pode estar controlando a placa gráfica por vez. Pense nisso desta maneira: se você tivesse X em um monitor e o VT em outro, como você mudaria o foco entre os dois? Eles não interagem (esse é o ponto).