Você respondeu a sua própria pergunta - pode funcionar algumas vezes, mas você já notou problemas.
Por fim, você acabará danificando o cartão ou (mais provavelmente) soprando a fonte de alimentação, o que pode causar danos a outros componentes. Isso pode ser devido a uma sobrecarga de energia final ou simplesmente desligando repentinamente.
Compre uma nova PSU.