Retorne o computador ao último estado em que estava. Isso significa a PSU antiga e a placa de vídeo antiga. Por tudo que você sabe, você pode ter capacitores na placa-mãe (eles parecem pequenas latas de cerveja na placa, e os queimados teriam tops estufados ... na maior parte do tempo).
De qualquer forma, verifique se o sistema ainda funciona da maneira que você tinha originalmente.
Depois, conforme sugerido nos comentários, troque a fonte de alimentação. Se o sistema funciona com o novo PSU, então você sabe que este não é o problema.
Nesse ponto, você pode colocar a nova placa de vídeo em funcionamento, desde que tenha determinado que a placa-mãe E a PSU não são o problema.
No entanto, se você retornar o computador ao seu estado original de trabalho (PSU antigo, placa de vídeo antiga) e ainda não inicializar corretamente, então seria hora de começar a verificar outras coisas ... assim como você fez (conexões, Ram, etc.) Poderia ser qualquer um deles (mesmo que você tenha verificado). Pode até ser o dissipador de calor do processador ou a maneira como o processador está no soquete ... mas duvido. Pelo menos, eu duvido o suficiente para não fazer a primeira coisa que você deve verificar.