Concordo que você provavelmente obterá um feedback melhor no StackOverflow, mas como StackOverflower, eu posso sugerir uma coisa: pygame .
É um framework que parece um pouco bobo, mas na verdade se encaixa diretamente no SDL e tem vários fallbacks gráficos. Ele faz muito trabalho pesado para você e, embora isso possa não ser o que você quer a longo prazo, não consegui pensar em nada melhor para começar.
Eles também têm alguns tutoriais bem explicados, incluindo um sobre como fazer um "soco no chimpanzé" chato -advert estilo de jogo .