Se vc deseja algo "o mais rapido possível", é melhor pegar uma game engine pronta, que ela já vai trazer nativamente um monte de ferramentas de qualidade de vida, como animação, shaders, autotiles.

Particularmente eu gosto de fazer tudo na unha, mas so faço como hobby, mas se essa for sua vontade, tem o Arcade (Python. Mais otimizada que pygame), LÖVE2D (Lua), LibGDX (Java).

De outra forma, se o objetivo é produtividade, aí vai de Godot, Unity, Cocos2D, Defold, Game Maker