Das Kaisergebirge gliedert sich in den überwiegend aus blankem Kalkfels bestehenden Wilden Kaiser und den südseitig überwiegend mit Bergkiefern(Latschen) bewachsenen Zahmen Kaiser. Insgesamt erstreckt sich das Kaisergebirge etwa 20 km in Ost-West-Richtung und etwa 14 km in Nord-Süd-Richtung. Dadurch ergibt sich eine Gesamtfläche von ca. 280 km². Der Zahme Kaiser überschreitet nur knapp die 2.000-Meter-Grenze. Die höchste Erhebung des Wilden Kaisers ist die Ellmauer Halt mit 2.344 m gefolgt von der Ackerlspitze mit 3.337m. Daneben gibt es rund vierzig weitere Gipfel, unter ihnen viele berühmte Kletterberge (Karlspitzen, Totenkirchl, Fleischbank, Predigtstuhl, Goinger Halt, Ackerlspitze, Maukspitze, Regalmwand, uvm.