Bedingt durch die Aufgabe als Wehrturm wurde der bedrohte Teil der Außenmauer verstärkt ausgeführt. Die äußere Gestalt und der Grundriss der inneren Räume sind jeweils kreisförmig mit versetzten Mittelpunkten aufgrund der Außenwand-Dickenunterschiede, womit sich ein exzentrischer Grundriss ergibt. Der heutige Keller und die erste Etage sind als Gewölbe ausgebildet.

Der Keller diente ursprünglich als Lager für Munition und Ausrüstung. Die erste Etage war mit Kanonen bestückt, die in fünf Schießscharten angeordnet waren. In die Außenmauer sind auf der ehemals stadtzugewandten Seite steinerne Treppen integriert. Das ursprüngliche Aussehen ist in den unteren beiden Etagen weitestgehend erhalten geblieben.

Nach 1770 wurden durch Anton Georg Hauptmann (1735-1803) umfangreiche Umbauarbeiten vorgenommen, die dazu dienen sollten, den Turm bewohnbar zu machen. Hierbei bekam der Kasseturm seine jetzige Gestalt. Das Obergeschoss wurde in Fachwerk erbaut und ein Spitzdach aufgesetzt.