Der ursprüngliche Name "Schel(m)enberger Turm" verweist auf ein gegenüberliegendes Grundstück (Schelmenacker/Kogenland) außerhalb der Stadtmauer, auf dem der Scharfrichter verendetes Vieh verscharrte. Die ursprünglich mit Holz verschalte Innenseite sollte dem Feind keine Gelegenheit geben, sich dort zu verschanzen. Der Verteidigungsturm befindet sich nördlich des Obertors und seine Geschichte reicht bis ins 13. Jahrhundert zurück.Fachwerkaufbau und Dach des Turms stürzten 1773 ein und wurden nicht wieder aufgebaut. Im Volksmund heißt der Schellenberger Turm auch "Katzenlieselesturm" - nach einer Frau, die mit ihren Katzen Mitte des 19. Jahrhunderts bei der Ruine hauste.
Der Katzenlieselesturm in Ravensburg zeugt von einer bedeutenden Zeit im Mittelalter als Handelszentrum in der Region.
Seitdem ist der Standort des Turms als Kulturdenkmal ein wichtiger Bestandteil des Tourismus in Ravensburg geworden.
Durch einen Brand, der durch einen Blitzschlag verursacht wurde, wurde der Turm teilweise zerstört.
Heutzutage befindet sich vor dem Turm ein Spielplatz.
