Le Château des Carraresi est un des plus importants biens historiques, architectoniques, artistiques et militaires de Padoue. Il se trouve où autrefois se trouvait le château bâti par Ezzelino III da Romano, tyran de la Ville entre 1237 et 1256, qui était le point le plus important pour la défense de l'enceinte du XIII siècle. La trace plus évidente en est la Torlonga, la plus haute des deux tours de l'ancien château. Une fois battu le tyran, les fortifications ont été abandonnées jusqu'à l'arrivée des Cararresi, qui ont fait bâtir leur château et décorer les deux tour avec des échecs en rouge et blanc, comme on les voit encore aujourd'hui dans la vue de la ville peinte à fresque par Giusto de' Menabuoi en 1382 dans la Chapelle du Bienheureux Luca Belludi dans la Basilique de Saint Antoine. Le château avait été complètement décoré, à l'extérieur tout comme à l'intérieur et les restaurations des dix dernières années réalisées à l'intérieur de l'ancien observatoire ont permis de mettre au jour les traces visibles de peinture en rouge et blanc dans les coins les plus cachés de la Specola (la tour de l'Observatoire), bâtie sur le château.

Le Château était connecté à la Reggia Carrarese par le traghetto alle mura, un passage suspendu qui reliait les centres du pouvoir politique et militaire. Par la construction de l'enceinte de la Renaissance et suite à la longue période de paix vécue par la ville sous la domination vénitienne, le Castel Vecchio de Padoue, comme on l'appelait au XVIII siècle, a perdu son importance stratégique. La République de Venise avait un projet pour la construction du Castelnuovo sur le coté est de l'enceinte, mais de ce projet ne reste que quelque bastion.