Das Gebäude, dessen Kern aus dem frühen 13. Jahrhundert stammt, wurde im 16. Jahrhundert zum Rathaus mit Treppenturm und Renaissanceportal ausgebaut. Bereits im 19. Jahrhundert diente es als Aufbewahrungsort für die Altertümersammlung der Stadt. Nach der Sanierung des Baus ist eine Neukonzeption der Dauerausstellung vorgesehen. Im Mittelpunkt werden dabei neben der Geschichte des Hauses die Villinger Keramik vom 16. bis zum 19. Jahrhundert und Produkte des Schmiedehandwerks unter dem Thema "Hinter Schloß und Riegel" stehen.