Im Jahre 1894 wurde im ehemaligen Augustiner-Klostergarten, eine neue Produktionsstätte für Mauser Waffen errichtet. Hier wurden 12000 Gewehre für die schwedische Armee produziert - daher auch der Name Schwedenbau.

Ab 1950 wurden hier durch die Firma Vasenol, u. a. Pasten und Salben produziert. Im November 1973 erwarb dann die Stadt Oberndorf das Gebäude. Heute befinden sich hier der Werkhof, die Volkshochschule, das Heimat- und Waffenmuseum, die öffentliche Bücherei und das städtische Archiv.