Das Heilig-Geist-Spital wurde 1351 von Seitz von Nellingen gestiftet. Es umfasste 8 Gebäude, von denen noch 3 (Pfründ-, Spitalverwaltungs- und Viehhaus) stehen.
Das Viehhaus (Ledergasse 2) ist im Kern das ursprüngliche Spitalhaus.
Das Spital war Aufenthaltsort für Kranke, Alte, Waisen, Behinderte und Geisteskranke. Später kam noch die Schul- und Armenpflege hinzu. Das Spital zählte zu den größten Grund- und Kapitalbesitzern der Gegend.
Das ehemalige Verwaltungsgebäude wird nach einer umfangreichen Instandsetzung in den vergangenen Jahren heute von der Musikschule genutzt.