Remarquable, l'ancien couvent Allerheiligen est situé en plein cœur de la ville. Bénédictins, pères paulins et chanoines en furent les habitants avant que, au moment de la Réforme, l'abbaye ne soit destinée à des buts plus profanes. L'abbatiale qui se trouve être la plus grande église romane de Suisse, devint église paroissiale protestante, le reste du couvent renferme aujourd'hui le musée de la Toussaint (musée zu Allerheiligen), qui s'inscrit dans la tradition de l'endroit comme un lieu du savoir, de la culture et de la rencontre.
Ses collections se consacrent à des domaines aussi divers que l'archéologie régionale, les civilisations primitives, l'histoire culturelle de Schaffhouse, l'art suisse, l'histoire naturelle régionale, et il dispose également de pièces ornithologiques. Ceci en fait le plus grand musée général de Suisse. Des expositions temporaires variées apportent la touche finale au programme muséographique novateur du lieu.