Abt Müller hat zahlreiche Glasgemälde gestiftet. Auch den Kreuzgang seines Klosters in St. Blasien ließ er mit Glasgemälden ausstatten. Diese sind jedoch nicht erhalten geblieben. Seine bedeutendste Stiftung ist ein Glasgemälde im Kreuzgang des Klosters Muri (Schweiz). Die Wappenscheibe ist die älteste Fassung des von Müller gern benutzten Typus mit Wilden Männern als Wappenhaltern. Solche Scheiben hat er für Amtshäuser und Klöster in der Schweiz als Zeichen der Freundschaft und Verbundenheit anfertigen lassen.

Heraldic Panel of the Abbot Caspar Müller of St. Blasien in the Black Forest. Pot-metal glass; black vitreous paint and yellow stain. Abbot Müller donated numerous stained glass panels. He also had the cloisters of his monastery in St. Blasien decorated with stained glass. However, these have not survived. His most important donation is a stained glass panel in the cloisters of the Muri monastery (Switzerland). The heraldic glass panel is the oldest version of the type Müller liked using, with Wild Men as shield supporters. He had such panels produced for Swiss ecclesiastical town properties and monasteries as a sign of friendship and affiliation.