Das Schloss Majorie hat seinen Namen von seinem ersten Besitzer, dem Meier ( französich Major), aus militärischer Sicht der rechte Arm des Bischofs. Von 1373 bis zum Brand von 1788 wurde das Schloss von den Bischöfen bewohnt. Das Gebäude wurde im Jahr 1536 wahrscheinlich von Architekt Ulrich Ruffiner umgestaltet. Seit 1947 beherbergt es das Kunstmuseum.