Le château de la Majorie tire son nom de son premier propriétaire, le major, bras-droit de l'évêque. Les évêques l'occupèrent de 1373 à l'incendie de 1788. Le bâtiment fut réaménagé probablement par l'architecte Ulrich Ruffiner en 1536. Il abrite depuis 1947 le Musée d'Art.