Le Palais de l'Île a eu plusieurs vies : prison, asile de vieillards, palais de justice, atelier monétaire... avant d'être classé monument historique en 1900.
On peut aujourd'hui découvrir les anciennes cellules, la chapelle qui abrite régulièrement des œuvres d'art contemporain et visiter une exposition sur le développement économique et industriel de la ville d'Annecy et de son territoire.
A la fin du 19e siècle, la démolition du Palais de l'Île est envisagée. Les voix d'André Theuriet, romancier et de Charles Suisse, inspecteur des monuments historiques s'élèvent alors pour dénoncer le projet de démolition. Le 16 février 1900, le Palais de l'Île est classé monument historique.
L’objectif d’un chantier monument historique est toujours de conserver l’authenticité des ouvrages anciens et de maintenir des éléments anciens comme témoignages des savoir-faire du passé.
Le Palais de l'Isle n'offre à l'œil ni l'élégance des belles lignes architecturales, ni la somptuosité du décor. Il y a plus et mieux : autour de ses murailles et de sa tourelle pointue, la musique des eaux vives, la caresse verdoyante des feuillés, le mystère des voûtes sonores, la couleur et l'amusant dessin des façades du quai forment un harmonieux et suggestif accord.
André Theuriet, in Le Journal du 15 juillet et Les Alpes du 19 juillet 1896