Het Kasteel van Annecy bereik je door een korte klim door de oude stad of door simpelweg met de auto naar boven te rijden. Vanaf het kasteel heb je een prachtig zicht over de stad met zijn oude huisjes met pannendaken. Het kasteel van Annecy werd in de twaalfde eeuw gebouwd door de graven van Genève en later door de hertogen van Savoye verbouwd en uitgebreid. Het oudste gedeelte is de Koninginnetoren, de Tour de la Reine, van ongeveer 38 meter hoog. De muren hiervan zijn bijna vier meter dik. Het kasteel verkeert in een redelijke staat en is sinds 1953 eigendom van de stad. Het interieur bestaat tegenwoordig uit verschillende exposities. In een van de torens zit het Observatoire régional des lacs alpins, waar je alles te weten komt over het leven in en rond de Alpenmeren. Er zijn zelfs meerdere aquaria met verschillende vissoorten. Verder omhoog klimmend ontdek je hoe deze dieren gevangen worden en welke andere dieren er nog meer allemaal rondom het meer wonen. In de andere zalen vind je wisselende exposities van onder andere hedendaagse kunstenaars. Op de bovenste verdiepingen staan verschillende gebruiksvoorwerpen, bedden, kasten en ander huishoudelijk materiaal uitgestald.
