Mentionné dès le XIème siècle, probablement édifié en bois puis rebâti en pierre dès le XIIème siècle, ce fabuleux édifice fut tour à tour château médiéval, forteresse frontière remaniée par Charles Quint puis par Vauban, prison d'État sous l'Ancien régime, la Révolution et l'Empire - Toussaint Louverture, le jeune Mirabeau ou encore Heinrich Von Kleist y furent enfermés - puis fort d'artillerie intégré à la ligne Maginot.
Aujourd'hui, ce monument, implanté dans un site naturel grandiose et romantique, est un véritable livre grandeur nature de l'histoire de l'architecture militaire de ces dix derniers siècles.
À travers les quelques six cents pièces exposées, le musée d'armes, aujourd'hui fermé* aux visiteurs offre à son public une véritable rétrospective de l'armement et de l'équipement du militaire français, depuis le 17ème siècle jusqu'au fusil Lebel de 1886. Une quarantaine de pièces rarissimes lui assurent aujourd'hui une réputation internationale.
*Le musée d'armes est fermé pour rénovation, une partie de la collection est visible au musée de Pontarlier.
