Les ruines du château occupent une plate-forme trapézoïdale d'environ un hectare. Il en subsiste une partie des soubassements du mur d'enceinte, flanqué, au sud, d'une tour circulaire à demi détruite, dite tour du Pigeonnier et, au nord, de la tour de la Poudrière, dont l'étage supérieur émerge seul des remblais. Au milieu se dressent les vestiges de deux bâtiments implantés dans le prolongement l'un de l'autre. Une tour ronde demi-hors œuvre est adossée à l'extrémité ouest de la muraille du bâtiment oriental, laquelle supporte neuf piliers carrés de maçonnerie hauts, au maximum, de 7,50 mètres. Un cartouche aux armes de Lorraine et la date de 1586 permettent d'attribuer à Claude de Guise, abbé de Cluny, cette construction de surface imposante (13 x 40 m) connue sous le nom de « jeu de paume »[2]. Pendant longtemps, on s'est demandé si ce bâtiment était réellement un jeu de paume, et les dernières études menées depuis 2012 ont permis de le démontrer.