Située à l’extrémité du corps de bâtiment est, trop longtemps transformée en écurie, elle a néanmoins conservé ses trois fenêtres originelles et une partie de la porte. Restaurée entre 1979 et 1982, à nouveau consacrée au culte, elle a retrouvé sa vocation première. L’autel actuel est celui de l’église Saint-Nicolas du village de Belvoir. Un placard en pierre à droite de l’autel abrite le coeur de Béatrix de Cusance, duchesse de Lorraine, princesse de Cantecroix et baronne de Belvoir, enfermé dans une boite de plomb; sa stèle funéraire est dressée sous un escalier de la chapelle.