Des bâtiments portés sur le plan cadastral de 1812 auraient été détruits entre 1850 (matrices cadastrales) et le premier quart du 20e siècle ; les derniers vestiges de la gentilhommière de la Rairie et de sa tour carrée indépendante auraient été détruits dans les années 1920. Le fief de la Rairie est connu au plus tard au début du 17e siècle (Plaux s.d. ; Sécheresse 2019). Le lieu-dit figure, en tant que chef-lieu de fief, sur la carte de Cassini (vers 1765).
La ferme a, en partie, été construite à partir du milieu du 19e siècle avec des matériaux récupérés sur les anciens bâtiments. Des blocs de calcaire se retrouvent en réemploi dans les murs du logement, de l’étable attenante et de la grange-étable.