"Les premiers habitants du Domaine de Gayfié étaient les celtes. Le sarcophage d’une princesse celte posé sous le marronnier de la cour centrale en est un vestige. Les Romains ont plus tard établi un oppidum profitant d’un positionnement stratégique du Domaine, entouré de falaises sur les Causses et surplombant la vallée du Lot. Au Moyen-Âge, Waifré, duc d’Aquitaine, a donné son nom au Domaine devenu Gayfié en langue d’Oil. Une exploitation de truffes noires dont les bâtiments forment encore la cour centrale aujourd’hui était géré par une famille de Cajarc ; le fils héritier y avait fait un élevage de chevaux. Enfin, le club de football de l’AS Saint Etienne a voulu y établir un grand centre sportif dans les années 60 mais ce projet a finalement été abandonné.
C’est en 1990 que les propriétaires actuels ont acheté les 140 ha pour réaliser un lotissement de 35 lots constructibles. 23 maisons ont été édifiées. Aujourd’hui ils y a 13 maisons pour la location avec un total de 80 lits. Il reste 6 terrains à vendre à ce jour.
Depuis 2004 Madame Liselotte Schwarzer est gérante du Domaine de Gayfié, accompagné depuis 2015 de son fils Richard Buecheler. Les deux gérants y vivent en s’engageant à préserver la nature de ce monticule, et de vivre au rythme de cette nature. Richard, qui a trouvé sur ce domaine un lieu d’enracinement, se veut assurer l’avenir du Domaine de Gayfié.