Cet édifice du XIIe siècle appartient à une branche de la puissante famille des Ricard de Montplaisir.
Au XIIIe siècle, il semble que ce château abrite des chevaliers de Malte qui résistent aux Albigeois.
L’actuel château de Frémauret comprend encore une partie fortifiée du XIIe siècle, des mâchicoulis et une tour ronde du XIVe siècle. Le pont-levis est remplacé au XVIe siècle par une portion de muraille reliant le donjon à la partie Renaissance.
En effet la deuxième partie de ce château est réédifiée à la Renaissance. Au XIXe siècle, on construit une extension entre la maison noble et le moulin. Du moulin proprement dit, il ne reste aujourd’hui que quelques vestiges.
Les murs en pierre de taille et la toiture en tuiles plates sont quant à eux en très bon état. Le château de Frémauret est aujourd’hui une très belle et imposante demeure agrémentée d’un beau jardin, dessiné sous le Consulat.
Il est désormais privé et la résidence personnelle de la famille Bourgeois.