La construction du château remonte au XVème siècle. Il possédait à cette époque deux tours rondes. Une troisième - l'actuelle - n'est mentionnée qu'à partir de la fin du XVIIème siècle, elle aurait remplacé les deux premières. Cette tour contient l'escalier à vis et est couronnée de mâchicoulis. Dans l'épaisseur du mur de l'entrée principale on remarque encore la cheminée où descendait la herse. Le château est construit en basalte, la pierre volcanique de la région.

A la fin du XVIIème siècle et durant le XVIIIème le château fut sérieusement remanié. De grandes ouvertures furent percées, il perdit sa vocation défensive pour se transformer en un manoir (ou gentilhommière) plus confortable. C'est de cette époque que datent les splendides boiseries et peintures qui ornent les quatre salles des étages.

Ce fief, qui avait appartenu à la maison de Tournemire, avait été acquis par la famille Vigier de Prades, bourgeois de Salers. En 1640, il entra, par mariage, dans la famille de Montclar. Le château devint l'habitation principale de la famille de Montclar jusqu'à la révolution.

En 1830, Angélique de Montclar vendit le manoir à un avocat de Mauriac et en 1855, il fut acquis par la commune d'Anglards-de-Salers pour en faire son presbytère.

La Trémolière appartient à la commune d'Anglards-de-Salers (moins de 800 habitants).

Depuis son achat en 1855, pour en faire leur presbytère, les municipalités successives se sont attachées  à l'entretenir et à en améliorer son accessibilité.

On trouvera à la page du "bestiaire fantastique" l'histoire de la découverte des tapisseries. Leur salut vint de l'intervention du sous-préfet de Mauriac. Avec l'aide de l'architecte des Monuments historiques, la collection fut classée en 1908 sous la rubrique "tapisseries, sujet allégoriques". C'est ainsi qu'elle resta propriété de la commune.

Elu en 1965, Jean Descoeur, médecin, est le grand artisan de la rénovation de La Trémolière et de la mise en avant de ce patrimoine historique et culturel. 

Il commenca par faire construire un nouveau présbytère. Les aménagements intérieurs de la Trémolière ne pouvaient plus convenir à l'accueil d'un curé.

Des travaux de rénovation furent entrepris et, petit à petit, les salles du 1er et 2ème étage furent transformées en salle d'exposition. Les tapisseries qui étaient éparpillées dans le département furent ramenées à la Trémolière et les visiteurs purent commencer à visiter le château.

Une exposition de vieux matériel agricole complétait la visite dans le grenier sous la magnifique charpente. La première exposition des peintres amateurs de la région "les peintres du dimanche" fut organisée en 1989.

Le château fut inscrit aux monuments historiques le 14 octobre 1963, outre les tapisseries déjà classées, les facades et toitures y compris la tour d'escalier, et les pièces lambrissées des 2 étages furent classées monuments historiques le 2 mars 1981. Un bas-relief datant du XVème siècle "la présentation au temple", visible dans la grande pièce du premier étage, a fait l'objet d'une inscription spécifique au titre d'"objet" en 1985.

A partir de 1995, François Descoeur, architecte, prit la sucession de son père à la mairie de la commune et travailla à développer l'image du château de la Trémolière et du "Bestiaire fantastique".

En 2005, un jardin contemporain d'inspiration médiévale a été aménagé dans le jardin de l'ancien presbytère.

Les paysagistes Eric Ossart et Arnaud Maurières conçurent ce "jardin remarquable".

En 2011 commença le cycle des "expos d'été du château de la Trémolière" en collaboration avec la galerie d'art Claire Gastaud de Clermont Ferrand.

Au milieu des vaches rouges du pays vert (les Salers du Cantal), c'est un endroit qui est devenu un lieu culturel vivant. La confrontation des XIIème, XVIéme et du 21ème siècle est le moteur essentiel de la création d'un événementiel autour du château. Les associations locales liées au patrimoine se sont associées pour que les habitants s'approprient leur droit à la culture.  Des manifestations sont organisées dans l'enceinte du château.

Le château de la Trémolière est devenu avec le temps un haut lieu de médiation culturelle pour les enfants, avec des activités organisées par la communauté de communes. A l'automne les médiateurs et l'artiste contemporain présent, rencontrent les enfants de toutes les écoles environnantes en expliquant et démystifiant l'art exposé.