Le château de Richemont, constitué de deux corps de logis en équerre reliés par une tour d'angle, fut construit entre 1564 et 1581 par Pierre de Bourdeille, mémorialiste du XVIème siècle, plus connu sous le nom de Brantôme. Après une mauvaise chute de cheval qui interrompit sa carrière militaire, il y rédigea ses oeuvres et y vécut jusqu'à sa mort, le 5 juillet 1614. Il est enterré dans la chapelle du château.