Le château, qui se dresse sur la rive gauche de la rivière, crée une toile de fond majestueuse. À ses pieds, le long de la rive boisée de l’Allier, s’étend une enfilade de charmantes maisons médiévales, chacune avec son propre petit jardin, des haies en topiaire, des fleurs et des plantes grimpantes. C’est là, au milieu des années 1970, que Gilles de Brissac a conçu son parc paysager de près de 5 hectares, véritable bijou de fantaisie, où se mêlent l’abondance des jardins anglais et la rigueur des parcs à la française. Le parc floral d’Apremont n’est pas le jardin du château. Gilles a choisi de l’intégrer au village classé parmi les plus beaux de France, afin qu’il en soit la suite naturelle.