Das Schloss, das den Namen der Kapelle von Vauguillain erhielt, wurde Ende des 12. Jahrhunderts erbaut. Es gibt zwar keine Spuren eines früheren Bauwerks, aber wie ein gallo-römischer Sarkophag aus Stein zeigt, der 1850 von einem Winzer in der Nähe des alten Friedhofs gefunden wurde, ist dieser strategische Punkt seit jeher besetzt. Das Schloss umfasste das Herrenhaus, das durch ein Tor mit der Kapelle in Verbindung stand, einen Brunnen, der nördlich der Kapelle gegraben wurde, und 1492 ließ Erzbischof Tristan von Salazar Schuppen und Stallungen bauen. Der erste durch Texte bekannte Gouverneur des Schlosses war Symon von Jussemicourt im Jahre 1363.
Im 14. Jahrhundert während des Hundertjährigen Krieges wurden die Mauern der Festung zerstört und von den Bewohnern wieder aufgebaut. 1406 und 1492 diente es den Erzbischöfen von Sens als Residenz. Man kann die Ruinen des alten Schlosses sehen, dessen großer runder Turm «Baron-Turm», der mit einem quadratischen Turm verbunden war.
1521-1522 stellte der Zensor von Saint-Julien-du-Sault fest, dass das Schloss im Zentrum eines Wegenetzes steht, das nach Verlin und Précy führt. Sieben Häuser und eine bebaute Lage befinden sich in unmittelbarer Nähe. Weinberge umgeben ihn, was den Blick auf die Angreifer freigibt. Ein Hang von 70 Metern macht es sehr schwierig, den Weiler Vauguillain und die Stadt Saint-Julien zu erreichen.
Das 1630 in Ausführung der königlichen Verordnung des Kardinals von Richelieu von 1626 demontierte Schloss wurde verlassen, aber die Kapelle, die dem Heiligen Julian5 gewidmet ist, wird von den Dorfbewohnern bis zum Ende des 18. Jahrhunderts gepflegt.