Comme en 1814 où la légende raconte que le Comte d’Orsay, alors propriétaire du Château, jouait tranquillement au whist, quand un colonel Bavarois demanda à être reçu. ‘’Qu’il aille au diable‘’ répondit le Comte. Ultime affront pour le militaire qui fit irruption à cheval dans le salon. Sans perdre son sang-froid, Monsieur le Comte pris la bête par la bride et lui dit ‘’Tu te trompes imbécile, ramène ton maître à l’écurie‘’. Suite à ces événements, le colonel, humilié, pilla le Château.