En 1868, l’empereur Napoléon III et son épouse l’impératrice Eugénie doivent venir à Dinard inaugurer la nouvelle station balnéaire. A cet effet, le préfet Paul Féart fait construire par l’architecte Jean Pichot un château pour accueillir le couple impérial : la Villa Eugénie.

Cependant, une dispute entre Eugénie et Napoléon III sur la nécessité d’emmener le chien avec eux compromet la visite à Dinard. Eugénie part à Biarritz, où elle a ses habitudes. La villa dinardaise est vendue à Pierre Levavasseur qui la lèguera à la ville à sa mort.

La Villa Eugénie deviendra tour à tour mairie, bibliothèque puis musée.