Gróf Ján Pálffy si postavil kaštieľ inšpirovaný renesančnými zámočkami na Loire vraj preto, že bol vtedy zaľúbený do Francúzky. Jeho syn Pavol Pálffy (na snímke so synom), posledný majiteľ kaštieľa, v ňom vyrastal, ale v dospelosti sa už v ňom veľa nezdržiaval. „Vraví sa, že tu bol na návšteve dokonca aj Antoine de Saint-Exupéry, ale zmienku o ňom som v knihe, ktorú gróf Pálffy vydal, nenašiel. Domáci si však rozprávajú aj o rôznych maharádžoch, ktorí kaštieľ navštívili,“ hovorí historik Pavel Dvořák. O čulom spoločenskom živote vypovedá aj to, že sluha v kaštieli nemal plat, žil len z prepitného, ktoré mu návštevy dávali.
Podľa historika Jána Tibenského boli Ján Pálffy a jeho syn v Budmericiach obľúbení. Jána Pálffyho oslovovali "excelence", syn Pavel chodil so svojimi ženami - mal ich viacej - do kostola.
„V roku 1945 odišiel s rodinou do západného Nemecka, usadil sa v Mníchove. Československá vláda v rámci celoštátnej akcie majetok aj s kaštieľom skonfiškovala a prešiel do rúk štátu,“ píše Tibenský v monografii Poctivá obec budmerická . Hrob Jána Pálffyho miestne ženy dodnes udržujú.