Das Interesse an Wissenschaft und Kunst sowie seine kenntnisreiche und begeisterte Sammeltätigkeit teilte Victor Goldschmidt mit seiner ebenso kosmopolitischen wie gebildeten Gattin Leontine, geb. von Portheim. Seine umfangreichen Sammlungen bilden den Gründungsbestand des Museums. Das Museum befindet sich nach wie vor in der alleinigen Trägerschaft der Stiftung. Die dunklen Zeiten des Dritten Reiches haben Victor und Leontine nicht überlebt, und auch die Stiftung hat sie nicht unbeschadet überstanden.