A palota báró Weiss Manfréd a Csepel-művek alapítójának, az egyik leggazdagabb magyar nagytőkés tulajdonában állt a szomszédos, Andrássy út 114 – gyel együtt. Halála után 1944 márciusáig Weiss veje és örököse, ifj. Chorin Ferenc lakott itt, míg Kurt Becher SS-Standartenführer (ezredes) le nem foglalta az épületet. A villából szervezték meg Magyarország gazdasági kifosztását, illetve a magyarországi zsidókkal kapcsolatos emberkereskedelmet.