A kastély és a körülötte lévő gazdaság tulajdonosa 1910-től Klein Mór legkisebb fia, Klein Sándor lett, aki a birtokon jól működő mintagazdaságot hozott létre. 1927-ben megkapta a kormányfőtanácsosi címet, de ismerték, mint mű-gyűjtőt is. Kastélyában értékes festményeket és egyéb műtárgyakat őrzött. 1938-ban a birtokon tíz napig vendégül látta Faludy György írót és feleségét. Faludy Pokolbéli víg napjaim című önéletrajzi regényében, és Kétségbeesés Szirmán című versében is beszámol a Szirmán látottakról. Néhány évvel később a zsidótörvények következtében a birtok tulajdonviszonyai megváltoztak; egy részét Demel Aladár szerezte meg. 1944-ben a zsidók gettóba gyűjtésekor Klein Sándor – hogy a megaláztatást elkerülje – öngyilkos lett. Testvérei és azok családja Auschwitzban haltak meg. A kastélyt először a háborús események tették tönkre, majd később a környéken lakók hordták szét. Helyén ma utcák és házak állnak.

 A Szirma és kastélya című kötet korlátozott mennyiségben kapható a Színház mellett lévő Antikváriumban.