Eno najbolj žalostnih obdobij je Borl doživel med drugo svetovno vojno, saj so Nemci aprila 1941 v njem ustanovili prehodno zbirno taborišče za Slovence, ki so bili določeni za izselitev iz Spodnje Štajerske. Na fotografiji so zaporniki, ki stojijo na zunanjem grajskem dvorišču.
PMPO, fototeka Zgodovinskega oddelka, št. 490.