Harem na polskiej ziemi dziś byłby z pewnością obraza dla członków niejednej partii i dla wojujących obrońców moralności. W czasach Rzeczpospolitej pewnie budził ciekawość, a nawet zazdrość. Skąd harem? Niektórzy tłumaczą przeszłość jego pierwszego właściciela, przywołując legendę o niewoli u Turków. Inni wskazując na układ wnętrz pałacowych, są przekonani, że takie funkcje mógł właśnie pełnić.