Za jeho následnou přestavbou s klasicistními úpravami na začátku 19. století stojí rod Schwarzenbergů.
Se svolením V Invest