Letohrádek Schwertberg se původně nazýval "Gloriette" a patřil k hradu Schwertberg. Tato dřevěná stavba byla původně součástí hradního areálu a obyvatelé hradu si ji velmi oblíbili kvůli krásnému výhledu na Schwertberg. Tak je tomu i dnes. Hrabě Josef Gundacker von Thürheim (1709-1798) rozšířil a zkrášlil parkový areál kolem zámku, včetně areálu letohrádku. K procházce vybízí také morušová alej z 18. století, která se rovněž dochovala.