Es handelt sich um eine Burgruine, die 2,5 km von Nýrsko entfernt ist. Die Burg wurde in einer Höhe von 627 m ü. d. M. auf einem Ausläufer des Kamms Hraničář errichtet.
Der Kaiser Karl IV. ließ im Jahre 1356 die Burg Kašperk (Karlsberg) erbauen, um die nahe gelegenen Goldgruben, den Betrieb des Goldenen Steigs und die Landesgrenze zu schützen.