Nieistniejący już zamek Rechenburk, założony w drugiej połowie XIII wieku przez panów ze Švábenic jako ich twierdza w ramach działalności kolonizacyjnej. Wraz z odejściem tego rodu z regionu Trutnov na przełomie XIII i XIV wieku stopniowo zanikał.
Poprzednikiem zamku Břecštejn był starszy zamek zwany Stein, który miał być domem Ottona von Stein. Otto w 1336 roku podarował trzy łany w Oblanovie (obecnie dzielnica Trutnova) dla klasztoru na Zderazu (obecnie część Pragi). Sam Břecštejn powstał w pierwszej połowie XV wieku. Pierwsza pisemna wzmianka o nim pochodzi z 1455 roku i znajduje się na tabliczkach trutnowskich lennych systemów mańskich, według których na zamku mieszkał Mikuláš (Nykl) Zilvár.
W miejscu, gdzie obecnie stoi pałac w Vrchlabí, będący obecnie Urzędem Miasta i Zarządu Karkonoskiego Parku Narodowego, wznosiła się gotycka twierdza nawodna. Posiadłość nabył za 1750 groszy czeskich w 1533 r. od Jana Tetaura z Tetova Kryštof Gendorf z Gendorfu, radca królewski i zarządca kopalń.
Kościół w Vrchlabi stoi w miejscu jednonawowego gotyckiego kościoła z XIV wieku. Autorem projektu świątyni – wybudowanej w stylu neogotyckim – był praski architekt Stephan Tragl. Wybudowania kościoła podjął się miejscowy budowniczy Eduard Zirm. Stary kościół wyburzono w 1886 r., nową świątynię otwarto trzy lata później. Nosi wezwanie św. Wawrzyńca.
