Od XIV do 1. poł. XX wieku osada była w posiadaniu rodu von Podewils, który był ściśle związany z dworem książęcym w Szczecinie. M.in. Adam Podewils jeździł z poselstwem do króla Kazimierza Jagiellończyka proszącym o rękę Anny Jagiellonki dla Bogusława X, natomiast Piotr Podewils towarzyszył księciu w wyprawie do Ziemi Świętej. W 1818 roku majątki Kozia Góra i Malonowo zostały połączone; dobra objął Heinrich F. Podewils i w majątku zbudował dwór, budynki gospodarcze, założył park i ogród dworski. Przed II wojną światową właścicielką Koziej Góry była hrabina Jadwiga Ponińska z domu Podewils. Po wojnie stacjonowały w miejscowości wojska radzieckie. Od 1947 r. majątek i pałac przejęły PGR.

Pałac z XVII wieku, przebudowany w 1818 roku, 1850 roku i w XX wieku; budynek trzykondygnacyjny, o pow. użytkowej 1 400 m2. Zbudowany został w stylu barokowym, a przebudowany w końcu XIX i na początku XX wieku w stylu neogotyckim. Pałac murowany, z gotyckimi ozdobnymi krużgankami, wieżami i balkonami. Najciekawsza jest elewacja wschodnia z rzeźbami rycerzy oraz herbów.

Obecnie pałac znajduje się w ruinie.

Park dworski z aleją dojazdową, z XVIII wieku, o pow. ok. 4 ha w stylu krajobrazowo-romantycznym, na terenie przyległym do dworu. W parku posadzono drzewa egzotyczne, a główną płaszczyznę widokową stanowi polana obniżająca się ku rzece.