Neoklasycystyczny pałac z IV ćw. XIX wieku został wzniesiony na planie długiego prostokąta. W rzucie budynku wyodrębniają się korpus główny (z prostokątnym gankiem na osi fasady oraz ryzalitami – wielobocznym i prostokątnym – w elewacji tylnej), część mieszcząca salę balową (od północnego wschodu) oraz wieloboczna, czterokondygnacyjna wieża (od południowego zachodu), zwieńczona okazałym wielobocznym hełmem przypominającym latarnię. Od strony południowo-wschodniej do korpusu przylega szeroki taras ze schodami. Na piętrze znajdują się trzy duże prostokątne okna z witrażami.
Wnętrza parteru miały układ dwutraktowy z amfiladowym połączeniem pomieszczeń. Część środkową zajmuje tzw. wielka sień – najważniejsze pomieszczenie pałacu, skomunikowane z reprezentacyjnymi komnatami i salonami. Wewnątrz przetrwał bogaty wystrój o wysokim poziomie artystycznym. Na szczególną uwagę zasługują wielka sień, sala balowa oraz salony na piętrze, wyłożone boazerią i zdobione sztukateriami. W kilku pomieszczeniach zachowały się kominki.
Rezydencja w Żelmowie to rozległy zespół składający się z pałacu, dwóch parków oraz zespołu budynków gospodarczych i mieszkalnych. Pałac otacza parkowa zieleń, a od strony południowo-zachodniej rozciągają się obecnie nieużytki, pierwotnie stanowiące park. Park przypałacowy od wschodu i południa oddzielony jest wysokim kamiennym murem oraz drogą wiejską. Drugi park krajobrazowy, ogrodzony niskim murem kamiennym, położony jest po południowej stronie rezydencji – po przeciwnej stronie głównej drogi wiejskiej. Ciekawy pod względem kompozycyjnym i architektonicznym jest także zespół folwarczny, składający się z obór, owczarni, magazynów i gorzelni.
Pow. użytkowa: ok. 2850 m²
Pow. działki – park: ok. 5,4758 ha (pałac + parki)
folwark: ok. 4,3076 ha
Dodatkowo: ziemia – ok. 53 ha
Na działce 9/25 o powierzchni 40,2279 ha (PsIV, RIIIb, RIVa, LsIV, W/PsIV, ŁIII, N, B) znajduje się złoże torfu o powierzchni 0,185 km² i zasobach oszacowanych na 235 680 m³. Torf może być wykorzystywany do wzbogacania gleby w materię organiczną w celu poprawy jej właściwości chemicznych i fizycznych.
Po remoncie i adaptacji całe założenie doskonale nadaje się na centrum hotelowo-konferencyjne.