W dobrach pielgrzymowickich w XVI w. wzniesiono zamek, jednak budowla ta została zniszczona w 1813 r. W 1903 r. kiedy właścicielem Pielgrzymowic został Carl von Reitzenstein, przystąpiono do budowy nowej rezydencji, przy wznoszeniu której wykorzystano piwnice dawnego zamku. Pałac wzniesiony po 1903 r., pozbawiony jest wyraźnych cech stylowych. Budynek murowany z kamienia i cegły, wzniesiony na wysokich piwnicach, na planie prostokąta, dwukondygnacjowy, z mieszkalnym poddaszem, nakryty wysokimi wielospadowymi dachami. Elewacja frontowa dziewięcioosiowa, z centralnie umieszczonym wejściem, nad dwoma oknami fasady umieszczono kartusze herbowe. Część elewacji zachowała podziały za pomocą lizen i gzymsów oraz okna w ozdobnych opaskach.