Nie ma jasności, czy dwór w Oldrzyszowicach istniał już w XVII w., czy też powstał dopiero w wieku XIX. Istnieje hipoteza, ze powstał w miejscu, gdzie niegdyś znajdowała się siedziba joannitów z Łosiowa, w których posiadaniu wieś była przez setki lat. Wiadome jest natomiast, że istniał jeszcze do lat 70. XX w., pełniąc funkcje mieszkalne dla pracowników PGR. Niestety, po wybudowaniu bloków lokatorów pałacu przeniesiono, a zabytek wyburzono. Pozostałością po dworku jest założenie parkowe o powierzchni nieco ponad 2ha, w którym znajdujemy ponad dwustuletnie lipy i dęby oraz wiekowe aleje lipowo-grabowe. Istnieją tu również dwa, niewielkie stawy, Całość zrewitalizowano w roku 2005, jednak obecnie teren jest zaniedbany i potrzebuje pomysłu na nowe życie. Umiejscowiony w centrum wsi park w sąsiedztwie dawnej szkoły ewangelickiej mógłby stanowić z odnowionym obiektem szkolnym nie lada atrakcję regionalną.