A kúriát 1800 körül építtette a Wenckheim család, klasszicista-romantikus stílusban. A Wenckheim gróf unokáját feleségül vevő D'Orsay Emil többször átalakíttatta, stílusát romantikus jegyekkel bővítette. A jellegzetes romantikus díszítést az angol szakállas szemöldökpárkányot adják. 1945 után először a szép nagy parkja ment tönkre, majd maga az épület is, hiszen volt, amikor tollraktárnak használták. A kastély alatt komoly pincerendszer húzódott, ezekhez több hiedelem is fűződik, melyek szerint az alagút a város másik végén lévő Kárász-kastélyba, más verzió szerint a Sebes-Körös-parti Várhelyig vezet. 1969-ig tanácsházaként, orvosi rendelőként hasznosították, majd varrodaként működött. 1990 körül megkezdték a felújítását, amit azonban nem fejeztek be, és az épület elhagyatva, funkció nélkül állt közel 20 évig.
A Wenckheim-D'Orsay-kastély a város központjában helyezkedik el. Műemléki védelem alatt álló épület és a hozzá tartozó telek a Szeghalmi Önkormányzat tulajdona, az épület alapterülete 941 négyzetméter, a hozzá tartozó telek 2193 négyzetméter nagyságú. 2011-ben a Wenckheim-D'Orsay-kastély felújítása befejeződött. Az épület rendkívül szép lett. A helyi könyvtár és múzeum költözött a megszépült falai közé.