A legnagyobb kiterjedésű és legértékesebb Semsey birtok, a balmazújvárosi latifundium csak 1798-ban került a család tulajdonába. Balmazújváros a 18. század elejétől a siklói Andrássyak tulajdona volt.
Semsey Lajos ága gyermekeiben kihalt, egyik fia azonban, Semsey Andor a tudós mineralógus, a magyar tudomány és kultúra egyik legnagyobb mecénása örökre bevéste nevét a tudomány panteonjába.
A kastély Balmazújváros legmagasabb részén, az akkori település belterületi központjában, a római katolikus templom mögött épült fel. Építészeti stílusa klasszicista.
A balmazújvárosi helytörténeti gyűjtemény 1974-ben költözött a Semsey Kastéllyal szemben lévő épületbe, melyet 1889-ben a Semsey család építetett római katolikus kegyúri iskolának. Kilián István, Csapóné Tábori Hajnalka, Bárdi Ida rendezte meg 1974-ben a település első állandó helytörténeti kiállítását. A tárlatban helyet kapott a helybeli születésű Soós Imre színész és a faluban rövid ideig tanító Sarkadi Imre emléke is. A Semsey Andor Múzeum 2013 év végén költözött a felújított Semsey Kastély épületébe, és 2014-ben újra területi múzeumi státuszt kapott. Ezzel egy időben megújult állandó kiállítása, amely az impozáns épület földszintjén kapott helyet
forrás: semseykastely.hu