Het voorm. kasteel Nieuw Herlaer (Halder 2-6), gelegen ten noordwesten van het dorp in het gehucht Halder, moet omstreeks 1400 zijn ontstaan. Aan de voorzijde van het (verdwenen) middeleeuwse gebouw verrees omstreeks 1544 een hoge achtkante traptoren met natuurstenen hoekblokken en ui-vormige spits, gebouwd in opdracht van H. van Deventer, vader van de bekende kaartenmaker Jacob van Deventer.
In 1791 liet S.D. baron van Bonstetten het kasteel op de toren na slopen. Op de resten van de oude kelders verrees een nieuw gebouw dat in 1799 werd ingericht tot seminarie. Na het vertrek van het seminarie naar Haaren in 1839 diende het tot 1910 als doveninstituut en vervolgens als klooster.
