Während des Achtzigjährigen Krieges zwischen den Niederländischen Generalstaaten und Spanien - der sich auch auf den unteren Niederrhein auswirkte - und des Dreißigjährigen Krieges wurde Diersfordt zerstört und von Johann Hermann von Wylich wieder aufgebaut. 1646 ist in Hausnähe ein „Bungert“ und „Graden“ außerhalb des Burggrabens angelegt worden.
Das große, gemeinnützig genutzte Veen ließ er meliorieren, trockenlegen und planerisch kunstvoll als Garten gestalten. Eine Karte des Landmessers Holtingh zeigt 1680 den Beginn einer Gartenplanung mit Alleen, Teichen, kreuzförmigen Abzweigungen, Kanälen und einem Pavillon. Nach dem Tode von Johann Hermann 1681 wurde das von seinem Sohn Dietrich angekaufte Veen nicht mehr erwähnt. Dietrich von Wylich beschäftigte sich mehr mit der Gestaltung in der unmittelbaren Umgebung des Schlosses.
Von großer Bedeutung für die Entwicklung des Diersfordter Schlosses war Hermann Alexander von Wylich, der am 29.8.1698 als sechstes Kind des Dietrich von Wylich und der Florentine Anna von Wylich, geb. von Spaen (Ringenberg), geboren wurde. Im Alter von 53 Jahren übernahm er 1750 den Besitz Diersfordt von seiner Nichte, der Freifrau Luise Amelie Sophie von Grappendorf, geb. von Wylich, und wurde gemäß der Urkunde vom 23. April 1750 durch König Friedrich II. von Preußen nach dem Tode der Freifrau von Grappendorf mit Haus und Herrlichkeit Diersfordt, der Sahlstatt Flüren und dem Gut Biesenhorst belehnt.
Er widmete sich der Verwaltung seiner Güter, dem Haus Selhem bei Mehr (Kreis Kleve) und dem Gut und Schloss Diersfordt. An seinem Wohnsitz entfaltete er vor allem in seinen letzten Lebensjahren eine rege Bautätigkeit: Er errichtete die Oberförsterei, die alte Schule (mit der Jahreszahl 1776) und die Wohnungen am Schafstall (1773). Schließlich ließ er 1775/76 die Schlosskirche im späten Rokokostil errichten (Bambauer 1994). Die Kirche wurde 1780 von Christoph Herrmann von Wylich fertiggestellt
Christoph Hermann von Wylich widmete sich auch sehr intensiv der Botanik und ließ zahlreiche exotische Bäume pflanzen. Die heutigen überlieferten Garten- und Parkanlagen sind vor allem von ihm beeinflusst worden.
Nach dem Tode von Hermann Alexander von Wylich fand dieser zunächst in den Kellergewölben der Schlosskirche seine letzte Ruhestätte, bis sein Grabmal (das Steinerne Monument) von seinem Neffen und Nachfolger Christoph Alexander von Wylich (1753-1831) im Jahre 1777 auf dem Herrenberg errichtet wurde. Dieses Monument ist nicht nur für die Familiengeschichte der Herren auf Diersfordt wichtig, es zeugt auch von der bauhistorischen Entwicklung Diersfordts, so wie sie noch heute sichtbar ist.
Das Hauptgebäude wurde am 21. Dezember 1928 durch einen Brand bis auf die Grundmauern zerstört und zwischen 1929 und 1931 am gleichen Standort neugebaut. Das Haupthaus wurde allerdings kurz vor dem Ende des Zweiten Weltkrieg im März 1945 wiederum schwer beschädigt und nach dem Krieg wieder aufgebaut. Die zerstörte Schlosskirche wurde 1952 fertiggestellt und zwischen 1967 und 1974 umfassend saniert.
Siegfried Graf von Stolberg-Wernigerode verkaufte das Schloss und das zugehörige Areal 1996/97 an die Familie Beichert. Das Schloss wurde umfassend renoviert. Die Familie nutzt das Hauptgebäude heute als Wohnsitz und betreibt dort ein Hotel.
Bis heute ist die Schlossanlage Diersfordt mit Wirtschaftshof, Rokokokirche, Hauptgebäude, der Gartengestaltung, den Gräben und den Parkanlagen außerhalb des Schlosskomplexes strukturell gut erhalten.
(Peter Burggraaff, Universität Koblenz-Landau, 2012)