Bereits 1262 wurde der Besitz der Herren von Loersfeld, zwischen den Naturschutzgebieten Lörsfelder Busch und Parrig gelegen, urkundlich erwähnt. Zum Zeitpunkt seiner ersten Erwähnung gehörte der Lörsfelder Hof dem Ritter Eberhard von Belle und dessen Gattin Hildegunde. Im weiteren Verlauf des 14. Jahrhunderts gelangte Lörsfeld zunächst in den Besitz der Familie Merode, durch Heirat dann in den Besitz der Familie von Horn, die danach den Zusatz âgenannt von Lörsfeldâ in ihren Namen aufnahmen. 1435 wurde Heinrich Spies von Büllesheim zu Bodendorf Besitzer des Hofes. Lörsfeld blieb für die folgenden 140 Jahre, in denen das heutige Herrenhaus erbaut wurde, im Besitz dieser Familie, die zum Uradel des Herzogtums Jülich gehörte, bis es 1559 für 86 Jahre an die Familie von Eynatten ging. 1665 wurde das Schloss an Dietrich von Leers verkauft. 1775 erwarb es der Kölner Kaufmann Kasper Wilhelm Hamm, von dem es einige Jahre später in den Besitz des Georg Albert Reinecker gelangte. Dieser schließlich verkaufte Lörsfeld mit allen Gebäuden und dazugehörigen Ländereien am 5. Juni 1819 an den westfälischen Erbdrosten Friedrich Leopold Reichsfreiherr von Fürstenberg zu Herdringen. Dessen sechster Sohn, der am 28. Juni 1805 geborene Franz Adolph Josef, war der erste Fürstenberg, welcher Lörsfeld zu seinem Wohnsitz machte. Neben umfangreichen Baumaßnahmen in den Jahren 1840 und 1865 ließ er auch den Park im englischen Landschaftsstil auf eine Gesamtgröße von 10 ha erweitern. Als er am 14. Februar 1880 als Königlicher Kammerherr und Schlosshauptmann von Schloss Benrath starb, fiel sein Besitz an seinen Neffen Friedrich Leopold II. von Fürstenberg (Linie Borbeck-Hugenpoet). Nach dessen Tod erbte 1901 sein auf Schloss Borbeck geborener Sohn Clemens den Lörsfelder Besitz, der gemeinsam mit seiner Frau Therese geb. Gräfin von Korff gen. Schmising seinen Wohnsitz nach Lörsfeld verlegte. Ihr einziger Sohn Clemens August verzichtete 1938 auf sein Erbe, so dass Lörsfeld 1941 an die Hauptlinie Fürstenberg-Hugenpoet fiel. Heutiger Eigentümer ist Adolph Walter Freiherr von Fürstenberg-Hugenpoet.
Das Schloss Lörsfeld liegt inmitten eines sehr gepflegten, 10 ha großen englischen Landschaftsparks und zählt zu den schönsten Burganlagen in Deutschland. Der heutige Pächter betreibt im vornehmen Herrenhaus ein Restaurant.