Die Burg- und Schlossanlage Ebersberg erfuhr seit ihrer Errichtung am Beginn des 13. Jahrhunderts zahlreiche teils umfangreiche Veränderungen. Der Ursprungsbau, der 1226 (a) zum ersten Mal als Burganlage erwähnt wurde, fiel in der ersten Hälfte des 18. Jahrhunderts einem Brand zum Opfer. Der nachfolgende Neubau (ab ca. 1720 (s)) fand unter seinem neuen Besitzer, dem Kloster Schöntal, statt. 1786 (a) gelangte das neue Schloss in den Besitz des Hauses Württemberg. Im Jahr 1963 (a) erwarb die Diözese Rottenburg-Stuttgart schließlich die Anlage, um sie der Pfadfinderschaft St. Georg zu übergeben. Letztere führte Ende des 20. Jahrhunderts die letzten umfangreichen Sanierungsmaßnahmen durch.