De kasteelse tuin.

Achter de gracht ziet u een grasveld. Ongeveer daar stond het omgrachte kasteel uit 1360, gebouwd door Walraven van Valkenburg. Een houten brug gaf toegang. Vanaf de tweede helft van de 15e eeuw werd het bewoond door de drost, de plaats-vervanger van de Duitse landsheer. Op 6 augustus 1695 betrok landsheer Johan Wilhelm von Neuburg met zijn  echtgenote voor één dag het kasteel. Dit was het eerste vorstenpaar dat  Ravenstein bezocht. De stad werd daarvoor versierd met bloemen en vetpotjes. Op 22 april 1809 bezocht koning Lodewijk Napoleon Ravenstein. Hij logeerde in de Marktstraat. Bij een bezoek aan het vervallen kasteel dat gebruikt werd als legerplaats, liet hij de laatste kerkergevangene onmiddellijk overplaatsen naar Den Bosch. In 1811 werd het kasteel een militair hospitaal.  In 1818 is het kasteel mét fundering op last van de Staten-Generaal gesloopt om bij de Ravensteiners elke gedachte van hernieuwde zelfstandigheid uit te bannen.