In Ammerzoden staat een prachtig en imposant kasteel, Ammersoyen. Het is een uitzonderlijk gebouw dat geheel voldoet aan het klassieke beeld van een burcht, een vierkant gebouw met op elke hoek een (ronde) toren. Adellijke huizen vormden een essentieel onderdeel van het adellijk bezit. Ze symboliseerden de macht en het aanzien van de bouwheer. Maar wie was de bouwheer van Ammersoyen? Algemeen wordt aangenomen dat het een telg uit de familie Herlaar is geweest, maar harde bewijzen ontbreken. Bezaten de Herlaars in het Midden-Nederlands rivierengebied het sociaaleconomisch vermogen om een dergelijk kasteel te bouwen? Om deze vraag te beantwoorden heeft Alois van Doornmalen onderzoek gedaan naar de genealogie van de Herlaars en hun huizen en andere bezittingen in de betreffende regio in kaart gebracht. Alles wijst erop dat het inderdaad een Herlaar is geweest die omstreeks 1325 opdracht gaf om kasteel Ammersoyen te bouwen.