Plattegrond 1e helft 14e eeuw. Het oudste gedeelte is de rechthoekige woontoren die gebouwd is door Willem de Cock van Hemert omstreeks 1320. Tijdens het tweede kwart van de 14e eeuw werd een binnenplaats ommuurd met de genoemde woontoren, een rechthoekige toren op de noordoosthoek en een ronde toren op de noordwesthoek. Omstreeks 1350 verrees een zaalbouw tussen woontoren en de noordelijke vleugel en kreeg de ronde toren zijn huidige omvang.
Plattegrond laatste helft 15e eeuw. In de 15e eeuw verrees op de zuidwesthoek van het plein een zeshoekige toren.
	Tekening van het kasteel uit het begin van de zeventiende eeuw.
Tekening van het kasteel uit de tweede helft van de achtiende eeuw.
	Tekening uit de zuidwestzijde van het kasteel uit1844 door F.N.M. Eyk van Zuilichem.
Dit is de situatie van voor de brand in 1945. Daarna is het kasteel ernstig in verval geraakt. In 2001 begon de restauratie en die is inmiddels voltooid, het kasteel is weer in gebruik en heeft ook een eigen internet-site (http://www.kasteelnederhemert.nl).