De stenenkamer is een van de kamers die als laatste door de bewoners werd verbouwd. De kamer werd in de jaren twintig ingericht. Het biedt een blik op een heel ander tijdperk dan je wellicht verwacht. De kasten in deze kamer werden vervaardigd in het atelier van de Utrechtse meubelmaker Johannes Rietveld. Zijn zoon Gerrit, die later beroemd werd als modernistisch ontwerper, vervaardigde in zijn jonge jaren een set traditionele meubelen voor het poortgebouw van Slot Zuylen, die daar nog steeds staat.