De geschiedenis van Slot Zuylen begint rond het jaar 1250. Toen bouwde Steven van Zuylen langs de Vecht een donjon, een vierkante woontoren. Het donjon werd verwoest door de Utrechters, maar rond 1525 werd op de ruïnes een nieuw kasteel gebouwd. In de 18e eeuw werd het kasteel verbouwd tot buitenhuis. De bekendste bewoner was de schrijfster Belle van Zuylen.