På 1400-talet uppförde Nils Jönsson Oxenstierna på Frössvik ett stenhus på ön Gamla Djursholm. Genom giftermål kom Djursholm i början av 1500-talet i ätten Banérs ägo. Nils Eskilsson Banér lät troligen uppföra ett stenhus på slottets nuvarande plats. Svante Gustavsson Banér gav slottet dess nuvarande utseende på 1600-talet.
Stucktaket i stora salen utfördes på 1600-talet av Giovanni Anthoni och Hans Zauch, kända från Skokloster.Vid mitten av 1600-talet tillkom östra flygeln. Två senflyglar omtalas först på 1730-talet.
1815 köptes godset av Gustaf Fredric Wirsén, som bl a sänkte gavelröstena och försåg byggnaden med brutet tak. Under familjen Wirséns tid utvecklades godset till ett mönsterjordbruk med lantbruksskola under en tid på 1860-70-talen.
1889 förvärvades godset av Djursholms AB. Då genomfördes en restaurering och ombyggnad i romantisk holländsk renässansstil med svängda gavlar, frontespis, burspråk och falska ankarslutar. Slottet inrymde villakontor, skola, telefonstation och bostäder. I flyglarna fanns apotek och postkontor.
På 1960-talet företogs den senaste restaureringen under ledning av arkitekten Klas Fåhraeus. De romantiserande detaljerna togs då bort och byggnaden återfick i stort sitt utseende från den banérska epoken. I dag innehåller slottet förvaltnings- och sammanträdeslokaler för Danderyds kommun. Slottet kan även hyras för fester. Information och bokning: telefon 08-568 910 13, fax 568 910 12.
Se karta