Espoonkartanon perusti Kustaa Vaasa vuonna 1556. Maaherra Anders Henrik Ramsay osti kartanon vuonna 1756 ja aloitti vilkkaan rakentamisen kauden. Myllyrakennus, vanha holvisilta ja päärakennukset ovat näiltä ajoilta.

Vänrikki Stålin tarinoihin kuuluvassa Matkamiehen näky -runossa Runeberg kertoo kahden Ramsay-veljeksen kohtalosta Suomen sodassa. Veljekset olivat kotoisin Espoonkartanosta.

1911 August Ramsay osti Espoonkartanon. Hän laajensi ja peruskorjasi läntisen siipirakennuksen nykyiseksi päärakennukseksi vuonna 1914 sekä loi edellytykset nykyaikaiselle maataloudelle.

Esbogård Ab on nykyään sukuyhtiö, joka harjoittaa maa- ja metsätaloutta sekä vuokraa päärakennusta juhlatilaisuuksiin.