徳川園は、徳川御三家筆頭である、尾張藩二代藩主光友が、元禄8年（1695年）に自らの造営による隠居所である大曽根屋敷に
移り住んだことを起源としています。当時の敷地は約13万坪（約44ha）の広大さで、庭園内の泉水には16挺立の舟を浮かべたと言われています。
光友の没後、この地は尾張藩家老職の成瀬、石河、渡邊三家に譲られましたが、明治22年（1889年）からは尾張徳川家の邸宅となりました。