En 1633, le jardin des Ursuline fait partie d’une terre de deux cents arpents concédée à Jacques Hertel. En 1699, il est vendu à Monseiguenr de Saint-Vallier, évêque de Québec, puis cédé à la communauté des Ursulines. Au cours des années, les religieuses lui ont conservé la fonction de jardin.
Quelques bâtiments y sont construits à diverses époques. Les archives mentionnent l’existence d’une maison appartenant probablement au cultivateur du jardin de 1720 à 1830. On note également une écurie en 1725, une étable et deux petits bâtiments en 1851.
Un ravin occupe la partie ouest du jardin entre 1700 et 1900. La fonte des neiges et des glaces serait à l’origine de cette dépression. Ce ravin a probablement servi de dépotoir au fil des ans. Il est remblayé au début du XXe siècle.
À la fin des années 1970, le site est utilisé comme jardin communautaire. La Ville l’acquiert en 1984. L’année suivante, elle y effectue des sondages archéologiques. Le jardin des ursulines est aménagé en parc public, en 1986.