Derrière les immeubles formant l’angle des rues du Bac et de Babylone s’étend un jardin privé d’un hectare. Sa création remonte au XVIIe siècle, époque de l’établissement, au 128 rue du Bac, du « séminaire des Missions Etrangères ». Ce jardin a un accès direct sur la rue de Babylone, laquelle doit son nom à Mgr Bernard de Sainte Thérèse qui, en 1638, fut nommé évêque de Babylone (Irak actuel). Il avait fondé en ce lieu un séminaire destiné à préparer des missionnaires pour des pays lointains. Mais trop longtemps absent de Paris et sans doute mal secondé, l’évêque ne put jamais faire fonctionner son séminaire. Il le céda à la Société naissante des « Missions Etrangères » légalement reconnue en 1663 pour la formation de prêtres et de laïcs français destinés aux Missions de l’Asie.