豫园主人潘允端,上海人,在明代任四川布政使。为了使父母双亲生活得愉悦,便在上海建造园林,并取“豫悦双亲,颐养天年”之意,故名为豫园。可惜尚未全部建成,老父潘恩已病逝,潘家又日趋败落。至乾隆中叶,豫园已变得荒芜了。后来变卖此园,成了城隍庙之庙园。