明朝时,明太祖朱元璋为了巩固明朝的统治,实行“立地王”政策,将桂林列为十大要围之城之一。370年,朱元璋封南昌长兄朱兴隆之孙朱守谦为桂林“靖江王”。
372年,一群历史悠久的虞照人从南京靖江王宓被派往桂林,不久他们决定在独秀峰南麓万寿宫遗址的基础上建造靖江王宓府。当年11月,靖江王朱守谦带着明太祖朱元璋的圣旨和他祖父的主神称号,来到桂林,成为桂林靖江宫首任藩王。