当时唐朝贞观的褚遂良和孙昌戊己，都是得到唐太宗遗诏支持的。他们强烈反对李智丽任命武则天，但他们非常愤怒，因此辞职了。他们被贬为潭州(今长沙)巡抚，不久被罢官。楚居湘潭，常到湘乡感应寺与方丈私聊唐朝大业。留还是留了一段时间。今天，寺庙旁边有一个洗笔池。据说楚帮会的朋友们写完诗后总要在池子里洗笔砚。宋寺方丈的后人对褚遂良的书法和人品佩服得五体投地，力劝湘乡有钱人捐资在洗笔池旁修建寺。楚公祠为砖木结构，正殿有2米高的楚绥良木像，正殿后有关帝殿，后有颜宁亭。洗笔池是一个半月形的清池，有石栅栏保护，还有楚《大唐三藏序》碑所刻的祠堂纪念和2米高的石砌建筑。
