潘祖蔭在救了左宗棠以後，他的後半生壹直定居在京城，並且他在朝中的地位還不低。他還為國家提拔了許多有用的人才，這些人在後來的時候也成為了著名的人物，左宗棠就是其中的壹位。
當時潘祖蔭救下了左宗棠，左宗棠時來運轉，他以壹名落榜的舉人身份勝任了浙江巡撫、東閣大學士、軍機大臣等要職。漸漸的也邁入了他的人生巔峰。潘祖蔭救了左宗棠之後，繼續在朝廷裏任職，且深得鹹豐皇帝的信任。潘祖蔭也是壹個有原則的官員。為人清廉，不僅屢次上奏朝廷，舉報不稱職和行為不端的大臣。那些無用的大臣在潘祖蔭的彈劾下，被撤職的撤職，降級的降級，以此潘祖蔭的名聲在朝廷內外都獲得了很高的榮譽。因此，潘祖蔭的官職也得到了上升。比如說：都察院左副都禦史、宗人府丞、吏部左侍郎、戶部右侍郎、工部尚書、太子少保等職位。
有壹位官員聽說潘祖蔭好文雅，就想巴結壹下，寫了數十篇的詩文在朝堂上貢獻給他。潘祖蔭當場翻閱，見到其中壹篇其有“跟二太爺阿媽逛廟”八字，不禁狂笑。官帽上的纓子都幾乎掉下來。
潘祖蔭不僅喜好收藏藏印、官印、印凡等等，他還非常喜歡收藏金石古董，在收藏界大家都叫他“潘神眼”。他收藏的文物，大孟鼎，目前存放在中國歷史博物館，而大克鼎目前存放於上海博物館，這些都是我國青銅器藏品中的至尊。