後來，梁九章在曹地區的大宅二門為其父梁玉成創建了壹座祠堂，俗稱“梁家祠堂”。
據說那時候只有有名望的達官貴人才能有祠堂。梁玉成是當時被任命為四川知州的梁九章的父親。其父死後，皇帝為表彰其為官有功，謚號梁玉成為“史刺史”，故又稱“史殿刺史”。
慈氏家廟是梁家祭祖的地方，也是家庭聚會、討論的場所。在我國的私家園林中，集祠堂、民居、園林於壹體的非常少見。
慈氏家廟的建築分為前後入口。正殿比較高大，前後廊梁九根，梯架以“瓜形”柱裝飾，又稱“四柱堂”。正殿與門廳由兩條連廊相連，形成壹個四邊形風格的平面布局。
門廳前廊是建築裝飾的主要部分，其上下梁、鬥拱、麻雀替換、駱駝墩等都飾有精美的花卉和人物故事雕刻或高浮雕。與前後檐瓦相映成趣，襯托出正門莊重美觀的樣子。
祠堂的屋脊裝飾和其他構件反映了當地雕刻三雕和雕刻兩雕的傳統工藝，即木雕、石雕和磚雕、陶塑和灰塑。該建築是堅硬山頂上的山墻，也稱“火山墻”，主要用於阻止火勢蔓延。