清鹹豐元年(1851)，李鴻章率淮軍赴保，接替曾國藩任直隸總督，並在此建淮軍府，作為廟(祭祀地)，祭奠因鎮壓太平軍而犧牲的淮軍將士。李鴻章死後，趙衷祠被詔改為李鴻章祠堂。
1912改為保定私立知村中學樓，1937後成為日軍兵營，1948後成為冀中軍區司令部，1949後成為河北軍區司令部，1958後成為河北財貿幹部學校舊址。這是住宅區。祠堂為大型建築，占地約1.67萬平方米，東西寬1.1.5米，南北長1.20米，具有典型的江淮建築特色。主樓屋脊兩端是密封墻，中間有壹條2米多寬的消防車道。這房子又高又寬敞。前廊有柱子支撐在石鼓柱基礎上。屋檐和拱門上有精細的雕刻，很多是花鳥透雕，工藝精細。院內有兩層樓閣式戲樓，雕梁畫棟，精致小巧，舞臺面積小，保留了傳統民風。院子裏有許多墻壁和屏風，還掛著淡淡的水墨畫，畫著南方風情濃郁的風景。幾塊石刻記錄了淮軍的功績和烈士的事跡。整個庭院呈現出壹種優雅安靜的氛圍。院內有三門，南門是廳門，北門和西門是有開口的小門樓。院落東南有四個四合院，東北有四個小四合院。西面有壹個大操場，東西寬60米，南北長110米。西南角是荷花池。文革時操場上蓋了民房，荷花池也填了，但只有幾個四合院保存完好。目前正在制定維護和保護措施。？