《搗練圖》繪制在細致平滑的宮絹上，並無作者和摹者的款印，卷首題跋： “宋徽宗摹張萱搗練圖真跡”。另有金章宗用瘦金體題“天水摹張萱搗練圖”。瘦金體由宋徽宗獨創，筆畫勁挺秀麗, 風格獨特。金章宗完顏璟愛好書法，曾在朝中設立書畫院，“凡好書劄，悉效宣和（徽宗時年號），字畫尤為逼真”。完顏璟學宋徽宗的字，幾乎可以亂真。從這些題跋上推測，金章宗完顏璟曾經是這幅《搗練圖》的收藏者。
1126年，金兵攻下宋朝都城汴京後，從宋宗室處掠奪了大量書畫文物。這幅曾著錄於《宣和畫譜》的唐畫摹本便是其中之壹。金章宗題“天水摹張萱搗練圖”，天水是地名，位於今甘肅境內，是趙氏郡望，所以宋朝也被稱為“天水壹朝”。有說法認為這二字指代趙佶。然而縱覽全圖，並沒有“禦制”、“禦書”等徽宗款識，書法鑒定家徐邦達、楊仁愷則認為此畫應由宋代畫院高手代筆。
明清兩代對《搗練圖》的著錄不多，明人張慎曾在《丹鉛總錄》中寫道：“古人搗衣，兩女子執杵，如舂米然。嘗見六朝人畫《搗衣圖》，其制如此。”文學家沈從文認為，傳世古畫中只有宋代摹本《搗練圖》中出現了豎杵，張慎所說的必然是這幅畫作，只是他將唐畫摹本錯記為六朝。
《搗練圖》在清代的印記，來自畫中所題“高江邨清吟堂秘藏”，此為清代學者高士奇的印章。高士奇是清代著名學者，學識淵博，善考證，曾為康熙講書釋畫，官至翰林院侍讀學士。由此可見，清代時此畫還在中國境內。學者徐繼春曾詳細考證了該畫流入境外的經過：1904年起，美國波士頓博物館開始雇用日本研究者擔任東方部顧問。1912年5月，時任波士頓博物館東方部顧問的岡倉天心，從天津大沽口進入中國，他此行的目的就是奉命收集中國古代藝術品。此後壹個月中，岡倉天心被眾多中國古董商人包圍。他利用“中國的日本特別基金”先後收購了《遠山柳塘圖》等古畫和壹批珍貴的青銅器，這幅《搗練圖》是購自壹位滿清貴族之手，當年8月入藏波士頓博物館。此後《搗練圖》壹直存放於該館。