根據當地婦女祠華山寺興起於清代中期的事實，結合目前發現的最早的“女書”，推測“女書”起源於明末清初。
有人基於《女書》中存在與壯族、瑤族等民族織錦上的編織符號相似的文字，認為“女性文字的構成源於百越的音符符號”。
根據《女書》出土的大量類似雕刻符號和彩陶圖案的文字，有人認為其起源的時空可以追溯到新石器時代的仰韶文化，是秦始皇統壹中國文字後形成的。
壹些人認為“女書”是舜帝時代的官方文字，因為它的基本筆畫與原始的古代漢字相似。
根據甲骨文的明顯特征和《女書》詞匯中金文的借詞。認為女書是商代古文字的變體，與甲骨文關系密切。
有人認為現代的“女書”是古越文字的遺留和演變。這種觀點認為，象形文字和表意文字是文字系統中最早的文化現象，是書寫者生活環境和社會文化的直接反映。根據文身習俗，“甘蘭”民居建築的特點，稻作文化和鳥圖騰文化體現在“女書”的象形文字和會意字的構成中。
關於女書的起源，學者們眾說紛紜，並非壹種民間傳說。在江永廣為流傳的有四種:
第壹種:相傳女書是姚姬根據天書改編的。
姚記是誰？姚姬是王太後的女兒，王太後的名字叫莫吉。後來因為遊歷天下，愛上了上江尾普美村的美景，就偷偷住了下來。因為王母娘娘的仙境叫瑤池，所以她告訴凡人她叫瑤姬。
姚姬不僅漂亮，而且聰明，深得太後寵愛。姚記平時言行活潑任性。沒人敢阻止她想做的事，連太後都要讓她三分。壹天早上，宮女們還沒起床，姚姬卻已經梳洗完畢。打開下帳，推窗開門，只見山清水秀，鳥語花香，鄉村建築，春光明媚，炊煙裊裊，人來人往，比天宮自由多了。姚吉想早點離開。
無聊的天堂，找個安靜的地方放松壹下。現在下界的美景展現在她眼前，激蕩著她的心。她決定在那裏探索壹種新奇的事物。於是姚姬離開了天宮，踏上了祥雲，來到了壹個地方，竟然是龐陵腹地壹個美麗的水鄉，地域遼闊，人煙稀少。這是普美村。姚姬和下層世界的人說的不是壹種語言，但是凡人特別講究禮儀。尤其是姑娘們聰明能幹。雖然他們不懂語言，但他們都相處得很好。
天下少女，善畫花卉，善織緞帶，善織被子。她們的繡花鞋、裙子、頭巾，簡直比天上的彩霞還要美。姑娘們穿上了她們自己的五顏六色的衣服，她們看起來像仙女壹樣明亮。姚記印象深刻，拜他們為師。姚記覺得這裏的姐妹都不錯，除了不識字，不會表達思想，不會寫字。姚記想幫他們提高記言情的能力，於是回天搬下來壹套復雜的天書。姐妹倆雖然想學，但都是文盲。姚姬將這本深奧的天書壹壹簡化，並結合針線刺繡，用當地的方言念唱，讓這些看起來像仙女的姐妹們能自由地寫字、作詩、念唱。從此，這種變了樣的天書就在女人間流傳，男人們不屑於使用，也不知道怎麽用，於是取名為《女書》。
第二種:傳說很久以前，上江尾的壹個農婦生下壹個女嬰，重九斤，所以取名金九姑娘。這個金九女孩從小就有天賦和智慧。她擅長紡紗、織布、刺繡，無所不能，壹絲不茍。她還異想天開地創造了壹個女性角色來寫方言。所以，易年華在回復來訪者時說:“我只聽前輩們說過壹句老話，九斤的姑娘最聰明。女書是姑娘做的，代代相傳。”
第三種:相傳宋代村有個叫胡(也有人說是)的女子，後來被選為妾。入宮不久就受到冷遇，情緒極度低落。她想寫信回家，傾訴自己的委屈，但又怕太監發現。於是我根據女紅編了壹套詞，用唱歌的風格寫在手帕上，叫親戚側身看，用方言念。於是這種文字在女性中流傳開來。
第四種:傳說是匠心創造的。很長時間
從前，在通口有壹個聰明的女孩叫潘喬。她三歲會唱歌，七歲會刺繡。她唱的歌醉人，繡的花能和真的混為壹談。後來她被官府搶去道州。為了通知家人，她煞費苦心按照女紅圖案造詞，寫了壹封信讓壹只狗帶回家。我的同村女友花了很長時間來解讀這封信，這種寫法從此代代相傳。
雖然眾說紛紜，但有壹點是相同的:江永女書是女性創作的，反映了她們的心態。難怪易年華說“男人有千裏之誌，迷人的母親怎能眉目傳情？”
江永的女性書法作品壹般寫在自制的手書、扇子、布帕上，功能有自娛、堂唱、書信往來、宗教祭祀、結拜姐妹、訴苦、熟記等。《江永女書》作為女性的個人私物，往往與人同焚或同葬，因此無法找到流傳三代以上或更早的作品。因此，女書何時產生，它的真正起源在哪裏，女書與甲骨文的關系，女書與堯的關系等等。，眾說紛紜，沒有定論，成了壹個謎。
據有關研究，“女書”起源於史前陶文，其發源地應在黃河流域中上遊，特別是陜西關中地區或商縣地區。“女書”可能是居住在陜西商縣的蒼梧人南下，帶到湖南江永山區的壹種古文字。那麽，漢字的歷史至少應該從新石器時代的仰韶文化階段算起，距今約六七千年，比甲骨文早三千多年。可以說，中國史前陶文是世界上最早的古文字。陶文考古年代證明了“女書”的起源，所以也可以說“女書”是目前世界上的壹種古文字，而且是流傳至今的文字，是書寫史上的奇跡。雖然眾說紛紜，但有壹點是相同的:江永女書是女性創作的，反映了她們的心態。