清懿堂女祠建于清代嘉庆年间，是棠樾村大盐商鲍氏二十四世祖鲍启运创建的，借以纪念为徽商的辉煌同样作出牺牲和贡献的鲍氏妇女。

    在男尊女卑的时代，女性均与祠堂无缘，除非因触犯族规在这儿接受惩罚。如同名字不能忝列宗谱一样，女性祖先在祠堂里没有牌位，甚至在祭祀活动时她们连祠堂的大门都不能进入。惟独这“清懿堂”石破天惊地成为一个奇迹，女性不但可以入祠祭祀，共商女性大事，并立有女性祖先牌位，而且祠堂本身就是专为女性而建、为女性独用的女祠。

    独一无二的清懿堂，俗称女祠。堂以“清懿”为名，取的是“清白贞烈、德行美好”之意。

    懿堂主厅和寝堂与享堂，整座建筑以硬山式高低错落马头墙外观为主要特色，惟有后进部位为歇山式阁楼。双天井设计既可保证祠堂内部的采光、通风要求，更寓示着“妇女也顶半边天”的深意。石制柱础、龛座、栏杆、抱鼓石，砖制八字墙，木制雀替、梁驮、外檐柱撑等，皆施精细雕刻，典雅细腻，柔中透刚，玲珑剔透，精美绝伦。整体建筑给人的感觉是：结构紧凑，用材匀称，造型流畅，刚柔相济，内秀而外朴，端庄而不刻板，令每一位参观者时时都能知道：自己正在参观的不是一般的祠堂，而是全国唯一的女祠。