东汉末年,汉献帝刘协和曹操、刘备、关羽、张飞等文武百官经常到许田狩猎。也经常到许田南12里处(今陈曹乡大禄庄村西)的白奶奶庙上香供祀。
有一次,曹操和汉献帝骑马来到白奶奶庙烧香求神后,汉献帝向一位老人说:“老大爷,这里白奶奶庙是啥来历呀?”老人回答道:“这说来话长，相传,很早很早以前,有一年二月十九那天,这里村上许氏有一对龙凤胎年约七、八岁,两人在村西大坑塘边玩要,男孩不慎落水,女孩舍命相救。两人同被水淹,正在危急时刻,一位白衣女子飘然而至,救出了兄妹二人,随即把兄妹二人送回家中。小兄妹的母亲许氏得知儿女不慎落水被这位白衣女子所救,感激万分,便忙让儿女跪下给救命恩人磕头谢恩。
说来奇怪,正当许氏和儿子跪在地上磕头谢救命恩人时,白衣女子竟飘然不见……这时,许氏恍然大悟,就连连磕头说：“谢谢白衣菩萨捞救我的儿女,谢谢白衣菩萨捞救我的儿女。”只听那兄妹俩不停地呼喊:“白衣奶奶,你在哪里呀!”……。
第二天,许氏把儿女昨天上午在村西大坑塘玩耍不慎落水的前前后后给街上爷们说了一遍。一时间,这事便一传十、十传百的在当地百姓中传为佳话。
后来,这里的百姓为感谢白衣菩萨救命之恩,集资在那大坑塘南边给“白衣菩萨”盖了三间土墙麦杆脊坡式庙。庙内塑有泥像,墙上画有壁画……,人们叫它白奶奶庙，以示后人供奉纪念。
献帝听了白奶奶庙的故事后,很是感动。当时,他看到这庙破旧不堪,便命曹操把白奶奶庙修建成瓦房。曹操领命,遂请各路工匠,出资黄金万两,当年春末,就把白奶奶庙建成为十多间脊坡式高阁。高阁建成后,曹操亲笔书写了“白衣阁”金字横匾,并领关羽、张飞等数百文武将士亲自把匾悬挂在高阁门顶，“白衣阁”由此得名。
千百年来,白衣阁(此白衣阁非榆林乡白衣阁)历经沧桑多变,经过历代官府和绅士及其百姓多次损资重修、重建,世代供奉，游客不断。
