据寺志及民间传说，唐僖宗年间(咸通873年)，朝庭礼部右侍郎，姓施名韬，字慕一生克己奉公，忠贞乐善，年迈辞官返乡，一日乘船海上遇到狂风巨浪，眼看船只就要被海浪吞没，在千钧一发之际，一只小舟前来救助，舟上撑篙的是一位红衣女子，只见那女子驾的小舟，所到之处，风平浪静，施慕爷的船只紧随其后，等到船快靠岸的时候，那只小舟和红衣女子却不见了，慕爷欣喜异常。回家之后，心中念念不忘救命恩人，决定四处寻找恩人。有一天，慕爷来到一座大山里，见山腰有一个红衣女子的身影，似海上的救命恩人，急忙追上，却怎么追也追不上，慕爷怕女子进了山，就更难找到，立即喊道：“恩人留步”，这一喊红衣女子忽然不见了，前方却显出一座小茅庐，慕爷步入茅庐，见茅庐中央木架的正殿上有一尊红衣观音菩萨，顿时他什么都明白了。