白鹿寺，位于益阳资江南岸白鹿山，距离资江一桥仅200余米，始建于唐代宪宗元和年间，距今约1200余年，鼎盛期有寺众300余人，曾是益阳最大的一座寺庙。

古益阳的十景之白鹿晚钟

据明《一统志》载：唐裴休讲道于此，有白鹿衔花出听。清同治《益阳县志》载，唐相裴休讲学于此，“有白鹿衔花出听”，故名。传说唐代名相裴休，贬任荆南节度使时，曾来益阳，在古木葱郁的江边山上小住（今寺之北资江大桥的桥头公园内建有裴公亭）。裴休博学多能，喜欢佛学，夜深人静，他便在山上秉烛夜读，朗朗的诵经声，引得一只仙白鹿驻足聆听，每晚只要经声响起，仙白鹿就飞来听经。一天晚上，白鹿听经的秘密被人发现，仙机泄露，再也不见白鹿复来。山民们认为白鹿驻足听经之地是块风水宝地，遂命名白鹿山，并在山下建了一座庙，取名为白鹿寺。

古白鹿寺香火鼎盛，名气很大，尤其叫人称奇的是寺内的那口一千公斤重的古铜钟，声极洪远，堪称古城钟王。夜晚，和尚上香的钟声，响彻古城十五里麻石街。悠扬的钟声，飘逸清脆，震撼心灵。“白鹿晚钟”由此成为了古益阳的十景之一。

因益阳地处湘中要冲，历史上白鹿寺曾屡次毁于兵火。史料记载：“著名诗僧海印和尚(益阳人)，于一八八一年卓锡沅江景星寺，民国初年，白鹿寺被占，景星寺被毁，海印曾七入京师，两行蒙古，先后十余年筹措资金才恢复两寺。”海印曾撰联云：“十年瓢笠遗民老，万里边沙野衲归”；“资水滔滔，淘尽古今人物，问裴公何去？云树犹存，遗址怅空亭，白鹿不来秋又老……”字里行间，正是当时境况的真实写照。

当地史料有云：在唐朝时，白鹿寺的和尚做了一些豆腐，因有事外出几日，回来后豆腐长霉了。出家人有节约的本能，不舍丢掉，拌了一点调料试着吃，味道不错，便产生了今天的豆腐乳。因古人早上忌讳说：龙、虎、鬼、梦四个字，腐乳的腐字谐音“虎”，虎字通常又被说成猫。又取连年有余之美好寓意，于是，腐乳在益阳人的眼里便有了“猫余”的雅称，也在唇齿留香间成就了一方魂牵梦绕的味道。