每一座牌坊都有一个情感交错的动听故事。其间"义字石坊"上面题的是"圣旨"、"乐善好施",旌表的是盐运使司棠樾人鲍漱芒。听说，早在清朝前期，朝廷就在棠樾村先后赐建了忠、孝、节三座牌坊，村里的名人巨富们嫌缺乏，想凑足忠孝节义四字，好光宗耀祖，名垂青史。

    所以就将这一主意泄漏给乾隆皇帝。乾隆容许了这一要求，但要棠樾鲍家盐商为朝廷构筑八百里河堤，发放三个省军饷。鲍家代代宫商，身为两淮盐运使司的鲍漱芳当即容许。还有一座明朝建树的牌坊，上面镌刻的是"御制""慈孝里".据《歙县志》载：元代歙县守军李世达部暴乱后掠夺大众，凡稍殷实的人家，都在所难免。

    棠樾人鲍寿孙和他的父亲都被乱军捉获，乱军决议：父子二人要杀一个。在这种紧迫情况下，鲍寿孙父子互相争死，一个说"杀我，让父亲活";一个说"杀我，让儿子活".正在争执不下的时分，林间忽起劲风，声响犹如追兵，乱军仓惶窜逃，鲍寿孙父子免死于乱刀之下。后来鲍寿孙做了官，朝廷为了赞誉寿孙父子的父慈子孝，特给棠樾御制了"慈孝里"石坊。

    棠樾不只具有群立的牌坊，并且村首还有男女二祠，修建规模宏大，砖木石雕特别精美；还有和牌坊相对的聪步亭，其匾额出自清代大书法家邓石如的手笔。那时的邓石如正在落泊之中，他阅读了黄山之后，来到了这儿，棠樾鲍家有的是金钱，天然很快乐地把他留了下来。邓石如在棠樾鲍家留下的手迹许多，鲍氏男祠就有他亲书《鲍氏五伦述》，全系五、六寸见方的隶字，实为瑰宝。