相传,北宋崇宁年间(1102~1106)江西庐陵有个名叫胡安道的人在朝廷做刑部秋官,此人机智善谋、铁面无私、断案如神,堪称“包公二”。微宗帝别的欣赏他,就将面宫廷铜鼓赐给了他,这个铜鼓十分精巧,两面都刻有花纹,轻轻击声如琴瑟,猛重击声如洪钟。别还是经过上加封的,人们都觉得这是件吉祥的宝物。
胡安道晚年卸职归乡,把铜鼓也待会了家乡,族人大喜,大礼迎接把鼓接到了宗祠供奉。但是胡安道觉得“宝不露白”,不能随便挂在祠堂里,万坏人盗去,岂不成了“无妄之灾”。大家认为非常的有道理,于是就把铜鼓收藏起来了,邻村的人见铜鼓被收藏了既见不到鼓样又听不到鼓声,于是就自己仿照之前见到的样式,做了个牛皮鼓,把它挂在祠堂里,有紧急事情的时候敲,大伙儿就都聚拢起来了。堂鼓中的“堂”在之前指的就是祠堂。放在祠堂中的鼓寓意堂鼓。