广德早期是一个传统的吴文化地区。据县志记载：建安初，孙策平定宣城以东地区，孙吴分故鄣县地始置广德县。广德虽然地处吴头楚尾，但区治上多隶属江浙。从唐末至宋以来，虽然战乱不断，广德基本上是受以扬州（今江苏扬州）、建康（今江苏南京）为中心的地方势力控制。吴、南唐政权多次曾派使前往广德祠山祖殿祭祀祈祷。元至正十四年，改广德军为广德路，属江浙行中书省。元至正十六年，朱元璋改广德路为广兴府（不久改称广德府），属江南行中书省。明初，改广兴府为广德直隶州。因此，从地缘政治的角度考量，早期的广德应是吴文化占主导地位的地区。从广德甘溪沟土著人吴侬软语的方言中，也可以窥见广德地区早期吴文化的渊源。另外的因素就是就是祠山文化的兴起与传播。明朝徐应秋《玉芝堂谈荟》称“雷之布鼓，登之鬼市，河源地丘之神债，广德祠山之埋藏，是谓天下四异，非妄传也。”可见，祠山文化来源于吴越，勃发于广德，又张扬于吴越大地。祠山文化，既具有吴文化的典型特征，又是吴文化发展的一个极至。