安徽省最北端是宿州市砀山县（原属江苏徐州），最西端是阜阳市临泉县，最南端是黄山市休宁县，最东端则是宣德市代管的广德市（县级）。
宣城市位于安徽省东南端，面积约1.234万平方公里，广德则有约0.216万平方公里，在宣城市主城区的正东方向。
广德的地理位置比较特殊。往北距离江苏省省会南京和长江不算远，往西南距离黄山市（徽州）不算远，往东南距离浙江省省杭州不算远，往东距离太湖和江苏省苏州市不远算。广德的地形不算很复杂，北部和南部相对较高，中间海拔较低，连接杭州和宣城的宣杭铁路经过广德。
广德的东南是浙江省北部，古为越国之地，偏东北方向是江苏省南部，古为吴国之地。广德正好卡在吴都苏州与越都会稽（浙江绍兴）的西线要塞部分，可以说是吴越的门户所在。而吴越以西就是称霸于长江中游的楚国，楚国向东扩张进攻吴越，一般都会在时称桐汭的广德与吴军周旋。
广德在汉朝没有设县，是丹阳郡鄣县的地盘。广德设县是在东汉灵帝中平二年（公元185年），就称为广德县。现在的广德隶属于宣城市，其实早在东晋时代就是这种隶属关系，南朝宋和南朝齐没有变化，但在南朝齐时，广德曾为宣城郡治所。南朝梁曾设大梁郡，广德县隶之。广德也曾设地级的州，这是在唐高祖武德四年（公元621年），地名非常好听——桃州。不过桃州只存在了三年就撤销了，又划给了宣城。宋朝时脱离宣城，设立了广德军，辖广德和建平（今郎溪县）二县。
广德的重要性，在十国时期和两宋时期显得非常重要。
十国时杨吴控制淮南、苏南、皖南、江西，但定都于长江北岸的扬州。词帝李煜的祖父李昪建立南唐后，将国都迁到了长江南岸的升州（江苏南京），称金陵。广德之于金陵的意义非常重要，因为出了广德，就是吴越国的地盘，而吴越国的国都就在杭州。换言之，对杨吴（南唐）和吴越来说，谁控制广德，谁就能对对方的国都构成巨大的威胁。
五代后梁乾化三年（公元913年），梁末帝朱友贞刚刚灭掉了杀父篡位的二哥朱友珪，吴与吴越就打了起来。这年五月，吴国的宣州副指挥使花虔出兵会于广德，准备进攻吴越王钱镠的家乡——衣锦军。衣锦军就是现在的浙江省杭州市临安区，是杭州的西线门户。一旦吴军突破衣锦军，吴越国麻烦就到了。钱镠派最能力非常强的第七子钱传瓘（吴越文穆王）出兵抵抗吴军的进攻。钱传瓘确实有两把刷子，很快就打下广德，歼灭了吴军。几乎是一夜之间，广德从吴国进攻吴越国的前哨阵地，变成了吴越国进攻吴国的跳板。虽然吴都扬州在江北，但如果苏南被吴越控制，那么扬州也就没有守的价值了（苏州已被吴越控制）。
到了南宋，由于实际国都还在杭州，广德军又成了南宋在早期抵抗金军的门户要塞。南宋将广德军隶属于建康府路（治今江苏南京，为南宋定都选择之一）。宋高宗建炎三年十二月（阳历为公元1130年），金军攻破广德，杭州大门洞开。值得一说的是，著名抗金英雄岳飞就曾驻屯于广德，后移至今江苏宜兴。南宋丢掉广德，就几乎等于丢掉杭州，未己，杭州为金军所破，带头的就是“金邦四太子”金兀术（完颜宗弼）。
一百多年后的元兵灭南宋，也基本是攻占广德再占杭州这条线。元朝末年，朱元璋刚打下金陵的时候，就注意到广德之于金陵的南线门户意义。如果广德不在朱元璋手上，他是睡不踏实的。所以在明朝刚建立时，广德就升为府。直到朱元璋认为南方稳定下来后，于洪武四年（公元1371年）降广德府为州。
新时期后，广德曾隶属于芜湖，1980年改隶属于宣城地区（宣城市），2019年8月设县级市。
