扬溪镇位于绩溪县中部，地处北纬30°05′48″至30°13′21″，东经118°35′36″至118°43′33″之间，属亚热带湿润性季风气候，热量丰富，光照适宜，雨量充沛，四季分明，年平均气温16℃，最高气温38℃，最低气温-9℃，年无霜期近210天。全镇总面积97平方公里，镇域地形以低山为主，地形地貌复杂多样，山峦起伏，沟谷纵横，山水相依，田地星布。山体海拔一般在400~500 m之间，境内海拔700 m以上山峰有黄花尖、丈尺山、锦屏山、石京山、苍龙山、高枧山。扬溪镇地处长江水系和新安江水系的分水岭地带。丛山以北水流汇入金沙河，流入长江，丛山以南水流汇入扬之河，流入新安江，涉岭以东大石门、北村流域水流汇入登源河，注入新安江，境内无过境水，境内主要河流分别有扬之河、涉村河、际坑源、东村河、丛山河、石门河。境内小型水库四座，分别是丛山水库、藏龙洞水库、伏山水库、涉岭水库，总库容68.15万方，万方以上山塘12口，总容量27.4万方。全镇辖6个村委会，36个村民组，62个自然村，总户数4279户，总人口14429人。
扬溪，因扬溪源自西向东穿村而过，汇入扬之河而得名。
扬溪是县治北部屏障，历史悠久，唐末，句容葛晋任绩溪主簿，安家扬溪，致仕后定居。宋太平兴国元年（公元976年），扬溪录属宣政乡。元置都，扬溪为一都首村，明清时期，置扬溪镇，地处徽宁驿道，设官道驿站，为县北商业中心与交通枢纽，隶仁慈乡、扬市乡，俗称一都。三十年代，芜屯公路通车后，扬溪逐渐发展成为交通方便、商业繁荣的小集镇。
解放后，扬溪曾设区而成为片区中心。1958年建立红旗公社，1959年1月改称为扬溪公社，包括金沙、石门。1961年金沙、石门分别建立公社，扬溪公社辖区缩小，但名称未废，1983年农村体制改革，称扬溪乡，1984年11月，改扬溪乡为扬溪镇。1992年，与大石门乡合并而成现有建制。.