镇政府驻邵家岭社区居委会。全镇总面积82平方公里,其中城区面积17.8平方公里,耕地1660公顷,浯溪镇47095户,157052人。
浯溪镇原为祁邑古城,明景泰三年(公元1452年),祁阳县治从老山湾迁此至今,1912年建制为镇。以傍湘江之滨的浯溪、浯台、吾亭命名为三吾镇。1950年改制为城关区,1953年改称城关镇,1958年人民公社化时为红专人民公社,1959年改为城关人民公社。1965年析出9个生产大队建浯溪公社,其余郊区各大队,分别划归芳名亭公社和太白山公社,余下4个居委会建立城关镇。1984年8月,将浯溪乡的浯溪、塔边、土轻村和芳名亭乡的百花、椒山、白沙村、七里桥乡的天马村、赤塘乡的黄土岭、东江村、太白山乡的光明村共10个村划入。1985年1月撤浯溪乡,将其孙市、五里、新埠头、小江、灯塔村划入。1986年1月茅竹乡长流村划入。1995年5月,原苏油坪乡整体并入,同时将城关镇改名。