衡山县地处湖南中部偏东、湘江中游，因境内有衡山而得名。东临衡东县，南接衡南县，西界衡阳县、双峰县，北抵湘潭县，中部环绕衡阳市南岳区。县域区位优势明显，以县城为中心点，北至长沙市区121公里，南至衡阳市区65公里，距南岳衡山核心风景区15公里。107国道自北向南穿境而过，省道314（衡双线）横贯县境东西与娄底市双峰县相连，京广高铁客运专线、潭衡西高速公路和南岳高速公路均过县境，京广高铁客运专线在县境内开云镇设衡山西站，衡潭西高速公路在县境内白果镇、东湖镇设有2个互通口，南岳高速公路在县境内永和乡设有1个互通口。县域东部紧靠湘江，大源渡航电枢纽工程、株洲杭电枢纽工程使湘江水位平稳，水位安全、高效，常年通航，湘江公路大桥横跨两岸，过桥即可上京广铁路和京珠高速公路。