之后各代均建有较大规模的聚落。考古发现，商周时代衡阳城留下了不少青铜器具。
城内湘、耒二水交汇处附近的汉代酃县县城遗址，今天仍然依稀可辨。
由于衡阳城的兴建与火神祝融氏有关，祝融氏所在的南岳衡山便被后人奉为这一区域龙脉的集结地，也就成为衡阳城的“靠山”、“镇山”或“发脉地”。
衡阳城在风水中的地位，还与她的方位名称有关。
古人把天上的星星划分为不同的区域，称之为星宿。
秦风知道，在道家的天宫二十八星宿中，“南岳宿当翼轸，度应玑衡，光辅紫辰，称物平施”，有“丈量衡地”的意思，南岳因此而被称为“衡山”。
在道家的五岳真形图中，衡山为朱鸟(即朱雀)的象征，有灵动飞升之意。
而在风水表示方位的体系中，东方为青龙、西方为白虎，南方为朱雀、北方为玄武。南岳衡山又被认为是朱雀的化身。