永昌县设县治于今祁东县砖塘镇烟合岭。当时祁阳境域限于清江流域和湘江以南的部分地区及今衡南县一部分地方。至两晋、南北朝时期，祁阳隶属未发生变化。 隋开皇九年（589），撤併州县，祁阳、永昌二县併入零陵。唐武德四年（621），恢复建置，永昌县併入祁阳县，祁阳县域的面积扩大了一倍，达到3800多平方公里。不久废县。唐贞观四年（630），重新恢复祁阳县，仍属零陵郡。同时，将县治迁至老山湾（今祁阳县茅竹镇老山湾村和茶园村一带）。这时祁阳不仅版图扩大了，而且县治也迁到濒临湘江、交通方便的“四达之衢”的新址，经济、文化有了新的发展条件。其时手工制陶业最为发达；虽经“安史之乱”，而“湖湘尚宁”，以至唐末，经济、文化一直是发展的。1952年4月，将原祁阳县的东北部地区划出，另置祁东县。永昌县辖区大致为今湖南省永州市祁阳县东部以及今湖南省衡阳市祁东县南部。零陵郡郡治位于泉陵县（今湖南省永州市零陵区），辖区大致为今湖南省永州市、衡阳市西部、邵阳市南部、广西桂林市。