根據街居民保存族譜、房契和房屋墻磚上的文字記載，康熙戍戊年<<1718>>在老街始建房。
清光緒年間，老街因一場大火全部燒毀。
后老街進行一次擴建改造，均為土木古老建筑，上蓋青瓦，街道鋪青石板。
因老街全為商鋪，且大部分生意人來自湖南雙峰、邵東、湘鄉，被當地人稱為湘幫佬。
老街生意紅火鼎盛，成為湘中、湘西南地區有名的農產品和手工業產品聚散地，稱興隆街。
民國十五年，為防止匪患兵亂，在四條街巷口入門外設有木板鐵條閘子門。
將興隆街劃分四街二巷，四街為；時興街、坳底下、杓把街、街響。
二條巷即三升砌、王爺廟。
解放后成立人民公社，稱為興隆街，轄4條街2條巷。
1961年將四條老街化為鎮大隊，并根據街道布局向方位分別將四條街更名為南正街、北正街、向東街、西和街。
1987年建鎮將三條主街改為三個社區(居委會)，2015年三個社區四條街啟動棚戶區改造，均為磚混仿古建筑，鋪炒沙路。
2017年荷香橋鎮一、二、三社區合并為城中社區。