1960年始建，1960-1962年，屬于冶鋼人民公社管轄，1962年胡家灣居民委員會并入龔家巷居民委員會，1962-1972年，屬于陳家灣人民公社；1973年又從龔家巷劃出，恢復胡家灣居民委員會，1973-1979年，屬于陳家灣區管轄；1979-2001年，屬于石灰窯區石料山街道管轄；2001-2012年，屬于西塞山區澄月街道管轄；2012年，西塞山區落實大部制改革，撤銷澄月街道辦事處，胡家灣社區居民委員會重新整合，由原來的李家坊社區居民委員會整體和胡家灣社區居民委員會整體合并組建；2012年，胡家灣社區居民委員會直接歸黃石市西塞山區管轄。
2015年10月，設置牧羊湖片區，胡家灣居民委員會屬于牧羊湖片區；2019年1月，撤銷片區，設置牧羊湖街道辦事處，屬于牧羊湖街道至今。