明，屬施州衛都亭里；1735年，清雍正13年改土歸流，屬施南府利川縣都亭里；1912至1949年11月，利川縣團堡鄉東6保；1950年，屬利川縣第二區；1952至1958年之間，屬利川縣團堡區(相繼成立農會、互助組、初級社、高級社)；1958年實行人民公社化，屬利川縣團堡公社安樂管理區，設團堡山為五大隊；1961年恢復區建制，屬利川縣團堡區安樂公社，為五大隊；1975年撤區并社，屬利川縣團堡公社安樂管理區，原名稱五大隊更名為團堡山大隊；1984年撤社建區，屬利川縣團堡區安樂鄉，原名稱團堡山大隊更名為團堡山村；1986年，撤縣建市，屬利川市團堡區安樂鄉，為團堡山村；1996年，屬利川市團堡鄉，為團堡山村；1999年至今，撤鄉建鎮，屬利川市團堡鎮，為團堡山村；2021年村居優化，與四水池村合并，名為團堡山村，村委會駐地改為原四水池村。