柏木山村1958年屬回龍公社光輝大隊(duì)，1966年更名為“赤衛(wèi)”公社，1971年恢復(fù)為回龍公社，1981年全國第一次地名普查中，因該公社名稱在地區(qū)內(nèi)重名，故將華云工農(nóng)區(qū)的“華”的回龍的“龍”字合并在一起，得名“華龍”人民公社，1991年，名華龍鄉(xiāng)。
1992年，鄉(xiāng)、鎮(zhèn)建制調(diào)整，撤銷華龍鄉(xiāng)，成建制并入雙河鎮(zhèn)，光輝大隊(duì)更名為柏木山村，2004年10月，撤銷雙河鎮(zhèn)建置，設(shè)華龍街道辦事處，成立華鎣市華龍街道柏木山村村民委員會(huì)。
2020年5月碑山村并入柏木山村。