清光緒初年分屬11都1圖,12都1圖。
民國時屬烏巖區嶺上鄉。
1948年屬烏巖區聯嶺鄉。
1951年土改時,分別在半山、北山兩地建立了半山鄉和北山鄉,均屬寧溪區管轄,1956年半山、北山兩鄉合并,以地處糧豐林茂,物產豐富的山區而命名為富山鄉。
1958年建富山管理區,屬寧溪公社,1961年公社體制調整,稱富山人民公社,1983年撤銷公社建制,復稱富山鄉,沿用至今。
1985年4月臺州行署批準為第二次國內革命戰爭時期根據地。