南宋咸淳間（1265～1274）屬於潛城，明成化間（1465～1487）屬坊郭鄉，清嘉慶十七年（1812）凰山莊屬坊郭鄉。

民國初屬於潛城，民國21年（1932）上塘湖、鳳山莊屬湖山鄉，民國36年（1947）屬潛陽鎮至解放。

1950年為橫山鄉橫山頭村，1958年為昌化縣潛陽公社潛陽管理區橫山生產隊，1960年9月屬臨安縣，1961年為潛陽公社橫山生產大隊，1984年為於潛鎮橫山村。

2007年村規模調整時，橫山村規模不變。

原轄張家、阮家、橫山頭3個自然村，今廢止，統一編入集鎮門牌。

設8個村民小組。