南宋咸淳间（1265～1274）属於潜城，明成化间（1465～1487）属坊郭乡，清嘉庆十七年（1812）凰山庄属坊郭乡。

民国初属於潜城，民国21年（1932）上塘湖、凤山庄属湖山乡，民国36年（1947）属潜阳镇至解放。

1950年为横山乡横山头村，1958年为昌化县潜阳公社潜阳管理区横山生产队，1960年9月属临安县，1961年为潜阳公社横山生产大队，1984年为於潜镇横山村。

2007年村规模调整时，横山村规模不变。

原辖张家、阮家、横山头3个自然村，今废止，统一编入集镇门牌。

设8个村民小组。