解放初属于贵门乡。

1950年贵门乡分为贵门、上里、雅安、横山四个乡，隶属南山区。

1955年8月玠溪乡从东阳县划入嵊县。

1956年3月，贵门乡、上里乡、雅安乡和玠溪乡合并为新山乡，横山乡改为安山乡，隶属南山区。

1957年玠溪乡从新山乡划出。

1958年10月，新山、安山、玠溪改为新山、安山、玠溪管理区，隶属南山公社。

1961年11月新山、玠溪管理区改为新山、玠溪公社；安山管理区恢复横山管理区，并改为横山公社，隶属南山区。

1983年7月，公社改乡，隶属不变。

1992年5月新山乡、横山乡、玠溪乡合并设立贵门乡，县直管辖。

乡政府驻地贵门村12号。

2019年贵门乡、里南乡等2乡合并而成。