北宋时形成聚落，至元末，属清道乡，明清属广德湖田隅。

1946年9月，属罂湖乡。

1949年5月后建村，1950年5月属岳山乡。

1956年，建童家横、岳阳、白岳3个高级农业合作社。

1958年，为上游（望春）公社湖山大队童家横、岳阳、白岳3个耕作队。

1961年，为童家横、岳阳、白岳3个大队，属白岳公社。

1983年，为白岳乡童家横村、岳阳村和白岳村。

1992年，属集士港镇。

2004年4月，由白岳、岳阳、童家横3个行政村合并为岳童村。