北宋時形成聚落，至元末，屬清道鄉(xiāng)，明清屬廣德湖田隅。
1946年9月，屬罌湖鄉(xiāng)。
1949年5月后建村，1950年5月屬岳山鄉(xiāng)。
1956年，建童家橫、岳陽、白岳3個高級農業(yè)合作社。
1958年，為上游（望春）公社湖山大隊童家橫、岳陽、白岳3個耕作隊。
1961年，為童家橫、岳陽、白岳3個大隊，屬白岳公社。
1983年，為白岳鄉(xiāng)童家橫村、岳陽村和白岳村。
1992年，屬集士港鎮(zhèn)。
2004年4月，由白岳、岳陽、童家橫3個行政村合并為岳童村。