Elven a sûrement été fondée par un "pays" de st Gildas. En tout cas, le patron d'Elven saint Alban est un soldat Romain chrétien décapité près de Londres.
Un château est construit pour contrer les invasions normandes aux alentours de l'an 900. Ce qui n'empêcha pas les vikings de brûler l'église !
Le château de la Tour de l'Argoët (XIIIe XVIe) est pris d'assaut par les Français en 1488 et démantelé sur ordre de Charles VIII. Le donjon (tour de six étages) est construit au XIVe et vit passer Henri Tudor, futur roi d'Angleterre en captivité.
Tous les été le donjon sert de décor du spectacle son et lumières Tristan et Iseult
Grosse ville assez riche à en croire le nombre de monuments religieux et de manoirs, Elven a gagné en tranquillité depuis que la route de Vannes est déviée.