Zur Zeit der Römer gab es im Golf von Portoferraio
zwei römischen Villen, die von reichen römischen Familien als Feriendomizil
genutzt wurden. Die Überreste der zweiten Villa sind neben der "Torre
del Martello", hinter dem Archäologischen Museum von Portoferraio,
zu besichtigen.
Die "Villa delle Grotte' wurde im 1. Jahrhundert v. Chr. errichtet
und schon im 2. Jahrhundert n.Chr. wieder aufgegeben. Zwischen dem
4. und 6. Jahrhundert wurde die Villa, obwohl sie schon eine Ruine
war, wahrscheinlich von Einsiedlermönchen bewohnt. In der Zeit zwischen
1799 und 1802 war die Insel Elba Schauplatz der Kämpfe zwischen
Franzosen und den dem Großherzog der Toskana treu gebliebenen Garnisonen,
die von elbanischen Aufständigen und der britischen Marine unterstützt
wurden. In diesen tragischen Jahren wurden die Umfassungsmauern
der Villa niedergerissen, um eine Gruppe von Belagerungskanonen
aufzustellen.