In epoca romana il golfo di Portoferraio fu sede di due ville
per le vacanze di ricche famiglie di Roma. I resti di una seconda
sono visibili presso la torre del Martello, adiacente al Museo Archeologico
a Portoferraio.
Questa villa delle Grotte fu costruita nel I secolo A.C. e fu abbandonata
già nel II secolo D.C. Dal IV al VI Secolo, ormai in rovina, fu
nuovamente abitata, probabilmente da monaci eremiti. Nel periodo
del 1799-1802 l'Elba fu teatro di confronto fra francesi e i presidi
fedeli al Granduca di Toscana aiutati da insorti elbani e dalla
marina britannica. In quei difficili anni i muri perimetrali della
villa furono abbattuti per installare una batteria di cannoni d'assedio.
I reperti trovati durante gli scavi degli anni 60 sono visibili
presso il museo Archeologico della Linguella, a Portoferraio.