L'isola, già abitata in epoca romana, ospitava un eremo fondato da San Francesco d'Assisi nel XIII secolo, poi occupato da San Bernardino da Siena. Passò poi nelle mani della famiglia Ferrari, che costruì la villa, uno dei palazzi più sontuosi della Lombardia. I Ferrari fecero anche piantare i giardini a terrazza che digradano verso il lago di Garda. La villa si visita con la pronipote dell'arciduchessa, come si farebbe con gli amici.