Di origine antica, la rocca degli Alberti viene citata per la prima volta solo nel 1128. Per lungo tempo possedimento della famiglia degli Alberti, nel 1261 il castello venne occupato dal comune di Massa Marittima fino al XIV secolo, quando fu sottomesso da Siena. Nel 1554 venne completamente raso al suolo dalle truppe dei Medici, all’epoca alleati con Spagna e Austria. Epidemie e carestie furono poi la causa principale della crisi del territorio che vide la rocca cadere in rovina.
Della fortezza restano oggi solo alcuni ruderi che poco trasmettono l’idea di come realmente era il complesso fortificato medievale. La struttura si ergeva sulla cima del colle ed era formata dal cassero, dalla cisterna per la raccolta dell'acqua, dal palazzo signorile, da una torre d'avvistamento e da un recinto murato per il ricovero degli abitanti.