Venne edificata dal vescovo di Lucca, Pietro II agli inizi del secolo X. Il suo nome deriva dalle preziose cave di pietra serena, il vero e proprio tesoro naturale del territorio. Anche le numerose cartiere sorte lungo il corso del fiume Pescia, sono state in passate, di fonte di guadagno e di notorietà notevole. A causa della sua posizione strategica, fin dal ‘300 fu oggetto di aspre contese tra pisani e fiorentini che la conquistarono definitivamente nel 1371.