Il passaggio di consegne fra la famiglia degli Aldobrandeschi e quella dei Pannocchieschi ebbe ripercussioni anche sul piano urbanistico.
Molti ambienti del cassero furono ristrutturati con largo uso di laterizi.
Il palazzo venne del tutto stravolto dalla realizzazione di un nuovo pavimento in calce che andò a coprire quello precedente aldobrandesco in pietra.