Il Palazzo di Badia sorge tra Piazza del Popolo e Piazza della Badia (con ingresso su entrambe. In sostanza, è il rifacimento del monastero benedettino medioevale annesso alla chiesa delle sante Flora e Lucilla. L’edificio è stato ampiamente ristrutturato in epoca rinascimentale e nel corso dell'Ottocento.
A metà Ottocento, quando l’orto del convento fu trasformato in piazza, il prospetto meridionale dell’edificio fu interamente ricostruito; la facciata opposta, che reca sopra l'ingresso principale una terracotta invetriata di Andrea della Robbia, fu rifatta alla fine del XIX secolo. Destinati ad uso pubblico, i locali interni subirono vari adattamenti a seconda dell'utilizzo (oggi l'immobile è sede scolastica). Nel corso dell'ultimo conflitto mondiale, l'edificio fu danneggiato dai bombardamenti aerei. Dell'impianto architettonico rinascimentale restano due chiostri, il più grande dei quali - delimitato da un porticato a due ordini - è opera quattrocentesca di Giuliano da Maiano.
