L’edificio è conosciuto come Palazzo Ricci, nonostante il Collegio dal quale prende il nome si trovasse presso l’odierna piazza Dante. Come altri edifici del periodo, anche questo organismo architettonico è nato dall’accorpamento di più strutture medievali, visibili nelle chiostre interne.
L’attuale configurazione ricalca il disegno settecentesco degli ingegneri fiorentini, come Francesco Bombici, che condusse la sistemazione di piazza S. Nicola (ora piazza Carrara). Dopo alcuni interventi dell’ingegner Severini negli anni ‘60 dello corso secolo, vi ha trovato sede l’Università di Pisa.