Casa che nel 1715 era di Carlo di una famiglia Castelli che sembra derivi da un Jacopo di Gio. Battista dello stato di Modena, che nel 1600 era servitore dei Barbazza, e che terminò in Camilla del dott. Carl' Antonio morto l'anno 1733, moglie di Pietro di Matteo Conti al quale portò l'eredità, e il cognome della sua famiglia. Il marchese Gaetano Conti Castelli la rifabbricò, e fu da esso locata dopo il 1797 a diverse monache sopresse inclinate a con durre una vita ritirata.
Il tratto di strada dalla casa dei Castelli esclusive fino alla Braina di San Donato si disse via delle Nespole. Nel 1565 la via delle Nespole si diceva delle Case dei Malvasia, e le Case dei Malvasia, non era che la via Case nuove del Borgo della Paglia.