Fondato nel 1445, ospitò dapprima le monache domenicane, quindi dal 1592 le Cistercensi. Il complesso venne ampliato nel 1618 e nella seconda metà del 1700 con la costruzione del campanile e delle gallerie dell'ala lungo i "portici scuri".
Dopo la soppressione degli ordini religiosi nel 1798 l’edificio venne concesso in parte come abitazione alle Rosine, in parte come sede dell'orfanotrofio femminile od "Opera delle orfane", affidato in seguito alle Suore di San Vincenzo.
Dal 1986 l’edificio ospita la Scuola di Alto Perfezionamento Musicale.