Il convento fu costruito nel 1484 per decreto del vescovo Antonio Feletto presso la trecentesca chiesa dedicata a Santa Maria e San Giovanni Battista ed Evangelista nella quale già era presente il Cenobio de' Serviti. Dal 1485 vi si insediarono i Servi di Maria. Il convento fu soppresso con Bolla papale nel 1652 e venne venduto nel 1659 al conte Cesare di Valvasone che ne acquistò il patronato; nel 1665 ne fece donazione ai frati Domenicani. Il convento venne poi soppresso definitivamente nel 1770 dal Senato Veneto. Il complesso religioso, in stato di abbandono e di progressivo inutilizzo, venne demolito nella seconda metà nel XIX sec.