Il castello si presenta come un agglomerato di più corpi di fabbrica dislocati all’interno di un recinto fortificato che segue l’andamento naturale di una impervia balza rocciosa.

Il torrione, fondato sul punto più alto della prominenza rocciosa, la disposizione funzionale dei singoli edifici, l’esistenza della cappella ed il sinuoso percorso interno di collegamento denunciano un impianto fortificato di tipo primitivo o germanico, anche se le attuali emergenze architettoniche riportano a periodi più recenti, come pure le prime fonti narrative, che fanno risalire l’origine alla fine del XII secolo (1185 circa).

Dopo la morte di Enrico di Quart, avvenuta nel 1377, il castello e il feudo passarono ai Savoia che lo cedettero nel 1550 a Filiberto Laschis, il quale lo rivendette quasi immediatamente ai Balbis. Nel XVII secolo il castello appartenne prima al conte Nicola Coardo e infine ai Perrone di San Martino che lo donarono al Comune di Quart nel 1800.