Zamek w Puivert dominuje nad regionem Quercorb Chalabre, pagórkowatych trawiastych hodowli. W czasie krucjacie na zamku, żona właściciel Bernarda Congost, która była umierania otrzymała consolamentóm od katarskiego Dosonałego.
W 1210 Bernard Chalabre odmówił uznania feudalnej lojalności wobec Simona de Montfort, który zmusił go do ucieczki do Montségur gdzie zmarł. Zamek został zdobyty po 3 dni walki i przekazany Ponsowi Heather. W XIV w. zamek został rozbudowany.