Dopo secoli di splendore dovuto all'intraprendenza dei signori di Les Baux, nel 1632, per combattere l’eresia protestante che qui aveva un centro importante, Richelieu fece radere al suolo il castello e le case.
Da allora, Les Baux è rimasta così come oggi la vediamo. Il monumento più importante è Il Castello o quel che ne resta; la caratteristica colorazione rossa della terra è dovuta alla bauxite, minerale che prende proprio il nome da Les Baux de Provence. All'interno del castello sono presenti armi medievali, immense balestre ancora funzionanti e altre armi che gli abitanti hanno escogitato in secoli di lotta.