Le château médiéval, véritable forteresse dont l’architecture défensive est clairement lisible : un donjon, une succession de tours incluses dans des remparts couronnés de mâchicoulis et percés de nombreuses meurtrières. Cet ensemble protège le logis des seigneurs, le puits-citerne, le four à pain, à l’intérieur d’une haute cour et d’une basse-cour.
Après avoir appartenu aux comtes de Rouergue, de Toulouse puis de Rodez, le Château devint la propriété des Arpajon, une des puissantes familles de la noblesse française, de 1204 à 1700. Certains de ses membres s’illustrèrent avec éclat dans l’histoire de France, d’autres nous ont légué des tragédies plus sombres, comme celle de la jeune Hélène de Castelnau, qui à l’âge de 6 ans fut captive du seigneur Jean d’Arpajon en ces murs pendant 3 longues années…
Un temps, propriété des Grandsaignes il fut racheté en 1785 par François Peyrot de Vailhauzy ; Sa fille Madame de Lauro, de Rodez, le vend en 1839 à la commune qui le transformera en presbytère.
Sauvé de la ruine grâce à des chantiers de bénévoles impulsés par l’Association de la « Vallée de l’Amitié » il sera administré et aménagé par les membres du « Foyer Rural » jusqu’en 2007. Il est depuis cette date géré par la commune.
Du Moyen Age à la Renaissance, le Château vous invite à un voyage à travers le temps, de ses bâtiments architecturaux si variés.
Le Château protège également cette étonnante statue-menhir découverte en 1958 par M. Alvernhe au lieu-dit "Crays" sur la commune. Sculptées à la fin du Néolithique (IIIème millénaire avant notre ère) elle témoigne de la richesse et de l’ancienneté du patrimoine local. (source :
https://www.brousselechateau.net/le-chateau-commune-de-brousse-le-chateau )