Habitée au moins depuis l’époque gallo-romaine des traces d’un camp romain situé au Plos des Brus peuvent laisser penser que des familles aient pu vivre sous les pentes de l’Espinouse dès l’époque gallo-romaine.
Des tombes de type wisigothiques ont été retrouvées au Nougayrol.
La commune garde de nombreuses traces de l’activité des hommes : anciennes mines d’anthracite, châtaigneraies en terrasses aujourd’hui abandonnées. Désertée lors de l’exode rural, elle ne vit plus aujourd’hui que du tourisme vert et d’un peu d’agriculture.
Castanet-le-Haut faisait partie du diocèse de Castres. À la Révolution, elle était initialement rattachée au Tarn, puis en l’An X, il fut décidé son appartenance à l’Hérault avec toute la vallée de la Mare.
Le territoire actuel de Castanet-le-Haut est formé de celui de la commune initiale de Castanet-le-Haut et d’une partie de la commune disparue de Saint-Gervais-Terre-Foraine. Le changement est intervenu en 1827.
L’économie traditionnelle de Castanet-le-Haut était l’agriculture dont l’élevage ovin : le lait, dirigé vers les caves de Roquefort, servait à faire le célèbre fromage.
Le territoire du plateau était divisé entre différentes fermes exploitées essentiellement en métayage. Les surfaces en pente du territoire était consacrées à la culture des châtaigniers. Les châtaignes étaient séchées et transformées dans des séchoirs en châtaignons pour une meilleure conservation.
Une partie de cette production était expédiée à travers toute la France.(Ils servaient à farcir les dindes de Noël)
Le bois du châtaignier était exploité par les tonneliers et les fabricants de cercles de barriques (cercliers). Les taillis de châtaigniers sont utilisés pour fabriquer des tuteurs recherchés par les vignerons des plaines du Languedoc.
Au XIXe et XXe siècles, l’activité des mines de charbon (anthracite) s’est développée et occupait une grande partie de la population ; elle a amené une immigration principalement espagnole. Ce charbon était exporté par une ligne de chemin de fer arrivant à Plaisance (Saint-Geniès-de-Varensal).
