Cette tour est le dernier vestige du Château du Marquisat. Propriété des seigneurs de Villeneuve, construit entre les XIIe et XIVe siècle, il s'imposait dans le paysage par ses 4 tourelles bordées d'un fossé.
Durant les guerres de religion, il passe entre les mains des protestants pour être finalement brûlé par le passage du roi Louis XIII en 1632.
Après sa reconstruction, plusieurs familles s'y succèdent. La commune se porte acquéreur mais le démolit en 1925 pour des raisons de sécurité.