Vimenet est un ancien village fortifié du XIVe siècle. Aujourd'hui, ses remparts encerclent toujours le vieux village. Deux tours rondes marquent les angles de l'enceinte, et il subsiste également deux porches d'entrée. En flânant dans les ruelles et impasses, vous pourrez découvrir d'anciennes échoppes, des pierres sculptées, un cadran solaire, ainsi que l'église dont le clocher-peigne date du Moyen Âge. Autrefois, Vimenet était un village de tisserands, comptant jusqu'à 90 artisans qui approvisionnaient l'industrie drapière et lainière de Saint Geniez d'Olt.