L’histoire de cette commune se perd dans un passé obscur et son nom présente quelque mystère.
Le BARRY, dans la langue d’Oc, désigne un quartier isolé d’une agglomération d’une certaine importance. Quant  à ISLEMADE, attesté au XII ème siècle sous la forme « Insula Amata », il fait penser à ces îles que le Tarn enserre de ses flots en aval de son confluent avec l’Aveyron, à 3 Km au nord du bourg actuel. ISLEMADE pourrait donc être un village situé sur la rive droite, dont le BARRY aurait été un quartier, qui aurait été anéanti lors des invasions barbares du V ème siècle ou par une crue du Tarn ou de l’Aveyron
VENTILHAC- Lat : Ventilius, de ventum, vent -  a pour origine la villa gallo-romaine d’un propriétaire terrien nommé Ventilius. Placée à l’est du ruisseau de Payrol, ce fut une possession des Templiers, puis des Hospitaliers de Saint-Jean de Jérusalem qui dépendait de la commanderie de La VILLE-DIEU-DU-TEMPLIER.

BARRY d’ISLEMADE a été formée en 1834 par la fusion des deux communes créées en l’an III, VENTILHAC et le BARRY

Le siège de la commune est une agglomération  agréablement située en partie sur un plateau et en partie dans la vallée du Tarn, prolongé au Sud par le hameau de Lagarde.

La route départementale 72, qui longe la  berge, constitue un itinéraire des plus plaisants jusqu’à Villeneuve d’où l’on découvre un joli point de vue.

A Payrol, une aire de repos a été aménagée pour les promeneurs. La descente, réhabilitée, permet l’accès à la plage.

La moitié de la Commune est située en plaine alluvionnaire réservée uniquement à l’agriculture : vergers, cultures maraîchères, céréales.
 Sur le coteau, le vignoble produit des vins V.D.Q.S., vin de LAVILLEDIEU.

Cependant , la  superficie globale exploitée (viticulture, fruitière) diminue régulièrement.

On constate également une augmentation des jachères , conséquence de la politique agricole commune.