En Écosse, au XVIIIe siècle, au manoir des Durrisdeer vivent les deux frères Durie : James, le Maître de Ballantrae, l'aîné de la famille, est un libertin calculateur, ambitieux, amoral mais charismatique et respecté; Henry, le cadet, est quant à lui modéré et plus vertueux mais injustement mal-aimé.