Fils d'un capitaine de navire, Jacques-Barthélémy Gramont s'impose dans le négoce bordelais à la fin du XVIIIe siècle. Il investit 315 000 livres dans la société Feger, Gramont et Cie en 1784 et devient la même année consul de la Bourse de Bordeaux.

Il finance trois expéditions négrières : une en 1783, deux en 1803. Cette date compte. La Convention avait aboli l'esclavage en 1794 ; Bonaparte le rétablit en mai 1802. Gramont fait partie des neuf négociants d'une commission qui va plaider auprès du Premier consul, en 1801-1802, la reprise de la traite. Il ne subit donc pas un cadre qu'il aurait trouvé en place : il a contribué à le rouvrir, puis en a immédiatement profité. Sa maison Gramont, Chégaray et Cie expédie la Julie vers la Côte-de-l'Or en mars 1803 pour y acheter des captifs.

Son corsaire Mon-Oncle-Thomas s'empare de l'île de Gorée en janvier 1804, d'où il rapporte 25 000 francs et vingt-trois personnes réduites en esclavage.

La suite est une carrière publique : conseiller général de la Gironde de 1800 à 1807, consul général du commerce à Paris en 1803, président de la chambre de commerce de Bordeaux de 1806 à 1809, adjoint au maire en 1806, enfin maire de Bordeaux pendant les Cent-Jours. La ville de Bordeaux a posé une plaque explicative rue Gramont en juin 2020.