Les Rasteau appartiennent à ces grandes familles protestantes rochelaises qui ont fait du port le deuxième port négrier de France : soixante-dix-huit aristocrates et bourgeois y arment près de 427 navires négriers au XVIIIe siècle et déportent 130 000 captifs africains, essentiellement vers Saint-Domingue. Sur soixante-dix armateurs négriers rochelais, trente-huit étaient protestants ; les Rasteau figurent sur cette liste.

Entre 1710 et 1730, Jacques Rasteau et ses fils sont les principaux armateurs de La Rochelle. Leurs navires — L'Amitié, Les Trois Frères, le Cerf-Volant, la Rosalie — servent au commerce colonial et à la traite. La famille possède aussi des plantations à Saint-Domingue : elle compte parmi les plus importants planteurs et négriers de la ville.

Le square Rasteau, rue de l'Escale, porte le nom de la famille. Le Jacques Rasteau né en 1786, marchand, maire de La Rochelle de 1834 à 1841 et député, n'a lui-même pas armé de navire négrier : ce sont ses ascendants qui ont bâti la fortune familiale sur la traite. C'est l'un des sept lieux rochelais dotés d'un panneau explicatif depuis le 10 mai 2021, et l'un des premiers visés par l'action « Explique ta rue de négrier  » menée sur place en décembre 2017.