Le Château tire son nom de sa situation géographique sur la colline de Cos et du nom de François Labory, propriétaire jusqu’en 1845.
 
Le terroir de Cos Labory bénéficie de la proximité avec l’estuaire de la Gironde et de l’influence de l’océan Atlantique, qui modèrent les excès météorologiques.

Il s'agit d'un Cinquième Cru Classé en 1855.