C'est en 1304 que mourut Henri II comte de Rodez, et comme il ne laissait pas de fils, le comte de Rodez passa sa fille Cécile, mariée à bernard VI comte d'Armagnac. La maison d'Armagnac, branche cadette des ducs d'Aquitaine et de Vasconie, succéda ainsi à la première race comtale, issue des anciens comtes de Rouergue. Deux siècles plus tard, ou plus exactement en 1497, les comtes d'Armagnac s'éteignaient à leur tour. Charles d'Alençon, leur héritier, devint comte de Rodez et d'Armagnac, mais il mourut bientôt après, laissant tous ses biens à Marguerite de Valois, sa femme, qui se remaria avec Henri III roi de Navarre. En 1589n henri IV montait sur le trône de France et réunissait à la couronne le Comté de Rodez. Dès lors il n'y eut plus ni comtes ni comté de Rodez. Le titre de comte de Rodez appartint au roi de France, qui seul pouvait en disposer.