On voit lors de la querelle entre Arvedui d'Arthedain et le Gondor que les arguments sont partagés, mais que l'Arnor semble bien être le siège du haut-roi des Dúnedain (si Aragorn devient Roi des royaumes en exil c'est en partie parcequ'il est un descendant d'Isildur, fils aîné d'Elendil et donc de droit qu'il peut légitimement y prétendre). Chez les Númenoréens c'est l'aîné qui règne. Le Gondor n'était à l'origine qu'une simple dépendance de l'Arnor, même si cette dépendance est devenue plus puissante que l'Arnor, et donc s'en est détachée assez logiquement.
Voilà l'argumentation d'Arvedui d'Arthedain quand il essaie de reprendre le royaume de Gondor, ce en quoi il échouera. Mais le Gondor ne démentira pas son argumentation, et Arvedui ne sera contraint au silence que parceque l'Arnor est faible et qu'aucun des deux royaumes n'a besoin de guerre civile. Mais il restera, et ses descendants également (Aragorn compris, donc) le roi légitime du Gondor :
“Elendil avait deux fils, et Isildur était l’aîné, et l’héritier de son père. On nous a dit qu’à ce jour, le nom d’Elendil était le premier de la lignée des Rois du Gondor, car ils est reconnu comme le haut roi de toutes les terres des Dúnedain. Tant qu’Elendil a vécu, ses deux fils règnaient conjointement sur le royaume du Sud ; mais quand Elendil est tombé, Isildur parti prendre le statut de haut roi de son père, et chargea le fils de son frère du gouvernement dans le Sud. Il n’a pas abandonné la royauté du royaume du Sud, et ne comptait pas diviser le royaume d’Elendil à jamais.” Le Seigneur des Anneaux, Annexe A, II : Les royaumes en Exil