Le domaine de l'Hers, dont le château, le village et le port sont attestés par les textes dès le premier quart du 10e siècle, était situé sur une île au milieu du Rhône. Cette ancienne enclave (aujourd'hui lieu-dit appartenant depuis 1820 à la commune de Châteauneuf-du-Pape) a été dotée très tôt d'un péage destiné à contrôler le passage des bateaux sur le fleuve et assurant des revenus importants au seigneur du lieu. Selon l'historien Henri Cogoluènhe, un bac fonctionne déjà à l'Hers au 13e siècle. En 1314, le pape Clément V, mourant, emprunte ce bac pour rejoindre sa terre natale ; sa dépouille sera transportée sur le même bac après son décès du 20 avril au château de Roquemaure. La tour ronde qui faisait office de poste de contrôle sur la rive gauche a été édifiée à la fin du 14e siècle et au début du 15e. Le bac de l'Hers paraît avoir précédé le bac à traille de Roquemaure (Référence : RA84000042) mis en place, semble-t-il, à l'époque moderne.