On ne connaît pas la date de la construction du presbytère. Lors des grandes fêtes et des visites pastorales il accueillait les évêques de Senez qui avaient décidé d'habiter Castellane du fait de l'inconfort du château perché sur la Roche. Monseigneur de Vocance y logea lors de la construction de l'actuel palais épiscopal, et pour payer la dernière traite du palais il obtint du roi l'autorisation de le mettre en vente en 1756. Il fut acquis à cette date par Jean-Henri Achard, docteur en théologie, qui le légua à sa nièce en 1772, Jeanne Achard. Il était la propriété du curé Sage jusqu'en 1817, quand il fut nommé à Moustiers. La commune n'eut pas les moyens financiers de l'acheter avant 1824 grâce à un geste du curé Sage qui consentit à le vendre à bas prix. De 1824 à 1908 les curés se succédèrent dans le presbytère, date à laquelle il devint perception jusqu'en 1919. Entre-temps, en 1889-1891, l'intérieur avait fait l'objet d'un profondément remaniement car le bâtiment menaçait ruine. En 1919 le presbytère fut à nouveau loué au curé, avec un bail de 9 ans moyennant la somme de 120 francs annuels. Le bail fut renouvelé dans les mêmes termes jusqu'en 1960. C’est dans le courant du 20e siècle, et surtout dans la seconde moitié du siècle que les interventions successives extérieures ont été le plus marquées – jusqu’à modifier considérablement l’appréhension du bâtiment d’origine. Ainsi de la lucarne présente sur le plan masse de 1888 dessiné par le sous-ingénieur Tourniaire, qui a disparu. Ou de l'emplacement de la fenêtre au rez-de-chaussée côté rue du Chapitre, qui a été changé. Cette ouverture éclairait encore la cage d'escalier en 1891, laquelle est aujourd'hui aveugle. On a donc muré cette fenêtre et percé le mur en son milieu de façon à apporter cette fois un éclairage supplémentaire à la salle à manger qui ne disposait en 1891 que de la fenêtre donnant sur le jardin. La façade est est quant à elle totalement dénaturée. Les travaux entrepris à la fin du 19e siècle montrent un état encore très proche voire fidèle de celui du cadastre napoléonien : la façade n'était pas encore dégagée mais mitoyenne de plusieurs parcelles donc vraisemblablement aveugle. Les destructions sont intervenues dans le courant du 20e siècle. Dans un premier temps un passage étroit (inférieur à 2 mètres) et en cul-de-sac fut dégagé, donnant accès à une écurie et aux caves. Ce n'est qu'à la fin des années 1980 que le bâtiment faisant face au presbytère sur la place fut détruit et la façade percée des ouvertures actuelles. Le soubassement ne sert plus de cave et moins encore d'écurie : la municipalité y a aménagé au début des années 2000 un espace indépendant du reste de la maison pour le club du village. L'escalier menant au rez-de-chaussée a donc disparu. Aujourd'hui, le presbytère appartient pour partie à la commune (soubassement), pour partie à des particuliers.