Dans le terrier de 1755, cet emplacement est compris dans une grande parcelle de jardin (parcelle 1220), bordée par un chemin menant à une « glacière » (parcelle 1223) et ponctuée d'un « pont levis en ruine » (parcelle 1221). L'ensemble appartenait « au Seigneur Marquis du Muy Comte de Ribiers ».
Sur le cadastre de 1823, cet emplacement fait partie d'un grand jardin de 230 m² (parcelle E2 358) appartenant à LARROCHETTE Louis Toussaint, « officier en retraite ». Ce quartier est toujours nommé le « Jardin du Château ».
La construction de ce bâtiment pourrait dater de la seconde moitié du 19e siècle. Le pignon nord et l'élévation ouest ont alors été bâtis en surélevant le mur de clôture du jardin, déjà existant.
La date 1972, accompagnée des initiales « Ch » et « A », portée sur le pignon sud, indique une campagne de réfection de l'enduit. Le toit a été refait dans le courant du dernier quart du 20e siècle.