La forme circulaire du noyau central du château de la tour a longtemps abouti à une confusion avec une ancienne tour de guet devenu moulin à vent par la suite. En réalité cette tour de guet se situait plus près de la crête. Une photographie de la colline, juste après la construction de la villa Smith (dite aussi "château de l'Anglais"), alors que ses fabriques de jardin et autres annexes n'étaient pas édifiées encore, montre en effet le site vide de toute construction. Le château de la Tour constitue ainsi une ancienne annexe de la propriété Smith (dans le cadastre de 1871-1873, cette annexe est mentionnée "en construction") et a été progressivement transformé en villa d'agrément par le baron hongrois, Maximilien von Budai à partir de 1884 sur un terrain détaché du domaine Smith. L'aspect actuel serait à rapporter aux transformations de Sébastien-Marcel Biasini entre 1885 et 1895. En 1886 la propriété est acquise par Marguerite Catusse. Le grand salon possédait vers 2000 un papier peint panoramique de la manufacture Zuber.
Responsable de la cellule "inventaire du patrimoine architectural et paysager" à la ville de Nice, depuis septembre 2018.