Le nom Azoulay appartient à la famille qui possédait le Riad du début des années 1800. Le bâtiment remonte aux premières années après la fondation de l'arrondissement, qui a eu lieu en 1540. Le propriétaire était un riche homme d’affaires, ce qui explique la présence de marbre finement mélangé à la majolique de Fez, des plafonds traditionnels en bois de plâtre sculpté et cèdre et des murs recouvert en tadelakt marocain.

Les propriétaires actuels, des italiens, ont acheté le bâtiment en 2005 car ils ont été  immédiatement séduits par Marrakech et par ce Riad, comme s’il symbolisait par magie un retour à la maison. Leur but était de restaurer le bâtiment dans son ancienne splendeur. Les matériaux, les finitions et les techniques adoptées sont celles de la tradition marocaine qui reproduisent  le charme et l'identité du Riad et l'amènent à nouveau dans la lumière.