Successivement gouverneur de Montréal (1698-1703), puis de la Nouvelle-France (1703-1725), Philippe Rigaud de Vaudreuil choisit Montréal comme résidence principale. Une concession royale lui garantit ainsi qu'à sa descendance la jouissance d'un vaste terrain situé en plein cœur de la cité, face au fleuve Saint-Laurent. Il s'y fait construire un hôtel qui sacrifie aux canons architecturaux de la métropole : de part et d'autre d'un corps central dévolu à la vie sociale du propriétaire saillent deux ailes symétriques réservées à sa vie intime et domestique. L'hôtel bénéficie des dernières commodités (cabinet de toilettes, latrines pour le maître comme pour les serviteurs, glacière) et de l'agrément de trois jardins, qui mêlent l'utile (verger et potager) au plaisir pur (parterres à la française).