La résidence du gouverneur général à la Citadelle de Québec est aménagée dans un bâtiment militaire construit en 1831. Il est occupé à l’origine par des officiers de la garnison britannique. Lord Dufferin est le premier gouverneur général à l’habiter, en 1872.