En 1820, l’immense parc de Montmorency, dont l’origine remonte au début du XVIIe siècle, est démantelé. Sur une des parcelles, un banquier parisien fait construire, à partir de 1789, les communs et la partie nord d’un château dans le style Renaissance italienne. Ce château, qui succède à ceux de Charles Le Brun et de Pierre Crozat, prendra le nom de son propriétaire le plus célèbre, le marquis de Talleyrand-Périgord, duc de Dino.