W 1813 roku ożenił się ze spokrewnioną z carem Elżbietą Zagriacką, mieli czworo dzieci. Ze względu na stan zdrowia dzieci (cała czwórka zmarła), de Maistre w latach 1826-1838 podróżował po Europie, odwiedzając Włochy, Francję i Niemcy. Po śmierci dzieci i żony (w 1850 roku), odsunął się od działalności publicznej i życia towarzyskiego. Zmarł w 1852 roku.
Twórczość Podczas pobytu w Turynie, Xavier de Maistre brał udział w pojedynku, za co został skazany na areszt domowy. Czterdzieści dwa dni uwięzienia stały się podstawą powieści Podróż dookoła pokoju. Xavier przekazał jej rękopis bratu, który bez jego wiedzy opublikował go w 1795 roku. Powieść zyskała znaczną popularność, co skłoniło jej autora do napisania kontynuacji, zatytułowanej Nocna wyprawa dookoła pokoju.
Przebywając w Petersburgu de Maistre prowadził bibliotekę wojskową, a także malował, głównie portrety i pejzaże. Większość z nich uległa zniszczeniu w pożarze Pałacu Zimowego w 1837 roku. W Rosji powstały jego kolejne książki, w tym Trędowaty z miasta Aosta, zainspirowana autentycznym wydarzeniem z czasu pobytu w Aoście, kiedy de Maistre miał okazję rozmawiać z zamkniętym w wieży trędowatym. Do utworu de Maistre'a nawiązał Gustaw Herling-Grudziński w opowiadaniu Wieża.