W 1820 roku w parafii na 632 uczniów nie było ani jednego znającego język niemiecki. W 1852 r. wybuchł wielki pożar, który zniszczył większą część zabudowy. W 1896 r. zauważalny był wyraźny efekt akcji germanizacyjnej: na 5200 parafian tylko 1400 było PolakamiJan Bałdowski "Warmia i Mazury, mały przewodnik" Wydawnictwo Sport i Turystyka Warszawa 1977 s. 223-224. W czasie I wojny światowej, w 1914 roku, 75% wsi zostało zniszczone. Odbudowa nastąpiła po wojnie. W latach 30. XX w. zaczęła się rozwijać turystyka, powstały wówczas dwa hotele i cztery restauracjePiotr Skurzyński "Warmia, Mazury, Suwalszczyzna" Wyd. Sport i Turystyka - Muza S.A. Warszawa 2004 s. 360. Zniszczenia wojenne w trakcie II wojny światowej obejmowały 75% zabudowy.
Od 5 lipca 1945 do 27 września 1945 Wydminy posiadały prawa miejskie.
14 lutego 1946 roku Wydminy zostały opanowane przez III Brygadę Wileńską Narodowego Zjednoczenia Wojskowego dowodzoną przez podporucznika Kazimierza Chmielowskiego pseudonim "Rekin". Zajęli wówczas posterunek Milicji Obywatelskiej i wywiesili biało-czerwone flagi. Następnie udali się w stronę Puszczy Boreckiej, gdzie stoczyli bitwę pod Gajrowskimi z wojskami NKWD, UB i Ludowego Wojska Polskiego.
W 1961 w Wydminach urodziła się Jolanta Piotrowska, późniejsza burmistrz Giżycka, senator XI kadencji.