Albrecht cieszył się znacznym uznaniem rojalistów i konserwatystów. W 1930 po zawarciu małżeństwa z Ireną Lalbach zrzekł się swoich praw do korony. Po śmierci ojca 1936 roku arcyksiążę rozwiódł się i ponownie ożenił z 18-letnią hrabianką Katalin Bocskay de Felsö-Banya.
Oficjalnie uznany za księcia Węgier przez admirała Horthyego. Wspierał czynnie i finansowo partię strzałokrzyżowców, był również tajnym współpracownikiem RSHA. Był odpowiedzialny za pomoc w ucieczce osobom odpowiedzialnym za masakrę ludności serbskiej i żydowskiej w Nowym Sadzie. Po wojnie uznany przez władze komunistyczne za winnego przestępstw wojennych. Ukrywał się w Ameryce Południowej i Środkowej (m.in. w Argentynie, Dominikanie i Paragwaju) pod nazwiskiem hrabiego Sirina.
Małżeństwa i dzieci Arcyksiążę Albert był trzykrotnie żonaty w latach: 1930–1937 z Irène Lelbach (ur. 22 grudnia 1897, zm. 1 grudnia 1985) 1938–1951 z Katalin Bocskay de Felsö-Banya (ur. 1 listopada 1909, zm. 1 października 2000) 1951–1955 z Lydią Georginą Strauss-Dörner, córką Beli i Mitzi Dörner (ur. 22 października 1930, zm. 12 lutego 1998)
Jego dziećmi są: Szarolta (ur. 3 marca 1940) – żona Ferdynanda Wutlonena (od 1967) Idilko (ur.