Aleister planował przemienić mały dom w globalne centrum praktyk magicznych, a przy okazji i zarobić na wpłatach wstępujących do Opactwa nowych uczniów, szukających wiedzy o sztukach magicznych. To, czym tak naprawdę stało się Opactwo i jego mistrz, było tematem wielu plotek, częściowo rozprowadzanych przez mieszkających w okolicy Włochów, głównie jednak produkowanych przez brytyjski brukowiec „John Bull”. Wśród stawianych mu zarzutów były m.in. podejrzenia o orgie seksualne, używanie narkotyków, poświęcania zwierząt i dzieci oraz inne okrucieństwa. Crowley nigdy się do tego nie przyznał, ale nigdy też temu nie zaprzeczył, ponieważ lubił, gdy otaczała go mgiełka tajemnicy.
mały|Opactwo Thelemy, 2017 W roku 1923 młody angielski poeta Raoul Loveday (lub Frederick Charles Loveday) zmarł tam z powodu, jak się dziś wydaje, wypicia wody ze strumienia, mimo ostrzeżeń Crowleya o niebezpieczeństwie. Jego żona natychmiastowo złożyła pozew do sądu twierdząc, jakoby Loveday zmarł wkrótce po odbyciu rytuału w Opactwie na skutek wypicia krwi kota. W związku z tym, jak i licznymi plotkami na temat działalności członków Opactwa, rząd Mussoliniego zażądał, by Crowley i jego „współwyznawcy” opuścili Włochy.