W 1448 roku właścicielem wsi został Piotr z Karwiny Archiwum Państwowe w Katowicach, Oddział w Cieszynie, Zb. dok. perg. i pap. nr 14/1/15, Przemysław książę cieszyński sprzedaje Piotrowi z Karwiny wieś Raj koło Frysztatu., a w 1572 wraz z miastem Frysztat zostało sprzedane przez księcia Wacława III Adama Wacławowi Cyganowi ze Słupska tworząc frysztackie państwo stanowe. W 1617 po pożarze Frysztatu Cyganowie przenieśli się właśnie do Raju.
Według austriackiego spisu ludności z 1910 roku Raj miał 1053 mieszkańców, z czego 1031 było zameldowanych na stałe, 1003 (97,3%) było polsko-, 23 (2,2%) niemiecko- i 5 (0,5%) czeskojęzycznymi, 1039 (98,7%) katolików oraz 14 (1,3%) ewangelikówLudwig Patryn (ed): Die Ergebnisse der Volkszählung vom 31. Dezember 1910 in Schlesien, Troppau 1912..
W przeszłości znajdował się tutaj również renesansowy zamek, wybudowany w latach 1563-1570 wraz z otaczającym go parkiem. W latach 1750. przekonstruowany w stylu barokowym, w którym pozostał aż do zniszczenia. W 1899 zakupiony przez wpływową rodzinę Larisch-Mönnich, która była w jego posiadaniu aż do 1945. Po II wojnie światowej skonfiskowany i przeobrażony przez nowe władze w sypialnie dla górników. W 1955 umiejscowiono tu szpital, który już w 1968 z powodu uszkodzeń budynku musiał go opuścić.