Dzięki staraniom Karola Dittricha zapewniono pracownikom fabryki wszystkich szczebli relatywnie wysoki standard życia. Utworzono zaplecze dla realizacji działań kulturalnych (sala teatralna w Resursie, muszla koncertowa, kręgielnia) oraz edukacyjnych (Kantoratschule kształcąca biuralistów na potrzeby fabryki z wykładowym językiem niemieckim, szkoły powszechne elementarne).
Działalność kulturalna i charytatywna Z jego inicjatywy powstała biblioteka powszechna Biblioteka Fabryczna. Zajmował się także mecenatem artystycznym i kulturalnym, fundując stypendia dla uzdolnionej młodzieży z Krasnej Lipy i z Żyrardowa. W latach 1903–1908 Dittrich finansował studia Pawła Hulki-Laskowskiego na Uniwersytecie w Heidelbergu. Nadwornym malarzem Dittrichów był August Frind urodzony w Krasnej Lipie, którego dziełem są między innymi obraz ołtarzowy w kościele pw. św. Karola Boromeusza oraz portret Karola Augusta Dittricha i Karola Hielle w willi reprezentacyjnej w parku miejskim. Park ten nosi nazwę Karola DittrichaPark im. Karola Dittricha w Żyrardowie, parki.org.pl.