Był jednym z założycieli Kanadyjskiego Stowarzyszenia Inżynierów Lądowych (ang. Canadian Society of Civil Engineers obecnie znanego pod nazwą Canadian Society for Civil Engineers CSCE) gdzie w latach 1889–1891 pełnił funkcję prezydenta. W 1890 roku ufundował również medal (ang. Casimir Gzowski Medal), który przyznawany jest corocznie do chwili obecnej najlepszemu kanadyjskiemu inżynierowi cywilnemu w dziedzinach geodezji, inżynierii budowlanej oraz wielkich konstrukcjiCasimir Gzowski Medal art. Technical Paper Awards na stronach Canadian Society for Civil Engineers.. Gzowski należał do amerykańskiego stowarzyszenia inżynierów – American Society of Civil Engineers (1886) oraz do brytyjskich British Institution of Civil Engineers (ICE) (1881) i Royal Geographical Society (1881).
Organizował pierwsze kanadyjskie wyścigi konne. Pełnił funkcję prezydenta Toronto Turf Club, doprowadzając w 1860 roku do organizacji Queen’s Plate, czyli pierwszych w Ameryce wyścigów koni pełnej krwi angielskiej, odbywających się na torze w Woodbine.