W 1956 Golson był jednym z członków orkiestry Lionela Hamptona, kiedy dowiedział się o śmierci Clifforda Browna, z którym grał razem w zespole (Brown zginął w wypadku samochodowym). Nagła śmierć przyjaciela była głębokim przeżyciem, które stało się impulsem do skomponowania utworu „I Remember Clifford”, poświęconego pamięci Browne’a. thumb|left|180px|Benny Golson w San Francisco koncert The Jazztet, 21 lipca 1985 Golson był kompozytorem kilku innych utworów zaliczanych już do standardów m.in.: „Stablemates”, „Killer Joe”, „Whisper Not”, „Along Came Betty” i „Are You Real?”, które wielokrotnie były wykonywane i nagrywane przez innych muzykówBailey, Phil; Hancock, Benny (1979), Benny Golson: Eight Jazz Classics, 14, Jamey Aebersold Jazz, p. III.
W latach 1959–1962 Golson, razem z Artem Farmerem, prowadził The Jazztet. Potem na dwanaście lat zrezygnował z grania jazzu na rzecz pracy w studio i z orkiestrami. Komponował w tym czasie muzykę do takich seriali telewizyjnych jak Ironside, Room 222, M*A*S*H oraz Mission: Impossible. W latach 1964–1966 przebywał w Europie. W 1977 powrócił do koncertowania i nagrywania płyt, w 1980 reaktywował z Farmerem The Jazztet.