W 1995 zainicjował i redagował pismo „Żyjmy Ewangelią”. W 1991 ojciec święty Jan Paweł II nadał mu godność Kapelana Jego Świętobliwości, a w 2008 Benedykt XVI obdarzył go tytułem Prałata Honorowego Jego Świętobliwości. Sprawował również funkcję dziekana dekanatu Dąbrowa Tarnowska. W związku z osiągnięciem wieku emerytalnego w 2008 zakończył pełnienie urzędu proboszcza i pozostał w parafii w Dąbrowie Tarnowskiej w charakterze rezydenta. Pracował jako kapelan dąbrowskiego hospicjum.
Zmarł 22 listopada 2020. Został pochowany na cmentarzu parafialnym w Dąbrowie Tarnowskiej.
Upamiętnienie mały|267x267px|Tablica poświęcona pamięci ks. Józefa Poremby w Bazylice Najświętszej Maryi Panny Szkaplerznej w Dąbrowie Tarnowskiej. 21 listopada 2021 w Kościele Najświętszej Maryi Panny Szkaplerznej w Dąbrowie Tarnowskiej odsłonięta została tablica ku czci księdza Józefa Poremby.
W Dąbrowie Tarnowskiej znajduje się rondo im. ks. Józefa Poremby.
W 2021 w powiecie dąbrowskim odbył się konkurs „Ksiądz Józef Poremba w służbie Bogu i małej ojczyźnie”.
W 2008 wydana została książka na temat księdza Józefa Poremby pt. „Pod opieką Maryi życie i dzieła ks.