W 1945 roku roczny ruch pasażerski osiągnął maksimum na poziomie podróżnych. Ruch kolejowy spadł na początku lat 50., a miasto nie potrzebowało tak dużej stacji kolejowej. W roku 1973 odprawiono tylko pasażerów. Wszystkie pociągi pasażerskie uruchamiane są przez Amtrak, a stan budynku zaczął się pogarszać. Władze miasta Kansas City chciały zachować i przebudować budynek. Aby to ułatwić, zawarto porozumienie z Trizec, kanadyjską firmą. Porozumienie zobowiązywało Trizec do przebudowy stacji. Między 1979 i 1986 Trizec zbudował dwa budynki biurowe na otaczającej nieruchomości, ale nie przebudował stacji. W 1985 roku Amtrak przeniosła obsługę wszystkich przewozów pasażerskich do mniejszego obiektu. Dworzec został całkowicie zamknięty. W 1988 r. miasto pozwało Trizec za brak prac przy stacji, sprawa została rozstrzygnięta w 1994 roku. Przez większość tego okresu, budynek nadal ulegał degradacji.
12 linii kolejowych, które obsługiwały Union Station w Kansas City skrócono. Po otwarciu były to: Union Pacific, Kansas City Southern, Santa Fe, Rock Island, Katy, Frisco, Wabash, Milwaukee St.