Plan miasta z 1820 roku wskazuje, że zamek miał kształt prostokąta a w zachodnim narożniku zamku znajdowała się wieżaJ. Widawski, Miejskie mury obronne w państwie polskim do początków XV w., wyd. MON, Warszawa 1973, s. 64-65.. W XVI wieku wzmiankowano, że zamek był uszkodzony, co być może było związane z wcześniejszym pożarem miasta. W dokumencie datowanym na 20 stycznia 1551 r. zamek wymieniony jest jako własność króla Zygmunta AugustaJ. Wiśniewski, Dekanat opoczyński, Radom 1913, s. 4. Przekład łaciński S. Fudaleja, maszynopis w zbiorach Muzeum Regionalnego w Opocznie.. W 1599 roku po uzyskaniu zgody króla Zygmunta III Wazy wykonano nową bramę miejską w murach obronnych przebijając otwór od strony zamku na zewnątrz, a poprzez dziedziniec poprowadzono ulicę. Oznacza to, że w tym okresie nie przywiązywano już dużej wagi do jego funkcji militarnej i był to w tym czasie raczej już obiekt o charakterze administracyjnym. W lustracji zamku z 1620 roku wymieniono pozbawioną schodów Wieżę Szlachecką oraz kilka pomieszczeń w tym mieszkanie burgrabiego i kancelarię grodzką.