Między rzędami budynków rot znajdowały się budynek kancelarii, dwa obiekty przeznaczone na kuchnie i stołówki oraz budynek oddziału szkolnego. Wzdłuż wschodniego krańca koszar stały warsztaty, magazyny na sprzęt obozowy, magazyn broni, magazyn amunicji, stajnia, wozownia, piwnica na jarzyny, latryna oraz wspólne dla obu pułków kuźnia i murowana piekarnia.
Kolejny etap, wznoszenie murowanych koszar dla 17 i 18 pułku strzelców, zapoczątkowano w 1896. Większość robót została ukończona jesienią 1899, a w kolejnych latach wznoszono położone po przeciwnej do koszar stronie szosy augustowskiej budynki przeznaczone na mieszkania oficerów 19 i 20 ps, brygadowe kasyno oficerskie, lodownię przy kasynie, łaźnię oficerską z pralnią oraz inne mniejsze obiekty. W 1906 w tym rejonie wybudowano cerkiew św. Aleksandra Newskiego z budynkami plebanii oraz przylegającym do niej cmentarzem wojskowym.