Jedan od najbitnijih momenata za dalji urbani razvoj Kragujevca je odluka kneza Miloša da prestonicu vazalne Kneževine smesti u sredotočnu nahiju. Na brežuljku na ušću Erdoglijskog potoka u reku Lepenicu, nekoliko stotina metara dalje od mesta nekadašnjeg šanca, grade se objekti dvorskog kompleksa počev već od 1817. godine.
Najveći objekat u kojem je bila smeštena i Knjažeska kancelarija bio je izgrađen 1824. godine, i u njemu je stolovao knez Miloš sve do kraja svoje prve vladavine. Knežev konak koji je kasnije pretvoren u Oficirski dom nažalost je izgoreo u požaru prilikom napada nemačkih okupacionih snaga u aprilskom ratu 1941. godine. Rekonstrukcija spoljašnjeg izgleda konaka rađena je na osnovu sačuvanih fotografija, dok je unutrašnjnost rekonstruisana na osnovu opisa savremenika i istoriografske građe.
