Lillegården ligger ca. 200 meter sør for Kristiansten festning. Lillegården het tidligere Bakkland lille/ Lille Bakkland. Gården har tidligere også blitt kalt Svineryggen, etter navnet på høydedraget, som gården ligger på. Lillegården ble fradelt Bakke gård mellom 1647 og 1661. Sokneprest i domkirken, M. Christophersen Darre, var eier i 1661. Blant eierne opp gjennom årene, finner vi navn som Treschow, General von Krogh og Lysholm Knudtzon. I 1806 solgte general von Krogh gården til Lorentz Johansen, som gjorde ombygginger på husene. Fru Johansens bror, Broder Lysholm Knudtzon, kjøpte Lillegården i 1854. Da ble det gjort store endringer på hovedbygningen, som bl.a. økning av vegghøyde og saltak med større takutspring. I 1865 ble gården kjøpt av Artilleriløytnant Carsten Schøidt Due. Gården har siden vært i familiens eie, og blir også kalt Duegården.
Rundt tunet ligger hovedbygning og to uthus. Hovedbygningen har saltak og stort takutspring. Opprinnelig hadde bygningen valmtak med arker, noe som vises på maleri fra 1831.De to gjenværende uthusene var tidligere deler i en sammenhengende uthusbebyggelse. Våningshus og uthus dannet da et U-formet tun. På kart fra 1761 danner gårdsbebyggelsen et lukket firkanttun. På kart fra 1868 vises eksisterende våningshus og uthus som del av et U-formet anlegg, som inkluderer dagens bolig i Lillegårdsbakken 46. Øvrig eksisterende bebyggelse vises også på kart fra 1830 og muligens også på kart allerede fra 1761.
Hagen ble trolig anlagt i begynnelsen av 1800-tallet. Gårdsdriften er nedlagt. Mange eiendommer har etter hvert blitt utskilt fra Lillegården, bl.a. Lilleby og boligområder i nærheten av gården.