Lille Frogner ligger på høydedraget Frognerbjerget. Hovedbygningen er en langstrakt, panelt trebygning beliggende parallelt med veien Lille Frogner allé, i en hage med stakittgjerde mot veien. Den er i to etasjer med halvvalmet tak preget av empirestilen. Nord for våningshuset er en enetasjes bygning, sammenbygget med nordre gavl med et toetasjes mellombygg. Dette ble oppført som uthus på begynnelsen av 1800-tallet, men er senere ombygget og tatt i bruk som bolig.