Graffer ligger sørvendt og lunt i landskapet et stykke øst for Lom sentrum, og var i lange tider en av de mest velstående gårdene i Nord-Gudbrandsdalen. Dette kommer til uttrykk i uvanlig velbygde hus og mye rikt innbo på garden. Her var opprinnelig tre store våningshus, men bare to står igjen nå, og det er disse som er fredet. Av andre gamle hus på gården er et stort tømra dobbelt stabbur og et enkelt mindre stabbur.