østfløjen

I 1232 lod Valdemar Sejr udarbejde en oversigt over den jord, der tilhørte kronen. Heri nævnes Gram, der vurderes til at være lig med 10 Mark Guld. Efter Jyske Lov svarer 3 Mark Guld til det område, der kan dyrkes med én plov. I de vestlige egne af Jylland med let jord, var der tale om et større landområde, sammenlignet med 3 Mark guld i den østlige del af landet med svær jord. Der var på den tid åbenbart allerede tale om et gods med et jordtilliggende, der krævede lidt mere end tre plovspand, for at man kunne holde det opdyrket.

I 1313 opgives ejeren at være Hertug Erik af Abels slægt. Det er meget usikkert, hvor hovedbygningen til Gram lå på dette tidspunkt. Flere voldsteder udpeges i omegnen. I Gram Storskov, står der en mindesten skjult i bevoksningen med inskriptionen: "Her stod Gamle Gram". Der har dog aldrig været foretaget udgravninger, der kunne understøtte dette udsagn. Men på marken lige udenfor skoven pløjes af og til munkestens- brokker frem af ageren.

Ved slutningen af 1300-tallet overgår Gram til Limbekkerne, som i forvejen besad Tørning ved Vojens. Gram Forblev i Limbekkernes eje indtil Ditlev Reventlow i midten af 1400-tallet overtog godset ved giftermål.

Under Reventlowerne flyttede man hovedbygningerne til deres nuværende placering og østfløjen opførtes. På trods af senere ombygninger fremstår østfløjen som senmiddelalderlig med buefrise, savskifte og rundbindinger i nordgavlen.
Omkring 1560 skifter ejerskabet til Gram igen ved giftermål, og denne gang er det Ditlev Buchwald fra Pronstorf i Holsten, der nævnes som ejer.

Det er i hans tid at det nuværende Gram Slot begynder at tage sin nuværende form, idet spor i østfløjen lader ane, at der har fundet ombygninger sted.