Jellemző módon 6 évesen már katonai díszszemlékre járt, ilyenkor pedig rá is egyenruhát adtak.1866-ban Erzsébet királyné Rudolf trónörököst és másik gyermekét, Gizellát is magával hozta Magyarországra, ám nem a Budavári Palotában laktak, hanem a zugligeti, Kochmeister-féle pompás, ötszobás nyaralóban. A nyolcéves Rudolf első kérdése a megérkezése után az volt, miért csak egy szobája van a villában, hiszen Bécsben máshoz szokott. A lapok szerint rendszeresen kikocsikáztak a városba, ahol éljenző tömeg fogadta őket.1868-ban aztán arról is meggyőződhettek a gödöllőiek, hogy tényleg jól beszél magyarul az akkor 10 éves Rudolf, hiszen a kastélyba érkezvén magyarul köszönte meg a fogadtatást.
A nevelése ez idő tájt már kevésbé volt poroszos, s azt is tudni lehet, hogy ha a gödöllői kastélyban időzött, akkor reggel hét és nyolc óra között egy „magas paripán szokott kilovagolni.” Azt is megírták az újságok, hogy 1869-ben Gödöllőn, séta közben egy idős, zokogó asszony lépett oda a 11 esztendős Rudolfhoz. A meggyötört nő elpanaszolta, hogy az egyetlen fiát besorozták, pedig ő volt a támasza és nagyon régen nem látta már. Rudolf azt válaszolta, hogy mindenképpen beszél édesapjával, Ferenc Józseffel. Így is történhetett, hiszen napokkal később a fiút elengedték szabadságra és hazatérhetett az édesanyjához.