De történetesen éppen ebben az évben vált Németország kancellárjává Adolf Hitler is. Voltaképpen a két fél egyszer még majdnem találkozott is: amikor nem sokkal Hitler kancellárrá való kinevezése után tartottak egy éves autókiállítást Berlinben, Ganz olyan közel került a diktátorhoz, hogy le is tudta fotózni őt. Elképzeléseik bizonyos szinten egyeztek:
Hitler is gépesíteni akarta Németországot,
ő is olcsó, széles körben vásárolt autókban hitt, és ő is az innováció híve volt.
Viszont Ganz zsidó származása elfogadhatatlanná tette őt a nácik számára. Néhány hónappal később a Gestapo letartóztatta Ganzot hírlapírói-szerkesztői tevékenységére hivatkozva. A vád az volt, hogy Ganz nagy sikerű szaklapja, a Motor-Kritik lehúzó cikkeket írt más autógyárakról, és csak akkor változtatott hangvételén, ha fizettek neki. Ganz egy hónapot töltött letartóztatásban, majd magas szintű barátai kezeskedtek érte, de mivel szóltak neki, hogy élete veszélyben van,
örökre elhagyta Németországot.