Büntetését a brjanszki erdő egyik GULAG-táborában kezdte meg, később megjárta Mordóviát is. Dolgozott fakitermelésen, asztalosüzemben, ruhagyárban és portréfestőként is. 1954-ig családja azt sem tudta, hogy életben van-e még. Az atya itt is végig igyekezett tartani a lelket nemcsak magyar, hanem más nemzetiségű fogolytársaiban is. Erre később így emlékezett: „Ezért voltam én a legboldogabb ember az egész Szovjetunióban, mert rám talált az életfeladatom.” Ezt a célt szolgálta a közösen megalkotott „túlélés négy szabálya” is. „1. A szenvedést nem szabad dramatizálni! Nem szabad panaszkodni, mert attól gyengébb lesz az ember. 2. Az öröm szükséges a túléléshez. Ezért észre kell venni és tudatosan kell keresni az élet apró örömeit. 3. Nem vagyunk tökéletesek, de itt és most kell megmutatnunk, hogy különbek vagyunk rabtartóinknál. Ez mozgósítja az életenergiákat. 4. A negyedik szabály kicsit vallásos: akinek van hová kapaszkodnia, annak könnyebb. Mi hívők, ha a Jóistenbe kapaszkodunk, rájövünk, hogy Ő is akarja túlélésünket. A négy szabály a beszélgetések során alakult ki – nem én találtam ki –, és áthatotta az egész lágeréletünket.”
Ez a gyakorlatban például úgy nézett ki, hogy az 1952-es helsinki olimpia idején örömolimpiát rendeztek, amelyet az nyert, aki a nap végén a legtöbb apró örömöt tudta felsorolni. Bármennyire meglepő, rendszeresen misézett, amelyhez a bort a kaukázusi foglyok otthonról kapott szőlője szolgáltatta, ostya pedig kenyéradagjukból – illetve egy ideig a moszkvai izraelita hitközség által az egyik zsidó rabnak küldött maceszból – lett.
Az állambiztonság közel két évtizeden át megfigyelés alatt tartotta