Klimovics aztán 1904-ben kezdte meg a templom építését, ami az első világháború kitöréséig nem készült el, neki pedig a porosz elnyomás elől Oroszországba kellett menekülnie. 15 évre rá, 1919 körül tért vissza szülőfalujába, ekkor már feleségével és lányával, majd nagy valószínűséggel eladta a gazdaságát, és a bevételt a templom építésére fordította, ami miatt a családja elhagyta.
A két világháború között aztán egyre többen bízták rá vagyonukat, és építtették vele a templomot, ami 1929-ben készült el. A hívek a papság helyett egyre inkább Klimovicshoz jöttek, emellett azt mondták róla, hogy „prapavieduje i iscalaje” (prófétál és gyógyít*), és őt magát a bibliai Illés próféta megtestesülésének kezdték tekinteni.