В 1938 году Яну запретили жить в Новосибирске, и он с Симой и Анной Владимировной уехал в Барнаул. Уезжая, продали дом в Новосибирске и на вырученные деньги сумели построить в Барнауле хороший рубленый дом из двух комнат и кухни. При доме хороший участок земли для огорода. Здесь же сажали картошку. Сима поступила на работу в Крайторготдел кассиром-бухгалтером. Ее ценили на работе, а это место облегчало ей доступ к товарам. В то время товары в магазине продавались большей частью по "ордерам" (карточкам), а работа в Крайторготделе давала возможность приобретать кое-что дополнительно. Поэтому войну они пережили сравнительно не голодно.
Ян работал инженером в строительной организации. В 1941 году с началом войны его опять арестовали: сразу стали собирать недобитых "врагов народа". В действительности он не был активным противником режима, хотя и сторонником его назвать трудно. Поводом для ареста послужил анекдот, рассказанный в большой компании сослуживцев на именинах Симы:
"Едут в поезде трое. Один спит на верхней полке, а двое других рассказывают друг другу политические анекдоты:
- Вы знаете, чем отличается Сталин от осла?
Тот с верхней полки поднимает голову и грозно спрашивает:
- Ну, и чем же?
Рассказчик, испуганно:
- Ничем, ничем..."
Ян рассказывал, что его не пытали. Следователь приходил каждый вечер, и они всю ночь мирно беседовали. Следователь выспрашивал всю его жизнь. Предлагал честно признаться в отсутствии любви к Советской власти, в том, что анекдоты рассказывал. За это и посадили. Наверное, его дело с воспоминаниями о жизни после революции до сих пор хранится в архивах КГБ.