Дом в Токмаковом переулке подвергся уплотнению: с 1918 г. здесь были размещены многочисленные организации и жильцы, Николаю Александровичу и Ольге Флорентьевне пришлось перебраться в маленький домик по соседству (Денисовский пер., № 6), а затем в квартиру своей невестки, жены младшего сына Константина в доме № 25 по Старой Басманной улице. Н.А. Варенцов еще сохранял надежду как-то наладить жизнь: пытался, следуя провозглашенной советской властью «новой экономической политике», заняться предпринимательством, организовал товарищество по торговле тканями с Туркестанским краем, но в 1924 г. деятельность его предприятия была прекращена. Он пытался быть полезным своими знаниями и опытом, предлагая услуги в качестве консультанта ВСНХ по хлопковому делу. Об этом времени вспоминал А.Н. Варенцов: «Вообще-то семья наша в 20-30-е годы бедствовала и еле держалась на поверхности: время-то — частые обыски, аресты, карточки и полная обобранность. ‹……. › Но я никогда не слыхал от отца жалоб и упреков. Все он принимал как кару за прошлую богатую жизнь».
Репрессии, видимо, за преклонностью его лет, обошли стороной самого Николая Александровича, но не его семью. В 1927 г. был арестован и расстрелян по ложному обвинению ГПУ сын Иван. Зять — Владимир Львович Барановский (за ним была замужем дочь Нина, в первом браке Лист), брат жены А.Ф. Керенского Ольги Львовны, бывший полковник царской армии и генерал-майор, начальник кабинета военного министра Временного правительства, был репрессирован в начале 1930-х гг. В 1933 г. заболела тифом и умерла в Сокольнической больнице тяжело переживавшая гибель сына Ольга Флорентьевна, причем, как вспоминал А.Н. Варенцов, смерть избавила ее от ареста, вместо нее был арестован Николай Александрович, но вскоре выпущен, поскольку сумел доказать, что у него ничего уже не осталось 4*.
Марк, до революции окончивший юридический факультет Московского университета, по возвращении из Одессы работал юрисконсультом, а свободное время проводил за шахматами (он имел первый разряд; в свое время был известным футболистом, в 1911 г. выступал за сборную Москвы). Как выходцы из буржуазных семей, младшие братья Андрей и Константин постоянно испытывали на себе последствия своего социального происхождения: блестяще учившийся Константин не смог получить диплом промышленно-экономического техникума, созданного на базе Александровского коммерческого училища, ему пришлось поступить в заочный строительный техникум; позже братья работали в малозаметных технических конторах. В 1941 г. они были призваны в действующую армию, Константин погиб в ополчении под Москвой.