У Андреева было двое сыновей от первого брака. Старший, Вадим (1902–1976), жил с отцом, а в гимназические годы в Петербурге (у профессора М. А. Рейснера) и в Москве, в семье Добровых, родственников А. М. Велигорской, где постоянно воспитывался и второй сын Андреева, Даниил (1906–1959). Дети от второго брака – Савва (1909–1970), Вера (1911–1986) и Валентин (1913–1988) жили постоянно с отцом на Черной речке, вплоть до его смерти.