Я родился в октябре 1880 года; отцу было уже сорок три года; год его рождения падает на год смерти Пушкина; в год смерти Лермонтова он прекрасно помнит себя осажденным лезгинами в маленькой крепостце, близ Душета, где он родился.
Отец его — военный доктор, сосланный Николаем Первым и, кажется, разжалованный; так попал из Москвы в Закавказье он, чтоб годами службы себе завоевывать положение; храбрец и наездник, он пользовался уважением среди врагов-лезгин: он их пользовал часто, когда попадались в плен они; он безнаказанно ездил один в горах; «враги», зная его, его не трогали; выезжали порою к нему и выстреливали в воздух в знак мирных намерений; первое детское воспоминанье отца: гром орудий в крепостце, обложенной лезгинами.
Семейство деда было огромно: четыре сына, четыре дочери; средств — никаких; позднее дед перебрался в Киев, где был главным врачом какого-то госпиталя; под конец жизни с усилием выстроил он себе дом на Большой Владимирской, чуть ли не собственными руками; здесь умер он от холеры в один день с бабушкой; по сие время Киев — место встречи с родными, порой неизвестными; мои 4 тети вышли здесь замуж; одна за Ф. Ф. Кистяковского (брата профессора), другая за члена суда, Жукова, третья за инспектора гимназии, Ильяшенко; четвертая за Арабажина, отца небезызвестного публициста (потом профессора) К. И. Арабажина.
Кавказ — трудная полоса жизни деда; когда отцу минуло десять лет, его посадили впервые верхом: и отправили по Военно-Грузинской дороге с попутчиком: в Москву; здесь устроили у надзирателя первой гимназии, в которой он стал учиться; жизнь заброшенного ребенка у грубого надзирателя была ужасна: ребенка били за неуспехи детей надзирателя, которых должен был готовить отец же, хотя они были ровесниками и соклассниками; он молчал; и шел — первым (кончил с золотою медалью).
Вспоминая невзгоды, перенесенные им, он грустнел; когда он перешел в пятый класс, то из письма деда понял: деду его содержать нелегко; тотчас же пишет он, что-де прекрасно обставлен уроками; и в помощи не нуждается; с пятого класса он уроками зарабатывает себе оплату гимназии, пропитание и квартирный угол; в седьмом классе снимает он угол у повара, — в кухне, под занавескою; в это время завязывается его знакомство с С. И. Жилинским (впоследствии генерал-лейтенантом, заведующим топографическим отделом в Туркестане); второе знакомство: к нему приходит в гости гимназист первой гимназии Н. И. Стороженко, сын богатого помещика Полтавской губернии.
Связь со Стороженкой продолжалась всю жизнь.
Третий товарищ отца по гимназии М. В. Попов, впоследствии — наш домашний доктор, лечивший отца до смерти; уже впоследствии, молодым человеком, он сходится и одно время дружит с М. М. Ковалевским, с которым даже живет вместе: в Париже.
Стороженко, Ковалевский, думается мне, и были теми, кто смолоду втянул отца в круг литераторов и общественных деятелей эпохи семидесятых годов; одно время отец — непременный член всяческих собраний и начинаний; он волнуется организацией «Русской Мысли», как личным делом; громит учебный комитет; он делается одним из учредителей Общества распространения технических знаний; состоит товарищем председателя Учебного Отдела его; вносит речью своей бодрость в Отдел, разгромленный правительством в 1875 году; он спорит с С. А. Юрьевым; он бывает и в лево-либеральных, и в славянофильских кругах; в свое время он был близок с Янжулом, Стороженко, Иванюковым, Усовым, Олсуфьевыми, Алексеем Веселовским, которого он всячески соблазняет в свое время профессорскою карьерой (в то время Веселовский высказывал желание готовиться к опере), с Танеевыми, Боборыкиными и т. д.; он хорошо был знаком с Николаем и Антоном Рубинштейнами, с композитором Серовым, с Писемским, Львом Толстым, историком С. М. Соловьевым, с Троицким, Владимиром Соловьевым, с Герье, с Тургеневым, с Захарьиным, с Зерновым, Склифасовским, Плевако, Б. Н. Чичериным, С. А. Рачинским и сколькими другими в то время видными деятелями Москвы.
Мне мало известны его отношения с Рубинштейнами, Серовым, Тургеневым, Писемским, Григоровичем и другими деятелями искусства; знаю, что на многих он производил сильнейшее впечатление; композитор П. И. Чайковский пишет в 1867 году брату: «Познакомился… недавно с очень интересным профессором Бугаевым. Невероятно ученый и очень умный малый. На днях он до глубокой ночи говорил нам об астрономии…;…до какой степени мной овладел ужас, когда пришлось встретить… истинно просвещенного человека»… (М. Чайковский, «Жизнь П. И. Чайковского», том I, стр. 268); в воспоминаниях Чичерина последний с недоумением передает восторг Тургенева перед ораторскими способностями отца; Чичерин не понимает этих восхищений, отмечая неинтересность одной из речей отца, прочтенной по записке; Чичерин и не мог понять отца, ибо они — зенит и надир; а что касается до «Записки», то отец всегда терял, когда схему речи записывал, он блистал импровизациями: и Тургенев, по словам Чичерина, метил его, тогда «молодого ученого», в лидеры левой группы им чаемого парламента (см. воспоминания Б. Н. Чичерина); помню, как мать рассказывала: на юбилее Н. И. Стороженко отец так поразил речью Сумбатова-Южина, что он, не будучи лично знаком с матерью, подошел к ней представиться, чтобы выразить ей свое восхищенье; однажды на каком-то юбилейном собрании старики, военные инженеры-механики, после речи отца бросились его качать; в 1863 году, проживая в Берлине, он поразил воображение будущего инспектора Межевого Института, Рашкова, горячностью своих речей в ресторанчике, где собирались молодые русские ученые, проживающие в Берлине, и т. д. (см. брошюру Л. К. Лахтина «Николай Васильевич Бугаев»).