Своё детство с 3 до 11 лет Николай Алексеевич провел в родовом имении, в деревне Грешнево Ярославской губернии. Рядом с усадьбой проходил Костромской тракт, соединявший по левому берегу Волги Ярославль и Кострому. Именно по нему в 1832 году он поедет поступать в гимназию Ярославля.