*Когда в 80 - е годы XVIII в. эмиграция армян в Россию усилилась, И.Л. Лазарев ходатайствовал по делам своих соплеменников в правительстве и перед императрицей, помогал им материально. Он думал об организации школ для детей переселенцев. В письме от 1785 г. граф выразил желание «начать откладывать погодно всего до 200 тыс. руб. капитала для заведения и содержания училища в пользу нации своей». За год до смерти в духовном завещании он подтвердил это намерение. Его брат [[Лазарев Еким Лазаревич|Еким (Оваким)]], став наследником, выполнил волю старшего Лазарева и, кроме того, внес от себя несколько сот тыс. руб. Ему и его сыновьям пришлось приложить немало усилий, прежде чем в Армянском переулке в Москве распахнуло двери новое учебное заведение.
*И.Л. Лазарев был женат на Екатерине Ивановне Мирзахановой (01.04.1740 – 17.08.1819). Их единственный сын Артемий, родившийся 24 июля 1768 г. в С.-Петербурге, наследник титула и богатств, граф, премьер-майор, генерал-адъютант князя Г. А. Потемкина-Таврического, погиб в сражении 12 января 1791 г. во время русско-турецкой войны и похоронен в усыпальнице Благовещенской церкви Александро-Невской Лавры в С.-Петербурге.
*О судьбе дочерей И. Л. Лазарева, Анны и Марии, ничего не известно.
*Все здания, построенные И. Л. Лазаревым, создавались по проектам и под руководством крупнейшего архитектора того времени, старшего профессора по классу архитектуры, а затем директора Академии художеств, статского советника Юрия Михайловича Фельтена (1729–1801), автора концепций формирования Дворцовой и Сенатской площадей столицы, проекта одного из чудес света – решётки Летнего сада, отлитой на Урале, проектов многих зданий в С.‑Петербурге, в Москве, дворца в Ропше и других дворцов, руководителя строительства первых гранитных набережных в С.‑Петербурге.
*Живописные портреты И.Л. Лазарева экспонируются в Калужском (художник И.Б. Лампи) и Нижегородском (художник С.К. Зарянко) художественных музеях, в Музее-заповеднике Великого Новгорода (художник А.Ф. Чернышев и неизвестный художник), в Картинной галерее Армении (неизвестный художник). В последней находится также его бюст работы скульптора И.П. Мартоса. Портреты Е.И. Лазаревой – в Калужском (художник И.Б. Лампи) и Нижегородском (неизвестный художник) художественых музеях. Портреты их сына А.И. Лазарева – в Нижегородском и в Калужском художественных музеях (художник И.Б. Лампи), бюст работы скульптора И. П. Мартоса – в Картинной галерее Армении.