Внешнее спокойствие и любовь к уединению шли у него рядом с глубокой внутренней отзывчивостью на различные явления общественной и частной жизни. Разборчивый в друзьях и не очень податливый на поспешное сближение, он не торопился следовать нашей мало похвальной и приводящей к горьким разочарованиям привычке открывать чуть не каждому встречному свой внутренний мир. <…> Но к скорбям и радостям тех, в дружбу кого он уверовал, он умел относиться с живым сочувствием, со словом горячего и настойчивого ободрения, с деликатным участием оценивая и освещая их душевные переживания. В интимной, дружеской беседе он оживлялся и преображался. Молчаливый и скупой на слова в большом обществе, он становился разговорчивым вдвоем, и его живое слово, образное и изящное, лилось свободно и широко. Но все шумное, назойливое, все имевшее плохо прикрытый характер допроса его и раздражало и пугало, заставляя быстро уходить в свою скорлупу и поспешно отделываться от собеседника общими местами.
Евдокия Петровна Левенштейн:
Если он на улице завидит, бывало, еще издалека кого-либо из наших знакомых, то тотчас же сворачивает куда-нибудь в сторону, избегая встреч.
Виктор Иванович Бибиков:
И. А. Гончаров живет уединенной, замкнутой жизнью, никогда не появляясь ни на каких литературных вечерах, обедах или юбилеях, и в Литературном обществе, почетным членом которого И. А. Гончаров состоит со дня его основания, мне удалось видеть Ивана Александровича всего один раз.
Леонид Николаевич Витвицкий:
Всяких оваций и публичных чествований Иван Александрович боялся пуще огня и упорно отклонял все приглашения на обеды, торжественные собрания и т. д., ссылаясь на свои лета и недомогание. Не особенно охотно завязывал Иван Александрович и новые знакомства, но старые поддерживал довольно усердно.
Анатолий Федорович Кони:
Когда возникла мысль о его литературном юбилее, Гончаров пришел в болезненное волнение, убедительно и настойчиво отговаривая всех, кто мог быть прикосновен к организации этого празднования, оставить всякую мысль об этом, угрожая, в нарушение своего сложившегося житейского обихода, покинуть среди зимы Петербург и уехать «куда глаза глядят», оставив юбилейное чествование без виновника торжества. Только после неоднократных попыток и с большим трудом удалось уговорить его принять самый тесный кружок его друзей по «Вестнику Европы», поднесших ему мраморные столовые часы с бронзовым изображением Марфиньки из «Обрыва» и воздержавшихся, щадя старика, от всяких приветственных речей.
Сигизмунд Феликсович Либрович:
Иван Александрович — как это небезызвестно всем сколько-нибудь знающим его — всегда жалуется на нездоровье, хотя как в семидесятых годах, так и теперь никто не решился бы назвать его больным, судя по бодрой, живой внешности.
Анатолий Федорович Кони:
Нервная восприимчивость, сидячая по необходимости жизнь и сильная склонность к простуде отражались на его настроении иногда в чрезвычайно сильной степени. До чего это доходило, видно из письма его к Стасюлевичу в 1868 году из Киссингена: «Подул холод, — пишет он, — нашли тучи, и все это легло мне на душу, и опять наверх всплыли мутные подонки, и опять я бросил перо, повесил голову и стал видеть скверные, преследующие меня сны; опять дружеские лица стали обращаться во врагов и кивать мне из-за углов. Мне опять стало душно, захотелось и в воду, и в огонь, и в Новый Свет бежать и даже уйти совсем на тот свет. Стоит ли писать дальше?»
Дмитрий Николаевич Цертелев (1852–1911),
Гончаров любил иногда подтрунить над старым швейцаром гостиницы. Раз, входя в нее, он совершенно серьезно спросил его:
— Не у вас ли остановился Робинзон?
— Как? — переспросил швейцар.
— Робинзон Крузоэ, — пояснил Гончаров.
В другой раз, выходя из той же гостиницы, Гончаров встретил девицу легкого поведения, которая предложила ему следовать за собой. Он отказался, сославшись на свой возраст.
— С меня чего взять… я старик. А вот там идет купец богатый, богатый, — указал он девице на шедшего впереди Михаила Матвеевича Стасюлевича.
Сигизмунд Феликсович Либрович:
С удивительною откровенностью сознается, например, Гончаров, что для него «не было в жизни ничего гнуснее, как платить за книгу».