После смерти отца Макария скитоначальником был общий для обители и Скита духовник иеромонах из дворян о. Пафнутий, высокой духовной жизни человек. А старцем стал иеромонах Амвросий, который, будучи келейником и помощником о. Макария в трудах, с 1846 года помогал ему, по благословению владыки Николая, Калужского епископа, и по духовничеству. Из-за болезни, почти уложившей его в постель, он как иеромонах был отчислен в 1848 году за штат и все силы отдавал старчеству. Жил он в домике, примыкающем к Святым вратам справа (если смотреть с территории вне Скита). Иеромонах Ераст, много лет бывший письмоводителем у старца, близко знавший его, писал в своей книге об Оптиной Пустыни: «При богатых природных дарованиях и обильно наполняющем благодатию Божиею душу богословском образовании, смиренное предание своей воли в послушание простому старцу о. Макарию скоро привлекло на о. Амвросия особую благодать Божию, паче всех сверстников». А о. Климент писал брату: «Мне кажется, что с батюшкою о. Макарием скончалось все утешение мое. Обращаюсь к о. Амвросию, истинному ученику батюшки, проникнутому его духом».
Постепенно имя нового старца завоевало сердца монахов и мирян. Сам же он словно не видел своих трудов, укоряя себя в «неделательном глаголании». Никогда не решился бы он старчествовать, если б не прямое указание о. Макария: «Будешь жить в хибарке по ту сторону ворот, и смотри – вот тебе мой завет: никого из приходящих не оставляй без утешения».
Преподобный Амвросий прожил в этом домике более тридцати лет, не имея возможности совершать Литургию, но исполняя свое келейное правило, принимая ежедневно множество людей. Как и при прежних старцах, без совета с о. Амвросием ничего в обители (и в монастыре, и в Скиту) не предпринималось.
В Скит потянулся народ… Вот приходит келейник:
– Батюшка, вас ждут.
– Кто там?
– Московские, тульские, орловские и прочие народы.
Из хибарки о. Амвросия два выхода – наружу, за Скит, для женщин, которым в Скит входить возбранялось, и внутрь, для мужчин. Старец выходил, на ходу отвечая на вопросы, благословляя, – некоторых приглашал к себе для беседы в келлии. Он называл по имени незнакомого человека, напоминал иным забытые грехи, иногда исцелял от болезней, нередко прикрывая свои подвиги шуткой, например: «Как жить? Жить – не тужить, никого не осуждать, никому не досаждать, и всем мое почтение»…
Архимандрит Агапит (Беловидов) в Житии старца пишет: «Самое слово его, растворенное солью благодати Божией, имело особую силу и было могучедейственно. Не говорим уже о том, что все, с верою обращавшиеся к старцу, смиренно преклоняли пред ним свои выи с готовностью исполнять всякое его слово; много было и из нерасположенных, по неведению, к нему людей, при первом с ним знакомстве переменявших свой свирепый нрав на агничную кротость… То он с лаской глядел на вас, то смеялся с вами одушевленным молодым смехом, то радостно сочувствовал, если вы были довольны, то тихо склонял голову, если вы рассказывали что-нибудь печальное, то на минуту погружался в размышление, когда вы хотели, чтоб он сказал вам, как поступить в каком-либо деле, то решительно принимался качать головой, когда отсоветывал какую-нибудь вещь, то разумно и подробно, глядя на вас, все ли вы понимаете, начинал объяснять, как надо устроить ваше дело».
«Вообще первая встреча с о. Амвросием поражала посетителей, – вспоминал о. Ераст. – Ожидая увидеть старца дряхлого, серьезного, строгого, молчаливого, глаза посетителя вдруг встречали радостное сухонькое старческое личико с добрыми проницательными глазами, с улыбкою и ласкою встречающего вас смиренно в полулежачей позе, в камилавке, черном подряснике, и уже благословляющего вас дрожащей сухонькой ручкою, при ободряющем и всепрощающем взгляде…»
Не только простой народ обращался к старцу Амвросию. Бывали у него и с ним переписывались епископы – Воронежский Антоний, Саратовский Тихон, Томский Петр (живший одно время в Скиту на покое), митрополит Московский Иоанникий. Обер-прокурор Св. Синода граф А. П. Толстой трижды гостил в Скиту. Великий Князь Константин Константинович Романов, поэт, президент Академии наук, командир Преображенского гвардейского полка, генерал-инспектор военно-учебных заведений посетил Скит дважды. Духовным чадом старца был Константин Леонтьев, писатель и философ, в тайном постриге монах Климент. Знал старца Амвросия и виделся с ним церковный писатель Евгений Поселянин. Еще можно из посетителей старца назвать Достоевского, Владимира Соловьева, а также посетившего его Льва Толстого, впрочем, не получившего по своей гордости от беседы с ним никакой пользы, – не внял он призыву о. Амвросия покаяться в своих заблуждениях.