У Александра Романовича была огромная библиотека, которую он начал собирать еще во Франции. В ней были книги на разных языках, а также множество географических карт и атласов. Немало книг он унаследовал от отца, Р. И. Воронцова, и дяди, М. И. Воронцова. Впоследствии библиотека Александра Романовича была перевезена Михаилом Семеновичем в его дом в Одессе. От М. И. Воронцова Александр Романович унаследовал и страсть к собиранию архива. Он тратил немало денег на покупку рукописей и снятие копий с отечественных и иностранных документов и даже на первый взгляд незначительных записок или заметок, связанных с российской историей. «Посол наш, гр. С. Р. В.<оронцов>, — пишет, к примеру, в своих воспоминаниях А. И. Тургенев, — по желанию брата своего, гр. А<лександра> Р<омановича>, списал здесь все дипломатические акты по сношениям России с Англией. Я видел этот гигантский фолиант в аршин, если не более, мелким письмом, у гр. М. С. В<оронцова>» 2.
В архиве Александра Романовича хранилась и его обширная переписка (в том числе и копии его собственных посланий). В частности, большая часть писем и рукописей А. Н. Радищева дошла до нас благодаря Александру Романовичу. Его архив также стал впоследствии драгоценной частью архива Михаила Семеновича.
Неподдельный интерес племянника к жизненному пути дяди натолкнул последнего на мысль начать писать воспоминания. Он приступил к работе над ними летом 1805 года, вскоре после отъезда дорогого гостя в Петербург.
Рассказ о своей жизни Александр Романович предварил такими словами: «Они и не годятся и не пишутся для того, чтоб их когда-нибудь печатать для всеобщего сведения. Моя цель — сообщить моим ближайшим родственникам те факты, которые касаются лично меня. Мой племянник Михаил, может быть, найдет в них какие-нибудь сведения и подробности о России, которые могут оказаться полезными для него».
Далее Александр Романович излагает свою жизненную позицию. «Я не лишним считаю заметить, в особенности для пользы моего племянника Михаила, что если я мог служить бескорыстно, беспристрастно и сохраняя мою самостоятельность в той мере, в какой это возможно при абсолютном и довольно безнравственном правительстве и в такой стране, где почти вовсе нет общественного мнения, то этому много способствовал заведенный мною образ жизни. Так как я не любил ни роскоши, ни легкомысленных издержек, то я никогда не находил надобности прибегать к тем просьбам и заискиваниям, к которым должны были прибегать многие высокопоставленные лица вследствие своей чрезмерной роскоши; а потому я мог без труда сохранять искренность и беспристрастие в служебных занятиях, мог не отказываться от моих убеждений и не искать расположения ни людей сильных, ни временщиков». И уточняет: «Я делаю это отступление не для того, чтобы хвалить самого себя, а для того, чтобы оно служило поучением для моего племянника Михаила и чтоб он убедился, что в своих расходах не должно выходить из пределов, соответствующих тому состоянию, какое имеешь. Тогда только ему будет нетрудно сохранить на государственной службе свою самостоятельность, честность и беспристрастие, а также наслаждаться тем домашним спокойствием, которое едва ли возможно при расстройстве денежных дел и при материальных стеснениях»3.
К сожалению, смерть прервала работу Александра Романовича над воспоминаниями. Он скончался 3 декабря 1805 года и был похоронен в Андреевском в усадебной церкви во имя Андрея Первозванного.
Спустя 60 лет внучатый племянник Александра Романовича Семен Михайлович Воронцов решил установить на могиле своего двоюродного деда плиту с соответствующей надписью и огородить могилу железной решеткой. Плита была сделана из мрамора скульптором Руфинони, а решетка ограды отлита на чугунно-литейном заводе в Петербурге. В изголовье могилы было установлено деревянное распятие.
В советское время церковь Андрея Первозванного была превращена в гараж. Надгробие над могилой Александра Романовича было уничтожено. Но теперь церковь отреставрирована, в ней снова идет служба, а на могиле А. Р. Воронцова есть и плита, и ограда, и крест с распятым Христом.
Михаил Семенович покинул Андреевское в мае 1805 года. По прибытии в Петербург он был назначен командиром роты 3-го батальона Преображенского полка. Каждый день, начиная с 4-х часов утра, проходили учения. А так как из-за шумных кутил-сослуживцев вовремя отойти ко сну было невозможно, то спать ему доставалось из трех ночей одну. Он считал, что многие офицеры полка не имеют желания «быть когда-нибудь знающими и полезными членами общества. Было бы им только спокойно и весело, а что будет под старость, это и в ум не входит»4. Большинство сослуживцев Михаила Семеновича наслаждалось веселой и беспечной жизнью в столице, а его, как и прежде, столичная жизнь тяготила.