Андрей Васильевич не отличался общительностью. В те вечера, когда Александра Дмитриевна была свободна от театра, ей приходилось довольствоваться ведением хозяйства. И не без умиления поглядывать на своего мужа, который, со скрупулезной точностью зафиксировав семейные расходы, с не меньшей скрупулезностью записывал в свой дневник подневный репертуар русской драматической труппы.
Театральный журнал Андрей Васильевич начал вести с 1 сентября 1794 года. Позже, при переписке первой тетради, он точно укажет эту дату, отметив четким, не допускающим помарок почерком: «Начало службы и начало глупости вести журнал. А. Каратыгин». Привычку вести подневную запись репертуара не оставит он до самой своей отставки от театра. И до самой смерти Яковлева будет продолжать особо, наряду с ролями Александры Дмитриевны, выделять и роли ее партнера, чем окажет огромную услугу как всему русскому театру, так и биографам актера.
Таким добропорядочным, вызывающим невольное уважение был «счастливый» соперник Яковлева. По своим характерам, эмоциональному складу они были в полном значении этого слова антиподами. Каратыгина не могла не раздражать расточительность, широта, беспорядочная щедрость натуры Яковлева. В то же время Яковлев не мог скрыть легкой усмешки по отношению к бережливости, рациональной аккуратности, сдержанности Каратыгина (о чем несколько позже и намекнул Степану Жихареву). Как не мог скрыть и естественной зависти к тому, кто с полным правом называл своею женой женщину, которую любил он сам.
Когда зародилось его чувство? Стихи, посвященные А. Д. Каратыгиной, по всей видимости, относятся к концу XVIII и к первому десятилетию XIX века. Во всяком случае, последнее из них — «Мрачные мысли», самое значительное по биографическим данным, написано в 1810 году. Именно здесь довольно четко просматривается начало «горького романа» автора.
Стихотворение было написано в минуту отчаянья. В тот момент, когда с высоты тридцати семи лет «большое видится на расстоянье». И это большое, окрашенное в сумрачные тона размышлений человека, пытающегося рассчитаться с жизнью, четко выделяло контуры пережитого, теряя порою его полутона.
Такие полутона можно почувствовать в другом, более раннем стихотворении Яковлева, открывающем цикл его любовной исповеди, в сборнике, напечатанном через десять лет после смерти актера. Стихотворение это, названное составителями сборника (а может быть, и самим Яковлевым) «Жалобы влюбленного», откровенно подражательно, написано по всем законам романсной лирики XVIII века. Но оно привлекает первозданностью «чувствований» автора, безыскусственной искренностью лирических признаний. Несколько строк из него следует привести хотя бы потому, что, по утверждению многих мемуаристов, в них довольно явственно проступает портрет возлюбленной автора, соответствующий внешности Каратыгиной: голубые глаза, светлые волосы, нежный цвет лица, благородство осанки.
Еще больше конкретных примет развивающихся взаимоотношений Яковлева с любимой им женщиной содержится в стихах, адресованных «неведомой» Аглае.