Между тем лес вокруг аббатства постепенно уступал место пашням, фермам и селениям. Под дубами укрывались обширные стада ланей. Поместье Байронов не было уже таким уединенным, в этих местах выросли дома других богатых семей. Ближайшая и самая красивая усадьба была Эннели, где жили Чаворты; с Ньюстедом их владение соединялось дубовой аллеей, носившей название «Брачной аллеи», так как третий лорд Байрон женился на дочери графа Чаворта — Элизабет. Этот третий лорд Байрон, живший в конце XVII столетия, был уже почти разорен. Сбылись предсказания, передававшиеся со времени продажи аббатства, — призрак монаха в черном клобуке бродил по ночам под сводами коридоров, и счастья не было роду Байронов. Судьба сыновей четвертого лорда укрепила веру в мрачную легенду — старший сын, пятый лорд Байрон, за убийство был судим пэрами королевства, младший, моряк, был самым злополучным адмиралом во флоте.
История убийства лордом Байроном своего кузена, друга и соседа, хозяина Эннсли, трагически нелепа. Дворяне, владельцы поместий в графстве Ноттингем, жившие в Лондоне, имели обычай собираться раз в месяц в гостинице Звезды и Подвязки. 26 января 1675 года состоялось обычное собрание, все были очень веселы, разговор зашел о том, как лучше всего сохранил» дичь. Мистер Чаворт утверждал, что лучшая мера — это сурово преследовать браконьеров, лорд Байрон считал, что лучший способ сохранил» дичь — это поменьше ею заниматься. Мистер Чаворт не без ехидства заметил на это, что у сэра Чарльза Сиднея (их общего соседа), а также и у него на каких-нибудь пяти акрах побольше дичи, чем у лорда Байрона во всем его владении, и что если бы он не принимал мер предосторожности, у него и вовсе не осталось бы ни одного зайца. Лорд Байрон спросил, где находится владение сэра Чарльза Сиднея. Мистер Чаворт ответил:
— Если вы интересуетесь сэром Чарльзом Сиднеем, он проживает на Дин-стрит, что же касается меня, ваша светлость знает, где меня найти.
Эти слова, произнесенные сухим тоном, положили конец разговору. Когда Байрон вышел из зала, он встретил мистера Чаворта на лестнице. Они обменялись несколькими словами, затем попросили слугу провести их в пустую комнату. Мальчик поставил на стол свечу, и джентльмены заперлись на ключ. Через несколько минут раздался звонок. Мистер Чаворт был опасно ранен. Его перенесли домой, где он умер.
Убийцу пэра может судить только палата лордов. Несколько месяцев спустя лорду Байрону предложили переселиться в Тауэр, отсюда в карете, сопровождаемой конным конвоем, его отвезли в Вестминстер-Холл. Топор палача был положен рядом с заключенным, лезвием к нему. Ноттингемские дворяне, присутствовавшие во время ссоры, были подвергнуты допросу. Первый осторожный свидетель ответил:
— Я, джентльмены, туг на ухо.
Хирург засвидетельствовал, что шпага вошла в пупок и сделала большое отверстие в желудке. Его спросили, является ли эта рана причиной смерти мистера Чаворта. Он сказал, что в этом не сомневается. Лорд Байрон не признал себя виновным. Затем последовал опрос мнений, начиная с наименее родовитых дворян и кончая принцами крови. Подсудимый был признан невиновным в убийстве, но повинным в человекоубийстве, что по специальному статуту пэров было равносильно оправданию. Глашатай провозгласил:
— Слушайте, слушайте!
Прочли приговор. Лорд-канцлер переломил белый жезл, и Уильям, пятый лорд Байрон, вернулся в свое владение в Ньюстед.