Байрон вернулся в Харроу смятенным и пережившим душевный разлад юношей. Он был счастлив вернуться. Как всем робким людям, ему нравилось однообразие существования, в котором все друг другу знакомы и жизнь течет по заведенному порядку. Здесь его хромые ноги уже никого не удивляли. Авторитет среди школьников возрастал. Комната старшего класса в Харроу, старинный зал, отделанный черной панелью трехсотлетнего дуба, была святая святых. Байрон был одним из владык этого святилища. Трижды среди многих знаменитых имен отчетливо было вырезано его имя: «Байрон». В английской школе всегда выделяется и владычествует маленькая кучка избранников-героев, и Байрон был одним из них. Высокий холм Харроу, возвышавшийся над полями, где работали землепашцы, над площадками, где сражались команды играющих в крикет, вызывал в его воображении священный холм Иды, с высоты которого гомеровские боги созерцали труд и войны людей. Но страсти не чужды богам. Пылкая и ревнивая дружба увлекает Байрона. Его любимец теперь — Делавэр, тот, что «слишком красив для мальчика». Клэр ревнует, и не один Клэр. На священном холме Иды бессмертные ссорятся. Высокое представление Байрона о дружбе недоступно даже любимцу Делавэру. Байрон, готовый отдать жизнь, пожертвовать всем ради друзей, не удовлетворяется прохладными чувствами. Каждый день стихи, полные упреков, жалоб и презрения, жгучими ударами поражают любимцев молодого бога:
И в другой раз:
Беспечные мальчуганы, получавшие эти стихи, удивлялись, смеялись, потом забывали. Счастливому существованию Харроу, а также и Байрона угрожало более серьезное событие. Друри собирался на Пасху покинуть Харроу. Последнее время он не был вполне удовлетворен своим любимым учеником. Байрон учился лучше, но какой-то демон беспокойства владел им. Друри поражало в Байроне отсутствие здравого суждения. Этот исключительно развитой мальчик вел себя иногда как одержимый. Друри, чувствуя себя ответственным за моральную чистоту школы, опасался влияния Байрона на своих питомцев. В декабре 1804 года он с большим сожалением вынужден был предложить Байрону покинуть Харроу. Но в это вмешались Хэнсон и лорд Карлейль, и доктора уговорили. Байрон не сохранил чувства обиды против своего учителя. Он любил его. Первый человек, сумевший своей высокой моральной силой внушить мальчику уважение, остался незыблемым авторитетом, несмотря на уязвленную гордость. Последний урок проходил грустно. Молодые люди, окружавшие доктора, чувствовали, что их счастливому существованию наступил конец.
На место Друри было несколько кандидатов, в том числе его брат, Марк Друри; самым опасным его конкурентом был преподобный Джордж Бутлер, молодой человек, крупный математик. Школьники не знали, конечно, действительной ценности ни того, ни другого, но для них достаточно было имени, чтобы сделаться ярыми сторонниками кандидатуры Друри. Они организовали партию Друри, во главе которой стоял Том Уильдмэн, друг Байрона. Один из учеников сказал Уильдмэну: «Я уверен, что Байрон не пойдет с нами, потому что он не захочет быть под началом, предложите ему быть главарем, и он будет наш». Уильдмэн принял совет, и Байрон стал во главе бунтовщиков.
Ректор Харроу назначался советом попечителей. Друри и Бутлер получили равное количество голосов. В таких случаях, согласно хартии колледжа, окончательное решение принимал архиепископ Кентерберийский. Волнения в Харроу усилились. Однажды утром школьники с великим негодованием узнали, что архиепископ утвердил доктора Бутлера. Вручение прав новому ректору ознаменовало начало мятежа. Байрон и Уильдмэн были вдохновителями восстания. Они носили заряженные пистолеты в кармане. Обсуждался вопрос, не убить ли доктора Бутлера. Самые решительные предлагали насыпать пушечного пороха по дороге в старшее отделение и взорвать доктора. Но один из мальчиков, Джемс Ричардсон, упросил товарищей не делать этого, чтобы не разрушать стен, на которых вырезаны имена их предков.