Критики роптали на то, что он становится понемногу все менее интересным, музыканты обвиняли его в чем угодно — от тусклости до половой дискриминации. Ведущая музыкальная газета интересовалась: «Когда же Бостон наведет порядок в своем симфоническом доме?», — а оркестранты осыпали Озаву в бостонской прессе гневными упреками. «Наш оркестр это, быть может, лучшее в мире собрание инструменталистов, однако по звучанию его ничего подобного не скажешь» — заявила скрипачка Дженни Шеймс. «Мы отчаянно нуждаемся в ком-то, кто придет будет дирижировать нами, пользуясь немецкой музыкальной литературой, человека
Оркестры выступали против того, в чем видели нерешительность Озавы, его неуверенность в себе. Он мог назначить первую трубу, а на следующий год уволить ее — после чего она возвращалась назад через суд. Он непрестанно проводил пробы новых музыкантов, на целый сезон оставляя важные для оркестра места пустующими. Некоторых музыкантов особенно гневило его нежелание выдвигать на видные места талантливых женщин. Он же винил себя в том, что был слишком демократичен и слаб с музыкантами, которые видели в нем новичка — «Я не могу сказать: „Довольно!“, потому что я здесь что-то вроде ученика». Его исполнение музыки было скрупулезно отделанным, однако концерты и записи произведений поздних романтиков оставляли впечатление некоторой отстраненности. Прославленные коллеги восхищались его колоссальной памятью и безупречной манерой. «На концертах он служит для меня источником великого вдохновения, — сказал привередливый польский пианист Кристиан Цимерман, — его твердое понимание того, на что он способен, производит на меня огромное впечатление. Я очень верю в его мастерское владение концертной ситуацией, — он изменяет какие-то вещи от одного концерта к другому, не говоря об этом оркестру, просто зная, что сможет ясно показать, что ему требуется. Это фантастика!».
Казалось, что Озава приберегает силы для гала-концертов и выступлений в Европе. Он дал в Париже историческую премьеру единственной оперы Оливье Мессиана «Святой Франциск Ассизский». И напротив, сочинения, заказанные им в 1981 году для празднования столетия БСО, оказались не весьма значительными произведениями американских композиторов, двумя ничем не выдающимися симфониями композиторов, живущих в Британии, плюс экзотической ораторией Майкла Типпетта, которую исполнил его персональный дирижер Колин Дэвис. Украшением этой неяркой компании стал Дивертисмент для оркестра Леонарда Бернстайна.
Расхождение с тем, как Кусевицкий отбирал лучшие произведения величайших из живших в его время композиторов, просто бросалось в глаза. Великая музыка, которой дал жизнь Бостон — симфонии Мартину, Онеггера и Хиндемита, — при Озаве из программ оркестра исчезла, а сам оркестр отступил от передней линии творческого фронта в тылы. В отличие от Кусевицкого, Озава никогда в Бостоне не жил. У него имелся дом на Стокбридж-Маунтин, но то было просто удобное временное пристанище. Его вторая жена Вера жила с их детьми в Японии и навещала Бостон только в пору школьных каникул. Жалованье Озавы, достигшее в 1986 году 381 000 долларов, переводилось на счет компании «Вероза» (анаграмма имени жены) — вполне законная уловка, позволявшая платить поменьше налогов Дяде Сэму.
Да и вообще связи Озавы с Японией все это время оставались нерушимыми, — если не считать забастовки оркестрантов в 1971 году, вызванной его «неуважительным отношением» к старшим музыкантам оркестра. Япония оставалась опорной базой Озавы, а величайшим триумфом бостонского дирижера стало дальневосточное турне 1979-го, когда оркестр из США впервые посетил Китайскую народную республику.