Несмотря на разногласия, два противоположных лагеря продолжали работать в тесном сотрудничестве. Для поддержки обоих женских колледжей 22 июня 1878 года была создана единая организация с длинным названием «Ассоциация продвижения женского образования в Оксфорде»
Нужно сказать, что хотя многие университетские преподаватели тесно сотрудничали с Ассоциацией, Оксфордский университет как официальная структура полностью игнорировал женщин и все с ними связанное. Вопрос о том, смогут ли женщины посещать лекции и занятия того или иного профессора, пустят ли их в аудитории и лаборатории того или иного колледжа, оставался всецело на усмотрение лектора, тьютора или ректора.
Конечно же и сопротивление было значительным — как внутри университета, так и вне его. Уже давно раздавались голоса, утверждавшие, что женское образование губительно для нации. Было довольно широко распространено убеждение, что занятия вредят женскому здоровью, особенно репродуктивному — считалось, что ученые женщины не смогут рожать. Университетских донов, впрочем, волновало не столько женское здоровье, сколько собственные удобства. Не нарушат ли женщины покой и уединение университетских садов? Не будут ли отвлекать студентов? Не станут ли назойливо вмешиваться в академическую жизнь?
С самого начала Ассоциация решила действовать очень осторожно — ни в коем случае не раздражать университетское сообщество, держаться тише воды ниже травы. Для этого нужно было прежде всего отмежеваться от образа «новой женщины», феминистки и суфражистки, и создать образ скромной и трудолюбивой школярки, которая, обладая всеми достоинствами викторианской леди, сочетает их с любознательностью и жаждой знаний. Ассоциация с большой тщательностью подошла к выбору ректоров.
Англиканский Леди-Маргарет-Холл, который описывал свое будущее существование как «жизнь
Сомервиль, обещавший своим будущим обитательницам «жизнь
Ректоры с самого начала во всем поддерживали друг друга, обе посетили Кембридж, чтобы набраться мудрости у мисс Дэвис и мисс Клаф (которые к тому времени, преодолев разногласия, тоже выступали единым фронтом), но не собирались в точности копировать кембриджский опыт.
Оба колледжа расположились на некотором расстоянии от центра Оксфорда — Леди-Маргарет-Холл чуть дальше, на взятых в долгосрочную аренду землях колледжа Сент-Джонс, среди садов, прямо у реки Черуэлл; Сомервиль чуть ближе, на территории Уолтон-Хауса, который тоже принадлежал Сент-Джонсу (позже его удалось выкупить). Денег у первых колледжей было совсем мало, так что обставляли помещения всем миром — друзья и единомышленники присылали мебель, ковры, картины и т. д.
Неясно было, удастся ли набрать студенток. Несмотря на то, что оплата была очень скромной в сравнении с мужскими колледжами, сама идея тратить деньги на образование дочерей была в то время довольно непопулярной. Считалось, что таким образом семья обделяет сыновей, которым предстоит зарабатывать себе на хлеб, что для женщины образование — лишь игрушка, причем вредная, которая, возможно, помешает ей выйти замуж и устроить свою жизнь. Перед образованной женщиной и впрямь не открывалось никаких радужных перспектив, хотя она и могла обеспечить себе заработок преподаванием. Кроме того, затея казалась рискованной и сомнительной — не повредит ли университетская среда девичьей скромности? Мисс Вордсворт, приводя в порядок помещения колледжа, жаловалась, что чувствует себя «как лысый, который на всякий случай носит с собой расческу».