Абеляр, возможно, боясь гнева Фульбера настоял на тайном заключении брака с Элоизой. Они тайно обвенчались в присутствии только дядей и нескольких друзей. Элоиза вернулась жить в дом своего дяди, а Абеляр — в свой собственный; тайный союз, кажется, был частью соглашения между Фульбером и Абеляром. Но слухи распространялись, и Элоиза публично отрицала, что она была невестой, что возмутило Фульбера и, вероятно, привело к конфликту между племянницей и дядей. После этого Абеляр еще раз помог ей убежать, переодевшись монахиней. Монахини в Аржантей (монастырь, в котором она выросла) приняли ее. Ярость и злость Фульбера по отношению к  Абеляру и Элоизе были безграничны, хотя по законам того времени, жена была по существу собственностью мужа, и когда Абеляр забрал Элоизу из дома ее дяди, он действовал в пределах своих супружеских прав.

Фульбер считал, что его семья опозорена Абеляром, и он решил отомстить, чтобы смыть позор, и именно благодаря жестокой мести трагическая любовь Элоизы и Абеляра осталась в анналах истории на последующие столетия. Абеляр написал, «однажды ночью, когда я мирно спал во внутренней комнате своего дома, они подкупили одного из слуг, чтобы он открыл им дверь, и жестоко отомстили мне, … их ужасное варварство потрясло весь мир». Помощники Фульбера «отрезали те части моего тела, посредством которых, я, по их мнению, нанес им оскорбление». Историки полагают, что Абеляр не был полностью кастрирован, и считается, что ему удалили только яички. Метод был подобен тому, который использовали на фермах того времени для кастрации животных.

Следующим утром парижане услышал о том, что случилось с Абеляром, и он написал в своей биографии, что толпа собралась в доме, где он жил. Хотя большинство было потрясено тем, что случилось с ним, и он приобрел многочисленных известных покровителей и почитателей своего таланта, он потерял свое положение преподавателя соборной школы в соответствии с декретом епископа Парижа. Чтобы наказать Фульбера, тот же самый епископ приказал, чтобы все его имущество и активы были отчуждены, и Фульбер также потерял свой сан— но, меньше чем на два года, поскольку его подпись вновь появляется на официальных документах, связанных с Нотр-Дам-де-Пари в апреле 1119 года..