Свадьба состоялась 25 августа в Дрездене по протестантскому обряду, а в октябре принц с женой вернулся в Нидерланды. Анна Саксонская «жила по-католически», дети были крещены как католики, но семейную жизнь определял лютеранский дух, и Оранский все больше сближался с германскими родственниками.
При брюссельском дворе понимали, что католический образ жизни принца и его жены всего лишь видимость и они часто не обращали внимания на церковные заповеди. Как бы то ни было, аристократический брак принца поднял его политический престиж.
Между тем принца и Анну нельзя назвать счастливой парой. Анна, как ее описывали, была «неуклюжа телом», обладала бешеным темпераментом и столь же бешеным характером. Дилленбургскую семью, часто посещавшую супругов, беспокоило поведение молодой своенравной женщины, хотя та прекрасно знала о трудных семейных отношениях в Бреде. В переписке Гранвеллы можно встретить намеки, указывающие на то, что супруга Оранского все истеричнее, и гессенские родственники даже послали человека для присмотра за ней. На это же принц жаловался и ландграфу.
После 1568 г. о совместной жизни не могло быть и речи. Частое отсутствие принца подтолкнуло взбалмошную женщину к неверности. Мы не хотим подробно рассказывать о трагедии Вильгельма, о «греховных отношениях» его жены с антверпенским адвокатом и судебным заседателем Яном Рубенсом. До того как Анна покинула Дилленбургский замок, 14 ноября 1567 г., у нее родился сын Мориц, будущий правитель Нидерландской республики. После отъезда из замка она временно жила в Кельне; вскоре у нее кончились деньги, и Анна переехала в Зигенский фамильный замок, где ее любовник был арестован и она 22 августа 1571 г. родила внебрачную дочь Кристину фон Диез.
После нарушения Анной Саксонской супружеской верности принц Вильгельм мог считать этот трагический брак расторгнутым… С 1572 г. он почти все время жил в Голландии, вдали от детей и тосковал по семейному очагу. Во время пребывания в Гейдельберге Оранский познакомился с живущей там кальвинисткой Шарлоттой де Бурбон, дочерью католического герцога Луи де Монпансье. Ребенком она была отослана в аббатство Жуэр, в тринадцать лет ее избрали аббатисой, а в феврале 1572 г. она оттуда бежала и нашла приют при дворе курфюрста Фридриха III в Гейдельберге.
Брачное предложение понравилось не только принцессе, но также и курфюрсту, и было благосклонно воспринято дилленбургской семьей, хотя все и побаивались скандала со стороны Гессенских и Саксонских домов. По этой причине брат Вильгельма Иоганн высказался, что это дело «нужно улаживать по-доброму и тихо, а не опрометчиво и торопливо». Он не хотел задеть за живое гессенских родственников Анны, которые потом на рейхстаге в Регенсбурге в резких словах протестовали по этому поводу, утверждая, что Шарлотта де Бурбон гораздо хуже Анны!