Нельзя сказать, что последние годы правления Генриха III, а также вся жизнь столь радостно встреченного ребенка оправдали эти надежды. Тяжелый труд, выпавший на долю немецкого короля, бывшего в то же время римским императором, — труд, включавший в себя не одну неразрешимую задачу, возобновился. Генрих поступил рискованно, выпустив из заточения герцога Лотарингского Готфрида, чтобы направить его против графа Балдуина Фландрского, некогда его сообщника по мятежу, а теперь вновь поднявшего оружие.
Герб графов Фландрских.
Сам император пошел на Венгрию, мир с которой никогда не был продолжительным. Но он потерпел неудачу, как в 1051-м, так и в 1052 г., и Бавария — немецкая территория, на которую он рассчитывал для покорения Венгрии, была потрясена междуусобицей вследствие распри двух могущественных властителей: герцога Конрада и епископа Регенсбургского Гебхарда, дяди императора. Провозглашение князьями в Трибуре трехлетнего сына Генриха будущим королем могло считаться сомнительным успехом, поскольку клятвы немецких князей не имели большого значения. Примером этому мог служить герцог Баварский, который, вместо того чтобы отозваться на приглашение императора, бежал в Венгрию и потом во главе венгерского войска вторгся в Каринтию. Борьба с Балдуином Фландрским продолжалась. Он не покорялся, несмотря на нанесенное ему имперскими силами тяжкое поражение в 1054 г. В сентябре того же года во время пребывания императора в Майнце к нему явилось из Рима посольство с печальным известием о кончине Льва IX. Послы просили императора назначить нового папу.