Он был женат на женщине по имени Херлев и имел трех сыновей: Ричарда, Ральфа и Вильгельма. Роберт Руанский был единственным во всей Нормандии человеком, который мог воздействовать и на представителей герцогской семьи, и на светских феодалов, и на священнослужителей.