Oblíbený herec často potěší fanoušky srdceryvnými snímky svých dvou malých dětí. Jeho dcera Petra, 5 let, a jeho syn Šimon, 7 let, jsou děti, které má se svou manželkou Anetou. Karel je také hrdým otcem tří teenagerů z předchozích vztahů.