První osudová žena
Höger měl řadu lásek, z toho dvě osudové. Sedmnáct let prožil se svou bývalou studentkou, herečkou Zdenkou Procházkovou. Jiskra mezi nimi přeskočila během natáčení filmu Mrtvý mezi živými (1946). Při jedné z intimních scén vydal režisér Bořivoj Zeman pokyn, aby nic nepředstírali a líbali se doopravdy a vášnivě. "A tak mě Karel chytil… A už nepustil," vzpomínala Procházková, která si Högera později vzala.