Ove - romanens fortæller - er praktiserende læge i Oslo. Han er gift. Han har børn. Han er en mand, som vil gøre godt. Være en god læge for sine patienter, en trofast ægtemand, en god far. Han elsker sin kone. Men han er også en mand, som let lader sig fascinere af kvinder, og som bare må udleve og følge sine lyster. Han kan bare ikke lade være. Han er utro, da han er 33, han er fortsat på kvindejagt, da han har passeret de 60. Han er sin første kone utro med den kvinde, som bliver hans anden. Han glider fra forhold til forhold, fra kvinde til kvinde. Når han risikerer at miste alt, overfaldes han af pludselig angst, men han er ude af stand til at ændre kurs. Hjem til mig følger Ove og hans livslange utroskabsodyssé. Fra han er ung, nyuddannet læge, til han nærmer sig pensionsalderen.