kämpar jag mot hans avlidna sambo

Hej
 Har träffat en underbar kille för 2 månader sedan.  Vi är samma ålder 57, hans sambo dog för 2 år sen och jag blev skild efter 36 års äktenskap, för 2 år sen.  Vi bor separat och har inga tankar på att flytta ihop, är älskare.  Allt fungerar jättebra och vi har så roligt när vi är tillsammans och han är en underbar älskare.  Men när han kommer, händer det att han ropar sin döda sambos namn! Ibland blir han medveten och försöker dölja det.  Det får mig att känna mig lite ledsen och otillräcklig!  Jag har inte sagt något till honom, hoppas att han kommer ur det men vet inte vad jag skall göra. 
Det är ju klart att han inte är klar med sitt sorgearbete och jag har ju mitt eget (min man blev mentalsjuk, gick inte att leva ihop längre men vi är goda vänner) men jag ropar inte på ex-et när vi har sex!
Hur gör jag?