Hans ex springer runt i hans hem..
Så länge ni inte bor ihop är det väl högst rimligt att han själv får bestämma hur han vill ha det angående både barn och vem som har tillgång till hans hem. Det du kan ta ställning till är inte hur han ska göra och inte, utan hur du själv vill göra och inte.
I ert fall tycker jag att fortsatt särboskap verkar förnuftigt.