Mina barns pappa skäller konstant

Jag och mina barns pappa gick isär i april förra året.
Vi har två döttrar på två och tre år. Han har sedan innan två döttrar på 12 och 16 år. Deras mamma har ja alltid haft väldigt god kontakt med och vi jobbat nu tillsammans.
Problemet ligger i våra barns pappas humör. Han har inget tålamod och ber barnen hålla käft, kan säga saker som : håll käften för fan, e du helt dum i huvudet eller, ge fan i det där osv till alla fyra. 16åringen har blivit utslängd tre ggr på några månader och 12åringen har ingen självkänsla kvar alls.
Jag lever med en annan nu som behandlar mina barn som hans egna. Det var först när jag träffade honom som jag förstod hur en pappa ska vara mot sina barn. Gör så fruktansvärt ont att veta hur illa behandlade barnen blir när dom är där(vv) och eftersom han är så fruktansvärt svår att kommunicera med drar man sig för att ta upp det. Samtidigt vet jag att om jag inte gör något snart kommer mina små älsklingar få samma dåliga självkänsla som deras storasyster... Hur ska jag gå tillväga?