Hur ska jag göra med resa? Behöver råd.

Jag är separerad med två barn. Har en ny kille som även han har två barn. Två av våra barn är lika gamla och går i samma klass.
Förra sommaren bokade vi en resa till Sälen v12 med alla barnen plus min pojkväns syster med familj.
Meningen var att vi hade barnen då så vi kunde åka. Men vid årskiftet när det var 53 veckor var vi tvungna att byta veckorna vi hade barnen pga att mitt ex jobbar skift. Så nu har han helt plötsligt barnen v12 när vi ska åka.

Grejen är att mitt ex har inte kommit över att jag lämnade honom för tre år sedan och tycker inte om att jag träffar någon ny. Så nu vägrar han att släppa barnen v12. Det här känns rent skit tycker jag.

Så nu vet jag inte hur jag ska göra. Har känt hela tiden att får inte mina barn följa med på resan så gör inte jag det heller. Dåligt samvete.
Hur hade ni gjort? Vissa jag pratat med har sagt att jag ska berätta för barnen varför de inte får följa med och att jag ändå ska följa med.

Hur hade ni resonerat?