Rent krasst så gör du fel om du bryter mot er överrenskommelse.
Man kan ju tycka att pappan borde vara flexibel o att ni kunde byta umgänget just under tiden före/efter resan.
men vill han inte så är det så det är, o reser du med barnet ändå så är det du som gör fel.
Jag tycker att ni ska - precis som du skriver - få ner ett avtal på papper, där det även ingår längre sommarumgängen eller liknande, så att ni båda kan ha möjlighet att resa bort med barnet vid dessa tidpunkter.
Nu har ni ju ingen dom på umgänget i dagsläget, så om du väljer att resa ändå så händer det ju inget rent rättsligt.
Men hade ni haft ett avtal eller en dom så skulle pappan kunna begära vite osv om du reser bort med barnet under den tid då barnet skulle ha varit hos pappan.
Hoppas att er konflikt lägger sig snart o att han (ni) framöver kan vara lite mer flexibel.
Vill också tillägga att ensam vårdnad ej hjälper i detta fall eftersom barnet fortfarande har kvar umgängesrätten med sin pappa, o då bryter du lika mycket mot er överrenskommelse om du reser bort med barnet.