Sí, es un incumplimiento claro. Las visitas no son solo un derecho, son una obligación en cuanto se incluyen en el convenio regulador. Al incluirse tú tienes derecho a esos días libres y a que la manutención corra a su cargo durante esos días, y se te ve privada de ambos por decisión unilateral de tu ex.
Si es una situación repetida en el tiempo (hablas de 5 años ya) puedes solicitar modificación del convenio por incumplimiento y que se le retiren esos días de visita de vacaciones que no cumple, y que se aumente la pensión en consonancia.