Derecho a vacaciones, en la provincia de Girona (17005)

Buenos dias.
El pasado 20 de diciembre de 2013 fuí padre, me correspondian 4 dias de permiso porque el parto fué fuera de mi lugar de residencia y luego los 13 dias de paternidad.
El caso es que el cuarto dia (el 23 de diciembre) correspondia con el primer dia de vacaciones de navidad de la empresa y yo creia que podria realizar ese dia de vacaciones mas adelante y no lo perderia. Pero la empresa me ha dicho que no, porque ese no era un dia de vacaciones normal, sinó un dia que la empresa puso de festivo por exceso de horas ya que sinó a lo largo del año se hubieran echo mas horas laborables de las que decia el convenio.

¿Es cierto que si es un dia festivo por exceso de horas i no por vacaciones "normales" no hay derecho a recuperarlo?