Congé payer supprimer

 Je suis salarié en agroalimentaire, j'ai actuellement un compteur en négatif je suis a moins 20heures (du a la baisse de boulot cette été ) J'ai pris mes deux semaines de congé payé cette été il m'en reste donc 3 a prendre pour cette hiver. Mon employeur s'auccroît le droit de m'enlever une semaine de CP pour combler mon compteur. D'où ma question a t'il le droit ?! Sachant qu'il ne ma pas poser la question il m'a juste dit que j'avais que deux semaines a poser. J'ai une modulation d'horaires sur mon contrat estimé a 151,67h par mois en sachant que je suis payé au même tarif même si je ne fais pas mes heures et que les heures supplémentaires ne sont dans toute les cas pas payer, c'est pourquoi notre compteur d'heures nous sert a poser des semaines de récup si le compteur est positif.. voilà je croit avoir tout détailler.. merci pour votre réponse