Может ли начальник лишить меня премии из-за отказа выйти на работу в выходной день?

Я работаю В ПАО Ростелеком, мастером по обслуживанию абонентов, у меня есть рабочий график, в котором 2 дня выходных в неделю, это Пятница и Суббота, т.е. воскресенье у меня рабочий день, в составленном графике я расписался. Сегодня начальник объявил, в эту пятницу в связи с тем что будут устанавливаться опоры, всех у кого в пятницу выходной - выходят на работу, воскресенье при это остается рабочим днем. Я сказал начальнику, что не согласен выходить в пятницу на работу, так как на пятницу и субботу у меня уже есть личные планы, в ответ на это начальник предложил выбрать выходными днями четверг и субботу, с таким предложением я так же не согласился, в ответ на это он сказал, что на декабрь месяц он писал лично на меня докладную на премию и теперь он станет ее отзывать, ни каких приказов на подпись мне не давали. Может ли начальник меня наказать в виде лишения премии?