Если Вы оформляли на него документы и продлевали разрешение каждый раз по его окончании, то забрать не имеют права.
Непрадливают че делать
Здравствуйте! Если Вам отказали (причем отказ должен быть в письменном виде), то его надо обжаловать в прокуратуру или в суд.