Разрешить свидание - это право следователя, но не обязанность. Оспорить такой отказ практически невозможно, поскольку из прокуратуры будет отписка с указанием "в интересах следствия". Как правило, обвиняемый со следователем должен решить этот вопрос.