Проблема размена квартиры - отец не согласен, ухудшается условия проживания

У нас такая проблема проживаю с отцом и с дочерью 7 лет в 3-х комн. Квартире Нам нужен размен, отец не согласен. Квартира находится в приватизации у мамы. Мать проживает отдельно. Как произвести размен если отец прописан, но не согласен на размен и иногда позволяет себе выпить по праздникам и нам не дает спокойно спать.