выписка из жилья

В муниципальной квартире прописаны я,мой бывший муж, наш сын и его дочь от другого брака. По факту в ней проживают : бывший муж, его жена, его мать, его дочь и его сестра. А я с сыном живем в квартире его сестры уже около 7 лет (по устной договоренности). За жилье платим по фактическому месту прибывания. Может ли мой муж выписать меня с сыном ( старше 18) из квартиры т.к. мы в ней давно не проживаем?