Может ли муж жить в квартире, где прописана его жена?

Может ли муж жить в квартире, где прописана его жена? Я с ребенком живу в 4-х комнатной квартире. Также с нами живет бабушка и мой брат. Брат утверждает что мой муж не имеет право быть в квартире. Хотя собственником жилья является бабушка(а она ничего против не имеет.) Мы с дочкой прописаны официально. Подскажите так ли это? Заранее всем спасибо.