Раздел комнат между собственниками в приватизированной квартире

Добрый день! Помогите разобраться....
2-х комнатная квартира общей площадью 48,6 кв.м (одна комната 16,9 кв.м, вторая - 10,0 кв.м) приватизирована на меня и моего отца в долевом соотношении у меня 4/9, у отца 5/9 доли. Проживаем в этой квартире на протяжении 20 лет. И все это время я занимал большую комнату 16,9 кв.м, а отец меньшую (и без всяких претензий).
Сейчас я проживаю в этой комнате с гражданской женой (живем вместе 3,5года). Начали делать ремонт в комнате, вложили немало денег на стройматериалы и т.п. ... На что отец заявил, что мы не имеем права делать ремонт и должны освободить эту комнату для него, так как его доля больше.
Как поступить в этой ситуации? Действительно ли он имеет на эту комнату больше прав и мы обязаны переселиться в меньшую?