伍女士与柳先生系夫妻，共同购买位于余杭区的房产一套，该房屋登记在柳先生名下。二人于1968年收养了刚出生两天的柳小八，将其抚养成人并娶妻生子。柳小八一家一直住在柳某夫妻购买的房屋内。柳先生去世前留有书面遗嘱，确定将其对该房屋所有的份额留给伍女士。

2021年柳先生去世后，柳小八对养母态度恶劣，多次恶语相向，迫使她在外租房居住。伍女士多次交涉无果，无奈之下诉至法院，要求养子搬离该房屋。

结合材料，运用《法律与生活》的相关知识，回答下列问题：