Конечно оставлять. Они же родные люди, самые родные после родителей. А у вас будут внуки, вы будете с ними оставаться?