不可以收回了，土地使用权是家庭成员共同，不是其父亲的私产或财产。既然分家或使用权分离非双方自愿情况下，不可以再单方变更。