我爱他，我们都是二婚，可他儿子跟着他，没空陪我，怎么办