帮我解决一下个人问题

我已经结婚了,前一个月聊一个往网友,张的还挺好看,我俩无话不谈,每天都发信息,最后他爱上我了,我对她也很好.我俩离的很远,做车得用一天,他也结婚了有6岁的孩子,他说要过来找我,我俩再一起住肯定没问题,我就怕他爱我太深,和他对象离婚,影响我的生活,现在他说和他对象做爱脑子里想的都是我.我该怎么办,让他过来吗?我心理很矛盾,他过来我俩能在一起住,我有怕他粘上我,他要不过来我还想让他过来.