我们都是二婚，从认识到领证也有两年时间了，中间他有三次出远门，每次出去半个多月就回来，说是出去学习或看找更好一点的工作。我从不去怀疑过什么，因为要创业，出去学习学习会更有帮助，每次都帮他收拾好行李。今天他出门去买东西忘记关电脑上的微信，我点亮屏幕无意中看到了他们的聊天记录，看到了那个女人就在他去的城市，那不堪入耳的字眼，差点晕过去！

他回来发现我在电脑前，不得已也承认了，还说是在认识我之前他们就在一起了，彼此难忘。而这个女人也回到了他老公孩子身边去了，他们还一直保持着联系。我问他：居然那么深爱着对方，你为什么还要跟我领证？他说：爱是一回事，终归还是要面对现实生活。如果你放得下我们继续还是夫妻，实在接受不了也可以去离婚。我又问他：我算什么，跟你领证过家家吗？他说：事情就是这样了，你装得下就继续这样过。

我该怎么办？继续装糊涂，当什么事都没有发生吗？