被已婚男人套路然后深陷 现在想慢慢断联，怎么断？

　　我们同事，刚开始他就对我有好感，频繁约我吃饭，后来鬼使神差的和他出去吃饭了，然后慢慢发展成天天一起下班吃饭，我也好奇他已婚已育还天天外面，老婆不说？我认识他第一天的时候就说了我有男朋友，后面随着生活中相处发现他真的很好，我慢慢爱上他了，可是他明确说这辈子不会离婚，不会跟她老婆离婚，说他老婆为了他付出了很多，不会负她？可是他为什么一直还对我纠缠，既然给不了我未来，还要这样让我深陷，我一度想嫁给他，他说我太傻，他不值得，他说没资格爱我，可是我们都发生了，而且他还经常时不时发出开房信号，我不懂，这样的男人到底在想什么？占着免费的身体，打着爱情的名义？我该怎么分手？我现在还舍不得他，对他留念，现在两个人应该还是有感情的，他一直说什么决定权在我这边，说我不想理他了他就不骚扰我，可是我觉得他是玩玩想走人，我该怎么办？我今年24他比我大12岁